Llama 3.2 1B Instruct GGUF
Llama 3.2是由Meta開發的多語言大語言模型系列之一,包含1B參數的指令調優版本,針對多語言對話用例進行了優化。
下載量 282.08k
發布時間 : 9/25/2024
模型概述
Llama 3.2是一個1B參數的指令調優大語言模型,針對多語言對話、代理檢索和摘要任務進行了優化,在多個基準測試中表現優異。
模型特點
多語言支持
官方支持8種語言,但訓練語言範圍更廣,可針對其他語言進行微調
指令調優優化
使用監督微調(SFT)和人類反饋強化學習(RLHF)與人類偏好對齊
高效推理
採用分組查詢注意力(GQA)提高推理可擴展性
Unsloth優化
通過Unsloth技術實現5倍速度提升和70%內存降低
模型能力
多語言文本生成
對話系統
文本摘要
代理檢索
指令跟隨
使用案例
對話系統
多語言聊天助手
構建支持多種語言的智能對話助手
在常見基準測試中優於許多開源和閉源聊天模型
信息處理
文檔摘要
自動生成長文檔的簡潔摘要
信息檢索
作為代理系統的一部分進行信息檢索
精選推薦AI模型
Llama 3 Typhoon V1.5x 8b Instruct
專為泰語設計的80億參數指令模型,性能媲美GPT-3.5-turbo,優化了應用場景、檢索增強生成、受限生成和推理任務
大型語言模型
Transformers 支持多種語言

L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-Tiny是一個基於SODA數據集訓練的超小型對話模型,專為邊緣設備推理設計,體積僅為Cosmo-3B模型的2%左右。
對話系統
Transformers 英語

C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
基於RoBERTa架構的中文抽取式問答模型,適用於從給定文本中提取答案的任務。
問答系統 中文
R
uer
2,694
98