L

Llama 3.2 1B Instruct

由meta-llama開發
Llama 3.2是Meta開發的多語言大語言模型系列,包含1B和3B規模的預訓練及指令調優生成模型,針對多語言對話場景優化,支持智能檢索和摘要任務。
下載量 2.4M
發布時間 : 9/18/2024

模型概述

Llama 3.2純文本指令調優模型針對多語言對話場景進行了優化,包括智能檢索和摘要任務。在常見行業基準測試中,其表現優於許多開源和閉源聊天模型。

模型特點

多語言支持
支持8種官方語言,訓練語言範圍更廣,可針對更多語言進行微調。
長上下文處理
支持128k的上下文長度,適合處理長文檔和複雜對話場景。
高效推理
採用分組查詢注意力(GQA)提升推理可擴展性,量化版本適合資源有限設備。
知識蒸餾
整合Llama 3.1 8B和70B模型的logits作為令牌級目標,通過知識蒸餾恢復剪枝後的性能。

模型能力

多語言文本生成
智能檢索
文本摘要
對話系統
查詢/提示重寫

使用案例

智能助手
多語言聊天機器人
構建支持多種語言的對話助手,適用於全球用戶。
在官方支持語言中表現優異
移動端AI寫作助手
在移動設備上提供即時寫作建議和內容生成。
量化版本適合資源有限設備
信息處理
知識檢索
從大量文本中快速檢索相關信息。
在閱讀理解基準測試中表現良好
文本摘要
生成長文檔的簡潔摘要。
在TLDR9+測試中rougeL得分16.8-19.2
AIbase
智啟未來,您的人工智能解決方案智庫
© 2025AIbase