O

Open Llama 7b

由openlm-research開發
OpenLLaMA是Meta AI LLaMA大語言模型的開源復現版本,提供3B、7B和13B參數規模的預訓練模型
下載量 25.16k
發布時間 : 6/7/2023

模型概述

基於RedPajama數據集訓練的開放許可LLaMA復現模型,支持文本生成和語言理解任務

模型特點

開源復現
完全復現Meta AI的LLaMA模型,採用寬鬆的Apache 2.0許可
多規模選擇
提供3B、7B和13B三種參數規模的模型版本
高質量訓練數據
使用RedPajama數據集(1.2萬億token)訓練,復現LLaMA原始訓練數據
高效訓練
採用EasyLM框架在TPU-v4上訓練,實現高吞吐量

模型能力

文本生成
問答系統
語言理解
少樣本學習

使用案例

自然語言處理
開放域問答
回答各種領域的自然語言問題
在多項基準測試中接近原始LLaMA表現
文本補全
根據給定提示生成連貫的後續文本
研究應用
語言模型研究
作為開源基礎模型供學術研究使用
AIbase
智啟未來,您的人工智能解決方案智庫
© 2025AIbase