Ablation 141 A128.dpo.armorm.rp Shisa V2 Llama 3.1 8b
A
Ablation 141 A128.dpo.armorm.rp Shisa V2 Llama 3.1 8b
Developed by shisa-ai
基於DPO方法微調的語言模型,適用於文本生成任務
Downloads 38
Release Time : 4/3/2025
Model Overview
該模型是基於LLaMA架構進行微調的版本,使用TRL框架和DPO方法訓練,專注於文本生成任務。
Model Features
DPO訓練方法
採用直接偏好優化(DPO)方法訓練,優化語言模型的生成質量
基於LLaMA架構
建立在強大的LLaMA-3.1-8B基礎模型上
TRL框架訓練
使用Hugging Face的TRL(基於Transformer的強化學習)框架進行訓練
Model Capabilities
文本生成
對話系統
創意寫作
Use Cases
對話系統
開放域對話
與用戶進行自然流暢的對話交流
生成符合人類偏好的自然語言響應
創意寫作
故事生成
根據提示生成連貫的故事情節
Featured Recommended AI Models
Llama 3 Typhoon V1.5x 8b Instruct
專為泰語設計的80億參數指令模型,性能媲美GPT-3.5-turbo,優化了應用場景、檢索增強生成、受限生成和推理任務
大型語言模型
Transformers Supports Multiple Languages

L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-Tiny是一個基於SODA數據集訓練的超小型對話模型,專為邊緣設備推理設計,體積僅為Cosmo-3B模型的2%左右。
對話系統
Transformers English

C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
基於RoBERTa架構的中文抽取式問答模型,適用於從給定文本中提取答案的任務。
問答系統 Chinese
R
uer
2,694
98