Ablation 141 A128.dpo.armorm.rp Shisa V2 Llama 3.1 8b
A
Ablation 141 A128.dpo.armorm.rp Shisa V2 Llama 3.1 8b
Developed by shisa-ai
基于DPO方法微调的语言模型,适用于文本生成任务
Downloads 38
Release Time : 4/3/2025
Model Overview
该模型是基于LLaMA架构进行微调的版本,使用TRL框架和DPO方法训练,专注于文本生成任务。
Model Features
DPO训练方法
采用直接偏好优化(DPO)方法训练,优化语言模型的生成质量
基于LLaMA架构
建立在强大的LLaMA-3.1-8B基础模型上
TRL框架训练
使用Hugging Face的TRL(基于Transformer的强化学习)框架进行训练
Model Capabilities
文本生成
对话系统
创意写作
Use Cases
对话系统
开放域对话
与用户进行自然流畅的对话交流
生成符合人类偏好的自然语言响应
创意写作
故事生成
根据提示生成连贯的故事情节
Featured Recommended AI Models
Llama 3 Typhoon V1.5x 8b Instruct
专为泰语设计的80亿参数指令模型,性能媲美GPT-3.5-turbo,优化了应用场景、检索增强生成、受限生成和推理任务
大型语言模型
Transformers Supports Multiple Languages

L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-Tiny是一个基于SODA数据集训练的超小型对话模型,专为边缘设备推理设计,体积仅为Cosmo-3B模型的2%左右。
对话系统
Transformers English

C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
基于RoBERTa架构的中文抽取式问答模型,适用于从给定文本中提取答案的任务。
问答系统 Chinese
R
uer
2,694
98