# ORPO微调

Schreiber-mistral-nemo-12B 是基于 mistral-nemo-kartoffel-12B 微调的大型语言模型，专注于提供更强大和精准的语言处理能力。

基于Qwen2.5-32B和QwQ-32B合并优化的日语对话模型，通过Chat Vector和ORPO技术增强指令跟随能力

基于Hermes-3-Llama-3.1-70B-lorablated模型，在Gutenberg数据集上进行微调的大语言模型

基于MaziyarPanahi/calme-2.4-rys-78b在mlabonne/orpo-dpo-mix-40k数据集上微调的大语言模型，在Open LLM Leaderboard上排名第一

该模型是基于Mistral-7B-v0.3进行ORPO微调的版本，整合了监督微调和偏好对齐阶段，适用于聊天和文本生成任务。

Llama3-70B-Chinese-Chat是基于Meta-Llama-3-70B-Instruct开发的中英文双语大语言模型，专为中英文用户设计，具备角色扮演、工具使用和数学计算等多种能力。

Llama-medx_v3.2 是专为医疗领域微调的大语言模型，基于 Meta-Llama-3.1-8B 架构开发，通过监督式微调（SFT）与优势比偏好优化（ORPO）技术训练，精准掌握医学术语与临床推理能力。

基于Llama-3-8B-Instruct微调的阿拉伯语文本生成模型，专注于提升阿拉伯语文本的连贯性和准确性。

基于lightblue/suzume-llama-3-8B-multilingual通过ORPO方法微调训练的多语言大语言模型

基于Llama-3-8B通过ORPO方法微调的多语言大模型，使用50%最一致排名数据训练，在多项语言任务中表现优异。

基于Meta-Llama-3-8B-Instruct微调的中英文对话模型，优化了中文回答质量，减少中英文混杂问题。