# RLHF对齐

Llama 3.1是由Meta开发的多语言大语言模型系列，包含8B、70B和405B三种规模，支持多语言文本生成和代码生成任务。

羊驼3.2系列是由Meta开发的多语言大语言模型，包含1B和3B参数规模，针对多语言对话用例进行了优化。

Meta羊驼3.1是多语言大语言模型集合，包含80亿、700亿和4050亿参数的预训练及指令调优生成模型，支持8种语言，在行业基准测试中表现优异。

基于Anthropic/hh - rlhf无害数据集训练的GPT2大模型，专门用于有害响应检测或基于人类反馈的强化学习（RLHF）。

PairRM是一个高效的成对奖励模型，用于比较和评估大语言模型的输出质量。它基于DebertaV3架构，专门设计用于识别候选响应之间的细微差异。

PairRM是一个高效的成对奖励模型，用于比较和排序大语言模型的输出候选，支持多种应用场景如RLHF和最佳N采样。