Decision Tree Reward Gemma 2 27B
その他
Gemma-2-27Bをファインチューニングした決定木報酬モデルで、言語モデルが生成するコンテンツの品質評価に使用され、RewardBenchランキングで優れた性能を発揮しています。
大規模言語モデル
Transformers 英語

D
RLHFlow
18
6
URM LLaMa 3.1 8B
URM-LLaMa-3.1-8Bは不確実性を感知できる報酬モデルで、大規模言語モデルのアライメント効果を改善します。
大規模言語モデル
U
LxzGordon
4,688
10
Gemma 2 9b It SimPO
MIT
SimPO目標に基づきgemma2-ultrafeedback-armormデータセットでファインチューニングされたGemma 2.9Bモデル、選好最適化タスク用
大規模言語モデル
Transformers

G
princeton-nlp
21.34k
164
Llama 3 Instruct 8B SimPO
SimPOは参照報酬モデルを必要としない選好最適化手法で、従来のRLHFプロセスを簡素化し、選好データを直接利用して言語モデルを最適化します。
大規模言語モデル
Transformers

L
princeton-nlp
1,924
58
おすすめAIモデル
Llama 3 Typhoon V1.5x 8b Instruct
タイ語専用に設計された80億パラメータの命令モデルで、GPT-3.5-turboに匹敵する性能を持ち、アプリケーションシナリオ、検索拡張生成、制限付き生成、推論タスクを最適化
大規模言語モデル
Transformers 複数言語対応

L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-TinyはSODAデータセットでトレーニングされた超小型対話モデルで、エッジデバイス推論向けに設計されており、体積はCosmo-3Bモデルの約2%です。
対話システム
Transformers 英語

C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
RoBERTaアーキテクチャに基づく中国語抽出型QAモデルで、与えられたテキストから回答を抽出するタスクに適しています。
質問応答システム 中国語
R
uer
2,694
98