# 英仏バイリンガル

CroissantLLMは3Tの英仏バイリンガルトークンでトレーニングされた13億パラメータの言語モデルで、研究および産業界向けに設計されており、コンシューマーハードウェア上でスムーズに動作します。

CroissantLLMは3Tの英仏バイリンガルトークンで訓練された13億パラメータの言語モデルで、コンシューマーハードウェア向けに設計され、スムーズなバイリンガル処理をサポートします。

これはdistilbert-base-multilingual-casedの軽量化バージョンで、英語とフランス語の2つの言語を専門に扱い、元のモデルの表現能力と精度を維持しています。

XLMモデルは、因果言語モデリングの目標で事前学習された英仏バイリンガルのTransformerモデルで、Guillaume LampleとAlexis Conneauによって提案されました。