Marian Finetuned Multidataset Kin To En

🚀 マリアン微調整マルチデータセットキニヤルワンダ語から英語への翻訳モデル

このモデルは、機械翻訳に特化したモデルで、キニヤルワンダ語から英語への翻訳を行うことができます。未知のデータセットで微調整されており、評価セットで良好な結果を達成しています。

🚀 クイックスタート

このモデルは、Helsinki-NLP/opus-mt-rw-en を未知のデータセットで微調整したものです。評価セットでは以下の結果を達成しています。

• 損失: 1.7550
• Bleu: 36.2717

✨ 主な機能

• キニヤルワンダ語から英語への機械翻訳を行うことができます。

📚 ドキュメント

モデルの説明

このモデルは、キニヤルワンダ語から英語への機械翻訳を行うために微調整されています。

想定される使用目的と制限

このモデルの主な使用目的は研究です。

学習と評価データ

このモデルは、以下のソースからのデータセットを組み合わせて微調整されています。

• Digital Umuganda
• Masakhane
• Muennighoff

機械翻訳モデルの学習に際して、データセットは以下の前処理ステップを経ています。

• テキストを小文字に変換
• 数字を削除

結合されたデータセットは、学習セットと検証セットに分割され、学習に90%、検証に10%が割り当てられています。

学習手順

学習ハイパーパラメータ

学習中には以下のハイパーパラメータが使用されています。

• 学習率: 2e-05
• 学習バッチサイズ: 32
• 評価バッチサイズ: 64
• シード: 42
• オプティマイザ: Adam (betas=(0.9,0.999), epsilon=1e-08)
• 学習率スケジューラの種類: 線形
• エポック数: 3

学習結果

学習結果については、具体的な情報は提供されていません。

フレームワークのバージョン

• Transformers 4.31.0
• Pytorch 2.0.1+cu118
• Datasets 2.14.4
• Tokenizers 0.13.3

📄 ライセンス

このモデルは、Apache-2.0ライセンスの下で提供されています。