Mt5 Small Finetuned Gazeta Ru

🚀 mt5-small-finetuned-gazeta-ru

このモデルは、gazetaデータセットでgoogle/mt5-smallをファインチューニングしたバージョンです。評価セットでは以下の結果を達成しています。

• 損失: 3.3287
• Rouge1: 2.9422
• Rouge2: 0.25
• Rougel: 2.9053
• Rougelsum: 2.9131

✨ 主な機能

• このモデルは、要約タスクに特化しており、gazetaデータセットでファインチューニングされています。
• 評価指標としてRougeを使用しています。

📦 インストール

ドキュメントにインストール手順が記載されていないため、このセクションは省略されます。

💻 使用例

ドキュメントにコード例が記載されていないため、このセクションは省略されます。

📚 ドキュメント

モデルの説明

詳細情報は未提供です。

想定される用途と制限

詳細情報は未提供です。

学習と評価データ

詳細情報は未提供です。

学習手順

学習ハイパーパラメータ

学習中に以下のハイパーパラメータが使用されました。

• learning_rate: 5.6e-05
• train_batch_size: 8
• eval_batch_size: 8
• seed: 42
• optimizer: Adam with betas=(0.9,0.999) and epsilon=1e-08
• lr_scheduler_type: linear
• num_epochs: 8

学習結果

フレームワークのバージョン

• Transformers 4.42.4
• Pytorch 2.3.1+cu121
• Datasets 2.20.0
• Tokenizers 0.19.1

🔧 技術詳細

ドキュメントに技術的な詳細説明が50文字以上記載されていないため、このセクションは省略されます。

📄 ライセンス

このモデルはApache-2.0ライセンスの下で提供されています。