Albert Base V2 Finetuned Squad Seed 9001

🚀 albert-base-v2-finetuned-squad-seed-9001

このモデルは、squad_v2データセットでalbert-base-v2をファインチューニングしたバージョンです。評価セットでは以下の結果を達成しています。

• 損失: 0.8056

🚀 クイックスタート

このモデルは、squad_v2データセットに対してalbert-base-v2をファインチューニングしたものです。評価セットでは損失が0.8056という結果を得ています。

📚 ドキュメント

トレーニング手順

トレーニングハイパーパラメータ

トレーニング中に以下のハイパーパラメータが使用されました。

• 学習率: 2e-05
• トレーニングバッチサイズ: 16
• 評価バッチサイズ: 16
• シード: 42
• オプティマイザ: Adam (betas=(0.9,0.999), epsilon=1e-08)
• 学習率スケジューラの種類: 線形
• エポック数: 1

トレーニング結果

フレームワークバージョン

• Transformers 4.25.1
• Pytorch 1.13.0+cu116
• Datasets 2.7.1
• Tokenizers 0.13.2

📄 ライセンス

このモデルはApache-2.0ライセンスの下で提供されています。