Bert Base Spanish Wwm Cased Finetuned Squad2 Es Finetuned Sqac

🚀 bert-base-spanish-wwm-cased-finetuned-squad2-es-finetuned-sqac

このモデルは、sqacデータセットでockapuh/bert-base-spanish-wwm-cased-finetuned-squad2-esをファインチューニングしたバージョンです。評価セットで以下の結果を達成しています。

🚀 クイックスタート

このモデルは、ockapuh/bert-base-spanish-wwm-cased-finetuned-squad2-es をsqacデータセットでファインチューニングしたものです。評価セットでは以下の結果を得ています。

• 損失: 0.9263
• {'exact_match': 65.55793991416309, 'f1': 82.72322701572416}

学習ハイパーパラメータ

学習中に使用されたハイパーパラメータは以下の通りです。

• 学習率: 2e-05
• 学習バッチサイズ: 16
• 評価バッチサイズ: 16
• シード: 42
• オプティマイザ: Adam (betas=(0.9,0.999), epsilon=1e-08)
• 学習率スケジューラの種類: 線形
• エポック数: 3

フレームワークのバージョン

• Transformers 4.14.1
• Pytorch 1.10.0+cu111
• Datasets 1.17.0
• Tokenizers 0.10.3