Zlm B64 Le4 S8000

🚀 zlm_b64_le4_s8000

このモデルは、未知のデータセットで microsoft/speecht5_tts をファインチューニングしたバージョンです。評価セットでは以下の結果を達成しています。

• 損失: 0.3177

📚 ドキュメント

🔧 技術詳細

学習ハイパーパラメータ

学習中に以下のハイパーパラメータが使用されました。

• 学習率: 0.0001
• 学習バッチサイズ: 8
• 評価バッチサイズ: 8
• シード: 42
• 勾配蓄積ステップ: 8
• 総学習バッチサイズ: 64
• オプティマイザ: Adam (ベータ=(0.9,0.999)、イプシロン=1e-08)
• 学習率スケジューラの種類: 線形
• 学習率スケジューラのウォームアップステップ: 2000
• 学習ステップ: 8000
• 混合精度学習: Native AMP

学習結果

フレームワークのバージョン

• Transformers 4.41.0.dev0
• Pytorch 2.2.1+cu121
• Datasets 2.19.0
• Tokenizers 0.19.1

📄 ライセンス

このモデルはMITライセンスの下で提供されています。