Whisper Small Cantonese Yue English

🚀 Transformersライブラリ

Transformersライブラリは、自然言語処理や音声処理などのタスクにおいて、様々な事前学習モデルを利用するための便利なツールです。本プロジェクトでは、特定のデータセットを用いてモデルを訓練し、その結果を提供しています。

🚀 クイックスタート

本ライブラリを使用することで、事前学習済みのモデルを簡単に活用できます。以下の情報を参考に、モデルの訓練や推論を行ってください。

✨ 主な機能

• 複数のデータセットを用いたモデル訓練
• 特定の評価指標（CER）によるモデル評価
• 訓練パラメータの設定が可能

📦 インストール

推論時にトークナイザの問題が発生した場合は、transformersのバージョンを4.46.3以上に更新してください。

pip install --upgrade transformers==4.46.3

📚 ドキュメント

モデル情報

訓練パラメータ

• per_device_train_batch_size=32
• gradient_accumulation_steps=1
• learning_rate=1e-5
• gradient_checkpointing=True
• per_device_eval_batch_size=64
• generation_max_length=225

ハードウェア情報

NVIDIA Tesla V100 16GB * 4

よくある質問 (FAQ)

1. 推論時にトークナイザの問題が発生した場合は、transformersのバージョンを4.46.3以上に更新してください。

pip install --upgrade transformers==4.46.3

📄 ライセンス

本プロジェクトはMITライセンスの下で公開されています。