Whisper Small Cantonese Yue English

🚀 Transformers庫項目

本項目基於transformers庫，利用多個數據集進行訓練，在語音識別等任務上有一定表現，同時給出了訓練參數、硬件要求等信息，還提供了常見問題的解決方案。

🚀 快速開始

本項目使用transformers庫進行相關訓練和推理。若在推理過程中遇到分詞器（tokenizer）問題，請將transformers版本更新到 4.46.3 或更高。

pip install --upgrade transformers==4.46.3

✨ 主要特性

• 使用多個數據集進行訓練，包括AlienKevin/mixed_cantonese_and_english_speech、mozilla - foundation/common_voice_17_0和mozilla - foundation/common_voice_11_0。
• 基於openai/whisper - small基礎模型。
• 訓練後模型的字符錯誤率（CER）為 15.4%。

📦 安裝指南

若在推理過程中遇到分詞器問題，需要更新transformers庫版本：

pip install --upgrade transformers==4.46.3

📚 詳細文檔

訓練參數

硬件要求

• NVIDIA Tesla V100 16GB * 4

常見問題解答（FAQ）

💡 使用建議

若在推理過程中遇到分詞器問題，請將transformers版本更新到 4.46.3 或更高。

pip install --upgrade transformers==4.46.3

📄 許可證

本項目採用 MIT 許可證。