Belle Whisper Large V2 Zh

🚀 Belle-whisper-large-v2-zh

Belle-whisper-large-v2-zhは、whisper-large-v2をファインチューニングして中国語の音声認識能力を強化したモデルです。AISHELL1、AISHELL2、WENETSPEECH、HKUSTなどの中国語ASRベンチマークで、性能が**30 - 70%**相対的に向上しています。

🚀 クイックスタート

このモデルが役に立った場合は、モデルを「いいね」して、以下のGitHubリポジトリでスターを付けてください。

• https://github.com/LianjiaTech/BELLE
• https://github.com/shuaijiang/Whisper-Finetune

💻 使用例

基本的な使用法

from transformers import pipeline

transcriber = pipeline(
  "automatic-speech-recognition", 
  model="BELLE-2/Belle-whisper-large-v2-zh"
)

transcriber.model.config.forced_decoder_ids = (
  transcriber.tokenizer.get_decoder_prompt_ids(
    language="zh", 
    task="transcribe"
  )
)

transcription = transcriber("my_audio.wav") 

📚 詳細ドキュメント

ファインチューニング

独自のデータセットでモデルをファインチューニングする場合は、GitHubリポジトリを参照してください。

CER(%) ↓

📄 ライセンス

このモデルはApache-2.0ライセンスの下で提供されています。

📖 引用

コード、データ、またはモデルを使用する場合は、以下の論文とGitHubを引用してください。

@misc{BELLE,
  author = {BELLEGroup},
  title = {BELLE: Be Everyone's Large Language model Engine},
  year = {2023},
  publisher = {GitHub},
  journal = {GitHub repository},
  howpublished = {\url{https://github.com/LianjiaTech/BELLE}},
}