Belle Whisper Large V2 Zh

🚀 Belle-whisper-large-v2-zh

微调whisper-large-v2以增强中文语音识别能力，Belle-whisper-large-v2-zh在包括AISHELL1、AISHELL2、WENETSPEECH和HKUST在内的中文ASR基准测试中，性能相对提升了30 - 70%。

🚀 快速开始

如果你觉得这个模型有帮助，请给这个模型点个 赞，并在 GitHub仓库1 和 GitHub仓库2 给我们加星标。

✨ 主要特性

微调whisper-large-v2模型，显著增强了其中文语音识别能力。在多个中文ASR基准测试中，性能有30 - 70%的相对提升。

💻 使用示例

基础用法

from transformers import pipeline

transcriber = pipeline(
  "automatic-speech-recognition", 
  model="BELLE-2/Belle-whisper-large-v2-zh"
)

transcriber.model.config.forced_decoder_ids = (
  transcriber.tokenizer.get_decoder_prompt_ids(
    language="zh", 
    task="transcribe"
  )
)

transcription = transcriber("my_audio.wav") 

🔧 技术细节

微调信息

如果你想在自己的数据集上微调该模型，请参考 GitHub仓库。

字符错误率（CER）对比

📄 许可证

本项目采用Apache-2.0许可证。

📚 详细文档

引用信息

使用我们的代码、数据或模型时，请引用我们的论文和GitHub仓库。

@misc{BELLE,
  author = {BELLEGroup},
  title = {BELLE: Be Everyone's Large Language model Engine},
  year = {2023},
  publisher = {GitHub},
  journal = {GitHub repository},
  howpublished = {\url{https://github.com/LianjiaTech/BELLE}},
}