Whisper Large V3 Vaani Hindi

🚀 大语言模型Whisper-large-v3-vaani-hindi

本项目是OpenAI的Whisper-Large-V3的微调版本，在多个数据集中约718小时的印地语转录语音上进行了训练。

🚀 快速开始

本模型可与Transformers模块的pipeline函数配合使用。

基础用法

import torch
from transformers import pipeline

audio = "path to the audio file to be transcribed"
device = "cuda:0" if torch.cuda.is_available() else "cpu"
modelTags="ARTPARK-IISc/whisper-large-v3-vaani-hindi"
transcribe = pipeline(task="automatic-speech-recognition", model=modelTags, chunk_length_s=30, device=device)
transcribe.model.config.forced_decoder_ids = transcribe.tokenizer.get_decoder_prompt_ids(language="hi", task="transcribe")

print('Transcription: ', transcribe(audio)["text"])

📚 详细文档

训练与评估

模型使用以下数据集进行微调：Vaani、Gramvaani、IndicVoices、Fleurs、IndicTTS和Commonvoice。

模型的性能在多个数据集上进行了评估，评估结果如下：

📄 许可证

本项目采用Apache 2.0许可证。