Wav2vec2 Large Xlsr Mvc Swahili

🚀 wav2vec2-large-xlsr-mvc-swahili

本模型是 facebook/wav2vec2-large-xlsr-53 的微調版本，可用於自動語音識別任務，在斯瓦希里語語音識別場景中具有一定的應用價值。

🚀 快速開始

本模型是 facebook/wav2vec2-large-xlsr-53 的微調版本。

💻 使用示例

基礎用法

from transformers import AutoProcessor, AutoModelForCTC

repo_name = "eddiegulay/wav2vec2-large-xlsr-mvc-swahili"
processor = AutoProcessor.from_pretrained(repo_name)
model = AutoModelForCTC.from_pretrained(repo_name)

# if you have GPU
# move model to CUDA
model = model.to("cuda")


def transcribe(audio_path):
  # Load the audio file
  audio_input, sample_rate = torchaudio.load(audio_path)
  target_sample_rate = 16000
  audio_input = torchaudio.transforms.Resample(orig_freq=sample_rate, new_freq=target_sample_rate)(audio_input)

  # Preprocess the audio data
  input_dict = processor(audio_input[0], return_tensors="pt", padding=True, sampling_rate=16000)

  # Perform inference and transcribe
  logits = model(input_dict.input_values.to("cuda")).logits
  pred_ids = torch.argmax(logits, dim=-1)[0]
  transcription = processor.decode(pred_ids)

  return transcription

transcript = transcribe('your_audio.mp3')

注意事項

⚠️ 重要提示

詞彙表存在問題，似乎包含了特殊字符，而在訓練期間並未考慮這些字符。

📄 許可證

本模型使用的許可證為 apache-2.0。

📋 模型信息