Wav2vec2 Large Xls R 300m Kurdish

🚀 wav2vec2-large-xls-r-300m-kurdish

該模型是 facebook/wav2vec2-xls-r-300m 在 MOZILLA - FOUNDATION/COMMON_VOICE_7_0 - KMR 數據集上的微調版本。它在評估集上取得了以下結果：

• 損失：0.2548
• 字錯率（Wer）：0.2688

✨ 主要特性

• 多標籤特性：涵蓋自動語音識別、從訓練器生成、HF 語音識別排行榜等多個標籤。
• 特定數據集適配：基於 Mozilla 基金會的 Common Voice 7.0 庫爾德語（KMR）數據集進行訓練。
• 模型評估指標：在測試集上有明確的字錯率（WER）和字符錯誤率（CER）指標。

📦 安裝指南

文檔中未提及安裝步驟，故跳過此章節。

💻 使用示例

文檔中未提供代碼示例，故跳過此章節。

📚 詳細文檔

模型信息

訓練過程

訓練超參數

訓練過程中使用了以下超參數：

• 學習率：7e - 05
• 訓練批次大小：32
• 評估批次大小：1
• 隨機種子：42
• 優化器：Adam（β1 = 0.9，β2 = 0.999，ε = 1e - 08）
• 學習率調度器類型：線性
• 學習率調度器熱身步數：2000
• 訓練輪數：100.0
• 混合精度訓練：原生自動混合精度（Native AMP）

訓練結果

框架版本

• Transformers 4.16.0.dev0
• Pytorch 1.10.1 + cu102
• Datasets 1.17.1.dev0
• Tokenizers 0.11.0

🔧 技術細節

原文檔中關於模型描述、預期用途與限制、訓練和評估數據部分內容簡略，未達到技術細節展示要求，故跳過相關內容。

📄 許可證

本模型使用 Apache - 2.0 許可證。