Marian Finetuned Multidataset Kin To En

🚀 微調多數據集基尼亞盧旺達語到英語翻譯模型

本模型是基於預訓練模型的微調版本，可實現從基尼亞盧旺達語到英語的高質量翻譯，為相關研究提供了有力工具。

🚀 快速開始

本模型是 Helsinki-NLP/opus-mt-rw-en 在未知數據集上的微調版本。 它在評估集上取得了以下結果：

• 損失值：1.7550
• 藍值（Bleu）：36.2717

✨ 主要特性

• 該模型經過微調，能夠執行從基尼亞盧旺達語到英語的機器翻譯任務。
• 主要預期用途為研究目的。

📦 安裝指南

文檔未提及安裝步驟，故跳過此章節。

💻 使用示例

文檔未提供代碼示例，故跳過此章節。

📚 詳細文檔

訓練和評估數據

該模型使用了來自以下來源的數據集組合進行微調：

• Digital Umuganda
• Masakhane
• Muennighoff

對於機器翻譯模型的訓練，數據集經過了以下預處理步驟：

• 文本轉換為小寫
• 去除數字

組合後的數據集被劃分為訓練集和驗證集，其中訓練集佔比 90%，驗證集佔比 10%。

訓練過程

訓練超參數

訓練期間使用了以下超參數：

• 學習率：2e - 05
• 訓練批次大小：32
• 評估批次大小：64
• 隨機種子：42
• 優化器：Adam，其中 betas = (0.9, 0.999)，epsilon = 1e - 08
• 學習率調度器類型：線性
• 訓練輪數：3

框架版本

• Transformers 4.31.0
• Pytorch 2.0.1 + cu118
• Datasets 2.14.4
• Tokenizers 0.13.3

🔧 技術細節

文檔未提供足夠技術細節，故跳過此章節。

📄 許可證

本模型使用 Apache - 2.0 許可證。