Finetuned Colloquial Tamil

🚀 janisrebekahv/finetuned-colloquial-tamil

このモデルは、英語から日常会話的なタミル語への翻訳を行うために調整されたものです。正式なタミル語ではなく、スラングや口語表現を含む自然な会話文を生成します。チャットボットや対話型AI、ソーシャルメディアアプリケーションなどでの利用に適しています。

🚀 クイックスタート

このモデルは、英語から日常会話的なタミル語への翻訳を行うために微調整されたバージョンです。以下の手順でモデルをロードしてテストすることができます。

✨ 主な機能

• ✅ 英語を日常会話的なタミル語に翻訳します。
• ✅ スラング、口語表現、実際の会話フレーズを取り入れています。
• ✅ チャットボット、対話型AI、ソーシャルメディアアプリケーションなどでの利用に役立ちます。

📦 インストール

このモデルを使用するには、transformersライブラリが必要です。以下のコマンドでインストールできます。

pip install transformers

💻 使用例

基本的な使用法

from transformers import AutoModelForSeq2SeqLM, AutoTokenizer

# Load model and tokenizer
model_name = "janisrebekahv/finetuned-colloquial-tamil"
tokenizer = AutoTokenizer.from_pretrained(model_name)
model = AutoModelForSeq2SeqLM.from_pretrained(model_name)

# Function to translate text
def translate(text):
    inputs = tokenizer(text, return_tensors="pt")
    outputs = model.generate(**inputs, max_length=128)
    return tokenizer.decode(outputs[0], skip_special_tokens=True)

# Example translations
test_sentences = [
    "This is so beautiful",
    "Bro, are you coming or not?",
    "My mom is gonna kill me if I don't reach home now!"
]

for sentence in test_sentences:
    print(f"English: {sentence}")
    print(f"Colloquial Tamil: {translate(sentence)}\n")

📚 ドキュメント

📜 データセット

🔹 微調整に使用されたカスタムデータセット:
📂 janisrebekahv/colloquial_tamil
このデータセットは、このモデルを訓練するために特別に作成され、英語を日常会話的なタミル語に正確に翻訳する能力を向上させました。このモデルは、以下のカスタムデータセットで微調整されています。

1️⃣ jarvisvasu/english-to-colloquial-tamil – 口語的なタミル語翻訳用の公開データセットです。
2️⃣ YouTubeコメントデータセット (カスタム作成) – YouTube APIを使用して抽出され、本物の表現にするために手動で日常会話的なタミル語に変換されました。
3️⃣ ChatGPT生成データ – 自然な会話パターンに沿った追加の日常会話的なタミル語フレーズです。

📝 データセットの総サイズ: 16,269文ペア

📊 評価指標

📄 ライセンス

このモデルは、CC BY 4.0ライセンスの下で提供されています。