Turkish Gpt2 Large

🚀 トルコ語GPT - 2

これはトルコ語のGPT - 2ラージモデルです。GPT - 2はテキスト生成タスクを目的として設計されており、与えられたテキスト断片を首尾一貫した文脈的に関連する方法で続ける能力を提供します。トレーニングデータがウェブサイト、書籍、その他のテキストソースなど多様なもので構成されているため、このモデルにはバイアスが存在する可能性があります。ユーザーはこれらのバイアスに注意し、責任を持ってモデルを使用する必要があります。

🚀 クイックスタート

このトルコ語GPT - 2モデルを使用することで、テキスト生成を行うことができます。以下に使用例を示します。

💻 使用例

基本的な使用法

from transformers import AutoTokenizer, GPT2LMHeadModel
from transformers import pipeline

model = GPT2LMHeadModel.from_pretrained("ytu-ce-cosmos/turkish-gpt2-large")
tokenizer = AutoTokenizer.from_pretrained("ytu-ce-cosmos/turkish-gpt2-large")

text_generator = pipeline('text-generation', model=model, tokenizer=tokenizer)
r = text_generator("Teknolojinin gelişimi hayatımızı önemli ölçüde etkiledi. ", max_length=100)
[{'generated_text': 'Teknolojinin gelişimi hayatımızı önemli ölçüde etkiledi. "Sosyal ağ" adını verdiğimiz yeni bir iletişim çağımız oluştu. '}]

関連情報は論文で確認できます。

📄 ライセンス

このモデルはMITライセンスの下で提供されています。

謝辞

• GoogleのTensorFlow Research Cloud (TFRC) からのCloud TPUを用いた研究支援に感謝します。TFRCへのアクセスを提供してくれたことに感謝します❤️
• Hugging Faceチームの寛大な支援により、彼らのS3ストレージからモデルをダウンロードすることが可能になりました🤗

引用

@article{kesgin2024introducing,
  title={Introducing cosmosGPT: Monolingual Training for Turkish Language Models},
  author={Kesgin, H Toprak and Yuce, M Kaan and Dogan, Eren and Uzun, M Egemen and Uz, Atahan and Seyrek, H Emre and Zeer, Ahmed and Amasyali, M Fatih},
  journal={arXiv preprint arXiv:2404.17336},
  year={2024}
}

連絡先

COSMOS AI Research Group, Yildiz Technical University Computer Engineering Department
https://cosmos.yildiz.edu.tr/
cosmos@yildiz.edu.tr