Gpt2 Small Italian

🚀 イタリア語用リサイクルGPT - 2 (小型)

このモデルは、小型のOpenAI GPT - 2モデルをベースにしており、イタリア語に適応させたものです。自然言語生成タスクに役立ちます。

🚀 クイックスタート

モデルの読み込み

from transformers import pipeline

pipe = pipeline("text-generation", model="GroNLP/gpt2-small-italian")

トークナイザーとモデルの読み込み

from transformers import AutoTokenizer, AutoModel, TFAutoModel

tokenizer = AutoTokenizer.from_pretrained("GroNLP/gpt2-small-italian")
model = AutoModel.from_pretrained("GroNLP/gpt2-small-italian")  # PyTorch
model = TFAutoModel.from_pretrained("GroNLP/gpt2-small-italian")  # Tensorflow

✨ 主な機能

• イタリア語のテキスト生成に特化したモデルです。
• OpenAI GPT - 2の小型モデルをベースにしているため、軽量かつ効率的です。

📚 ドキュメント

モデルの説明

このモデルは、小型のOpenAI GPT - 2 (gpt2) モデルをベースにしています。詳細については、arXiv の論文と Github のコードを参照してください。

関連モデル

オランダ語版

• gpt2-small-dutch-embeddings: 小型モデルで、語彙埋め込みのみを再学習したもの。
• gpt2-small-dutch: 小型モデルで、語彙埋め込みを再学習し、モデル全体を追加で微調整したもの。(推奨)
• gpt2-medium-dutch-embeddings: 中型モデルで、語彙埋め込みのみを再学習したもの。

イタリア語版

• gpt2-small-italian-embeddings: 小型モデルで、語彙埋め込みのみを再学習したもの。
• gpt2-small-italian: 小型モデルで、語彙埋め込みを再学習し、モデル全体を追加で微調整したもの。(推奨)
• gpt2-medium-italian-embeddings: 中型モデルで、語彙埋め込みのみを再学習したもの。

BibTeXエントリ

@misc{devries2020good,
      title={As good as new. How to successfully recycle English GPT-2 to make models for other languages}, 
      author={Wietse de Vries and Malvina Nissim},
      year={2020},
      eprint={2012.05628},
      archivePrefix={arXiv},
      primaryClass={cs.CL}
}

著者情報

• Wietse de Vries
• Malvina Nissim