Distilbert Base Ar Cased

🚀 distilbert-base-ar-cased

このモデルは、distilbert-base-multilingual-cased の小規模版で、カスタム言語数に対応しています。元のモデルと同じ表現を生成し、精度も維持しています。

🚀 クイックスタート

このモデルは、元のマルチ言語モデルの小規模版で、精度を維持しながら特定の言語セットに対応しています。詳細については、論文 Load What You Need: Smaller Versions of Multilingual BERT を参照してください。

💻 使用例

基本的な使用法

from transformers import AutoTokenizer, AutoModel

tokenizer = AutoTokenizer.from_pretrained("Geotrend/distilbert-base-ar-cased")
model = AutoModel.from_pretrained("Geotrend/distilbert-base-ar-cased")

高度な使用法

他のマルチ言語トランスフォーマーの小規模版を生成するには、私たちのGitHubリポジトリ を参照してください。

📚 ドキュメント

引用方法

@inproceedings{smallermdistilbert,
  title={Load What You Need: Smaller Versions of Mutlilingual BERT},
  author={Abdaoui, Amine and Pradel, Camille and Sigel, Grégoire},
  booktitle={SustaiNLP / EMNLP},
  year={2020}
}

連絡先

質問、フィードバック、またはリクエストがある場合は、amine@geotrend.fr までご連絡ください。

📄 ライセンス

このモデルは、Apache-2.0ライセンスの下で提供されています。