Distilbert Base En No Cased

🚀 distilbert-base-en-no-cased

distilbert-base-multilingual-casedの小規模バージョンを公開しています。このバージョンは、カスタム言語数を扱うことができます。

当社のバージョンは、元のモデルが生成する表現とまったく同じものを提供し、元の精度を維持します。

🚀 クイックスタート

このモデルは、distilbert-base-multilingual-casedの小規模バージョンで、カスタム言語数を扱うことができます。元のモデルと同じ表現を生成し、精度も維持されています。詳細については、論文を参照してください。

✨ 主な機能

• カスタム言語数を扱うことができる。
• 元のモデルと同じ表現を生成する。
• 元の精度を維持する。

📦 インストール

このモデルを使用するには、transformersライブラリが必要です。以下のコマンドでインストールできます。

from transformers import AutoTokenizer, AutoModel

tokenizer = AutoTokenizer.from_pretrained("Geotrend/distilbert-base-en-no-cased")
model = AutoModel.from_pretrained("Geotrend/distilbert-base-en-no-cased")

💻 使用例

基本的な使用法

from transformers import AutoTokenizer, AutoModel

tokenizer = AutoTokenizer.from_pretrained("Geotrend/distilbert-base-en-no-cased")
model = AutoModel.from_pretrained("Geotrend/distilbert-base-en-no-cased")

📚 ドキュメント

より多くの言語に対応した小規模なマルチリンガルトランスフォーマーを生成するには、当社のGitHubリポジトリをご覧ください。

引用方法

@inproceedings{smallermdistilbert,
  title={Load What You Need: Smaller Versions of Mutlilingual BERT},
  author={Abdaoui, Amine and Pradel, Camille and Sigel, Grégoire},
  booktitle={SustaiNLP / EMNLP},
  year={2020}
}

📄 ライセンス

このプロジェクトは、Apache-2.0ライセンスの下で公開されています。

🔗 コンタクト

質問、フィードバック、またはリクエストがある場合は、amine@geotrend.frまでご連絡ください。