Bert Base En Hi Cased

🚀 bert-base-en-hi-cased

bert-base-multilingual-cased の小規模バージョンを公開しています。これらのバージョンは、カスタム言語数を扱うことができます。

distilbert-base-multilingual-cased とは異なり、当社のバージョンは、元のモデルが生成する表現とまったく同じものを提供し、元の精度を維持します。

🚀 クイックスタート

このモデルは、カスタム言語数を扱うことができる bert-base-multilingual-cased の小規模バージョンです。元のモデルと同じ表現を生成し、精度を維持します。

✨ 主な機能

• カスタム言語数を扱うことができる bert-base-multilingual-cased の小規模バージョンを提供します。
• distilbert-base-multilingual-cased とは異なり、元のモデルが生成する表現とまったく同じものを提供し、元の精度を維持します。

📦 インストール

このモデルを使用するには、transformers ライブラリが必要です。以下のコマンドでインストールできます。

pip install transformers

💻 使用例

基本的な使用法

from transformers import AutoTokenizer, AutoModel

tokenizer = AutoTokenizer.from_pretrained("Geotrend/bert-base-en-hi-cased")
model = AutoModel.from_pretrained("Geotrend/bert-base-en-hi-cased")

高度な使用法

他の小規模バージョンの多言語トランスフォーマーを生成するには、当社のGitHubリポジトリ を参照してください。

📚 ドキュメント

詳細な情報については、当社の論文 Load What You Need: Smaller Versions of Multilingual BERT を参照してください。

引用方法

@inproceedings{smallermbert,
  title={Load What You Need: Smaller Versions of Mutlilingual BERT},
  author={Abdaoui, Amine and Pradel, Camille and Sigel, Grégoire},
  booktitle={SustaiNLP / EMNLP},
  year={2020}
}

📄 ライセンス

このプロジェクトは、Apache 2.0ライセンスの下で公開されています。

🔧 技術詳細

• データセット: wikipedia
• ウィジェットの例:
  • "Google generated 46 billion [MASK] in revenue."
  • "Paris is the capital of [MASK]."
  • "Algiers is the largest city in [MASK]."

お問い合わせ

質問、フィードバック、またはリクエストがある場合は、amine@geotrend.fr までお問い合わせください。