Arabertmo Base V10

🚀 アラビア語モデル AraBertMo_base_V10

AraBERTMoは、GoogleのBERTアーキテクチャに基づくアラビア語の事前学習言語モデルです。このモデルは、自然言語処理タスクにおけるアラビア語の理解や生成に役立ちます。

🚀 クイックスタート

このアラビア語の事前学習言語モデルは、GoogleのBERTアーキテクチャをベースに構築されています。AraBERTMo_baseはBERT-Baseと同じ設定を使用し、現在10種類の新しいバリエーションがあります。すべてのモデルはHuggingFaceのモデルページでEbtihalの名前で利用可能です。チェックポイントはPyTorch形式で提供されています。

✨ 主な機能

• アラビア語の事前学習言語モデルで、自然言語処理タスクに適用可能。
• 10種類の新しいバリエーションがあり、異なるニーズに対応。
• HuggingFaceで容易に利用できる。

📦 インストール

このモデルを使用するには、torchまたはtensorflowとHuggingfaceのライブラリtransformersをインストールする必要があります。以下のように初期化することで直接使用できます。

from transformers import AutoTokenizer, AutoModel
tokenizer = AutoTokenizer.from_pretrained("Ebtihal/AraBertMo_base_V10")
model = AutoModelForMaskedLM.from_pretrained("Ebtihal/AraBertMo_base_V10")

📚 ドキュメント

事前学習コーパス

AraBertMo_base_V10モデルは約300万語で事前学習されています。

• OSCAR - アラビア語版 "unshuffled_deduplicated_ar"

学習結果

このモデルは以下の結果を達成しています。

このモデルの構築背景

このモデルは、以下の組織における修士論文の研究用に構築されました。

• クファ大学。
• コンピュータサイエンスと数学学部。
• コンピュータサイエンス学科

📄 ライセンス

ドキュメントにライセンス情報は記載されていません。