AraBertMo_base_V8オープンソースアラビア語プリトレーニングモデル - アラビア語テキストを高精度に処理・最適化

Home

Arabertmo Base V8

Developed by Ebtihal

AraBERTMoはGoogleのBERTアーキテクチャに基づくアラビア語事前学習言語モデルで、アラビア語テキストに特化して最適化されています。

大規模言語モデル

Transformers

#アラビア語マスキングタスク #OSCAR事前学習 #BERT-baseアーキテクチャ

Downloads 21

Release Time : 3/2/2022

Model Overview

AraBERTMoはBERTアーキテクチャに基づくアラビア語事前学習モデルで、主にマスキングタスクに使用され、アラビア語自然言語処理アプリケーションに適しています。

Model Features

アラビア語最適化

アラビア語テキストに特化した事前学習と最適化が施されており、アラビア語自然言語処理タスクに適しています。

BERTアーキテクチャ採用

BERT-Baseと同じアーキテクチャを採用しており、強力な言語理解と表現能力を備えています。

大規模事前学習

OSCARアラビア語版の300万語コーパスで事前学習を行い、幅広いアラビア語テキストをカバーしています。

Model Capabilities

アラビア語テキスト理解

マスキング予測

文脈的意味表現

Use Cases

自然言語処理

アラビア語テキスト補完

アラビア語文章の欠落部分を自動予測・補完します。

アラビア語テキスト理解

感情分析、固有表現認識などの下流NLPタスクの特徴抽出に使用できます。

🚀 アラビア語モデル AraBertMo_base_V8

このモデルはGoogleのBERTアーキテクチャに基づくアラビア語の事前学習言語モデルで、様々な自然言語処理タスクに役立ちます。

🚀 クイックスタート

AraBERTMo は、GoogleのBERTアーキテクチャに基づくアラビア語の事前学習言語モデルです。AraBERTMo_baseは、BERT-Baseと同じ設定を使用しています。現在、AraBERTMo_baseには10種類の新しいバリエーションがあり、すべてのモデルは HuggingFace のモデルページで Ebtihal の名前で利用可能です。チェックポイントはPyTorch形式で提供されています。

✨ 主な機能

タグ: Fill-Mask
データセット: OSCAR
ウィジェット:
- テキスト: " السلام عليكم ورحمة[MASK] وبركاتة"
- テキスト: " اهلا وسهلا بكم في [MASK] من سيربح المليون"
- テキスト: " مرحبا بك عزيزي الزائر [MASK] موقعنا "

📦 インストール

このモデルを使用するには、torch または tensorflow とHuggingfaceのライブラリ transformers をインストールする必要があります。以下のように初期化することで直接使用することができます。

from transformers import AutoTokenizer, AutoModel
tokenizer = AutoTokenizer.from_pretrained("Ebtihal/AraBertMo_base_V8")
model = AutoModelForMaskedLM.from_pretrained("Ebtihal/AraBertMo_base_V8")