Arabert Arabic Sentiment Analysis

🚀 AraBert-Arabic-Sentiment-Analysis

このモデルは、不明なデータセットでAraBERTをファインチューニングしたバージョンです。評価セットでは以下の結果を達成しています。

• 損失: 0.5327
• マクロF1: 0.6543
• 正解率: 0.8003

🚀 クイックスタート

このモデルは、アラビア語の感情分析タスクに使用できます。具体的な使用方法は、transformersライブラリを使って推論を行うことができます。

📦 インストール

このモデルを使用するには、transformersライブラリが必要です。以下のコマンドでインストールできます。

pip install transformers

🔧 技術詳細

トレーニングハイパーパラメータ

トレーニング中に使用されたハイパーパラメータは以下の通りです。

• learning_rate: 2e-05
• train_batch_size: 16
• eval_batch_size: 128
• seed: 25
• gradient_accumulation_steps: 2
• total_train_batch_size: 32
• optimizer: Adam with betas=(0.9,0.999) and epsilon=1e-08
• lr_scheduler_type: linear
• num_epochs: 2

トレーニング結果

フレームワークバージョン

• Transformers 4.38.2
• Pytorch 2.1.0+cu121
• Tokenizers 0.15.2

📄 ライセンス

このモデルは、Apache 2.0ライセンスの下で提供されています。