Arabicner Wojood

🚀 Wojood - 入れ子/フラットなアラビア語の固有表現抽出モデル

Wojoodは、アラビア語の入れ子型固有表現抽出（NER）用のコーパスです。入れ子型のエンティティとは、あるエンティティの言及が別のエンティティの言及の中に埋め込まれている場合を指します。このコーパスには550Kのトークン（現代標準アラビア語と方言）が含まれています。このリポジトリには、Wojoodの入れ子型NERを学習させるためのソースコードが含まれています。

🚀 クイックスタート

オンラインデモ

以下のデモリンクを使用して、当社のモデルを試すことができます。

• https://sina.birzeit.edu/wojood/
• https://arxiv.org/abs/2205.09651
• https://huggingface.co/aubmindlab/bert-base-arabertv2/tree/main

モデル

• 入れ子型NER（メインブランチ）：マイクロF1スコアは0.909551です。
• フラットNER（フラットブランチ）：マイクロF1スコアは0.883847です。

Google Colabノートブック

Google Colabノートブックを使用して当社のモデルをテストすることができます。

• フラットNERを学習する：https://gist.github.com/mohammedkhalilia/72c3261734d7715094089bdf4de74b4a
• フラットNERモデルを使用してモデルを評価する：https://gist.github.com/mohammedkhalilia/c807eb1ccb15416b187c32a362001665
• 入れ子型NERを学習する：https://gist.github.com/mohammedkhalilia/a4d83d4e43682d1efcdf299d41beb3da
• 入れ子型NERモデルを使用してデータを評価する：https://gist.github.com/mohammedkhalilia/9134510aa2684464f57de7934c97138b

📄 ライセンス

このプロジェクトはMITライセンスの下でライセンスされています。