xlm-roberta-base-ft-udpos28-nlオープンソースモデル - オランダ語などの多言語品詞タグ付けタスクに対応

ホーム

Xlm Roberta Base Ft Udpos28 Nl

wietsedvによって開発

XLM-RoBERTaベースの多言語品詞タグ付けモデルで、オランダ語を含む複数言語の品詞タグ付けタスクをサポートします。

シーケンスラベリング

Transformers

その他オープンソースライセンス:Apache-2.0 #多言語品詞タグ付け #高精度オランダ語処理 #言語間転移学習

ダウンロード数 15

リリース時間 : 3/2/2022

モデル概要

このモデルはXLM-RoBERTaアーキテクチャに基づく多言語品詞タグ付けモデルで、特にオランダ語向けに最適化されており、他の多くの言語の品詞タグ付けタスクもサポートします。

モデル特徴

多言語サポート

オランダ語、英語、ドイツ語など100以上の言語の品詞タグ付けタスクをサポートします。

高精度

オランダ語テストセットで97.0%の精度を達成し、その他の主要言語でも高い精度を維持しています。

XLM-RoBERTaベース

強力なXLM-RoBERTa基本アーキテクチャを利用し、優れた言語間転移能力を持っています。

モデル能力

品詞タグ付け

多言語テキスト処理

自然言語処理

使用事例

自然言語処理

オランダ語テキスト分析

オランダ語テキストの品詞タグ付けを行い、名詞、動詞などの品詞を識別します。

オランダ語テストセットで97.0%の精度を達成しました。

多言語テキスト処理

複数言語のテキストを処理し、品詞タグ付け分析を行います。

英語、ドイツ語、フランス語など多くの言語で88-90%の精度を維持しています。

🚀 XLM-RoBERTa base Universal Dependencies v2.8 品詞タグ付け: オランダ語

このモデルは、以下の論文の一部です。

Make the Best of Cross-lingual Transfer: Evidence from POS Tagging with over 100 Languages

詳細については、スペースを確認してください。

🚀 クイックスタート

このセクションでは、モデルの基本的な使い方を説明します。

💻 使用例

基本的な使用法

from transformers import AutoTokenizer, AutoModelForTokenClassification

tokenizer = AutoTokenizer.from_pretrained("wietsedv/xlm-roberta-base-ft-udpos28-nl")
model = AutoModelForTokenClassification.from_pretrained("wietsedv/xlm-roberta-base-ft-udpos28-nl")

📚 ドキュメント

モデル情報

プロパティ	詳細
モデルタイプ	XLM-RoBERTa base
タスクタイプ	トークン分類 (品詞タグ付け)
データセット	Universal Dependencies v2.8
評価指標	正解率

各言語の正解率

言語	正解率
英語	88.8
オランダ語	97.0
ドイツ語	89.0
イタリア語	89.9
フランス語	88.1
スペイン語	90.5
ロシア語	89.2
スウェーデン語	90.7
ノルウェー語	87.6
デンマーク語	89.0
ローサクソン語	58.3
アッカド語	22.9
アルメニア語	86.7
ウェールズ語	70.2
古東スラブ語	73.5
アルバニア語	78.9
スロベニア語	76.3
グアジャラ語	22.1
クルディ語	78.3
トルコ語	78.3
フィンランド語	86.2
インドネシア語	85.4
ウクライナ語	85.8
ポーランド語	86.3
ポルトガル語	90.0
カザフ語	83.0
ラテン語	79.0
古フランス語	53.1
ブリヤート語	58.4
カーポール語	13.8
韓国語	62.2
エストニア語	87.6
クロアチア語	87.6
ゴート語	16.5
スイスドイツ語	48.3
アッシリア語	14.6
北サーミ語	36.5
ナイジャ語	36.0
ラトビア語	86.6
中国語	47.9
タガログ語	73.9
バンバラ語	29.7
リトアニア語	85.7
ガリシア語	87.4
ベトナム語	65.1
ギリシャ語	86.3
カタルーニャ語	89.5
チェコ語	87.3
エルジャ語	43.0
ボジュプリ語	48.5
タイ語	58.1
マラーティー語	87.7
バスク語	78.2
スロバキア語	88.2
キチェ語	28.2
ヨルバ語	19.5
ワールピリ語	27.9
タミル語	84.3
マルタ語	19.2
古代ギリシャ語	66.3
アイスランド語	84.3
ムビャ・グアラニ語	25.6
ウルドゥー語	68.5
ルーマニア語	83.8
ペルシャ語	78.3
アプリナ語	27.3
日本語	34.1
ハンガリー語	87.2
ヒンディー語	73.3
古典中国語	28.3
コミ・ペルミャク語	45.1
フェロー語	78.3
サンスクリット語	30.3
リヴヴィ語	63.1
アラビア語	80.0
ウォロフ語	27.7
ブルガリア語	89.2
アクンツ語	28.0
マクラプ語	7.5
カングリ語	44.9
ブルトン語	65.8
テルグ語	85.7
広東語	50.7
古教会スラブ語	49.4
カレリア語	73.5
上ソルブ語	70.9
南レバント・アラビア語	64.8
コミ・ジュリアン語	37.1
アイルランド語	68.9
ナイニ語	46.2
ムンデュルク語	12.3
マンクス語	35.7
スコルト・サーミ語	30.1
アフリカーンス語	88.4
古トルコ語	37.1
トゥピンアンバ語	24.9
ベラルーシ語	87.2
セルビア語	89.0
モクシャ語	41.5
西アルメニア語	79.0
スコットランド・ゲール語	59.5
クンサリ語	40.5
ヘブライ語	94.8
ウイグル語	77.2
チュクチ語	30.5