xlm - roberta - base - ft - udpos28 - laオープンソースモデル - 多言語対応、ラテン語の品詞タグ付け専用

ホーム

Xlm Roberta Base Ft Udpos28 La

wietsedvによって開発

XLM-RoBERTaベースの多言語品詞タグ付けモデルで、特にラテン語に最適化されており、複数言語の品詞タグ付けタスクをサポートします。

シーケンスラベリング

Transformers

その他オープンソースライセンス:Apache-2.0 #多言語品詞タグ付け #高精度ラテン語処理 #ユニバーサル依存関係解析

ダウンロード数 14

リリース時間 : 3/2/2022

モデル概要

このモデルはXLM-RoBERTaアーキテクチャに基づく多言語品詞タグ付けモデルで、ユニバーサル依存関係データセットv2.8でトレーニングされ、特にラテン語に最適化されています。

モデル特徴

多言語サポート

ラテン語、英語、ドイツ語、フランス語など、複数言語の品詞タグ付けタスクをサポートします。

高精度

ラテン語の品詞タグ付けタスクで92.9%の精度を達成し、優れた性能を発揮します。

ユニバーサル依存関係データセットベース

ユニバーサル依存関係データセットv2.8を使用してトレーニングされており、複数言語での汎化性能を保証します。

モデル能力

品詞タグ付け

多言語テキスト処理

トークン分類

使用事例

自然言語処理

ラテン語テキスト分析

ラテン語テキストの品詞タグ付けを行い、言語学者や研究者がテキスト構造を分析するのを支援します。

精度は92.9%に達します

多言語テキスト処理

複数言語の品詞タグ付けをサポートし、多言語テキスト処理タスクに適しています。

複数言語で良好な性能を発揮します

🚀 XLM-RoBERTaベースのUniversal Dependencies v2.8品詞タグ付け: ラテン語

このモデルは、以下の論文の一部です。

Make the Best of Cross-lingual Transfer: Evidence from POS Tagging with over 100 Languages

詳細はスペースを確認してください。

🚀 クイックスタート

このモデルは、Universal Dependencies v2.8のデータセットを使用してラテン語の品詞タグ付けを行うためのものです。

✨ 主な機能

多言語の品詞タグ付けに対応
高い精度で品詞を識別

📦 インストール

このモデルを使用するには、transformersライブラリが必要です。以下のコードで必要な依存関係をインストールできます。

pip install transformers

💻 使用例

基本的な使用法

from transformers import AutoTokenizer, AutoModelForTokenClassification

tokenizer = AutoTokenizer.from_pretrained("wietsedv/xlm-roberta-base-ft-udpos28-la")
model = AutoModelForTokenClassification.from_pretrained("wietsedv/xlm-roberta-base-ft-udpos28-la")

📚 ドキュメント

モデル情報

属性	詳情
モデルタイプ	XLM-RoBERTa base
訓練データ	Universal Dependencies v2.8

評価指標

以下は、様々な言語でのテスト精度です。

言語	精度
英語	81.5
オランダ語	79.6
ドイツ語	78.2
イタリア語	78.0
フランス語	78.1
スペイン語	79.8
ロシア語	89.8
スウェーデン語	86.0
ノルウェー語	81.5
デンマーク語	85.7
ローサクソン語	56.6
アッカド語	44.7
アルメニア語	86.4
ウェールズ語	65.1
古東スラブ語	79.8
アルバニア語	74.9
スロベニア語	77.4
グアヤジャラ語	35.8
クルド語（クルマンジ方言）	77.7
トルコ語	76.9
フィンランド語	84.9
インドネシア語	82.0
ウクライナ語	87.8
ポーランド語	88.0
ポルトガル語	82.3
カザフ語	83.2
ラテン語	92.9
古フランス語	61.2
ブリヤート語	64.7
カーポール語	34.2
韓国語	63.0
エストニア語	85.5
クロアチア語	86.3
ゴート語	36.5
スイスドイツ語	47.8
アッシリア語	15.5
北サーミ語	41.4
ナイジャ語	41.9
ラトビア語	89.1
中国語	44.3
タガログ語	73.7
バンバラ語	27.9
リトアニア語	88.3
ガリシア語	81.7
ベトナム語	68.0
ギリシャ語	74.9
カタルーニャ語	76.2
チェコ語	86.3
エルジャ語	50.8
ボージュプリ語	52.5
タイ語	61.6
マラーティー語	88.3
バスク語	79.0
スロバキア語	85.9
キチェ語	39.3
ヨルバ語	29.9
ワールピリ語	40.9
タミル語	85.7
マルタ語	32.8
古代ギリシャ語	70.5
アイスランド語	81.6
ムビャ・グアラニ語	33.1
ウルドゥー語	61.3
ルーマニア語	83.1
ペルシャ語	75.7
アプリナ語	43.5
日本語	36.5
ハンガリー語	74.5
ヒンディー語	67.0
古典中国語	38.2
コミ・ペルミャク語	52.2
フェロー語	75.6
サンスクリット語	43.5
リヴヴィ語	66.1
アラビア語	81.3
ウォロフ語	39.1
ブルガリア語	87.7
アクンツ語	35.5
マクララプ語	28.8
カングリ語	49.8
ブルトン語	59.8
テルグ語	84.3
広東語	50.3
古教会スラブ語	55.7
カレリア語	73.0
上ソルブ語	76.0
南レバントアラビア語	68.8
コミ・ジリャン語	46.3
アイルランド語	64.1
ナイニ語	44.9
ムンドゥルク語	24.1
マンクス語	39.3
スコルト・サーミ語	43.5
アフリカーンス語	74.8
古トルコ語	37.1
トゥピンアンバ語	45.2
ベラルーシ語	89.1
セルビア語	87.2
モクシャ語	47.3
西アルメニア語	81.6
スコットランド・ゲール語	55.3
クンサリ語	43.2
ヘブライ語	89.6
ウイグル語	76.8
チュクチ語	36.3