Codeswitch Hineng Pos Lince

🚀 印英コード切り替え品詞タグ付けモデル - LinCE

このプロジェクトは、ヒンディー語 - 英語のコード混合データに対する品詞タグ付けを行うための事前学習済みモデルを提供します。このモデルは、LinCE のデータセットを使用して学習されています。このモデルは以下のリポジトリで学習されました：https://github.com/sagorbrur/codeswitch。

🚀 クイックスタート

codeswitch のインストール

pip install codeswitch

✨ 主な機能

このモデルは、ヒンディー語 - 英語のコード混合データに対する品詞タグ付けを行うことができ、異なるシナリオのニーズに応えるための2つの使用方法を提供します。

📦 インストール

以下のコマンドを使用して codeswitch をインストールします：

pip install codeswitch

💻 使用例

基本的な使用法

transformers ライブラリを使用して品詞タグ付けを行う：

from transformers import AutoTokenizer, AutoModelForTokenClassification, pipeline

tokenizer = AutoTokenizer.from_pretrained("sagorsarker/codeswitch-hineng-pos-lince")

model = AutoModelForTokenClassification.from_pretrained("sagorsarker/codeswitch-hineng-pos-lince")
pos_model = pipeline('ner', model=model, tokenizer=tokenizer)

pos_model("put any hindi english code-mixed sentence")

高度な使用法

codeswitch ライブラリを使用して品詞タグ付けを行う：

from codeswitch.codeswitch import POS
pos = POS('hin-eng')
text = "" # your mixed sentence 
result = pos.tag(text)
print(result)

📄 ライセンス

このプロジェクトは MIT ライセンスを採用しています。