Bert Base Han Chinese Pos

🚀 CKIP BERT Base Han Chinese POS

このモデルは、古代中国語の品詞タグ付け（POS tagging）を提供します。学習データセットは、中国語の4つの時代をカバーしています。

🚀 クイックスタート

このモデルを使用することで、古代中国語の品詞タグ付けを行うことができます。以下に使用方法を示します。

✨ 主な機能

• 古代中国語の品詞タグ付けを提供します。
• 学習データセットは、中国語の4つの時代をカバーしています。

📦 インストール

このモデルは、transformersライブラリを使用して簡単にインストールできます。

💻 使用例

基本的な使用法

from transformers import (
  AutoTokenizer,
  AutoModel,
)

tokenizer = AutoTokenizer.from_pretrained("ckiplab/bert-base-han-chinese-pos")
model = AutoModel.from_pretrained("ckiplab/bert-base-han-chinese-pos")

高度な使用法

>>> from transformers import pipeline
>>> classifier = pipeline("token-classification", model="ckiplab/bert-base-han-chinese-pos")
>>> classifier("帝堯曰放勳")

[{'entity': 'NB1',
  'score': 0.99410427,
  'index': 1,
  'word': '帝',
  'start': 0,
  'end': 1},
 {'entity': 'NB1',
  'score': 0.98874336,
  'index': 2,
  'word': '堯',
  'start': 1,
  'end': 2},
 {'entity': 'VG',
  'score': 0.97059363,
  'index': 3,
  'word': '曰',
  'start': 2,
  'end': 3},
 {'entity': 'NB1',
  'score': 0.9864504,
  'index': 4,
  'word': '放',
  'start': 3,
  'end': 4},
 {'entity': 'NB1',
  'score': 0.9543974,
  'index': 5,
  'word': '勳',
  'start': 4,
  'end': 5}]

📚 ドキュメント

ホームページ

• ckiplab/han-transformers

学習データセット

データセットの著作権は、中央研究院言語学研究所に帰属します。

• 中央研究院上古漢語標記語料庫
• 中央研究院中古漢語語料庫
• 中央研究院近代漢語語料庫
• 中央研究院現代漢語語料庫

🔧 技術詳細

このモデルは、BERTベースのモデルを使用しており、古代中国語の品詞タグ付けを行うために学習されています。

📄 ライセンス

このプロジェクトは、GPL-3.0ライセンスの下で公開されています。

貢献者

• CKIPのChin-Tung Lin