Bert Base Han Chinese Pos

🚀 CKIP BERT基礎古漢語詞性標註模型

本模型為古漢語提供詞性（POS）標註功能。我們的訓練數據集涵蓋了漢語的四個時代，能夠更全面地對古漢語進行詞性分析。

🚀 快速開始

你可以按照以下步驟使用本模型：

腳本中使用模型

from transformers import (
  AutoTokenizer,
  AutoModel,
)

tokenizer = AutoTokenizer.from_pretrained("ckiplab/bert-base-han-chinese-pos")
model = AutoModel.from_pretrained("ckiplab/bert-base-han-chinese-pos")

模型推理

>>> from transformers import pipeline
>>> classifier = pipeline("token-classification", model="ckiplab/bert-base-han-chinese-pos")
>>> classifier("帝堯曰放勳")

[{'entity': 'NB1',
  'score': 0.99410427,
  'index': 1,
  'word': '帝',
  'start': 0,
  'end': 1},
 {'entity': 'NB1',
  'score': 0.98874336,
  'index': 2,
  'word': '堯',
  'start': 1,
  'end': 2},
 {'entity': 'VG',
  'score': 0.97059363,
  'index': 3,
  'word': '曰',
  'start': 2,
  'end': 3},
 {'entity': 'NB1',
  'score': 0.9864504,
  'index': 4,
  'word': '放',
  'start': 3,
  'end': 4},
 {'entity': 'NB1',
  'score': 0.9543974,
  'index': 5,
  'word': '勳',
  'start': 4,
  'end': 5}]

✨ 主要特性

本模型專為古漢語詞性標註設計，訓練數據集覆蓋四個漢語時代，能更精準地對古漢語進行詞性分析。

📚 詳細文檔

主頁

• ckiplab/han-transformers

訓練數據集

數據集版權歸中央研究院語言學研究所所有。

• 中央研究院上古漢語標記語料庫
• 中央研究院中古漢語語料庫
• 中央研究院近代漢語語料庫
• 中央研究院現代漢語語料庫

貢獻者

• 中央研究院詞庫小組（CKIP）的林進東，CKIP官網

📄 許可證

本模型採用GPL-3.0許可證。