Bert Base Chinese Ws

🚀 CKIP BERT 基礎中文模型

本項目提供了繁體中文的 transformers 模型（包括 ALBERT、BERT、GPT2）以及自然語言處理工具（包括分詞、詞性標註、實體識別），為中文自然語言處理提供了豐富的資源和實用的工具。

🚀 快速開始

本項目提供了豐富的繁體中文 transformers 模型和自然語言處理工具。在使用時，請使用 BertTokenizerFast 作為分詞器，而非 AutoTokenizer。

from transformers import (
  BertTokenizerFast,
  AutoModel,
)

tokenizer = BertTokenizerFast.from_pretrained('bert-base-chinese')
model = AutoModel.from_pretrained('ckiplab/bert-base-chinese-ws')

有關完整使用方法及其他信息，請參見 項目主頁。

🌐 項目主頁

• https://github.com/ckiplab/ckip-transformers

👥 貢獻者

• Mu Yang 來自 CKIP（作者兼維護者）

📄 許可證

本項目採用 GPL-3.0 許可證。