Albert Base Chinese Ws

🚀 CKIP ALBERT 基礎中文模型

本項目提供了繁體中文的 transformers 模型（包括 ALBERT、BERT、GPT2）以及自然語言處理工具（包括分詞、詞性標註、實體識別），為中文自然語言處理提供了強大的支持。

🚀 快速開始

本項目提供了豐富的中文自然語言處理能力。若要使用，需注意請使用 BertTokenizerFast 而非 AutoTokenizer 作為分詞器。

基礎用法

from transformers import (
  BertTokenizerFast,
  AutoModel,
)

tokenizer = BertTokenizerFast.from_pretrained('bert-base-chinese')
model = AutoModel.from_pretrained('ckiplab/albert-base-chinese-ws')

有關完整使用方法及其他信息，請參見 項目主頁。

✨ 主要特性

• 提供多種繁體中文的 transformers 模型，如 ALBERT、BERT、GPT2。
• 具備自然語言處理工具，涵蓋分詞、詞性標註、實體識別等功能。

📚 詳細文檔

項目主頁

• https://github.com/ckiplab/ckip-transformers

貢獻者

• Mu Yang 來自 CKIP（作者兼維護者）

📄 許可證

本項目採用 GPL-3.0 許可證。