Albert Base Chinese

🚀 CKIP ALBERT 基礎中文模型

本項目提供了繁體中文的transformers模型（包括ALBERT、BERT、GPT2）以及自然語言處理工具（包括分詞、詞性標註、命名實體識別），為中文自然語言處理提供了有力支持。

🚀 快速開始

本項目提供了豐富的中文自然語言處理能力。若要使用相關模型，需注意請使用BertTokenizerFast而非AutoTokenizer作為分詞器。以下是一個簡單的使用示例：

from transformers import (
  BertTokenizerFast,
  AutoModel,
)

tokenizer = BertTokenizerFast.from_pretrained('bert-base-chinese')
model = AutoModel.from_pretrained('ckiplab/albert-base-chinese')

有關完整使用方法及其他資訊，請參見 項目主頁。

✨ 主要特性

• 提供多種繁體中文transformers模型，如ALBERT、BERT、GPT2。
• 具備自然語言處理工具，包括分詞、詞性標註、命名實體識別。

📚 詳細文檔

• 項目主頁：https://github.com/ckiplab/ckip-transformers

📄 許可證

本項目採用 GPL-3.0 許可證。

👥 貢獻者

• Mu Yang 來自 CKIP（作者兼維護者）