Albert Tiny Chinese

🚀 CKIP ALBERT 微型中文模型

本項目提供了繁體中文的transformers模型（包括ALBERT、BERT、GPT2）以及自然語言處理工具（包括分詞、詞性標註、命名實體識別），為中文自然語言處理任務提供了有力支持。

🚀 快速開始

本項目提供了豐富的模型和工具，使用時請使用BertTokenizerFast作為分詞器，而非AutoTokenizer。以下是一個簡單的使用示例：

from transformers import (
  BertTokenizerFast,
  AutoModel,
)

tokenizer = BertTokenizerFast.from_pretrained('bert-base-chinese')
model = AutoModel.from_pretrained('ckiplab/albert-tiny-chinese')

有關完整使用方法及其他信息，請參見項目主頁。

✨ 主要特性

• 提供多種繁體中文transformers模型，如ALBERT、BERT、GPT2。
• 具備自然語言處理工具，包括分詞、詞性標註、命名實體識別。

📚 詳細文檔

項目主頁

• https://github.com/ckiplab/ckip-transformers

貢獻者

• Mu Yang at CKIP (作者 & 維護者)

📄 許可證

本項目採用GPL-3.0許可證。