Albert Base Chinese

🚀 CKIP ALBERT 基礎中国語モデル

このプロジェクトは、繁体字中国語用のtransformersモデル（ALBERT、BERT、GPT2を含む）と自然言語処理ツール（形態素解析、品詞タグ付け、固有表現認識を含む）を提供し、中国語の自然言語処理に強力なサポートを提供します。

🚀 クイックスタート

このプロジェクトは、豊富な中国語自然言語処理機能を提供しています。関連モデルを使用する場合は、AutoTokenizerではなくBertTokenizerFastを形態素解析器として使用するように注意してください。以下は簡単な使用例です。

基本的な使用法

from transformers import (
  BertTokenizerFast,
  AutoModel,
)

tokenizer = BertTokenizerFast.from_pretrained('bert-base-chinese')
model = AutoModel.from_pretrained('ckiplab/albert-base-chinese')

完全な使用方法やその他の情報については、プロジェクトホームページを参照してください。

✨ 主な機能

• ALBERT、BERT、GPT2など、複数の繁体字中国語transformersモデルを提供します。
• 形態素解析、品詞タグ付け、固有表現認識などの自然言語処理ツールを備えています。

📚 ドキュメント

• プロジェクトホームページ：https://github.com/ckiplab/ckip-transformers

📄 ライセンス

このプロジェクトはGPL - 3.0ライセンスを採用しています。

👥 貢献者

• Mu Yang （CKIP所属、作者兼メンテナ）