Roberta Classical Chinese Large Char

🚀 roberta-classical-chinese-large-char

このモデルは古典中国語テキストで事前学習されたRoBERTaモデルで、GuwenBERT-large をベースにしています。文字埋め込みは繁体字/簡体字に強化されています。下流タスク、例えば文分割、品詞タグ付け、依存構造解析などのために微調整することができます。

🚀 クイックスタート

このモデルは古典中国語のテキストを対象に事前学習されたRoBERTaモデルです。GuwenBERT-large をベースに派生しており、文字埋め込みが繁体字や簡体字に強化されています。roberta-classical-chinese-large-char を微調整することで、文分割、品詞タグ付け、依存構造解析 などの下流タスクに利用できます。

✨ 主な機能

• 古典中国語テキストで事前学習されたRoBERTaモデル。
• 文字埋め込みが繁体字/簡体字に強化されている。
• 下流タスクに微調整可能。

📦 インストール

このモデルを使用するには、transformers ライブラリが必要です。以下のコードでモデルとトークナイザーをロードできます。

💻 使用例

基本的な使用法

# オリジナルのコードとコメントを保持
from transformers import AutoTokenizer,AutoModelForMaskedLM
tokenizer=AutoTokenizer.from_pretrained("KoichiYasuoka/roberta-classical-chinese-large-char")
model=AutoModelForMaskedLM.from_pretrained("KoichiYasuoka/roberta-classical-chinese-large-char")

📚 ドキュメント

関連リンク

SuPar-Kanbun: 古典中国語のトークナイザー、品詞タガー、依存構造解析器

📄 ライセンス

このモデルは apache-2.0 ライセンスの下で提供されています。

モデル情報