Roberta Base Japanese Aozora Char

🚀 roberta-base-japanese-aozora-char

本項目是一個基於字符分詞器，在青空文庫文本上進行預訓練的RoBERTa模型。可對roberta-base-japanese-aozora-char進行微調，以應用於詞性標註、依存句法分析等下游任務。

🚀 快速開始

本模型可用於完成掩碼填充任務。以下是使用示例：

from transformers import AutoTokenizer,AutoModelForMaskedLM
tokenizer=AutoTokenizer.from_pretrained("KoichiYasuoka/roberta-base-japanese-aozora-char")
model=AutoModelForMaskedLM.from_pretrained("KoichiYasuoka/roberta-base-japanese-aozora-char")

✨ 主要特性

• 預訓練文本：基於青空文庫的文本進行預訓練。
• 分詞器：採用字符分詞器。
• 下游任務：可對模型進行微調，以完成詞性標註、依存句法分析等下游任務。

📚 詳細文檔

模型描述

這是一個使用字符分詞器，在青空文庫文本上預訓練的RoBERTa模型。你可以對roberta-base-japanese-aozora-char進行微調，以用於下游任務，如詞性標註、依存句法分析等。

參考資料

安岡孝一: Transformersと國語研長単位による日本語係り受け解析モデルの製作, 情報処理學會研究報告, Vol.2022-CH-128, No.7 (2022年2月), pp.1-8.

📄 許可證

本項目採用cc-by-sa-4.0許可證。