Roberta Base Japanese Aozora Char

🚀 roberta-base-japanese-aozora-char

本项目是一个基于字符分词器，在青空文库文本上进行预训练的RoBERTa模型。可对roberta-base-japanese-aozora-char进行微调，以应用于词性标注、依存句法分析等下游任务。

🚀 快速开始

本模型可用于完成掩码填充任务。以下是使用示例：

from transformers import AutoTokenizer,AutoModelForMaskedLM
tokenizer=AutoTokenizer.from_pretrained("KoichiYasuoka/roberta-base-japanese-aozora-char")
model=AutoModelForMaskedLM.from_pretrained("KoichiYasuoka/roberta-base-japanese-aozora-char")

✨ 主要特性

• 预训练文本：基于青空文库的文本进行预训练。
• 分词器：采用字符分词器。
• 下游任务：可对模型进行微调，以完成词性标注、依存句法分析等下游任务。

📚 详细文档

模型描述

这是一个使用字符分词器，在青空文库文本上预训练的RoBERTa模型。你可以对roberta-base-japanese-aozora-char进行微调，以用于下游任务，如词性标注、依存句法分析等。

参考资料

安岡孝一: Transformersと国語研長単位による日本語係り受け解析モデルの製作, 情報処理学会研究報告, Vol.2022-CH-128, No.7 (2022年2月), pp.1-8.

📄 许可证

本项目采用cc-by-sa-4.0许可证。