Ernie 3.0 Base Zh

🚀 ERNIE-3.0-base-zh

ERNIE 3.0 是用于语言理解和生成的大规模知识增强预训练模型，能有效提升语言处理的效果和性能。

🚀 快速开始

ERNIE 3.0 是用于语言理解和生成的大规模知识增强预训练模型。你可以像下面这样加载 ERNIE-3.0 模型：

from transformers import BertTokenizer, ErnieForMaskedLM

tokenizer = BertTokenizer.from_pretrained("nghuyong/ernie-3.0-base-zh")
model = ErnieForMaskedLM.from_pretrained("nghuyong/ernie-3.0-base-zh")

✨ 主要特性

本发布的 PyTorch 模型是从官方发布的 PaddlePaddle ERNIE 模型转换而来，并进行了一系列实验以验证转换的准确性。

📚 详细文档

模型相关链接

📄 许可证

引用信息

如果你使用了该模型，请按照以下格式进行引用：

@article{sun2021ernie,
  title={Ernie 3.0: Large-scale knowledge enhanced pre-training for language understanding and generation},
  author={Sun, Yu and Wang, Shuohuan and Feng, Shikun and Ding, Siyu and Pang, Chao and Shang, Junyuan and Liu, Jiaxiang and Chen, Xuyi and Zhao, Yanbin and Lu, Yuxiang and others},
  journal={arXiv preprint arXiv:2107.02137},
  year={2021}
}