Ernie 3.0 Mini Zh

🚀 ERNIE-3.0-mini-zh

ERNIE 3.0は、言語理解と生成のための大規模な知識強化事前学習モデルです。このモデルは、自然言語処理タスクにおける性能向上に貢献します。

🚀 クイックスタート

ERNIE 3.0は、言語理解と生成のための大規模な知識強化事前学習モデルです。詳細はこちら: https://arxiv.org/abs/2107.02137

📚 ドキュメント

公開されたモデル情報

この公開されたPyTorchモデルは、公式に公開されたPaddlePaddleのERNIEモデルから変換されており、変換の正確性を確認するために一連の実験が行われています。

• 公式PaddlePaddle ERNIEリポジトリ: https://paddlenlp.readthedocs.io/zh/latest/model_zoo/transformers/ERNIE/contents.html
• PyTorch変換リポジトリ: https://github.com/nghuyong/ERNIE-Pytorch

💻 使用例

基本的な使用法

from transformers import BertTokenizer, ErnieModel

tokenizer = BertTokenizer.from_pretrained("nghuyong/ernie-3.0-mini-zh")
model = ErnieModel.from_pretrained("nghuyong/ernie-3.0-mini-zh")

📄 ライセンス

引用

@article{sun2021ernie,
  title={Ernie 3.0: Large-scale knowledge enhanced pre-training for language understanding and generation},
  author={Sun, Yu and Wang, Shuohuan and Feng, Shikun and Ding, Siyu and Pang, Chao and Shang, Junyuan and Liu, Jiaxiang and Chen, Xuyi and Zhao, Yanbin and Lu, Yuxiang and others},
  journal={arXiv preprint arXiv:2107.02137},
  year={2021}
}