Gigabert V4 Arabic And English

🚀 GigaBERT-v4

GigaBERT-v4は、コードスイッチングデータ上でGigaBERT-v3を継続的に事前学習したモデルです。情報抽出（IE）タスクにおいて、英語からアラビア語へのゼロショット転移性能が向上しています。詳細は以下の論文を参照してください。

@inproceedings{lan2020gigabert,
  author     = {Lan, Wuwei and Chen, Yang and Xu, Wei and Ritter, Alan},
  title      = {GigaBERT: Zero-shot Transfer Learning from English to Arabic},
  booktitle  = {Proceedings of The 2020 Conference on Empirical Methods on Natural Language Processing (EMNLP)},
  year       = {2020}
} 

🚀 クイックスタート

💻 使用例

基本的な使用法

# コードの内容とコメントはそのまま保持
from transformers import *
tokenizer = BertTokenizer.from_pretrained("lanwuwei/GigaBERT-v4-Arabic-and-English", do_lower_case=True)
model = BertForTokenClassification.from_pretrained("lanwuwei/GigaBERT-v4-Arabic-and-English")

こちらがダウンロード可能なリンクです GigaBERT-v4。