Arabert C19

🚀 arabert_c19：在150萬條新冠疫情多方言阿拉伯語推文上預訓練的Arabert模型

ARABERT COVID - 19 Arxiv鏈接 是AraBERT v2模型（https://huggingface.co/aubmindlab/bert-base-arabertv02）的預訓練（微調）版本。該預訓練使用了來自 “大型阿拉伯語新冠疫情推特數據集”（https://arxiv.org/abs/2004.04315） 的150萬條關於新冠疫情的多方言阿拉伯語推文。該模型在處理與新冠疫情相關的多方言阿拉伯語推文任務時能取得更好的效果。

🚀 快速開始

本模型是基於AraBERT v2模型進行預訓練微調得到，使用了大量新冠疫情相關的多方言阿拉伯語推文，在處理新冠相關多方言阿拉伯語推文任務上表現出色。

📚 詳細文檔

多任務分類結果

包括使用arobert_c19和mbert_ar_c19進行假新聞和仇恨言論檢測等多個任務的分類結果，更多細節請參考論文（鏈接）。

預處理

from arabert.preprocess import ArabertPreprocessor
model_name="moha/arabert_c19"
arabert_prep = ArabertPreprocessor(model_name=model_name)
text = "للوقايه من عدم انتشار كورونا عليك اولا غسل اليدين بالماء والصابون وتكون عملية الغسل دقيقه تشمل راحة اليد الأصابع التركيز على الإبهام"
arabert_prep.preprocess(text)

📄 許可證

引用

請按以下格式引用：

@misc{ameur2021aracovid19mfh,
      title={AraCOVID19-MFH: Arabic COVID-19 Multi-label Fake News and Hate Speech Detection Dataset}, 
      author={Mohamed Seghir Hadj Ameur and Hassina Aliane},
      year={2021},
      eprint={2105.03143},
      archivePrefix={arXiv},
      primaryClass={cs.CL}
}

📞 聯繫方式

Hadj Ameur：Github | mohamedhadjameur@gmail.com | mhadjameur@cerist.dz