Albert Fa Base V2 Sentiment Digikala

🚀 ALBERT Persian

ペルシャ語の言語表現の自己教師付き学習のための軽量BERT

ALBERT-Persianは、ペルシャ語におけるALBERTの最初の試みです。このモデルは、GoogleのALBERT BASE Version 2.0に基づいて、様々な主題（科学、小説、ニュースなど）の様々な文体の390万を超える文書、7300万の文、13億の単語で訓練されています。これは、ParsBERTの場合と同じ方法で行われています。

最新のモデル情報については、ALBERT-Persianのリポジトリをご覧ください。

✨ 主な機能

ペルシャ語の感情分析 [Digikala, SnappFood, DeepSentiPers]

この機能は、コメントなどのテキストを感情的な傾向に基づいて分類することを目的としています。このタスクには、3つの有名なデータセットをテストしました。Digikalaのユーザーコメント、SnappFoodのユーザーコメント、および2種類のバイナリ形式とマルチ形式のDeepSentiPersです。

Digikala

Digikalaのユーザーコメントは、Open Data Mining Program (ODMP)から提供されています。このデータセットには、3つのラベル付きの62,321件のユーザーコメントが含まれています。

ダウンロード データセットはこちらからダウンロードできます。

📚 ドキュメント

結果

以下の表は、他のモデルやアーキテクチャと比較した際のF1スコアをまとめたものです。

BibTeXエントリと引用情報

出版物では、以下のように引用してください。

@misc{ALBERTPersian,
  author = {Mehrdad Farahani},
  title = {ALBERT-Persian: A Lite BERT for Self-supervised Learning of Language Representations for the Persian Language},
  year = {2020},
  publisher = {GitHub},
  journal = {GitHub repository},
  howpublished = {\url{https://github.com/m3hrdadfi/albert-persian}},
}

@article{ParsBERT,
    title={ParsBERT: Transformer-based Model for Persian Language Understanding},
    author={Mehrdad Farahani, Mohammad Gharachorloo, Marzieh Farahani, Mohammad Manthouri},
    journal={ArXiv},
    year={2020},
    volume={abs/2005.12515}
}

質問について

質問がある場合は、ALBERT-PersianのリポジトリにGitHubのissueを投稿してください。

📄 ライセンス

このプロジェクトは、Apache 2.0ライセンスの下で公開されています。