Bert Fa Base Uncased Clf Persiannews

🚀 ParsBERT (v2.0)

ParsBERTは、ペルシャ語の言語理解のためのTransformerベースのモデルです。新しいペルシャ語コーパスで語彙を再構築し、ParsBERT v1.1をファインチューニングすることで、他の領域での使用機能を提供します。

🚀 クイックスタート

ParsBERT v2.0では、ペルシャ語コーパスを用いて語彙を再構築し、モデルをファインチューニングしました。最新の情報については、ParsBERTのリポジトリを参照してください。

✨ 主な機能

ペルシャ語テキスト分類 [DigiMag, ペルシャ語ニュース]

既存のデータセットDigiMagとPersian Newsの両方で、教師付き学習によるテキストラベリングを行います。

ペルシャ語ニュース

様々なオンラインニュース機関のウェブサイトからスクレイピングされた様々なニュース記事のデータセットです。記事の総数は16,438で、8つの異なるクラスに分かれています。

1. 経済
2. 国際
3. 政治
4. 科学技術
5. 文化芸術
6. スポーツ
7. 医療

ダウンロード データセットはこちらからダウンロードできます。

📚 ドキュメント

結果

以下の表は、ParsBERTが他のモデルやアーキテクチャと比較して得たF1スコアをまとめたものです。

使い方

タスク	ノートブック
テキスト分類

BibTeXエントリと引用情報

出版物では、以下のように引用してください。

@article{ParsBERT,
    title={ParsBERT: Transformer-based Model for Persian Language Understanding},
    author={Mehrdad Farahani, Mohammad Gharachorloo, Marzieh Farahani, Mohammad Manthouri},
    journal={ArXiv},
    year={2020},
    volume={abs/2005.12515}
}

質問がある場合

ParsBERT IssuesのリポジトリにGitHubのissueを投稿してください。

📄 ライセンス

このプロジェクトはApache-2.0ライセンスの下で公開されています。