Summarization Hi Mbart Large 50 Hungarian

🚀 ファインチューニングされたMBart - 50モデルを用いたハンガリー語の要約生成

このモデルはハンガリー語の文章を要約するために、mBART - large - 50モデルをファインチューニングしたものです。詳細については、デモサイトをご覧ください。

🚀 クイックスタート

このモデルは、ハンガリー語の文章要約タスクに特化してファインチューニングされています。以下のセクションでは、モデルの特徴、制限事項、結果、使用方法、引用方法について説明します。

✨ 主な機能

• mBART - large - 50モデルをファインチューニングしています。
• HIコーパス（hvg.hu + index.hu）で学習されています。
  • セグメント数: 559162

📦 インストール

このモデルを使用するには、transformersライブラリが必要です。以下のコマンドでインストールできます。

pip install transformers

💻 使用例

基本的な使用法

from transformers import pipeline

summarization = pipeline(task="summarization", model="NYTK/summarization-hi-mbart-large-50-hungarian")

print(summarization(input_text)[0]["summary_text"])

📚 ドキュメント

制限事項

• 入力テキストはトークナイズされている必要があります（トークナイザー: HuSpaCy）。
• 最大入力ソース長: 1024
• 最大出力ターゲット長: 256

結果

📄 ライセンス

このプロジェクトはMITライセンスの下で公開されています。

📚 引用

もしこのモデルを使用する場合は、以下の論文を引用してください。

@inproceedings {yang-multi-sum,
    title = {{Többnyelvű modellek és PEGASUS finomhangolása magyar nyelvű absztraktív összefoglalás feladatára}},
    booktitle = {XIX. Magyar Számítógépes Nyelvészeti Konferencia (MSZNY 2023)},
    year = {2023},
    publisher = {Szegedi Tudományegyetem, Informatikai Intézet},
    address = {Szeged, Magyarország},
    author = {Yang, Zijian Győző},
    pages = {381--393}
}