BART ToSSimplify

🚀 BART-ToSSimplify

BART-ToSSimplifyは、サービス利用規約文書の要約を生成するために設計されたモデルです。このモデルは、未知のデータセットでfacebook/bart-large-cnnをファインチューニングしたものです。評価セットでは以下の結果を達成しています。

• 損失: 0.3895
• Rouge1: 0.6186
• Rouge2: 0.4739
• Rougel: 0.5159
• Rougelsum: 0.5152
• 生成長: 108.6354

🚀 クイックスタート

このモデルは、サービス利用規約文書の要約生成に特化しており、英語の文書に対して使用できます。

✨ 主な機能

• サービス利用規約契約の簡略化された要約を生成します。
• 法的文書の要約を自動化し、迅速な理解を支援します。

📚 ドキュメント

モデルの説明

BART-ToSSimplifyは、サービス利用規約文書の要約を生成するように設計されています。

想定される用途と制限

想定される用途

• サービス利用規約契約の簡略化された要約を生成する。
• 法的文書の要約を自動化し、迅速な理解を支援する。

制限事項

• このモデルは英語専用であり、他の言語には適用できません。
• 生成される要約の品質は、ソーステキストの複雑さによって異なる場合があります。

学習と評価データ

BART-ToSSimplifyは、様々なサービス利用規約契約の要約からなるデータセットで学習されました。このデータセットは収集され、前処理されて学習と評価の分割が作成されました。

学習手順

学習ハイパーパラメータ

学習中に以下のハイパーパラメータが使用されました。

• 学習率: 5e-05
• 学習バッチサイズ: 2
• 評価バッチサイズ: 2
• シード: 42
• オプティマイザ: Adam (betas=(0.9,0.999), epsilon=1e-08)
• 学習率スケジューラタイプ: 線形
• 学習率スケジューラウォームアップステップ: 500
• エポック数: 5
• 混合精度学習: Native AMP

学習結果

フレームワークのバージョン

• Transformers 4.35.2
• Pytorch 2.1.0+cu121
• Datasets 2.15.0
• Tokenizers 0.15.0

📄 ライセンス

このモデルはMITライセンスの下で提供されています。