Distilbart Cnn 12 6 Samsum

🚀 distilbart-cnn-12-6-samsum

このモデルは、Amazon SageMakerと新しいHugging Faceのディープラーニングコンテナを使用して学習されました。

詳細については、以下を参照してください。

• 🤗 Transformers Documentation: Amazon SageMaker
• Example Notebooks
• Amazon SageMaker documentation for Hugging Face
• Python SDK SageMaker documentation for Hugging Face
• Deep Learning Container

📦 インストール

このセクションでは、必要なライブラリをインストールする手順を説明します。

pip install transformers

✨ 主な機能

• Amazon SageMakerとHugging Faceのディープラーニングコンテナを使用した学習
• 会話文の要約機能

📚 ドキュメント

ハイパーパラメータ

{
    "dataset_name": "samsum",
    "do_eval": true,
    "do_train": true,
    "fp16": true,
    "learning_rate": 5e-05,
    "model_name_or_path": "sshleifer/distilbart-cnn-12-6",
    "num_train_epochs": 3,
    "output_dir": "/opt/ml/model",
    "per_device_eval_batch_size": 8,
    "per_device_train_batch_size": 8,
    "seed": 7
}

学習結果

評価結果

💻 使用例

基本的な使用法

from transformers import pipeline
summarizer = pipeline("summarization", model="philschmid/distilbart-cnn-12-6-samsum")

conversation = '''Jeff: Can I train a 🤗 Transformers model on Amazon SageMaker? 
Philipp: Sure you can use the new Hugging Face Deep Learning Container. 
Jeff: ok.
Jeff: and how can I get started? 
Jeff: where can I find documentation? 
Philipp: ok, ok you can find everything here. https://huggingface.co/blog/the-partnership-amazon-sagemaker-and-hugging-face                                           
'''
summarizer(conversation)

📄 ライセンス

このプロジェクトは、Apache-2.0ライセンスの下でライセンスされています。