Blenderbot 3B

🚀 オープンドメインチャットボットモデル

このプロジェクトは、オープンドメインのチャットボットを構築するためのレシピを提供し、高パフォーマンスなチャットボットを実現するための要素を明らかにします。

🚀 クイックスタート

このモデルは、オープンドメインのチャットボットを構築するためのレシピを提供します。以下の情報を参考に、モデルについて詳しく知ることができます。

✨ 主な機能

• 適切なトレーニングデータと生成戦略を用いることで、大規模モデルが会話スキルを学習できることを示します。
• 90M、2.7B、9.4Bパラメータのニューラルモデルのバリアントを構築し、モデルとコードを公開しています。
• 人間による評価で、多ターン対話において既存のアプローチよりも優れたエンゲージメントと人間性を持つことが示されています。

📚 ドキュメント

モデルの説明

• 論文: Recipes for building an open-domain chatbot
• 元のPARLAIコード: Original PARLAI Code

概要

オープンドメインのチャットボットを構築することは、機械学習研究において挑戦的な分野です。これまでの研究では、ニューラルモデルのパラメータ数と学習データの規模を拡大することで結果が向上することが示されていますが、本研究では、高性能なチャットボットにとって他の要素も重要であることを示します。良い会話には、熟練した会話者がシームレスに組み合わせるいくつかのスキルが必要です。つまり、魅力的な話題を提供し、相手の話を傾聴し、質問をすると同時に回答し、状況に応じて適切に知識、共感、個性を示すことです。我々は、適切なトレーニングデータと生成戦略を与えることで、大規模モデルがこれらのスキルを学習できることを示します。我々は、90M、2.7B、9.4Bパラメータのニューラルモデルを用いてこれらのレシピのバリアントを構築し、モデルとコードを公開しています。人間による評価では、多ターン対話において、我々の最良のモデルはエンゲージメントと人間性の測定において既存のアプローチよりも優れていることが示されています。その後、我々はモデルの失敗ケースを分析することで、この研究の限界について議論します。

📄 ライセンス

このモデルは、Apache-2.0ライセンスの下で公開されています。