モデル概要
モデル特徴
モデル能力
使用事例
🚀 Llama 2
Llama 2は、70億から700億のパラメータ規模の事前学習済みおよびファインチューニング済みの生成型テキストモデルのコレクションです。これは70Bファインチューニング済みモデルのリポジトリで、対話ユースケースに最適化され、Hugging Face Transformers形式に変換されています。他のモデルへのリンクは、下部の索引に記載されています。
🚀 クイックスタート
このモデルを使用するには、Metaのライセンスに従う必要があります。モデルの重みとトークナイザーをダウンロードするには、このウェブサイトにアクセスし、ライセンスに同意してからアクセスをリクエストしてください。
✨ 主な機能
Metaは、70億から700億のパラメータ規模の事前学習済みおよびファインチューニング済みの生成型テキストモデルであるLlama 2シリーズの大規模言語モデル(LLM)を開発し、公開しました。ファインチューニング済みのLLMであるLlama-2-Chatは、対話ユースケースに最適化されています。Llama-2-Chatモデルは、テストしたほとんどのベンチマークでオープンソースのチャットモデルを上回り、有用性と安全性に関する人間による評価では、ChatGPTやPaLMなどの一部の人気のあるクローズドソースモデルと同等の性能を発揮します。
📚 ドキュメント
モデルの詳細
- モデル開発者:Meta
- バリエーション:Llama 2には、7B、13B、70Bといったさまざまなパラメータサイズがあり、事前学習済みとファインチューニング済みのバリエーションがあります。
- 入力:モデルはテキストのみを入力とします。
- 出力:モデルはテキストのみを生成します。
- モデルアーキテクチャ:Llama 2は、最適化されたトランスフォーマーアーキテクチャを使用する自己回帰型言語モデルです。チューニングされたバージョンは、教師付きファインチューニング(SFT)と人間のフィードバックによる強化学習(RLHF)を使用して、有用性と安全性に関する人間の好みに合わせて調整されています。
トレーニングデータ
Property | Details |
---|---|
Model Type | Llama 2 |
Training Data | 公開されているオンラインデータの新しい混合データ |
Params | 7B、13B、70B |
Content Length | 4k |
GQA | 7B、13B: ×; 70B: ✓ |
Tokens | 2.0T |
LR | 7B、13B: 3.0 x 10-4; 70B: 1.5 x 10-4 |
Llama 2シリーズのモデル。トークン数は事前学習データのみを指します。すべてのモデルは、グローバルバッチサイズ4Mトークンでトレーニングされています。より大きなモデル(70B)はGrouped-Queを使用しています。
LLAMA 2コミュニティライセンス契約
「契約」とは、本契約に定めるLlama素材の使用、複製、配布、および改変に関する条件をいいます。
「ドキュメント」とは、Metaがこのサイトで配布するLlama 2に付随する仕様書、マニュアル、およびドキュメントをいいます。
「ライセンシー」または「あなた」とは、あなた自身、またはあなたの雇用主、またはあなたがその者または団体のために本契約に入る場合の当該者または団体をいい、適用される法律、規則、または規制に基づき法的同意を与えるために必要な年齢であり、あなたがその者または団体のために本契約に入る場合には、あなたの雇用主または当該他の者または団体を拘束する法的権限を有する者をいいます。
「Llama 2」とは、Metaがこのサイトで配布する、機械学習モデルコード、学習済みモデルの重み、推論を可能にするコード、学習を可能にするコード、ファインチューニングを可能にするコード、およびその他の要素を含む、基礎となる大規模言語モデル、ソフトウェア、およびアルゴリズムをいいます。
「Llama素材」とは、総称して、本契約の下で提供されるMetaの独自のLlama 2およびドキュメント(またはその一部)をいいます。
「Meta」または「私たち」とは、あなたが欧州経済圏(EEA)またはスイスに所在する場合、またはあなたが団体である場合にはあなたの主たる事業場がEEAまたはスイスにある場合には、Meta Platforms Ireland Limitedをいい、あなたがEEAまたはスイスの外に所在する場合には、Meta Platforms, Inc.をいいます。
以下の「同意する」をクリックするか、またはLlama素材の一部または要素を使用または配布することにより、あなたは本契約に拘束されることに同意するものとします。
-
ライセンス権限と再配布 a. 権限の付与:あなたには、Llama素材に含まれるMetaの知的財産権またはMetaが所有するその他の権利の下で、非排他的、世界規模、非譲渡的、無償の限定的ライセンスが付与され、Llama素材を使用、複製、配布、コピー、派生物を作成、および改変することができます。 b. 再配布と使用 i. あなたがLlama素材またはその派生物を第三者に配布または提供する場合、あなたは当該第三者に本契約のコピーを提供するものとします。 ii. あなたが統合されたエンドユーザー製品の一部として、ライセンシーからLlama素材またはその派生物を受け取った場合、本契約の第2条はあなたに適用されません。 iii. あなたが配布するLlama素材のすべてのコピーには、当該コピーの一部として配布される「Notice」テキストファイル内に、次の帰属表示を記載する必要があります。「Llama 2はLLAMA 2コミュニティライセンスの下でライセンスされており、Copyright (c) Meta Platforms, Inc. All Rights Reserved.」 iv. あなたのLlama素材の使用は、適用される法律および規制(貿易コンプライアンスの法律および規制を含む)に準拠し、Llama素材の許容使用ポリシー(こちらで入手可能)に従う必要があり、当該ポリシーは本契約に参照により組み込まれます。 v. あなたは、Llama素材またはLlama素材の出力や結果を使用して、他の大規模言語モデル(Llama 2またはその派生物を除く)を改善することはできません。
-
追加の商業条項:Llama 2のバージョンリリース日において、ライセンシーまたはライセンシーの関連会社が提供する製品またはサービスの月間アクティブユーザー数が、前の暦月において7億を超える場合、あなたはMetaからライセンスを申請する必要があり、Metaはその裁量によりあなたにライセンスを付与することができます。Metaが明示的にあなたにそのような権限を付与するまで、あなたは本契約に基づくいかなる権利も行使することができません。
-
保証の否認:適用される法律により要求されない限り、Llama素材およびその出力や結果は「現状有姿」のまま提供され、いかなる種類の保証も明示的または黙示的に与えられません。これには、権原、非侵害、商品性、または特定の目的への適合性に関する保証も含まれません。あなたは、Llama素材の使用または再配布の適切性を独自に判断し、Llama素材の使用およびその出力や結果に関連するすべてのリスクを負うものとします。
-
責任の制限:いかなる場合も、Metaまたはその関連会社は、本契約に起因する契約、不法行為、過失、製品責任、またはその他の理論に基づく責任について、いかなる逸失利益または間接的、特別、結果的、偶発的、懲戒的、または罰則的損害についても責任を負わないものとします。たとえMetaまたはその関連会社が当該損害の可能性について通知されていた場合でも同様です。
-
知的財産 a. 本契約の下で商標ライセンスは付与されず、Llama素材に関連して、Metaまたはライセンシーは、相手方またはその関連会社が所有するまたは関連するいかなる名称または標章も、Llama素材の説明および再配布における合理的かつ慣習的な使用に必要な場合を除き、使用することはできません。 b. MetaによるLlama素材および派生物の所有権を前提として、あなたが作成したLlama素材の派生物および改変に関して、あなたとMetaの間で、あなたは当該派生物および改変の所有者となります。 c. あなたがMetaまたは任意の団体に対して訴訟またはその他の手続きを提起し(訴訟における反訴または反請求を含む)、Llama素材またはLlama 2の出力や結果、またはそれらの一部が、あなたが所有またはライセンスすることができる知的財産権またはその他の権利を侵害すると主張する場合、本契約の下であなたに付与されたいかなるライセンスも、当該訴訟または請求が提起された日から終了するものとします。あなたは、あなたのLlama素材の使用または配布に起因するまたは関連する第三者によるいかなる請求からもMetaを補償し、免責するものとします。
-
契約期間と終了:本契約の期間は、あなたが本契約に同意するか、またはLlama素材にアクセスすることにより開始し、本契約の条項および条件に従って終了するまで有効です。あなたが本契約のいずれかの条項または条件に違反した場合、Metaは本契約を終了することができます。本契約が終了した場合、あなたはLlama素材を削除し、使用を停止するものとします。第3条、第4条、および第7条は、本契約の終了後も有効です。
-
準拠法と管轄裁判所:本契約は、カリフォルニア州の法律に基づいて解釈および適用され、法律選択の原則は考慮されません。国際商品売買契約に関する国際連合条約は本契約に適用されません。カリフォルニア州の裁判所は、本契約に起因するいかなる紛争についても排他的管轄権を有します。
Llama 2許容使用ポリシー
Metaは、Llama 2を含むツールや機能の安全かつ公正な使用を促進することにコミットしています。あなたがLlama 2にアクセスまたは使用する場合、この許容使用ポリシー(「ポリシー」)に同意するものとします。このポリシーの最新版は、ai.meta.com/llama/use-policyで確認できます。
禁止される使用
私たちは、誰もがLlama 2を安全かつ責任を持って使用することを望んでいます。あなたは、以下のことを行わないこと、または他人に行わせないことに同意するものとします。
- 法律または他人の権利を侵害すること、具体的には:
- 違法または不法な活動やコンテンツを行い、促進し、生成し、寄与し、助長し、計画し、扇動し、またはさらに進めること。例えば:
- 暴力またはテロリズム
- 子供の搾取または危害、子供の搾取的コンテンツの勧誘、作成、取得、または配布、または児童性虐待素材の通報漏れ
- 人身売買、搾取、および性的暴力
- 未成年者への違法な情報または素材の配布、猥褻な素材を含む、または当該情報または素材に関連する法的に必要な年齢制限を設けないこと
- 性的勧誘
- その他の犯罪行為
- 個人または個人グループの嫌がらせ、虐待、脅迫、またはいじめを行い、促進し、扇動し、または容易にすること
- 雇用、雇用福利、信用、住宅、その他の経済的利益、またはその他の重要な商品やサービスの提供における差別またはその他の不法または有害な行為を行い、促進し、扇動し、または容易にすること
- 金融、法律、医療/健康、または関連する専門職を含むがこれに限定されない、いかなる職業の無許可または無免許の実践を行うこと
- 適用される法律により必要な権利および同意なしに、個人に関する健康、人口統計、またはその他の敏感な個人情報またはプライベート情報を収集、処理、開示、生成、または推測すること
- いかなる第三者の権利を侵害、盗用、またはその他の方法で違反するいかなる行動を行いまたは容易にすること、またはいかなるコンテンツを生成すること。これには、Llama 2素材を使用する製品またはサービスの出力や結果も含まれます
- 悪意のあるコード、マルウェア、コンピュータウイルスを作成、生成、または容易にすること、またはウェブサイトまたはコンピュータシステムの適切な動作、整合性、操作、または外観を無効化、過負荷、妨害、または損なうことができるその他のことを行うこと
- 違法または不法な活動やコンテンツを行い、促進し、生成し、寄与し、助長し、計画し、扇動し、またはさらに進めること。例えば:
- 個人に対する死亡または身体的危害のリスクをもたらす活動の計画または開発を行い、促進し、扇動し、容易にし、または支援すること。具体的には、Llama 2を以下のような用途に使用すること:
- 軍事、戦争、原子力産業または応用、スパイ活動、米国国務省が維持する国際兵器輸出規制(ITAR)の対象となる素材または活動への使用
- 銃器および違法武器(武器開発を含む)
- 違法薬物および規制/管理物質
- 重要インフラストラクチャ、輸送技術、または重機械の操作
- 自傷行為または他人への危害、自殺、切り傷、および摂食障害を含む
- 個人に対する暴力、虐待、または身体的危害を扇動または促進することを意図したいかなるコンテンツ
- 他人を意図的に欺瞞または誤解させること。具体的には、Llama 2を以下のような用途に使用すること:
- 詐欺を生成、促進、またはさらに進めること、またはディスインフォメーションの作成または促進
- 中傷的なコンテンツを生成、促進、またはさらに進めること、中傷的な声明、画像、またはその他のコンテンツの作成を含む
- スパムを生成、促進、またはさらに配布すること
- 同意、許可、または法的権利なしに他人になりすますこと
- Llama 2の使用または出力が人間によって生成されたものであると表現すること
- 偽のオンラインエンゲージメントを生成または容易にすること、偽のレビューやその他の偽のオンラインエンゲージメント手段を含む
- エンドユーザーに対して、あなたのAIシステムの既知の危険性を適切に開示しないこと
このポリシーの違反、ソフトウェアの「バグ」、またはこのポリシーの違反につながる可能性のあるその他の問題は、以下のいずれかの方法で報告してください。 * モデルの問題を報告する:github.com/facebookresearch/llama * モデルによって生成された危険なコンテンツを報告する:developers.facebook.com/llama_output_feedback * バグとセキュリティ上の懸念を報告する:facebook.com/whitehat/info * 許容使用ポリシーの違反またはLlamaの無許可使用を報告する:LlamaUseReport@meta.com
📄 ライセンス
このモデルは、Llama 2コミュニティライセンスの下で提供されています。詳細については、上記の「LLAMA 2コミュニティライセンス契約」を参照してください。



