L

Llama2 22b

chargoddardによって開発
Llama 2 13Bをベースにした改良版で、オリジナルLlama 33Bの一部アテンションヘッドメカニズムを統合し、RedPajamaデータセットによるファインチューニングで安定性を向上
ダウンロード数 90
リリース時間 : 7/22/2023

モデル概要

これは強化版の大規模言語モデルで、Llama 2 13BとオリジナルLlama 33Bの利点を組み合わせ、さらなるチューニングの基礎プラットフォームとして設計

モデル特徴

ハイブリッドアーキテクチャ
Llama 2 13BとオリジナルLlama 33Bのアテンションメカニズムを組み合わせ
安定したファインチューニング
RedPajama約1000万トークンのファインチューニングにより移植構造をより安定化
拡張ベース
チューニング基礎プラットフォームとして設計され、13Bバージョンより強力な学習能力が期待

モデル能力

テキスト生成
言語理解
知識質問応答

使用事例

研究開発
モデルチューニング基盤
さらなるチューニングの基礎モデルとして使用
13Bバージョンより強力な学習能力が期待
自然言語処理
テキスト生成
一貫性のあるテキストコンテンツを生成
AIbase
未来を切り開く、あなたのAIソリューション知識ベース
© 2025AIbase