Llava Int4
LLaVAはマルチモーダル大規模モデルで、視覚エンコーダーと大規模言語モデルを接続することで汎用視覚アシスタント機能を実現
ダウンロード数 40
リリース時間 : 11/15/2023
モデル概要
LLaVAはシンプルな投影行列でCLIP視覚エンコーダーとVicuna/LLaMaなどの大規模言語モデルを接続し、言語と画像の命令を理解して実行可能
モデル特徴
マルチモーダル理解
視覚と言語入力を同時に処理し、画像内容を理解して関連する応答を生成
シンプルなアーキテクチャ設計
軽量な投影行列で事前学習済み視覚と言語モデルを接続し、効率的なマルチモーダル融合を実現
命令追従能力
複雑なマルチモーダル命令を理解し、対応するタスクを実行可能
モデル能力
画像内容理解
視覚質問応答
マルチモーダル対話
画像説明生成
視覚命令実行
使用事例
インテリジェントアシスタント
視覚補助質問応答
ユーザーの画像内容に関する様々な質問に回答
正確で文脈に即した回答を提供
教育
インタラクティブ学習
画像とテキストのインタラクションで複雑な概念を説明
おすすめAIモデル
Llama 3 Typhoon V1.5x 8b Instruct
タイ語専用に設計された80億パラメータの命令モデルで、GPT-3.5-turboに匹敵する性能を持ち、アプリケーションシナリオ、検索拡張生成、制限付き生成、推論タスクを最適化
大規模言語モデル
Transformers 複数言語対応

L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-TinyはSODAデータセットでトレーニングされた超小型対話モデルで、エッジデバイス推論向けに設計されており、体積はCosmo-3Bモデルの約2%です。
対話システム
Transformers 英語

C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
RoBERTaアーキテクチャに基づく中国語抽出型QAモデルで、与えられたテキストから回答を抽出するタスクに適しています。
質問応答システム 中国語
R
uer
2,694
98