🚀 TreeVGR-7B-CI
TreeVGR-7B-CIは、視覚的な質問応答、ビジュアルグラウンディング、視覚的推論などのタスクに特化したビジョンモデルです。このモデルは、特定のデータセットで訓練され、transformersライブラリを使用して動作します。
🚀 クイックスタート
このモデルの詳細な概要とダウンロードリストについては、このモデルのモデルページをご覧ください。
✨ 主な機能
- 視覚的な質問応答 (visual-question-answering)
- ビジュアルグラウンディング (visual-grounding)
- 視覚的推論 (visual-reasoning)
📦 インストール
GGUFファイルの使用方法がわからない場合は、TheBlokeのREADMEを参照して、詳細な説明を確認してください。これには、マルチパートファイルの連結方法も含まれます。
📚 ドキュメント
モデル情報
属性 |
詳情 |
ベースモデル |
HaochenWang/TreeVGR-7B-CI |
データセット |
HaochenWang/TreeBench、HaochenWang/TreeVGR-RL-37K、HaochenWang/TreeVGR-SFT-35K |
言語 |
en |
ライブラリ名 |
transformers |
ライセンス |
apache-2.0 |
量子化担当 |
mradermacher |
タグ |
visual-question-answering、visual-grounding、visual-reasoning、qwen |
モデルについて
https://huggingface.co/HaochenWang/TreeVGR-7B-CI のweighted/imatrix量子化モデルです。静的量子化モデルは、https://huggingface.co/mradermacher/TreeVGR-7B-CI-GGUF で入手できます。
これはビジョンモデルです。mmprojファイル(ある場合)は、静的リポジトリにあります。
提供される量子化モデル
(サイズ順に並べられており、必ずしも品質順ではありません。IQ量子化モデルは、同程度のサイズの非IQ量子化モデルよりも優れていることが多いです。)
リンク |
タイプ |
サイズ(GB) |
備考 |
GGUF |
i1-IQ1_S |
2.0 |
非常に必要な場合 |
GGUF |
i1-IQ1_M |
2.1 |
ほとんど必要な場合 |
GGUF |
i1-IQ2_XXS |
2.4 |
|
GGUF |
i1-IQ2_XS |
2.6 |
|
GGUF |
i1-IQ2_S |
2.7 |
|
GGUF |
i1-IQ2_M |
2.9 |
|
GGUF |
i1-Q2_K_S |
2.9 |
非常に低品質 |
GGUF |
i1-Q2_K |
3.1 |
IQ3_XXSの方が良い可能性があります |
GGUF |
i1-IQ3_XXS |
3.2 |
低品質 |
GGUF |
i1-IQ3_XS |
3.4 |
|
GGUF |
i1-Q3_K_S |
3.6 |
IQ3_XSの方が良い可能性があります |
GGUF |
i1-IQ3_S |
3.6 |
Q3_K*よりも良い |
GGUF |
i1-IQ3_M |
3.7 |
|
GGUF |
i1-Q3_K_M |
3.9 |
IQ3_Sの方が良い可能性があります |
GGUF |
i1-Q3_K_L |
4.2 |
IQ3_Mの方が良い可能性があります |
GGUF |
i1-IQ4_XS |
4.3 |
|
GGUF |
i1-IQ4_NL |
4.5 |
IQ4_XSを選ぶことをおすすめします |
GGUF |
i1-Q4_0 |
4.5 |
高速で低品質 |
GGUF |
i1-Q4_K_S |
4.6 |
サイズ/速度/品質のバランスが良い |
GGUF |
i1-Q4_K_M |
4.8 |
高速でおすすめ |
GGUF |
i1-Q4_1 |
5.0 |
|
GGUF |
i1-Q5_K_S |
5.4 |
|
GGUF |
i1-Q5_K_M |
5.5 |
|
GGUF |
i1-Q6_K |
6.4 |
静的Q6_Kとほぼ同じ |
ikawrakowによる、いくつかの低品質量子化タイプを比較した便利なグラフがあります(数値が低いほど良い):

また、Artefact2のこの問題に関する考え方はこちらです:
https://gist.github.com/Artefact2/b5f810600771265fc1e39442288e8ec9
よくある質問 / モデルリクエスト
あなたが持っている質問の回答や、他のモデルの量子化を依頼する場合は、mradermacherのモデルリクエストページを参照してください。
📄 ライセンス
このモデルは、apache-2.0ライセンスの下で提供されています。
ありがとう
私の会社であるnethype GmbHに感謝します。彼らは私にサーバーを使用させ、私のワークステーションをアップグレードして、私が余暇時間にこの作業を行えるようにしてくれました。また、@nicobossにも感謝します。彼は私に彼のプライベートスーパーコンピューターへのアクセスを許可し、私が通常では提供できないほど多くのimatrix量子化モデルを、はるかに高い品質で提供できるようにしてくれました。