Chinese LLaVA Baichuan

🚀 Chinese LLaVA

オープンソースで商用利用可能な中国語と英語の両言語対応の視覚-言語アシスタント Chinese-LLaVA と、中国語と英語の視覚SFTデータセット Chinese-LLaVA-Vision-Instructionsです。中国語と英語の視覚-テキストのマルチモーダル対話をサポートする、オープンソースで商用利用可能な対話モデルです。

🚀 クイックスタート

基礎デモ

オンラインで試す

Talk is cheap, Show you the Demo.

• デモのアドレス / HuggingFace Spaces

リソースのダウンロード

• モデル：

  • Chinese-LLaVA-Chinese-Llama-2-7B
  • Chinese-LLaVA-Baichuan-7B

• 百度网盘でのダウンロード:

  • Chinese-LLaVA-Chinese-Llama-2-7B
  • Chinese-LLaVA-Baichuan-7B

• 言語モデル:

  • Chinese-Llama-2-7b
  • Baichuan-7B

• データセット：Chinese-LLaVA-Vision-Instructions

環境のインストール

# リポジトリをクローンする
git clone https://github.com/LinkSoul-AI/Chinese-LLaVA
cd Chinese-LLaVA

# パッケージをインストールする
conda create -n Cllava python=3.10 -y
conda activate Cllava
pip install --upgrade pip
pip install -e .

クイックテスト

python infer.py \
    --model-name PATH/TO/THE/CHINESE_LLAVA_MODEL \
    --llm-type "Chinese_llama2" or "baichuan" \
    --image-file PATH/TO/THE/INPUT/IMAGE \
    --query QUERY/PROMPT

✨ 主な機能

今後の予定

• 訓練方法
• int4 量子化
• docker デプロイ

関連プロジェクト

• LLaVA
• Chinese-Llama-2-7B
• baichuan-inc/Baichuan-7B

📄 ライセンス

Apache-2.0 license

微信交流群

微信群にご参加ください。