Chinese LLaVA Cllama2

🚀 中国語LLaVA

オープンソースで商用利用可能な中国語と英語の両言語に対応した視覚言語アシスタント Chinese-LLaVA と、中国語と英語の視覚SFTデータセット Chinese-LLaVA-Vision-Instructions を提供します。これは、中国語と英語の視覚とテキストのマルチモーダル対話をサポートする、オープンソースで商用利用可能な対話モデルです。

🚀 クイックスタート

基礎デモ

オンラインで試す

Talk is cheap, Show you the Demo.

• デモのURL / HuggingFace Spaces

リソースのダウンロード

• モデル：

  • Chinese-LLaVA-Chinese-Llama-2-7B
  • Chinese-LLaVA-Baichuan-7B

• 百度ウェブディスクからのダウンロード:

  • Chinese-LLaVA-Chinese-Llama-2-7B
  • Chinese-LLaVA-Baichuan-7B

• 言語モデル:

  • Chinese-Llama-2-7b
  • Baichuan-7B

• データセット：Chinese-LLaVA-Vision-Instructions

環境のインストール

# リポジトリをクローンする
git clone https://github.com/LinkSoul-AI/Chinese-LLaVA
cd Chinese-LLaVA

# パッケージをインストールする
conda create -n Cllava python=3.10 -y
conda activate Cllava
pip install --upgrade pip
pip install -e .

クイックテスト

python infer.py \
    --model-name PATH/TO/THE/CHINESE_LLAVA_MODEL \
    --llm-type "Chinese_llama2" or "baichuan" \
    --image-file PATH/TO/THE/INPUT/IMAGE \
    --query QUERY/PROMPT

📚 ドキュメント

TODO

• トレーニング方法
• int4 量子化
• Docker デプロイ

関連プロジェクト

• LLaVA
• Chinese-Llama-2-7B
• baichuan-inc/Baichuan-7B

📄 ライセンス

Apache-2.0 license

ウェイチャット交流グループ

ウェイチャットグループにご参加ください。