Turkish Llava Med Pipeline V1.5 Mistral 7b

🚀 土耳其語LLaVA - Med管道 (v1.5 - Mistral 7B)

本模型基於微軟開發的 LLaVA - Med v1.5 (Mistral 7B) 架構，專為支持土耳其語，在醫學圖像上實現視覺問答（VQA）而定製。

✨ 主要特性

• 基於圖像的分析（X光、磁共振等）
• 支持土耳其語提問
• 生成土耳其語回答（帶翻譯層）
• 支持在Hugging Face上使用演示界面（Gradio）

🚀 快速開始

入門Colab筆記本：https://colab.research.google.com/drive/1HsWo9g18r1EfKFMh0RcgZgrotoIIcThK?usp=sharing

from transformers import AutoModelForCausalLM, AutoTokenizer, CLIPImageProcessor
import torch

model = AutoModelForCausalLM.from_pretrained("nezahatkorkmaz/turkish-llava-med-pipeline-v1.5-mistral-7b", torch_dtype=torch.float16).to("cuda")
tokenizer = AutoTokenizer.from_pretrained("nezahatkorkmaz/turkish-llava-med-pipeline-v1.5-mistral-7b")
image_processor = CLIPImageProcessor.from_pretrained("nezahatkorkmaz/turkish-llava-med-pipeline-v1.5-mistral-7b")

💻 使用示例

基礎用法

from transformers import AutoModelForCausalLM, AutoTokenizer, CLIPImageProcessor
import torch

model = AutoModelForCausalLM.from_pretrained("nezahatkorkmaz/turkish-llava-med-pipeline-v1.5-mistral-7b", torch_dtype=torch.float16).to("cuda")
tokenizer = AutoTokenizer.from_pretrained("nezahatkorkmaz/turkish-llava-med-pipeline-v1.5-mistral-7b")
image_processor = CLIPImageProcessor.from_pretrained("nezahatkorkmaz/turkish-llava-med-pipeline-v1.5-mistral-7b")

示例問答

視覺圖像：肺部X光片 問題：“此圖像中是否存在心臟增大的情況？” 回答：“是的，此圖像中有心臟增大（心肥大）的跡象。”

開發者：@nezahatkorkmaz
原始模型：microsoft/llava-med-v1.5-mistral-7b

📄 許可證

本項目採用Apache - 2.0許可證。

📦 信息表格