Chartmoe

🚀 ChartMoE

ChartMoE は、Mixture-of-Expertコネクタを備えたマルチモーダル大規模言語モデルです。このモデルは InternLM-XComposer2 をベースに構築されており、高度なチャートの1)理解、2)再描画、3)編集、4)強調表示、および5)変換を行うことができます。

ChartMoE

ICLR2025 Oral

🚀 クイックスタート

Transformersからのインポート

Transformersを使用してChartMoEモデルをロードするには、以下のコードを使用します。

import torch
from transformers import AutoTokenizer, AutoModelForCausalLM
ckpt_path = "IDEA-FinAI/chartmoe"
tokenizer = AutoTokenizer.from_pretrained(ckpt_path, trust_remote_code=True)
model = AutoModelForCausalLM.from_pretrained(ckpt_path, trust_remote_code=True).half().cuda().eval()

Gradioデモ

ChartMoEの使用方法を示すために、簡単な例とGradioのWeb UIデモを提供しています。詳細は https://github.com/IDEA-FinAI/ChartMoE を参照してください。

📄 ライセンス

このコードはApache-2.0ライセンスの下で提供されています。