Fino1 8B

🚀 🦙 Fino1-8B

Fino1-8B は、Llama 3.1 8B Instruct をファインチューニングしたバージョンで、[金融推論タスク] のパフォーマンス向上を目的として設計されています。このモデルは、TheFinAI/Fino1_Reasoning_Path_FinQA データセットを使用して SFT と RF でトレーニングされ、金融推論タスク での能力が強化されています。 詳細については、論文 arxiv.org/abs/2502.08127 をご確認ください。

✨ 主な機能

• Fino1-8B は、Llama 3.1 8B Instruct をベースにファインチューニングされ、金融推論タスクのパフォーマンスが向上しています。
• SFT と RF を用いたトレーニングにより、金融推論タスクでの能力が強化されています。

📦 インストール

このセクションでは、原READMEにインストールに関する具体的な手順やコマンドが記載されていないため、割愛させていただきます。

💻 使用例

基本的な使用法

from transformers import AutoModelForCausalLM, AutoTokenizer

model_name = "TheFinAI/Fino1-8B"

tokenizer = AutoTokenizer.from_pretrained(model_name)
model = AutoModelForCausalLM.from_pretrained(model_name)

input_text = "What is the results of 3-5?"
inputs = tokenizer(input_text, return_tensors="pt")

output = model.generate(**inputs, max_new_tokens=200)
print(tokenizer.decode(output[0], skip_special_tokens=True))

📚 ドキュメント

📌 モデル詳細

📊 トレーニング設定

💡 引用

もしあなたがこのモデルを研究で使用する場合は、以下のように引用してください。

@article{qian2025fino1,
  title={Fino1: On the Transferability of Reasoning Enhanced LLMs to Finance},
  author={Qian, Lingfei and Zhou, Weipeng and Wang, Yan and Peng, Xueqing and Huang, Jimin and Xie, Qianqian},
  journal={arXiv preprint arXiv:2502.08127},
  year={2025}
}

📄 ライセンス

このモデルは llama3.1 ライセンスの下で提供されています。