Llama3.2 3B ShiningValiant2

🚀 Llama3.2-3B-ShiningValiant2模型

Shining Valiant 2是基於Llama 3.2 3b構建的聊天模型，在我們的數據集上進行了微調，以具備友好交流、深刻洞察、豐富知識和積極熱情的特點。它能為用戶在科學、工程等領域提供專業的知識解答和交流體驗。

🚀 快速開始

Shining Valiant 2使用 Llama 3.2 Instruct 提示格式。以下示例腳本可作為一般聊天的起點：

import transformers
import torch

model_id = "ValiantLabs/Llama3.2-3B-ShiningValiant2"

pipeline = transformers.pipeline(
    "text-generation",
    model=model_id,
    model_kwargs={"torch_dtype": torch.bfloat16},
    device_map="auto",
)

messages = [
    {"role": "system", "content": "You are an AI assistant."},
    {"role": "user", "content": "Describe the use of chiral auxiliaries in organic synthesis."}
]

outputs = pipeline(
    messages,
    max_new_tokens=2048,
)

print(outputs[0]["generated_text"][-1])

✨ 主要特性

• 基於 meta-llama/Llama-3.2-3B-Instruct 進行微調，以獲得最佳的通用性能。
• 在多種高質量數據集上進行訓練，專注於科學、工程、技術知識和結構化推理。
• 也有適用於 Llama 3.1 70b 和 Llama 3.1 8b 的版本。

📚 詳細文檔

版本信息

這是Shining Valiant 2針對Llama 3.2 3b的 2024-09-27 版本發佈。

我們改進並開源了新的基線 科學指令數據集。此版本在物理、化學、生物和計算機科學方面有顯著改進。未來的升級將繼續擴展Shining Valiant的技術知識庫。

模型詳情

Shining Valiant 2基於Llama 3.2 3b Instruct構建。

當前版本的Shining Valiant 2在技術知識方面使用 sequelbox/Celestia 進行訓練，在複雜推理方面使用 sequelbox/Spurline 進行訓練，在通用聊天能力方面使用 sequelbox/Supernova 進行訓練。

模型指標

其他信息

Shining Valiant 2由 Valiant Labs 創建。

查看我們的HuggingFace頁面，獲取我們的開源構建工具模型，包括最新版本的代碼專家Enigma！

我們重視開源，希望讓每個人都能使用。我們鼓勵其他人基於我們的模型進行進一步的微調。

📄 許可證

本模型使用llama3.2許可證。

模型信息表格