Openmath CodeLlama 7b Python Hf

🚀 OpenMath-CodeLlama-7b-Python-hf

OpenMath模型旨在通過將基於文本的推理與Python解釋器執行的代碼塊相結合，來解決數學問題。這些模型在OpenMathInstruct-1上進行訓練，這是一個包含180萬個問題 - 解決方案對的數學指令調優數據集，使用具有寬鬆許可的Mixtral-8x7B模型生成。

模型表現

我們用於生成這些模型的管道已完全開源！

• 代碼
• 模型
• 數據集

更多詳細信息請參閱我們的論文！

🚀 快速開始

模型使用方法

只需幾條命令，即可嘗試使用我們的模型進行推理！

復現實驗結果

我們提供了所有說明，以完全復現我們的實驗結果。

改進其他模型

若要改進其他模型或瞭解更多關於我們代碼的信息，請閱讀以下文檔：

• NeMo-Skills 管道
  • 生成合成數據
  • 微調模型
  • 評估模型

在我們的管道中，我們使用了NVIDIA NeMo，這是一個端到端的雲原生框架，可在任何地方構建、定製和部署生成式AI模型。它包括訓練和推理框架、護欄工具包、數據整理工具和預訓練模型，為企業提供了一種簡單、經濟高效且快速的方式來採用生成式AI。

📚 詳細文檔

引用

如果您覺得我們的工作有用，請考慮引用我們！

@article{toshniwal2024openmath,
  title   = {OpenMathInstruct-1: A 1.8 Million Math Instruction Tuning Dataset},
  author  = {Shubham Toshniwal and Ivan Moshkov and Sean Narenthiran and Daria Gitman and Fei Jia and Igor Gitman},
  year    = {2024},
  journal = {arXiv preprint arXiv: Arxiv-2402.10176}
}

許可證

本模型的使用受Llama 2社區許可協議的約束。