Yarngpt GGUF

🚀 saheedniyi/YarnGPT - GGUF

本倉庫包含 saheedniyi/YarnGPT 的 GGUF 格式模型文件。這些文件是使用 TensorBlock 提供的機器進行量化的，並且與截至 提交 b4823 的 llama.cpp 兼容。

🚀 快速開始

下載說明

命令行方式

首先，安裝 Huggingface 客戶端：

pip install -U "huggingface_hub[cli]"

然後，將單個模型文件下載到本地目錄：

huggingface-cli download tensorblock/YarnGPT-GGUF --include "YarnGPT-Q2_K.gguf" --local-dir MY_LOCAL_DIR

如果你想通過模式（例如 *Q4_K*gguf）下載多個模型文件，可以嘗試以下命令：

huggingface-cli download tensorblock/YarnGPT-GGUF --local-dir MY_LOCAL_DIR --local-dir-use-symlinks False --include='*Q4_K*gguf'

✨ 主要特性

本項目不僅提供了 saheedniyi/YarnGPT 的 GGUF 格式模型文件，還展示了團隊的其他相關項目。

📚 詳細文檔

我們的項目

項目名稱	項目詳情	項目圖片	查看鏈接
Awesome MCP Servers	一個全面的模型上下文協議（MCP）服務器集合。		👀 查看項目 👀
TensorBlock Studio	一個輕量級、開放且可擴展的多大型語言模型交互工作室。		👀 查看項目 👀

模型文件規格

📄 許可證

本項目採用 Apache-2.0 許可證。