Gemma 3 4b It GGUF

🚀 google/gemma-3-4b-it - GGUF

本仓库包含 google/gemma-3-4b-it 的 GGUF 格式模型文件。这些文件由 TensorBlock 提供的机器进行量化处理，并且与 提交 b4882 版本后的 llama.cpp 兼容。

🚀 快速开始

访问 Gemma

要在 Hugging Face 上访问 Gemma，你需要查看并同意 Google 的使用许可。请确保你已登录 Hugging Face 并点击下方按钮，请求将立即处理。 Acknowledge license

下载模型文件

命令行方式

首先，安装 Huggingface 客户端：

pip install -U "huggingface_hub[cli]"

然后，将单个模型文件下载到本地目录：

huggingface-cli download tensorblock/gemma-3-4b-it-GGUF --include "gemma-3-4b-it-Q2_K.gguf" --local-dir MY_LOCAL_DIR

如果你想按模式（例如 *Q4_K*gguf）下载多个模型文件，可以尝试：

huggingface-cli download tensorblock/gemma-3-4b-it-GGUF --local-dir MY_LOCAL_DIR --local-dir-use-symlinks False --include='*Q4_K*gguf'

✨ 主要特性

模型文件规格

📚 详细文档

提示模板

<bos><start_of_turn>user
{system_prompt}

{prompt}<end_of_turn>
<start_of_turn>model

其他项目

项目	描述	图片	链接
Awesome MCP Servers	一个全面的模型上下文协议（MCP）服务器集合。		查看详情
TensorBlock Studio	一个轻量级、开放且可扩展的多大型语言模型交互工作室。		查看详情

📄 许可证

本项目使用的许可证为 gemma。