Neobert GGUF
MIT
這是chandar-lab/NeoBERT模型的靜態量化版本,旨在減少模型存儲空間和計算資源需求。
大型語言模型
Transformers 英語

N
mradermacher
219
1
Qari OCR 0.3 SNAPSHOT VL 2B Instruct Merged GGUF
這是一個基於Qari-OCR-0.3-SNAPSHOT-VL-2B-Instruct-merged模型的靜態量化版本,主要用於圖像到文本的轉換任務。
圖像生成文本
Transformers 英語

Q
mradermacher
188
0
Qwen2 Audio 7B Instruct GGUF
Apache-2.0
Qwen2-Audio-7B-Instruct模型的靜態量化版本,支持英文音頻文本轉文本任務
音頻生成文本
Transformers 英語

Q
mradermacher
146
0
Qwen2.5 Omni 7B GGUF
其他
Qwen2.5-Omni-7B-GGUF 是基於 Qwen2.5-Omni-7B 模型的 GGUF 格式版本,支持多模態輸入,包括文本、音頻和圖像。
大型語言模型 英語
Q
ggml-org
319
3
Vintern 1B V3 5 GGUF Ext
MIT
Vintern-1B-v3_5是一個10億參數的視覺語言模型,支持圖像文本生成任務。
文本生成圖像
V
rootonchair
242
1
Wan2.1 T2V 14B CausVid GGUF
Apache-2.0
這是一個基於Wan-AI/Wan2.1-T2V-14B模型的GGUF格式轉換版本,主要用於文本生成視頻任務。
文本生成視頻 英語
W
Njbx
190
0
INTELLECT 2 GGUF
INTELLECT-2-GGUF 是 PrimeIntellect/INTELLECT-2 的 GGUF 格式量化版本,適用於文本生成任務。
大型語言模型
I
MaziyarPanahi
88
1
Clinician Note 2.0a I1 GGUF
Clinician-Note-2.0a 是一個專注於醫學領域的文本生成模型,特別設計用於臨床記錄和摘要任務。
大型語言模型 英語
C
mradermacher
352
0
Qwen3 30B A3B GGUF
Qwen3-30B-A3B的GGUF量化版本,支持多種比特量化,適用於文本生成任務。
大型語言模型
Q
MaziyarPanahi
158.92k
3
Skyreels V2 I2V 14B 540P GGUF
其他
SkyReels-V2-I2V-14B-540P 是一個基於 GGUF 格式轉換的圖像轉視頻模型,支持從靜態圖像生成動態視頻內容。
視頻處理
S
wsbagnsv1
929
8
Orpheus TTS Turkish PT 5000 Q5 K M GGUF
MIT
這是一個土耳其語文本轉語音(TTS)模型,基於Orpheus架構,已轉換為GGUF格式以便在llama.cpp中使用。
語音合成 其他
O
Karayakar
45
0
Kokoro GGUF
MIT
Kokoro 是一個文本轉語音(TTS)模型,提供兩種音素化支持的GGUF編碼版本。
語音合成
K
mmwillet2
749
1
News Summarizer T5 GGUF
Apache-2.0
這是一個基於T5架構的新聞摘要生成模型的靜態量化版本,支持英語文本摘要任務。
文本生成 英語
N
mradermacher
167
0
Mistral Small 3.1 24b Instruct 2503 Hf GGUF
這是一個基於mrfakename/mistral-small-3.1-24b-instruct-2503-hf模型的GGUF格式量化版本,適用於文本生成任務。
大型語言模型
M
MaziyarPanahi
137.78k
2
Gemma 3 4b Persian V0 GGUF
Apache-2.0
這是 mshojaei77/gemma-3-4b-persian-v0 模型的靜態量化版本,專門針對波斯語文本生成任務進行了優化。
大型語言模型
Transformers 其他

G
mradermacher
162
2
Gemma 3 12b It GGUF
Gemma 3 12B 的 GGUF 量化版本,適用於文本生成任務。
大型語言模型
G
MaziyarPanahi
641.41k
4
Gemma 3 4b It GGUF
Gemma 3B 模型的 GGUF 量化版本,適用於本地文本生成任務
大型語言模型
G
MaziyarPanahi
358.91k
6
Toriigate V0.4 7B GGUF
Apache-2.0
ToriiGate-v0.4-7B的靜態量化版本,適用於多模態、視覺、圖像文本到文本等任務
圖像生成文本
Transformers 英語

T
mradermacher
668
0
Greek Text Summarization GGUF
Apache-2.0
基於kriton/greek-text-summarization的靜態量化版本,專注於希臘語文本摘要任務
文本生成 其他
G
mradermacher
216
0
VISION 1 GGUF
VISION-1是一個基於transformers的內容審核與安全分類模型,專注於文本分類任務。
文本分類 英語
V
mradermacher
153
2
Parler Tts Mini V1 GGUF
Apache-2.0
Parler TTS Mini v1的GGUF格式模型文件,用於文本轉語音任務,支持英文語言。
語音合成 英語
P
ecyht2
198
4
Bge Reranker Base Q8 0 GGUF
MIT
該模型是從BAAI/bge-reranker-base轉換而來的GGUF格式模型,主要用於文本重排序任務。
文本嵌入 支持多種語言
B
xinming0111
106
1
Glm Edge V 5b Gguf
其他
Glm-Edge-V-5B-GGUF是一個支持中英文的多語言圖文生成文本模型,基於GLM架構開發。
大型語言模型 支持多種語言
G
THUDM
486
7
Qwen2.5 1.5B Instruct GGUF
Qwen2.5-1.5B-Instruct 模型的 GGUF 格式文件,適用於文本生成任務。
大型語言模型
Q
MaziyarPanahi
183.11k
6
T5 Large Q4 K M GGUF
Apache-2.0
本模型是google-t5/t5-large的GGUF格式轉換版本,支持摘要生成、翻譯等任務,適用於英語、法語、羅馬尼亞語、德語等多種語言。
大型語言模型 支持多種語言
T
tianlp
16
0
Chromafur Alpha Gguf
其他
ChromaFur Alpha 是一個文本生成圖像的模型,已轉換為GGUF格式,適用於低端GPU或偏好快速加載的用戶。
圖像生成
C
WWizrd
13
1
Yi Coder 1.5B Chat GGUF
Yi-Coder-1.5B-Chat-GGUF 是 01-ai/Yi-Coder-1.5B-Chat 的 GGUF 格式模型文件,適用於文本生成任務。
大型語言模型
Y
MaziyarPanahi
254.78k
10
FLUX.1 Dev Q8 Fp16 Fp32 Mix 8 To 32 Bpw Gguf
其他
Flux.1-dev的實驗性GGUF格式轉換版本,包含多種混合精度量化方案
文本生成圖像
F
mo137
257
12
Phi 3.5 Mini Instruct GGUF
Phi-3.5-mini-instruct的GGUF格式模型文件,適用於文本生成任務。
大型語言模型
P
MaziyarPanahi
335.88k
13
Madlad400 3b Mt Q8 0 GGUF
Apache-2.0
MADLAD-400 3B多語言翻譯模型,支持超過400種語言的翻譯任務,基於GGUF格式優化。
機器翻譯 支持多種語言
M
mtsdurica
47
1
Yes
Apache-2.0
這是一個基於PubMedQA數據集微調的Llama3模型,專注於醫學領域的問答任務。
大型語言模型 英語
Y
ThorBaller
22
1
Openchat 3.6 8b 20240522 IMat GGUF
這是對 openchat/openchat-3.6-8b-20240522 模型進行 Llama.cpp imatrix 量化處理後的版本,提供了不同量化類型的文件,方便用戶根據需求下載和使用。
大型語言模型
O
legraphista
4,416
1
Llama 3 Smaug 8B GGUF
基於abacusai/Llama-3-Smaug-8B的GGUF格式量化模型,支持2-8比特量化級別,適用於文本生成任務
大型語言模型
L
MaziyarPanahi
8,904
5
Bielik 7B Instruct V0.1 GGUF
這是一個波蘭語的7B參數指令微調模型,基於SpeakLeash的Bielik-7B-v0.1模型開發,採用GGUF格式量化。
大型語言模型 其他
B
speakleash
951
14
Gemma 2b It GGUF
其他
Gemma 2B模型的GGUF量化版本,適用於本地部署和推理
大型語言模型
G
MaziyarPanahi
517
10
Sqlcoder 7b 2 GGUF
這是defog/sqlcoder-7b-2模型的GGUF格式量化版本,主要用於SQL代碼生成任務。
大型語言模型
S
MaziyarPanahi
346
10
精選推薦AI模型
Llama 3 Typhoon V1.5x 8b Instruct
專為泰語設計的80億參數指令模型,性能媲美GPT-3.5-turbo,優化了應用場景、檢索增強生成、受限生成和推理任務
大型語言模型
Transformers 支持多種語言

L
scb10x
3,269
16
Cadet Tiny
Openrail
Cadet-Tiny是一個基於SODA數據集訓練的超小型對話模型,專為邊緣設備推理設計,體積僅為Cosmo-3B模型的2%左右。
對話系統
Transformers 英語

C
ToddGoldfarb
2,691
6
Roberta Base Chinese Extractive Qa
基於RoBERTa架構的中文抽取式問答模型,適用於從給定文本中提取答案的任務。
問答系統 中文
R
uer
2,694
98