Quais LLMs locais cabem em 32 GB de VRAM? (out. de 2026)

GeForce RTX 5090 32GB (desktop) é o SKU do catálogo com o menor orçamento líquido nesta faixa discreta de 32 GB: 30,00 GiB após a reserva documentada. 59 modelos do catálogo cabem com um artefato que tem arquivo. O mês vem do conjunto 2026-10-02.1 (out. de 2026), não do relógio da compilação.

Conjunto de dados 2026-10-02.1 (out. de 2026).

SKUs do catálogo nesta faixa

PlacaCapacidade anunciadaOrçamento líquido
GeForce RTX 5090 32GB (desktop)
Menor orçamento líquido
32 GB GDDR730,00 GiB

Modelos do catálogo que cabem

Cada linha é um artefato com arquivo na placa de referência. Uma quantização ausente não é substituída. A busca de contexto para no teto documentado. Sem esse teto, o veredito aparece só em 8192 tokens.

Quando a largura de banda não está no catálogo, o teto de decodificação diz não disponível. Isso não é um veredito de memória.

ModeloArtefatoMaior contexto que cabeMaior contexto incluindo apertadoVeredito em 8192 tokensTeto de decodificaçãoLigações
Qwen2.5-0.5B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
32.76832.768
8192
Roda com folga
0,68 GiB–1,07 GiB
Não disponível
Qwen3-0.6BGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
40.96040.960
8192
Roda com folga
1,37 GiB–1,81 GiB
Não disponível
Gemma 3 1B ITGGUF Q4_0 (Google QAT)
gguf-q4_0 · llama.cpp
32.76832.768
8192
Roda com folga
1,10 GiB–1,50 GiB
Não disponível
Llama 3.2 1B InstructOfficial BF16 safetensors
bf16 · vllm
131.072131.072
8192
Roda com folga
3,18 GiB–5,06 GiB
Não disponível
Qwen2.5-1.5B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
32.76832.768
8192
Roda com folga
1,38 GiB–1,80 GiB
Não disponível
Qwen2.5-Coder-1.5B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
32.76832.768
8192
Roda com folga
1,38 GiB–1,80 GiB
Não disponível
SmolLM2-1.7B-InstructGGUF Q4_K_M (Hugging Face)
gguf-q4_k_m · llama.cpp
8.1928.192
8192
Roda com folga
2,61 GiB–3,11 GiB
Não disponível
Qwen3-1.7B-BaseGGUF Q4_K_M (mradermacher)
gguf-q4_k_m · llama.cpp
32.76832.768
8192
Roda com folga
2,03 GiB–2,49 GiB
Não disponível
Qwen3-1.7BGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
40.96040.960
8192
Roda com folga
2,03 GiB–2,49 GiB
Não disponível
Qwen2.5-3B-InstructGGUF Q4_K_M
gguf-q4_k_m · llama.cpp
32.76832.768
8192
Roda com folga
2,37 GiB–2,80 GiB
Não disponível
Qwen2.5-Coder-3B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
32.76832.768
8192
Roda com folga
2,37 GiB–2,80 GiB
Não disponível
Llama 3.2 3B InstructOfficial BF16 safetensors
bf16 · vllm
131.072131.072
8192
Roda com folga
7,48 GiB–9,39 GiB
Não disponível
Qwen2.5-VL-3B-InstructGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
128.000128.000
8192
Roda com folga
2,20 GiB–2,63 GiB
Não disponível
Phi-3.5-mini-instructGGUF Q4_K_M (bartowski)
gguf-q4_k_m · llama.cpp
62.18075.492
8192
Roda com folga
5,35 GiB–5,98 GiB
Não disponível
Phi-4-mini-instructGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
131.072131.072
8192
Roda com folga
3,45 GiB–3,94 GiB
Não disponível
Qwen3-4BGGUF Q4_K_M
gguf-q4_k_m · llama.cpp
40.96040.960
8192
Roda com folga
3,58 GiB–4,08 GiB
Não disponível
Qwen3-4B-Instruct-2507GGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
165.108200.607
8192
Roda com folga
3,58 GiB–4,08 GiB
Não disponível
Gemma 3 4B ITGGUF Q4_0 (Google QAT)
gguf-q4_0 · llama.cpp
131.072131.072
8192
Roda com folga
3,33 GiB–3,79 GiB
Não disponível
Qwen3-VL-4B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
165.108200.607
8192
Roda com folga
3,58 GiB–4,08 GiB
Não disponível
Mistral-7B-Instruct-v0.3GGUF Q4_K_M (bartowski)
gguf-q4_k_m · llama.cpp
32.76832.768
8192
Roda com folga
5,20 GiB–5,72 GiB
Não disponível
DeepSeek-R1-Distill-Qwen-7BGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
131.072131.072
8192
Roda com folga
4,92 GiB–5,42 GiB
Não disponível
OpenMath-Nemotron-7BGGUF Q4_K_M (mradermacher)
gguf-q4_k_m · llama.cpp
131.072131.072
8192
Roda com folga
4,92 GiB–5,42 GiB
Não disponível
Qwen2-7B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
32.76832.768
8192
Roda com folga
4,92 GiB–5,42 GiB
Não disponível
Qwen2.5-7B-InstructGGUF Q4_K_M
gguf-q4_k_m · llama.cpp
32.76832.768
8192
Roda com folga
4,92 GiB–5,42 GiB
Não disponível
Qwen2.5-Coder-7BGGUF Q4_K_M (mradermacher)
gguf-q4_k_m · llama.cpp
32.76832.768
8192
Roda com folga
4,92 GiB–5,42 GiB
Não disponível
Qwen2.5-Coder-7B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
32.76832.768
8192
Roda com folga
4,92 GiB–5,42 GiB
Não disponível
Qwen2.5-Math-7B-InstructGGUF Q4_K_M (bartowski)
gguf-q4_k_m · llama.cpp
4.0964.096
8192
Roda com folga · Estimativa grosseira
4,92 GiB–6,23 GiB
Não disponível
DeepSeek-R1-Distill-Llama-8BGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
131.072131.072
8192
Roda com folga
5,71 GiB–6,24 GiB
Não disponível
Llama 3.1 8B InstructOfficial BF16 safetensors
bf16 · vllm
75.894118.107
8192
Roda com folga
16,58 GiB–18,49 GiB
Não disponível
granite-3.3-8b-instructGGUF Q4_K_M (IBM)
gguf-q4_k_m · llama.cpp
131.072131.072
8192
Roda com folga
5,98 GiB–6,53 GiB
Não disponível
Qwen3-8BGGUF Q4_K_M
gguf-q4_k_m · llama.cpp
40.96040.960
8192
Roda com folga
5,93 GiB–6,48 GiB
Não disponível
Qwen3-8B-BaseGGUF Q4_K_M (mradermacher)
gguf-q4_k_m · llama.cpp
32.76832.768
8192
Roda com folga
5,93 GiB–6,48 GiB
Não disponível
Qwen2.5-VL-7B-InstructGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
128.000128.000
8192
Roda com folga
4,92 GiB–5,42 GiB
Não disponível
Qwen3-VL-8B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
147.947183.446
8192
Roda com folga
5,93 GiB–6,48 GiB
Não disponível
GLM-4-9B-0414GGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
32.76832.768
8192
Roda com folga
6,18 GiB–6,69 GiB
Não disponível
Gemma 3 12B ITGGUF Q4_0 (Google QAT)
gguf-q4_0 · llama.cpp
131.072131.072
8192
Roda com folga
8,46 GiB–9,04 GiB
Não disponível
Mistral-Nemo-Instruct-2407GGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
118.804131.072
8192
Roda com folga
8,34 GiB–8,94 GiB
Não disponível
phi-4GGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
16.38416.384
8192
Roda com folga
9,97 GiB–10,62 GiB
Não disponível
Phi-4-reasoningGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
32.76832.768
8192
Roda com folga
10,12 GiB–10,77 GiB
Não disponível
Qwen3-14BGGUF Q4_K_M
gguf-q4_k_m · llama.cpp
40.96040.960
8192
Roda com folga
9,76 GiB–10,39 GiB
Não disponível
OpenMath-Nemotron-14BGGUF Q4_K_M (mradermacher)
gguf-q4_k_m · llama.cpp
91.677117.441
8192
Roda com folga
10,00 GiB–10,64 GiB
Não disponível
Qwen2.5-14B-InstructGGUF Q4_K_M
gguf-q4_k_m · llama.cpp
32.76832.768
8192
Roda com folga
10,00 GiB–10,64 GiB
Não disponível
Qwen2.5-Coder-14B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
32.76832.768
8192
Roda com folga
10,00 GiB–10,64 GiB
Não disponível
DeepSeek-V2-Lite-ChatGGUF Q4_K_M (mradermacher)
gguf-q4_k_m · llama.cpp
163.840163.840
8192
Roda com folga · Estimativa grosseira
10,01 GiB–12,23 GiB
Não disponível
gpt-oss-20bMXFP4 safetensors
mxfp4 · vllm
131.072131.072
8192
Roda com folga
13,63 GiB–15,51 GiB
Não disponível
Mistral-Small-24B-Instruct-2501GGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
32.76832.768
8192
Roda com folga
14,72 GiB–15,45 GiB
Não disponível
Gemma 3 27B ITGGUF Q4_0 (Google QAT)
gguf-q4_0 · llama.cpp
118.798131.072
8192
Roda com folga
17,20 GiB–17,97 GiB
Não disponível
Qwen3.8-27BGGUF UD-IQ1_S (Unsloth)
gguf-ud-iq1_s · llama.cpp
259.351262.144
8192
Roda com folga · Estimativa grosseira
6,54 GiB–8,14 GiB
Não disponível
Qwen3-30B-A3BGGUF Q4_K_M
gguf-q4_k_m · llama.cpp
40.96040.960
8192
Roda com folga
18,16 GiB–18,93 GiB
Não disponível
Qwen3-30B-A3B-Instruct-2507GGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
90.567137.546
8192
Roda com folga
18,16 GiB–18,93 GiB
Não disponível
Qwen3-VL-30B-A3B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
90.567137.546
8192
Roda com folga
18,16 GiB–18,93 GiB
Não disponível
Qwen3-32BGGUF Q4_K_M
gguf-q4_k_m · llama.cpp
29.57940.960
8192
Cabe
20,53 GiB–21,41 GiB
Não disponível
DeepSeek-R1-Distill-Qwen-32BGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
29.25446.641
8192
Cabe
20,61 GiB–21,50 GiB
Não disponível
OpenMath-Nemotron-32BGGUF Q4_K_M (mradermacher)
gguf-q4_k_m · llama.cpp
29.25446.641
8192
Cabe
20,61 GiB–21,50 GiB
Não disponível
Qwen2.5-32B-InstructGGUF Q4_K_M
gguf-q4_k_m · llama.cpp
29.25432.768
8192
Cabe
20,61 GiB–21,50 GiB
Não disponível
Qwen2.5-Coder-32B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
29.25432.768
8192
Cabe
20,61 GiB–21,50 GiB
Não disponível
QwQ-32BGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
29.25440.960
8192
Cabe
20,61 GiB–21,50 GiB
Não disponível
Qwen2.5-VL-32B-InstructGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
29.25446.641
8192
Cabe
20,61 GiB–21,50 GiB
Não disponível
Drama 3Unofficial int4 W4A16 (GPTQ-Marlin, with codec)
int4-w4a16-community · sglang
24.401262.144
8192
Cabe · Estimativa grosseira
22,61 GiB–26,64 GiB
Não disponível

Combinações permitidas