Quais LLMs locais cabem em 32 GB de VRAM? (out. de 2026)
GeForce RTX 5090 32GB (desktop) é o SKU do catálogo com o menor orçamento líquido nesta faixa discreta de 32 GB: 30,00 GiB após a reserva documentada. 59 modelos do catálogo cabem com um artefato que tem arquivo. O mês vem do conjunto 2026-10-02.1 (out. de 2026), não do relógio da compilação.
Conjunto de dados 2026-10-02.1 (out. de 2026).
SKUs do catálogo nesta faixa
| Placa | Capacidade anunciada | Orçamento líquido |
|---|---|---|
| GeForce RTX 5090 32GB (desktop) Menor orçamento líquido | 32 GB GDDR7 | 30,00 GiB |
Modelos do catálogo que cabem
Cada linha é um artefato com arquivo na placa de referência. Uma quantização ausente não é substituída. A busca de contexto para no teto documentado. Sem esse teto, o veredito aparece só em 8192 tokens.
Quando a largura de banda não está no catálogo, o teto de decodificação diz não disponível. Isso não é um veredito de memória.
| Modelo | Artefato | Maior contexto que cabe | Maior contexto incluindo apertado | Veredito em 8192 tokens | Teto de decodificação | Ligações |
|---|---|---|---|---|---|---|
| Qwen2.5-0.5B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga0,68 GiB–1,07 GiB | Não disponível | |
| Qwen3-0.6B | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 40.960 | 40.960 | 8192 Roda com folga1,37 GiB–1,81 GiB | Não disponível | |
| Gemma 3 1B IT | GGUF Q4_0 (Google QAT)gguf-q4_0 · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga1,10 GiB–1,50 GiB | Não disponível | |
| Llama 3.2 1B Instruct | Official BF16 safetensorsbf16 · vllm | 131.072 | 131.072 | 8192 Roda com folga3,18 GiB–5,06 GiB | Não disponível | |
| Qwen2.5-1.5B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga1,38 GiB–1,80 GiB | Não disponível | |
| Qwen2.5-Coder-1.5B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga1,38 GiB–1,80 GiB | Não disponível | |
| SmolLM2-1.7B-Instruct | GGUF Q4_K_M (Hugging Face)gguf-q4_k_m · llama.cpp | 8.192 | 8.192 | 8192 Roda com folga2,61 GiB–3,11 GiB | Não disponível | |
| Qwen3-1.7B-Base | GGUF Q4_K_M (mradermacher)gguf-q4_k_m · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga2,03 GiB–2,49 GiB | Não disponível | |
| Qwen3-1.7B | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 40.960 | 40.960 | 8192 Roda com folga2,03 GiB–2,49 GiB | Não disponível | |
| Qwen2.5-3B-Instruct | GGUF Q4_K_Mgguf-q4_k_m · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga2,37 GiB–2,80 GiB | Não disponível | |
| Qwen2.5-Coder-3B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga2,37 GiB–2,80 GiB | Não disponível | |
| Llama 3.2 3B Instruct | Official BF16 safetensorsbf16 · vllm | 131.072 | 131.072 | 8192 Roda com folga7,48 GiB–9,39 GiB | Não disponível | |
| Qwen2.5-VL-3B-Instruct | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 128.000 | 128.000 | 8192 Roda com folga2,20 GiB–2,63 GiB | Não disponível | |
| Phi-3.5-mini-instruct | GGUF Q4_K_M (bartowski)gguf-q4_k_m · llama.cpp | 62.180 | 75.492 | 8192 Roda com folga5,35 GiB–5,98 GiB | Não disponível | |
| Phi-4-mini-instruct | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 131.072 | 131.072 | 8192 Roda com folga3,45 GiB–3,94 GiB | Não disponível | |
| Qwen3-4B | GGUF Q4_K_Mgguf-q4_k_m · llama.cpp | 40.960 | 40.960 | 8192 Roda com folga3,58 GiB–4,08 GiB | Não disponível | |
| Qwen3-4B-Instruct-2507 | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 165.108 | 200.607 | 8192 Roda com folga3,58 GiB–4,08 GiB | Não disponível | |
| Gemma 3 4B IT | GGUF Q4_0 (Google QAT)gguf-q4_0 · llama.cpp | 131.072 | 131.072 | 8192 Roda com folga3,33 GiB–3,79 GiB | Não disponível | |
| Qwen3-VL-4B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 165.108 | 200.607 | 8192 Roda com folga3,58 GiB–4,08 GiB | Não disponível | |
| Mistral-7B-Instruct-v0.3 | GGUF Q4_K_M (bartowski)gguf-q4_k_m · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga5,20 GiB–5,72 GiB | Não disponível | |
| DeepSeek-R1-Distill-Qwen-7B | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 131.072 | 131.072 | 8192 Roda com folga4,92 GiB–5,42 GiB | Não disponível | |
| OpenMath-Nemotron-7B | GGUF Q4_K_M (mradermacher)gguf-q4_k_m · llama.cpp | 131.072 | 131.072 | 8192 Roda com folga4,92 GiB–5,42 GiB | Não disponível | |
| Qwen2-7B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga4,92 GiB–5,42 GiB | Não disponível | |
| Qwen2.5-7B-Instruct | GGUF Q4_K_Mgguf-q4_k_m · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga4,92 GiB–5,42 GiB | Não disponível | |
| Qwen2.5-Coder-7B | GGUF Q4_K_M (mradermacher)gguf-q4_k_m · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga4,92 GiB–5,42 GiB | Não disponível | |
| Qwen2.5-Coder-7B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga4,92 GiB–5,42 GiB | Não disponível | |
| Qwen2.5-Math-7B-Instruct | GGUF Q4_K_M (bartowski)gguf-q4_k_m · llama.cpp | 4.096 | 4.096 | 8192 Roda com folga · Estimativa grosseira4,92 GiB–6,23 GiB | Não disponível | |
| DeepSeek-R1-Distill-Llama-8B | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 131.072 | 131.072 | 8192 Roda com folga5,71 GiB–6,24 GiB | Não disponível | |
| Llama 3.1 8B Instruct | Official BF16 safetensorsbf16 · vllm | 75.894 | 118.107 | 8192 Roda com folga16,58 GiB–18,49 GiB | Não disponível | |
| granite-3.3-8b-instruct | GGUF Q4_K_M (IBM)gguf-q4_k_m · llama.cpp | 131.072 | 131.072 | 8192 Roda com folga5,98 GiB–6,53 GiB | Não disponível | |
| Qwen3-8B | GGUF Q4_K_Mgguf-q4_k_m · llama.cpp | 40.960 | 40.960 | 8192 Roda com folga5,93 GiB–6,48 GiB | Não disponível | |
| Qwen3-8B-Base | GGUF Q4_K_M (mradermacher)gguf-q4_k_m · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga5,93 GiB–6,48 GiB | Não disponível | |
| Qwen2.5-VL-7B-Instruct | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 128.000 | 128.000 | 8192 Roda com folga4,92 GiB–5,42 GiB | Não disponível | |
| Qwen3-VL-8B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 147.947 | 183.446 | 8192 Roda com folga5,93 GiB–6,48 GiB | Não disponível | |
| GLM-4-9B-0414 | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga6,18 GiB–6,69 GiB | Não disponível | |
| Gemma 3 12B IT | GGUF Q4_0 (Google QAT)gguf-q4_0 · llama.cpp | 131.072 | 131.072 | 8192 Roda com folga8,46 GiB–9,04 GiB | Não disponível | |
| Mistral-Nemo-Instruct-2407 | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 118.804 | 131.072 | 8192 Roda com folga8,34 GiB–8,94 GiB | Não disponível | |
| phi-4 | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 16.384 | 16.384 | 8192 Roda com folga9,97 GiB–10,62 GiB | Não disponível | |
| Phi-4-reasoning | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga10,12 GiB–10,77 GiB | Não disponível | |
| Qwen3-14B | GGUF Q4_K_Mgguf-q4_k_m · llama.cpp | 40.960 | 40.960 | 8192 Roda com folga9,76 GiB–10,39 GiB | Não disponível | |
| OpenMath-Nemotron-14B | GGUF Q4_K_M (mradermacher)gguf-q4_k_m · llama.cpp | 91.677 | 117.441 | 8192 Roda com folga10,00 GiB–10,64 GiB | Não disponível | |
| Qwen2.5-14B-Instruct | GGUF Q4_K_Mgguf-q4_k_m · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga10,00 GiB–10,64 GiB | Não disponível | |
| Qwen2.5-Coder-14B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga10,00 GiB–10,64 GiB | Não disponível | |
| DeepSeek-V2-Lite-Chat | GGUF Q4_K_M (mradermacher)gguf-q4_k_m · llama.cpp | 163.840 | 163.840 | 8192 Roda com folga · Estimativa grosseira10,01 GiB–12,23 GiB | Não disponível | |
| gpt-oss-20b | MXFP4 safetensorsmxfp4 · vllm | 131.072 | 131.072 | 8192 Roda com folga13,63 GiB–15,51 GiB | Não disponível | |
| Mistral-Small-24B-Instruct-2501 | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 32.768 | 32.768 | 8192 Roda com folga14,72 GiB–15,45 GiB | Não disponível | |
| Gemma 3 27B IT | GGUF Q4_0 (Google QAT)gguf-q4_0 · llama.cpp | 118.798 | 131.072 | 8192 Roda com folga17,20 GiB–17,97 GiB | Não disponível | |
| Qwen3.8-27B | GGUF UD-IQ1_S (Unsloth)gguf-ud-iq1_s · llama.cpp | 259.351 | 262.144 | 8192 Roda com folga · Estimativa grosseira6,54 GiB–8,14 GiB | Não disponível | |
| Qwen3-30B-A3B | GGUF Q4_K_Mgguf-q4_k_m · llama.cpp | 40.960 | 40.960 | 8192 Roda com folga18,16 GiB–18,93 GiB | Não disponível | |
| Qwen3-30B-A3B-Instruct-2507 | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 90.567 | 137.546 | 8192 Roda com folga18,16 GiB–18,93 GiB | Não disponível | |
| Qwen3-VL-30B-A3B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 90.567 | 137.546 | 8192 Roda com folga18,16 GiB–18,93 GiB | Não disponível | |
| Qwen3-32B | GGUF Q4_K_Mgguf-q4_k_m · llama.cpp | 29.579 | 40.960 | 8192 Cabe20,53 GiB–21,41 GiB | Não disponível | |
| DeepSeek-R1-Distill-Qwen-32B | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 29.254 | 46.641 | 8192 Cabe20,61 GiB–21,50 GiB | Não disponível | |
| OpenMath-Nemotron-32B | GGUF Q4_K_M (mradermacher)gguf-q4_k_m · llama.cpp | 29.254 | 46.641 | 8192 Cabe20,61 GiB–21,50 GiB | Não disponível | |
| Qwen2.5-32B-Instruct | GGUF Q4_K_Mgguf-q4_k_m · llama.cpp | 29.254 | 32.768 | 8192 Cabe20,61 GiB–21,50 GiB | Não disponível | |
| Qwen2.5-Coder-32B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 29.254 | 32.768 | 8192 Cabe20,61 GiB–21,50 GiB | Não disponível | |
| QwQ-32B | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 29.254 | 40.960 | 8192 Cabe20,61 GiB–21,50 GiB | Não disponível | |
| Qwen2.5-VL-32B-Instruct | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 29.254 | 46.641 | 8192 Cabe20,61 GiB–21,50 GiB | Não disponível | |
| Drama 3 | Unofficial int4 W4A16 (GPTQ-Marlin, with codec)int4-w4a16-community · sglang | 24.401 | 262.144 | 8192 Cabe · Estimativa grosseira22,61 GiB–26,64 GiB | Não disponível |