VRAM 16GBで動くローカルLLM(2026年10月)
Radeon RX 7800 XT 16GB (desktop) は、この 16GB の独立VRAM帯で正味予算が最小のカタログ機です。記録済みの予約を引くと 14.00 GiB。ファイルサイズのある量子化で入るカタログモデルは 44 件です。月はデータセット 2026-10-02.1(2026年10月)で、ビルド時刻ではありません。
カタログのデータセット 2026-10-02.1(2026年10月)。
この帯のカタログ機
| 機種 | 公称容量 | 正味予算 |
|---|---|---|
| Radeon RX 7800 XT 16GB (desktop) 正味予算が最小 | 16 GB GDDR6 | 14.00 GiB |
| Radeon RX 9070 16GB (desktop) | 16 GB GDDR6 | 14.00 GiB |
| Radeon RX 9070 XT 16GB (desktop) | 16 GB GDDR6 | 14.00 GiB |
| GeForce RTX 4080 16GB (desktop) | 16 GB GDDR6X | 14.00 GiB |
| GeForce RTX 4080 SUPER 16GB (desktop) | 16 GB GDDR6X | 14.00 GiB |
| GeForce RTX 5060 Ti 16GB (desktop) | 16 GB GDDR7 | 14.00 GiB |
| GeForce RTX 5070 Ti 16GB (desktop) | 16 GB GDDR7 | 14.00 GiB |
| GeForce RTX 5080 16GB (desktop) | 16 GB GDDR7 | 14.00 GiB |
| GeForce RTX 4060 Ti 16GB (desktop) | 16 GB GDDR6 | 15.00 GiB |
| GeForce RTX 4070 Ti SUPER 16GB (desktop) | 16 GB GDDR6X | 15.00 GiB |
入るカタログモデル
各行は代表機の、ファイルサイズがある量子化です。無い量子化は置き換えません。文脈長は記録された上限まで探します。上限が無いときは判定を 8192 とだけ示します。
帯域がカタログに無いとき、デコード上限はデータなしです。これはメモリ判定ではありません。
| モデル | 量子化ファイル | 収まる最長コンテキスト | 厳しい帯を含む最長コンテキスト | 8192 の判定 | デコード上限 | リンク |
|---|---|---|---|---|---|---|
| Qwen2.5-0.5B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 32,768 | 32,768 | 8192 余裕あり0.68 GiB–1.07 GiB | データなし | |
| Qwen3-0.6B | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 40,960 | 40,960 | 8192 余裕あり1.37 GiB–1.81 GiB | データなし | |
| Gemma 3 1B IT | GGUF Q4_0 (Google QAT)gguf-q4_0 · llama.cpp | 32,768 | 32,768 | 8192 余裕あり1.10 GiB–1.50 GiB | データなし | |
| Llama 3.2 1B Instruct | Official BF16 safetensorsbf16 · vllm | 131,072 | 131,072 | 8192 余裕あり3.18 GiB–5.06 GiB | データなし | |
| Qwen2.5-1.5B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 32,768 | 32,768 | 8192 余裕あり1.38 GiB–1.80 GiB | データなし | |
| Qwen2.5-Coder-1.5B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 32,768 | 32,768 | 8192 余裕あり1.38 GiB–1.80 GiB | データなし | |
| SmolLM2-1.7B-Instruct | GGUF Q4_K_M (Hugging Face)gguf-q4_k_m · llama.cpp | 8,192 | 8,192 | 8192 余裕あり2.61 GiB–3.11 GiB | データなし | |
| Qwen3-1.7B-Base | GGUF Q4_K_M (mradermacher)gguf-q4_k_m · llama.cpp | 32,768 | 32,768 | 8192 余裕あり2.03 GiB–2.49 GiB | データなし | |
| Qwen3-1.7B | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 40,960 | 40,960 | 8192 余裕あり2.03 GiB–2.49 GiB | データなし | |
| Qwen2.5-3B-Instruct | GGUF Q4_K_Mgguf-q4_k_m · llama.cpp | 32,768 | 32,768 | 8192 余裕あり2.37 GiB–2.80 GiB | データなし | |
| Qwen2.5-Coder-3B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 32,768 | 32,768 | 8192 余裕あり2.37 GiB–2.80 GiB | データなし | |
| Llama 3.2 3B Instruct | Official BF16 safetensorsbf16 · vllm | 37,410 | 69,194 | 8192 余裕あり7.48 GiB–9.39 GiB | データなし | |
| Qwen2.5-VL-3B-Instruct | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 128,000 | 128,000 | 8192 余裕あり2.20 GiB–2.63 GiB | データなし | |
| Phi-3.5-mini-instruct | GGUF Q4_K_M (bartowski)gguf-q4_k_m · llama.cpp | 25,077 | 31,801 | 8192 余裕あり5.35 GiB–5.98 GiB | データなし | |
| Phi-4-mini-instruct | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 74,515 | 94,652 | 8192 余裕あり3.45 GiB–3.94 GiB | データなし | |
| Qwen3-4B | GGUF Q4_K_Mgguf-q4_k_m · llama.cpp | 40,960 | 40,960 | 8192 余裕あり3.58 GiB–4.08 GiB | データなし | |
| Qwen3-4B-Instruct-2507 | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 66,200 | 84,098 | 8192 余裕あり3.58 GiB–4.08 GiB | データなし | |
| Gemma 3 4B IT | GGUF Q4_0 (Google QAT)gguf-q4_0 · llama.cpp | 131,072 | 131,072 | 8192 余裕あり3.33 GiB–3.79 GiB | データなし | |
| Qwen3-VL-4B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 66,200 | 84,098 | 8192 余裕あり3.58 GiB–4.08 GiB | データなし | |
| Mistral-7B-Instruct-v0.3 | GGUF Q4_K_M (bartowski)gguf-q4_k_m · llama.cpp | 32,768 | 32,768 | 8192 余裕あり5.20 GiB–5.72 GiB | データなし | |
| DeepSeek-R1-Distill-Qwen-7B | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 131,072 | 131,072 | 8192 余裕あり4.92 GiB–5.42 GiB | データなし | |
| OpenMath-Nemotron-7B | GGUF Q4_K_M (mradermacher)gguf-q4_k_m · llama.cpp | 131,072 | 131,072 | 8192 余裕あり4.92 GiB–5.42 GiB | データなし | |
| Qwen2-7B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 32,768 | 32,768 | 8192 余裕あり4.92 GiB–5.42 GiB | データなし | |
| Qwen2.5-7B-Instruct | GGUF Q4_K_Mgguf-q4_k_m · llama.cpp | 32,768 | 32,768 | 8192 余裕あり4.92 GiB–5.42 GiB | データなし | |
| Qwen2.5-Coder-7B | GGUF Q4_K_M (mradermacher)gguf-q4_k_m · llama.cpp | 32,768 | 32,768 | 8192 余裕あり4.92 GiB–5.42 GiB | データなし | |
| Qwen2.5-Coder-7B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 32,768 | 32,768 | 8192 余裕あり4.92 GiB–5.42 GiB | データなし | |
| Qwen2.5-Math-7B-Instruct | GGUF Q4_K_M (bartowski)gguf-q4_k_m · llama.cpp | 4,096 | 4,096 | 8192 余裕あり · 粗い見積もり4.92 GiB–6.23 GiB | データなし | |
| DeepSeek-R1-Distill-Llama-8B | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 56,850 | 76,121 | 8192 余裕あり5.71 GiB–6.24 GiB | データなし | |
| granite-3.3-8b-instruct | GGUF Q4_K_M (IBM)gguf-q4_k_m · llama.cpp | 45,351 | 60,762 | 8192 余裕あり5.98 GiB–6.53 GiB | データなし | |
| Qwen3-8B | GGUF Q4_K_Mgguf-q4_k_m · llama.cpp | 40,960 | 40,960 | 8192 余裕あり5.93 GiB–6.48 GiB | データなし | |
| Qwen3-8B-Base | GGUF Q4_K_M (mradermacher)gguf-q4_k_m · llama.cpp | 32,768 | 32,768 | 8192 余裕あり5.93 GiB–6.48 GiB | データなし | |
| Qwen2.5-VL-7B-Instruct | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 128,000 | 128,000 | 8192 余裕あり4.92 GiB–5.42 GiB | データなし | |
| Qwen3-VL-8B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 49,841 | 66,937 | 8192 余裕あり5.93 GiB–6.48 GiB | データなし | |
| GLM-4-9B-0414 | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 32,768 | 32,768 | 8192 余裕あり6.18 GiB–6.69 GiB | データなし | |
| Gemma 3 12B IT | GGUF Q4_0 (Google QAT)gguf-q4_0 · llama.cpp | 62,707 | 99,001 | 8192 余裕あり8.46 GiB–9.04 GiB | データなし | |
| Mistral-Nemo-Instruct-2407 | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 30,606 | 45,293 | 8192 余裕あり8.34 GiB–8.94 GiB | データなし | |
| phi-4 | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 16,384 | 16,384 | 8192 収まる9.97 GiB–10.62 GiB | データなし | |
| Phi-4-reasoning | GGUF Q4_K_M (Unsloth)gguf-q4_k_m · llama.cpp | 17,149 | 28,540 | 8192 収まる10.12 GiB–10.77 GiB | データなし | |
| Qwen3-14B | GGUF Q4_K_Mgguf-q4_k_m · llama.cpp | 21,735 | 35,988 | 8192 収まる9.76 GiB–10.39 GiB | データなし | |
| OpenMath-Nemotron-14B | GGUF Q4_K_M (mradermacher)gguf-q4_k_m · llama.cpp | 18,179 | 30,060 | 8192 収まる10.00 GiB–10.64 GiB | データなし | |
| Qwen2.5-14B-Instruct | GGUF Q4_K_Mgguf-q4_k_m · llama.cpp | 18,179 | 30,060 | 8192 収まる10.00 GiB–10.64 GiB | データなし | |
| Qwen2.5-Coder-14B-Instruct | GGUF Q4_K_M (Qwen)gguf-q4_k_m · llama.cpp | 18,179 | 30,060 | 8192 収まる10.00 GiB–10.64 GiB | データなし | |
| DeepSeek-V2-Lite-Chat | GGUF Q4_K_M (mradermacher)gguf-q4_k_m · llama.cpp | 17,137 | 145,761 | 8192 収まる · 粗い見積もり10.01 GiB–12.23 GiB | データなし | |
| Qwen3.8-27B | GGUF UD-IQ1_S (Unsloth)gguf-ud-iq1_s · llama.cpp | 67,617 | 130,418 | 8192 余裕あり · 粗い見積もり6.54 GiB–8.14 GiB | データなし |