VRAM 16GBで動くローカルLLM(2026年10月)

Radeon RX 7800 XT 16GB (desktop) は、この 16GB の独立VRAM帯で正味予算が最小のカタログ機です。記録済みの予約を引くと 14.00 GiB。ファイルサイズのある量子化で入るカタログモデルは 44 件です。月はデータセット 2026-10-02.1(2026年10月)で、ビルド時刻ではありません。

カタログのデータセット 2026-10-02.1(2026年10月)。

この帯のカタログ機

機種公称容量正味予算
Radeon RX 7800 XT 16GB (desktop)
正味予算が最小
16 GB GDDR614.00 GiB
Radeon RX 9070 16GB (desktop)16 GB GDDR614.00 GiB
Radeon RX 9070 XT 16GB (desktop)16 GB GDDR614.00 GiB
GeForce RTX 4080 16GB (desktop)16 GB GDDR6X14.00 GiB
GeForce RTX 4080 SUPER 16GB (desktop)16 GB GDDR6X14.00 GiB
GeForce RTX 5060 Ti 16GB (desktop)16 GB GDDR714.00 GiB
GeForce RTX 5070 Ti 16GB (desktop)16 GB GDDR714.00 GiB
GeForce RTX 5080 16GB (desktop)16 GB GDDR714.00 GiB
GeForce RTX 4060 Ti 16GB (desktop)16 GB GDDR615.00 GiB
GeForce RTX 4070 Ti SUPER 16GB (desktop)16 GB GDDR6X15.00 GiB

入るカタログモデル

各行は代表機の、ファイルサイズがある量子化です。無い量子化は置き換えません。文脈長は記録された上限まで探します。上限が無いときは判定を 8192 とだけ示します。

帯域がカタログに無いとき、デコード上限はデータなしです。これはメモリ判定ではありません。

モデル量子化ファイル収まる最長コンテキスト厳しい帯を含む最長コンテキスト8192 の判定デコード上限リンク
Qwen2.5-0.5B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
32,76832,768
8192
余裕あり
0.68 GiB–1.07 GiB
データなし
Qwen3-0.6BGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
40,96040,960
8192
余裕あり
1.37 GiB–1.81 GiB
データなし
Gemma 3 1B ITGGUF Q4_0 (Google QAT)
gguf-q4_0 · llama.cpp
32,76832,768
8192
余裕あり
1.10 GiB–1.50 GiB
データなし
Llama 3.2 1B InstructOfficial BF16 safetensors
bf16 · vllm
131,072131,072
8192
余裕あり
3.18 GiB–5.06 GiB
データなし
Qwen2.5-1.5B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
32,76832,768
8192
余裕あり
1.38 GiB–1.80 GiB
データなし
Qwen2.5-Coder-1.5B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
32,76832,768
8192
余裕あり
1.38 GiB–1.80 GiB
データなし
SmolLM2-1.7B-InstructGGUF Q4_K_M (Hugging Face)
gguf-q4_k_m · llama.cpp
8,1928,192
8192
余裕あり
2.61 GiB–3.11 GiB
データなし
Qwen3-1.7B-BaseGGUF Q4_K_M (mradermacher)
gguf-q4_k_m · llama.cpp
32,76832,768
8192
余裕あり
2.03 GiB–2.49 GiB
データなし
Qwen3-1.7BGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
40,96040,960
8192
余裕あり
2.03 GiB–2.49 GiB
データなし
Qwen2.5-3B-InstructGGUF Q4_K_M
gguf-q4_k_m · llama.cpp
32,76832,768
8192
余裕あり
2.37 GiB–2.80 GiB
データなし
Qwen2.5-Coder-3B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
32,76832,768
8192
余裕あり
2.37 GiB–2.80 GiB
データなし
Llama 3.2 3B InstructOfficial BF16 safetensors
bf16 · vllm
37,41069,194
8192
余裕あり
7.48 GiB–9.39 GiB
データなし
Qwen2.5-VL-3B-InstructGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
128,000128,000
8192
余裕あり
2.20 GiB–2.63 GiB
データなし
Phi-3.5-mini-instructGGUF Q4_K_M (bartowski)
gguf-q4_k_m · llama.cpp
25,07731,801
8192
余裕あり
5.35 GiB–5.98 GiB
データなし
Phi-4-mini-instructGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
74,51594,652
8192
余裕あり
3.45 GiB–3.94 GiB
データなし
Qwen3-4BGGUF Q4_K_M
gguf-q4_k_m · llama.cpp
40,96040,960
8192
余裕あり
3.58 GiB–4.08 GiB
データなし
Qwen3-4B-Instruct-2507GGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
66,20084,098
8192
余裕あり
3.58 GiB–4.08 GiB
データなし
Gemma 3 4B ITGGUF Q4_0 (Google QAT)
gguf-q4_0 · llama.cpp
131,072131,072
8192
余裕あり
3.33 GiB–3.79 GiB
データなし
Qwen3-VL-4B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
66,20084,098
8192
余裕あり
3.58 GiB–4.08 GiB
データなし
Mistral-7B-Instruct-v0.3GGUF Q4_K_M (bartowski)
gguf-q4_k_m · llama.cpp
32,76832,768
8192
余裕あり
5.20 GiB–5.72 GiB
データなし
DeepSeek-R1-Distill-Qwen-7BGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
131,072131,072
8192
余裕あり
4.92 GiB–5.42 GiB
データなし
OpenMath-Nemotron-7BGGUF Q4_K_M (mradermacher)
gguf-q4_k_m · llama.cpp
131,072131,072
8192
余裕あり
4.92 GiB–5.42 GiB
データなし
Qwen2-7B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
32,76832,768
8192
余裕あり
4.92 GiB–5.42 GiB
データなし
Qwen2.5-7B-InstructGGUF Q4_K_M
gguf-q4_k_m · llama.cpp
32,76832,768
8192
余裕あり
4.92 GiB–5.42 GiB
データなし
Qwen2.5-Coder-7BGGUF Q4_K_M (mradermacher)
gguf-q4_k_m · llama.cpp
32,76832,768
8192
余裕あり
4.92 GiB–5.42 GiB
データなし
Qwen2.5-Coder-7B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
32,76832,768
8192
余裕あり
4.92 GiB–5.42 GiB
データなし
Qwen2.5-Math-7B-InstructGGUF Q4_K_M (bartowski)
gguf-q4_k_m · llama.cpp
4,0964,096
8192
余裕あり · 粗い見積もり
4.92 GiB–6.23 GiB
データなし
DeepSeek-R1-Distill-Llama-8BGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
56,85076,121
8192
余裕あり
5.71 GiB–6.24 GiB
データなし
granite-3.3-8b-instructGGUF Q4_K_M (IBM)
gguf-q4_k_m · llama.cpp
45,35160,762
8192
余裕あり
5.98 GiB–6.53 GiB
データなし
Qwen3-8BGGUF Q4_K_M
gguf-q4_k_m · llama.cpp
40,96040,960
8192
余裕あり
5.93 GiB–6.48 GiB
データなし
Qwen3-8B-BaseGGUF Q4_K_M (mradermacher)
gguf-q4_k_m · llama.cpp
32,76832,768
8192
余裕あり
5.93 GiB–6.48 GiB
データなし
Qwen2.5-VL-7B-InstructGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
128,000128,000
8192
余裕あり
4.92 GiB–5.42 GiB
データなし
Qwen3-VL-8B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
49,84166,937
8192
余裕あり
5.93 GiB–6.48 GiB
データなし
GLM-4-9B-0414GGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
32,76832,768
8192
余裕あり
6.18 GiB–6.69 GiB
データなし
Gemma 3 12B ITGGUF Q4_0 (Google QAT)
gguf-q4_0 · llama.cpp
62,70799,001
8192
余裕あり
8.46 GiB–9.04 GiB
データなし
Mistral-Nemo-Instruct-2407GGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
30,60645,293
8192
余裕あり
8.34 GiB–8.94 GiB
データなし
phi-4GGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
16,38416,384
8192
収まる
9.97 GiB–10.62 GiB
データなし
Phi-4-reasoningGGUF Q4_K_M (Unsloth)
gguf-q4_k_m · llama.cpp
17,14928,540
8192
収まる
10.12 GiB–10.77 GiB
データなし
Qwen3-14BGGUF Q4_K_M
gguf-q4_k_m · llama.cpp
21,73535,988
8192
収まる
9.76 GiB–10.39 GiB
データなし
OpenMath-Nemotron-14BGGUF Q4_K_M (mradermacher)
gguf-q4_k_m · llama.cpp
18,17930,060
8192
収まる
10.00 GiB–10.64 GiB
データなし
Qwen2.5-14B-InstructGGUF Q4_K_M
gguf-q4_k_m · llama.cpp
18,17930,060
8192
収まる
10.00 GiB–10.64 GiB
データなし
Qwen2.5-Coder-14B-InstructGGUF Q4_K_M (Qwen)
gguf-q4_k_m · llama.cpp
18,17930,060
8192
収まる
10.00 GiB–10.64 GiB
データなし
DeepSeek-V2-Lite-ChatGGUF Q4_K_M (mradermacher)
gguf-q4_k_m · llama.cpp
17,137145,761
8192
収まる · 粗い見積もり
10.01 GiB–12.23 GiB
データなし
Qwen3.8-27BGGUF UD-IQ1_S (Unsloth)
gguf-ud-iq1_s · llama.cpp
67,617130,418
8192
余裕あり · 粗い見積もり
6.54 GiB–8.14 GiB
データなし