Qwen3.8-Flash-Next: VRAM necesaria 131,53 GiB
VRAM necesaria 111,75 GiB–131,53 GiB. Qwen3.8-Flash-Next Q4_K_M a 8192 tokens. Sin GPU, esto es demanda de un LLM en local, no si cabe. Estimación aproximada Archivo BF16: 359.999.963.128 bytes.
El checkpoint Qwen/Qwen3.8-Flash-Next trae en este catálogo BF16 safetensors de 359.999.963.128 bytes (335,28 GiB / 360,00 GB). Ese tamaño de descarga no es la VRAM pico, y las cifras de abajo son estimaciones.
Puntos de control concretos, con arquitectura y archivos de pesos con fuente. GGUF Q4_K_M (bartowski): 111,75 GiB–131,53 GiB a 8192 tokens, 1 secuencia, KV FP16, llama.cpp.
Dónde corre
Editor y procedencia
- ProveedorQwen
- Hugging Face
Qwen/Qwen3.8-Flash-Next - Revision
de4b8e4d43b917e7706784d8bb445c9af86a3540 - Parámetros totales179.999.981.459
- Parámetros activosDesconocido / sin fuente independiente
- Capas48
- Cabezas de consulta24
- Cabezas KV2 (hybrid)
- Dimensión de cabeza256
- Contexto documentado262.144
- Integridadpartial · partial
El recuento de parámetros activos es desconocido o no tiene una fuente independiente. Los parámetros activos describen el cómputo enrutado, no la huella residente completa.
Capas de memoria de esta estimación
Los bytes del archivo, el KV bruto, los extras del motor y la demanda total van aparte. No es una traza de ejecución.
- Weight artifact
- 111,39 GiB (119.599.030.080 bytes)
- Raw KV cache
- 0,19 GiB (201.326.592 bytes)
- Engine extras / workspace
- 0,18 GiB–19,95 GiB
- Total estimated demand
- 111,75 GiB–131,53 GiB
Archivos contados
| Cuantización | Archivos contados | Bytes | Motor | Evidencia |
|---|---|---|---|---|
| BF16 safetensors bf16 | 359.999.963.128 (335,28 GiB / 360,00 GB) | vllm, sglang, unspecified | file-metadata | |
| GGUF Q8_0 (Unsloth) gguf-q8_0 | 188.225.033.248 (175,30 GiB / 188,23 GB) | llama.cpp, ollama, unspecified | file-metadata | |
| GGUF Q4_K_M (bartowski) gguf-q4_k_m | Qwen3.8-Flash-Next-Q4_K_M/Qwen3.8-Flash-Next-Q4_K_M-00001-of-00004.gguf, Qwen3.8-Flash-Next-Q4_K_M/Qwen3.8-Flash-Next-Q4_K_M-00002-of-00004.gguf, Qwen3.8-Flash-Next-Q4_K_M/Qwen3.8-Flash-Next-Q4_K_M-00003-of-00004.gguf, Qwen3.8-Flash-Next-Q4_K_M/Qwen3.8-Flash-Next-Q4_K_M-00004-of-00004.gguf | 119.599.030.080 (111,39 GiB / 119,60 GB) | llama.cpp, ollama, unspecified | file-metadata |
| GGUF Q5_K_M (bartowski) gguf-q5_k_m | Qwen3.8-Flash-Next-Q5_K_M/Qwen3.8-Flash-Next-Q5_K_M-00001-of-00004.gguf, Qwen3.8-Flash-Next-Q5_K_M/Qwen3.8-Flash-Next-Q5_K_M-00002-of-00004.gguf, Qwen3.8-Flash-Next-Q5_K_M/Qwen3.8-Flash-Next-Q5_K_M-00003-of-00004.gguf, Qwen3.8-Flash-Next-Q5_K_M/Qwen3.8-Flash-Next-Q5_K_M-00004-of-00004.gguf | 134.668.639.040 (125,42 GiB / 134,67 GB) | llama.cpp, ollama, unspecified | file-metadata |
| GGUF Q6_K (bartowski) gguf-q6_k | 168.113.805.248 (156,57 GiB / 168,11 GB) | llama.cpp, ollama, unspecified | file-metadata | |
| INT4 theoretical | No hay archivo publicado | 89.999.990.730 (Las filas teóricas no son artefactos descargables.) | — | theoretical |
Memoria por cuantización y contexto
Secuencias concurrentes = 1. El KV es FP16 por defecto. El intervalo incluye extras de runtime documentados para el motor indicado. Las cifras usan el mismo núcleo que la calculadora interactiva.
| Cuantización | 2048 tokens | 8192 tokens | 32.768 tokens |
|---|---|---|---|
| BF16 safetensors | 336,00 GiB–388,56 GiB | 336,14 GiB–388,73 GiB | 336,70 GiB–389,39 GiB |
| GGUF Q8_0 (Unsloth) | 175,52 GiB–206,32 GiB | 175,66 GiB–206,50 GiB | 176,23 GiB–207,19 GiB |
| GGUF Q4_K_M (bartowski) | 111,61 GiB–131,35 GiB | 111,75 GiB–131,53 GiB | 112,31 GiB–132,22 GiB |
| GGUF Q5_K_M (bartowski) | 125,64 GiB–147,81 GiB | 125,79 GiB–147,99 GiB | 126,35 GiB–148,68 GiB |
| GGUF Q6_K (bartowski) | 156,79 GiB–184,35 GiB | 156,93 GiB–184,53 GiB | 157,50 GiB–185,22 GiB |
| INT4 theoretical Las filas teóricas no son artefactos descargables. | 84,04 GiB–108,65 GiB | 84,18 GiB–108,83 GiB | 84,75 GiB–109,52 GiB |
Caché KV (datos brutos)
Páginas relacionadas
Fuentes
- Qwen3.8-Flash-Next model card — Diseño híbrido. La descarga de expertos no está especificada, y los parámetros activos no son los pesos residentes. El tamaño del archivo es el checkpoint empaquetado.
- config.json — revision de4b8e4d43b917e7706784d8bb445c9af86a3540
- safetensors index — metadata.total_size=359999963128
- Artifact repo unsloth/Qwen3.8-Flash-Next-GGUF
- Artifact repo bartowski/Qwen3.8-Flash-Next-GGUF
Hipótesis que afectan al resultado
- El contexto pedido cabe en la ventana nativa de 262144 tokens.
- La estimación residente usa el total de parámetros, incluidos expertos MoE inactivos.
- El recuento de parámetros activos es desconocido o no tiene una fuente independiente. Los parámetros activos describen el cómputo enrutado, no la huella residente completa.
- Los bytes de pesos salen solo de los archivos elegidos, no de todas las cuantizaciones del repositorio.
- El tamaño de descarga no es la memoria GPU de pico. El diseño en ejecución y la KV van aparte.
- Archivos contados: Qwen3.8-Flash-Next-Q4_K_M/Qwen3.8-Flash-Next-Q4_K_M-00001-of-00004.gguf, Qwen3.8-Flash-Next-Q4_K_M/Qwen3.8-Flash-Next-Q4_K_M-00002-of-00004.gguf, Qwen3.8-Flash-Next-Q4_K_M/Qwen3.8-Flash-Next-Q4_K_M-00003-of-00004.gguf, Qwen3.8-Flash-Next-Q4_K_M/Qwen3.8-Flash-Next-Q4_K_M-00004-of-00004.gguf.
- Hay componente de visión. La inferencia de texto no incluye encoder ni projector.
- Hay pesos MTP/draft; no entran salvo que se activen.
Calculadora
Cargando la instantánea del catálogo…
Busque o elija un modelo del catálogo para ver la VRAM necesaria de un LLM en local.