MiniMax-M2: requisitos de VRAM y memoria
Puntos de control concretos, con arquitectura y archivos de pesos con fuente. GGUF Q4_K_M (Unsloth): 130,90 GiB–133,99 GiB a 8192 tokens, 1 secuencia, KV FP16, llama.cpp.
Editor y procedencia
- ProveedorMiniMax
- Hugging Face
MiniMaxAI/MiniMax-M2 - Revision
757303d492a50514c312788b5247a4f696a4c6a3 - Parámetros totales228.689.764.864
- Parámetros activosDesconocido / sin fuente independiente
- Capas62
- Cabezas de consulta48
- Cabezas KV8 (gqa)
- Dimensión de cabeza128
- Contexto documentado196.608
- Integridadcomplete · full
El recuento de parámetros activos es desconocido o no tiene una fuente independiente. Los parámetros activos describen el cómputo enrutado, no la huella residente completa.
Capas de memoria de esta estimación
Los bytes del archivo, el KV bruto, los extras del motor y la demanda total van aparte. No es una traza de ejecución.
- Weight artifact
- 128,84 GiB (138.342.385.120 bytes)
- Raw KV cache
- 1,94 GiB (2.080.374.784 bytes)
- Engine extras / workspace
- 0,13 GiB–3,21 GiB
- Total estimated demand
- 130,90 GiB–133,99 GiB
Archivos contados
| Cuantización | Archivos contados | Bytes | Motor | Evidencia |
|---|---|---|---|---|
| FP8 safetensors fp8 | 480.836.588.544 (447,81 GiB / 480,84 GB) | vllm, sglang, unspecified | file-metadata | |
| GGUF Q4_K_M (Unsloth) gguf-q4_k_m | Q4_K_M/MiniMax-M2-Q4_K_M-00001-of-00003.gguf, Q4_K_M/MiniMax-M2-Q4_K_M-00002-of-00003.gguf, Q4_K_M/MiniMax-M2-Q4_K_M-00003-of-00003.gguf | 138.342.385.120 (128,84 GiB / 138,34 GB) | llama.cpp, ollama, unspecified | file-metadata |
| GGUF Q5_K_M (Unsloth) gguf-q5_k_m | Q5_K_M/MiniMax-M2-Q5_K_M-00001-of-00004.gguf, Q5_K_M/MiniMax-M2-Q5_K_M-00002-of-00004.gguf, Q5_K_M/MiniMax-M2-Q5_K_M-00003-of-00004.gguf, Q5_K_M/MiniMax-M2-Q5_K_M-00004-of-00004.gguf | 162.303.936.128 (151,16 GiB / 162,30 GB) | llama.cpp, ollama, unspecified | file-metadata |
| GGUF Q6_K (Unsloth) gguf-q6_k | Q6_K/MiniMax-M2-Q6_K-00001-of-00004.gguf, Q6_K/MiniMax-M2-Q6_K-00002-of-00004.gguf, Q6_K/MiniMax-M2-Q6_K-00003-of-00004.gguf, Q6_K/MiniMax-M2-Q6_K-00004-of-00004.gguf | 187.763.083.904 (174,87 GiB / 187,76 GB) | llama.cpp, ollama, unspecified | file-metadata |
| GGUF Q8_0 (Unsloth) gguf-q8_0 | 243.136.873.184 (226,44 GiB / 243,14 GB) | llama.cpp, ollama, unspecified | file-metadata | |
| INT4 theoretical | No hay archivo publicado | 114.344.882.432 (Las filas teóricas no son artefactos descargables.) | — | theoretical |
Memoria por cuantización y contexto
Secuencias concurrentes = 1. El KV es FP16 por defecto. El intervalo incluye extras de runtime documentados para el motor indicado. Las cifras usan el mismo núcleo que la calculadora interactiva.
| Cuantización | 2048 tokens | 8192 tokens | 32.768 tokens |
|---|---|---|---|
| FP8 safetensors | 448,92 GiB–450,81 GiB | 450,38 GiB–452,31 GiB | 456,19 GiB–458,30 GiB |
| GGUF Q4_K_M (Unsloth) | 129,45 GiB–132,41 GiB | 130,90 GiB–133,99 GiB | 136,72 GiB–140,21 GiB |
| GGUF Q5_K_M (Unsloth) | 151,77 GiB–155,17 GiB | 153,22 GiB–156,75 GiB | 159,03 GiB–162,97 GiB |
| GGUF Q6_K (Unsloth) | 175,48 GiB–179,36 GiB | 176,93 GiB–180,94 GiB | 182,74 GiB–187,16 GiB |
| GGUF Q8_0 (Unsloth) | 227,05 GiB–231,96 GiB | 228,50 GiB–233,54 GiB | 234,31 GiB–239,76 GiB |
| INT4 theoretical Las filas teóricas no son artefactos descargables. | 107,10 GiB–138,30 GiB | 108,55 GiB–140,12 GiB | 114,37 GiB–147,27 GiB |
Caché KV (datos brutos)
El KV bruto de GQA/MHA es 2 × capas × kvHeads × headDim × tokens × secuencias × bytes por elemento. Esta página usa KV heads (8), no query heads (48).
- 8,192 tokens, 1 sequence, FP16: 2.080.374.784 bytes (1,9375 GiB)
- 32,768 tokens: 8.321.499.136 bytes (7,7500 GiB)
Páginas relacionadas
Fuentes
- MiniMax-M2 model card
- config.json — revision 757303d492a50514c312788b5247a4f696a4c6a3
- safetensors index — metadata.total_size=480836588544
- Artifact repo unsloth/MiniMax-M2-GGUF
Hipótesis que afectan al resultado
- El contexto pedido cabe en la ventana nativa de 196608 tokens.
- La estimación residente usa el total de parámetros, incluidos expertos MoE inactivos.
- El recuento de parámetros activos es desconocido o no tiene una fuente independiente. Los parámetros activos describen el cómputo enrutado, no la huella residente completa.
- Los bytes de pesos salen solo de los archivos elegidos, no de todas las cuantizaciones del repositorio.
- El tamaño de descarga no es la memoria GPU de pico. El diseño en ejecución y la KV van aparte.
- Archivos contados: Q4_K_M/MiniMax-M2-Q4_K_M-00001-of-00003.gguf, Q4_K_M/MiniMax-M2-Q4_K_M-00002-of-00003.gguf, Q4_K_M/MiniMax-M2-Q4_K_M-00003-of-00003.gguf.
- Hay pesos MTP/draft; no entran salvo que se activen.
- El contexto es el número de tokens en caché por secuencia (entrada más generación reservada).
Calculadora
Cargando la instantánea del catálogo…
Busque o elija un modelo del catálogo para ver la VRAM necesaria de un LLM en local.