MiniMax-M3: requisitos de VRAM e memória

Checkpoints específicos, com arquitetura e arquivos de peso rastreáveis. GGUF Q4_K_M (bartowski): 244,40 GiB–249,71 GiB em 8.192 tokens, 1 sequência, KV FP16, llama.cpp.

Este resultado é uma estimativa, não um rastreio medido.Não verificadoPesos com arquivo

Publicador e procedência

A contagem de parâmetros ativos é desconhecida ou não tem fonte independente. Parâmetros ativos descrevem o compute roteado, não a pegada residente completa.

Camadas de memória desta estimativa

Bytes do arquivo, KV bruto, extras do engine e demanda total ficam separados. Isto não é um rastreio de execução.

Weight artifact
243,34 GiB (261.282.110.272 bytes)
Raw KV cache
0,94 GiB (1.006.632.960 bytes)
Engine extras / workspace
0,13 GiB–5,43 GiB
Total estimated demand
244,40 GiB–249,71 GiB

Arquivos contados

QuantizaçãoArquivos contadosBytesMotor de execuçãoEvidência
BF16 safetensors
bf16
59 shards safetensors
Total de bytes selecionados: 869.157.697.024 (809,47 GiB / 869,16 GB)
Primeiro shard: model-00001-of-00059.safetensors
Último shard: model-00059-of-00059.safetensors
Ver todos os 59 arquivos de shard
  • model-00001-of-00059.safetensors
  • model-00002-of-00059.safetensors
  • model-00003-of-00059.safetensors
  • model-00004-of-00059.safetensors
  • model-00005-of-00059.safetensors
  • model-00006-of-00059.safetensors
  • model-00007-of-00059.safetensors
  • model-00008-of-00059.safetensors
  • model-00009-of-00059.safetensors
  • model-00010-of-00059.safetensors
  • model-00011-of-00059.safetensors
  • model-00012-of-00059.safetensors
  • model-00013-of-00059.safetensors
  • model-00014-of-00059.safetensors
  • model-00015-of-00059.safetensors
  • model-00016-of-00059.safetensors
  • model-00017-of-00059.safetensors
  • model-00018-of-00059.safetensors
  • model-00019-of-00059.safetensors
  • model-00020-of-00059.safetensors
  • model-00021-of-00059.safetensors
  • model-00022-of-00059.safetensors
  • model-00023-of-00059.safetensors
  • model-00024-of-00059.safetensors
  • model-00025-of-00059.safetensors
  • model-00026-of-00059.safetensors
  • model-00027-of-00059.safetensors
  • model-00028-of-00059.safetensors
  • model-00029-of-00059.safetensors
  • model-00030-of-00059.safetensors
  • model-00031-of-00059.safetensors
  • model-00032-of-00059.safetensors
  • model-00033-of-00059.safetensors
  • model-00034-of-00059.safetensors
  • model-00035-of-00059.safetensors
  • model-00036-of-00059.safetensors
  • model-00037-of-00059.safetensors
  • model-00038-of-00059.safetensors
  • model-00039-of-00059.safetensors
  • model-00040-of-00059.safetensors
  • model-00041-of-00059.safetensors
  • model-00042-of-00059.safetensors
  • model-00043-of-00059.safetensors
  • model-00044-of-00059.safetensors
  • model-00045-of-00059.safetensors
  • model-00046-of-00059.safetensors
  • model-00047-of-00059.safetensors
  • model-00048-of-00059.safetensors
  • model-00049-of-00059.safetensors
  • model-00050-of-00059.safetensors
  • model-00051-of-00059.safetensors
  • model-00052-of-00059.safetensors
  • model-00053-of-00059.safetensors
  • model-00054-of-00059.safetensors
  • model-00055-of-00059.safetensors
  • model-00056-of-00059.safetensors
  • model-00057-of-00059.safetensors
  • model-00058-of-00059.safetensors
  • model-00059-of-00059.safetensors
869.157.697.024 (809,47 GiB / 869,16 GB)vllm, sglang, unspecifiedfile-metadata
GGUF Q8_0 (Unsloth)
gguf-q8_0
11 shards safetensors
Total de bytes selecionados: 452.714.559.392 (421,62 GiB / 452,71 GB)
Primeiro shard: Q8_0/MiniMax-M3-Q8_0-00001-of-00011.gguf
Último shard: Q8_0/MiniMax-M3-Q8_0-00011-of-00011.gguf
Ver todos os 11 arquivos de shard
  • Q8_0/MiniMax-M3-Q8_0-00001-of-00011.gguf
  • Q8_0/MiniMax-M3-Q8_0-00002-of-00011.gguf
  • Q8_0/MiniMax-M3-Q8_0-00003-of-00011.gguf
  • Q8_0/MiniMax-M3-Q8_0-00004-of-00011.gguf
  • Q8_0/MiniMax-M3-Q8_0-00005-of-00011.gguf
  • Q8_0/MiniMax-M3-Q8_0-00006-of-00011.gguf
  • Q8_0/MiniMax-M3-Q8_0-00007-of-00011.gguf
  • Q8_0/MiniMax-M3-Q8_0-00008-of-00011.gguf
  • Q8_0/MiniMax-M3-Q8_0-00009-of-00011.gguf
  • Q8_0/MiniMax-M3-Q8_0-00010-of-00011.gguf
  • Q8_0/MiniMax-M3-Q8_0-00011-of-00011.gguf
452.714.559.392 (421,62 GiB / 452,71 GB)llama.cpp, ollama, unspecifiedfile-metadata
GGUF Q4_K_M (bartowski)
gguf-q4_k_m
7 shards safetensors
Total de bytes selecionados: 261.282.110.272 (243,34 GiB / 261,28 GB)
Primeiro shard: MiniMax-M3-Q4_K_M/MiniMax-M3-Q4_K_M-00001-of-00007.gguf
Último shard: MiniMax-M3-Q4_K_M/MiniMax-M3-Q4_K_M-00007-of-00007.gguf
Ver todos os 7 arquivos de shard
  • MiniMax-M3-Q4_K_M/MiniMax-M3-Q4_K_M-00001-of-00007.gguf
  • MiniMax-M3-Q4_K_M/MiniMax-M3-Q4_K_M-00002-of-00007.gguf
  • MiniMax-M3-Q4_K_M/MiniMax-M3-Q4_K_M-00003-of-00007.gguf
  • MiniMax-M3-Q4_K_M/MiniMax-M3-Q4_K_M-00004-of-00007.gguf
  • MiniMax-M3-Q4_K_M/MiniMax-M3-Q4_K_M-00005-of-00007.gguf
  • MiniMax-M3-Q4_K_M/MiniMax-M3-Q4_K_M-00006-of-00007.gguf
  • MiniMax-M3-Q4_K_M/MiniMax-M3-Q4_K_M-00007-of-00007.gguf
261.282.110.272 (243,34 GiB / 261,28 GB)llama.cpp, ollama, unspecifiedfile-metadata
GGUF Q5_K_M (bartowski)
gguf-q5_k_m
8 shards safetensors
Total de bytes selecionados: 305.348.746.176 (284,38 GiB / 305,35 GB)
Primeiro shard: MiniMax-M3-Q5_K_M/MiniMax-M3-Q5_K_M-00001-of-00008.gguf
Último shard: MiniMax-M3-Q5_K_M/MiniMax-M3-Q5_K_M-00008-of-00008.gguf
Ver todos os 8 arquivos de shard
  • MiniMax-M3-Q5_K_M/MiniMax-M3-Q5_K_M-00001-of-00008.gguf
  • MiniMax-M3-Q5_K_M/MiniMax-M3-Q5_K_M-00002-of-00008.gguf
  • MiniMax-M3-Q5_K_M/MiniMax-M3-Q5_K_M-00003-of-00008.gguf
  • MiniMax-M3-Q5_K_M/MiniMax-M3-Q5_K_M-00004-of-00008.gguf
  • MiniMax-M3-Q5_K_M/MiniMax-M3-Q5_K_M-00005-of-00008.gguf
  • MiniMax-M3-Q5_K_M/MiniMax-M3-Q5_K_M-00006-of-00008.gguf
  • MiniMax-M3-Q5_K_M/MiniMax-M3-Q5_K_M-00007-of-00008.gguf
  • MiniMax-M3-Q5_K_M/MiniMax-M3-Q5_K_M-00008-of-00008.gguf
305.348.746.176 (284,38 GiB / 305,35 GB)llama.cpp, ollama, unspecifiedfile-metadata
GGUF Q6_K (bartowski)
gguf-q6_k
10 shards safetensors
Total de bytes selecionados: 369.400.554.688 (344,03 GiB / 369,40 GB)
Primeiro shard: MiniMax-M3-Q6_K/MiniMax-M3-Q6_K-00001-of-00010.gguf
Último shard: MiniMax-M3-Q6_K/MiniMax-M3-Q6_K-00010-of-00010.gguf
Ver todos os 10 arquivos de shard
  • MiniMax-M3-Q6_K/MiniMax-M3-Q6_K-00001-of-00010.gguf
  • MiniMax-M3-Q6_K/MiniMax-M3-Q6_K-00002-of-00010.gguf
  • MiniMax-M3-Q6_K/MiniMax-M3-Q6_K-00003-of-00010.gguf
  • MiniMax-M3-Q6_K/MiniMax-M3-Q6_K-00004-of-00010.gguf
  • MiniMax-M3-Q6_K/MiniMax-M3-Q6_K-00005-of-00010.gguf
  • MiniMax-M3-Q6_K/MiniMax-M3-Q6_K-00006-of-00010.gguf
  • MiniMax-M3-Q6_K/MiniMax-M3-Q6_K-00007-of-00010.gguf
  • MiniMax-M3-Q6_K/MiniMax-M3-Q6_K-00008-of-00010.gguf
  • MiniMax-M3-Q6_K/MiniMax-M3-Q6_K-00009-of-00010.gguf
  • MiniMax-M3-Q6_K/MiniMax-M3-Q6_K-00010-of-00010.gguf
369.400.554.688 (344,03 GiB / 369,40 GB)llama.cpp, ollama, unspecifiedfile-metadata
INT4 theoreticalNenhum arquivo publicado213.520.070.080 (Linhas teóricas não são artefactos descarregáveis.)—theoretical

Memória por quantização e contexto

Sequências concorrentes = 1. O KV padrão é FP16. O intervalo inclui extras de runtime documentados para o engine indicado. Os números usam o mesmo núcleo da calculadora interativa.

Quantização2.048 tokens8.192 tokens32.768 tokens
BF16 safetensors810,33 GiB–812,21 GiB811,03 GiB–812,93 GiB813,84 GiB–815,83 GiB
GGUF Q8_0 (Unsloth)421,98 GiB–430,79 GiB422,69 GiB–431,56 GiB425,50 GiB–434,57 GiB
GGUF Q4_K_M (bartowski)243,70 GiB–248,94 GiB244,40 GiB–249,71 GiB247,21 GiB–252,72 GiB
GGUF Q5_K_M (bartowski)284,74 GiB–290,80 GiB285,44 GiB–291,57 GiB288,25 GiB–294,58 GiB
GGUF Q6_K (bartowski)344,39 GiB–351,65 GiB345,09 GiB–352,41 GiB347,91 GiB–355,42 GiB
INT4 theoretical
Linhas teóricas não são artefactos descarregáveis.
199,22 GiB–256,98 GiB199,92 GiB–257,86 GiB202,73 GiB–261,32 GiB

Cache KV (dados brutos)

O KV bruto de GQA/MHA é 2 × camadas × kvHeads × headDim × tokens × sequências × bytes por elemento. Esta página usa KV heads (4), não query heads (64).

Abrir a calculadora com este modelo

Páginas relacionadas

Fontes

Premissas que afetam o resultado

Calculadora

A carregar o snapshot do catálogo…

Escolha primeiro um modelo e depois confira o equipamento.

Quantização

Tipo de dispositivo

Carga

O comprimento de contexto afeta principalmente a memória do KV cache.

Configurações avançadas
Runtime

Engine e tipo de cache KV desta estimativa.

Carga

Cenário de overhead e o espaço de prefill.

Topologia

Como o modelo é dividido entre dispositivos. A memória não é somada.

O número de réplicas é avançado. A quantidade são nós ou GPUs, não réplicas.

Orçamento

Reserva do sistema e margem de segurança. Um número vazio mantém o valor anterior.

GiB (2^30 bytes)

%

Modelo personalizado

Importe uma config ou digite a arquitetura. Nada é varrido até você importar.

O arquivo é lido só no navegador e não é enviado.

Só huggingface.co, só config.json, sem token. Repositório privado é recusado.

Pesquise ou escolha um modelo do catálogo para ver a VRAM necessária e rodar um LLM local.

Pesquise ou escolha um modelo do catálogo para ver a VRAM necessária e rodar um LLM local.