Família Llama · 109B de parâmetros

Llama 4 Scout 109B

MoE 109B/17B ativos, multimodal nativo, contexto 10M. Cabe em uma H100. HF gated.

🇺🇸 Meta·Licença Llama 4 Community·Contexto 9765.625k tokens·Data de lançamento abril de 2025·Cabe nos 128 GB de o AI TOP ATOM da GIGABYTE (link afiliado)← Catálogo

01O que ele sabe fazer

Pontos fortes
  • Contexto 10M (!)
  • Cabe na H100
  • Visão nativa
Limitações que você deve conhecer
  • —HF gated
  • —Licença Llama 4 (cláusula >700M MAU)
Arquitetura
MoE 16 especialistas · 109B/17B ativos · iRoPE · multimodal nativo
Treinamento
Meta Llama 4, carro-chefe compacto.
Ideal para
Contexto extremamente longoVisãoAgentes

05Instalar

Instale Ollama para seu SO. Verifique o modelo e sua quantização antes do download. Comece com 4096 tokens de contexto, depois verifique a alocação com ollama ps. Um comando abaixo não é prova de teste executado na sua máquina.

$ollama run llama4:scout
⚠
Primeiro download: entre 2 e 40 GB, dependendo da quantização escolhida. Reserve espaço em disco; recomenda-se uma conexão estável. As execuções seguintes são instantâneas.

02Memória necessária

Quantidade aproximada de VRAM da GPU necessária para executar este modelo, incluindo a memória adicional para um contexto de 4k tokens. Para um contexto mais longo, adicione ~1 GB a cada 8k tokens.

Q4_K_M
O mais leve, ~5% de perda
65 GB
Q5_K_M
Bom equilíbrio entre qualidade e tamanho
78 GB
Q8_0
Quase indistinguível de FP16
117 GB
FP16
Precisão total — uso em servidor
218 GB
Fallback para CPU · Se você não tiver GPU, considere 100 GB de RAM mínimo para executar este modelo em velocidade reduzida.

Qual hardware usar para Llama 4 Scout 109B?

Para executar Llama 4 Scout 109B localmente com quantização Q4, você precisa de aproximadamente 65 GB de VRAM. Uma opção para comparar: GMKtec EVO-X2 64 GB / 1 TB (Ryzen AI Max+ 395) — mantenha uma margem para o sistema e o contexto; verifique a compatibilidade do motor com a GPU.

Oferta atual: GMKtec EVO-X2 64 GB / 1 TB (Ryzen AI Max+ 395)
AmazonVer o preço →

Por que essa escolha? Nossa ficha completa sobre GMKtec EVO-X2 64 GB / 1 TB (Ryzen AI Max+ 395) →

Links afiliados — comissão possível sem custo adicional para você, recomendação independente. Como Parceiro Amazon, QualLLM obtém lucro com compras que atendem às condições exigidas.

Este modelo no seu ChatGPT privado, sem nuvem

Muito grande para sua máquina? O kit fornece o modelo que cabe na sua VRAM

  • Espaço online vitalício
  • PDF + arquivos
  • Atualizações vitalícias

03Velocidade estimada

Tokens gerados por segundo em Q4_K_M, contexto 4k. Acima de 20 t/s, a leitura é confortável. Abaixo de 10 t/s, é apenas para testar.

Categoria de entrada
~3t/s
GTX 1650, RX 6600, MBA M2 8 GB
Categoria intermediária
~12t/s
RTX 4060, 4070, MBP M3 Pro
Topo de linha
~30t/s
RTX 4090, M4 Max, Radeon 7900

04Benchmarks públicos

Pontuações reproduzidas a partir das fichas dos modelos ou de fontes do MMLU-Pro / da comunidade. Unidade: % de respostas corretas.

MMLU-Pro
74