Llama-3.1-405B-Instruct
meta-llama · meta-llama/Llama-3.1-405B-Instruct
Licença dos pesos: Termos do publicador: Llama 3.1 · código e componentes podem ter outros termos
Qualidade
Sem score comparável
Ainda não acompanhamos benchmark público e comparável que cubra este modelo. Nenhuma nota é inferida.
Informado pelo publicador
- MMLU
- 87,3Llama 3.1 405B Instruct · Instruction tuned models · General
- MMLU (CoT)
- 88,6Llama 3.1 405B Instruct · Instruction tuned models · General
- MMLU-Pro (CoT)
- 73,3Llama 3.1 405B Instruct · Instruction tuned models · General
- IFEval
- 88,6Llama 3.1 405B Instruct · Instruction tuned models · General
- ARC-C
- 96,9Llama 3.1 405B Instruct · Instruction tuned models · Reasoning
- GPQA
- 50,7Llama 3.1 405B Instruct · Instruction tuned models · Reasoning
- HumanEval
- 89,0Llama 3.1 405B Instruct · Instruction tuned models · Code
- MBPP ++ base version
- 88,6Llama 3.1 405B Instruct · Instruction tuned models · Code
Todos os resultados informados
- Multipl-E HumanEval
- 75,2Llama 3.1 405B Instruct · Instruction tuned models · Code
- Multipl-E MBPP
- 65,7Llama 3.1 405B Instruct · Instruction tuned models · Code
- GSM-8K (CoT)
- 96,8Llama 3.1 405B Instruct · Instruction tuned models · Math
- MATH (CoT)
- 73,8Llama 3.1 405B Instruct · Instruction tuned models · Math
- API-Bank
- 92,0Llama 3.1 405B Instruct · Instruction tuned models · Tool Use
- BFCL
- 88,5Llama 3.1 405B Instruct · Instruction tuned models · Tool Use
- Gorilla Benchmark API Bench
- 35,3Llama 3.1 405B Instruct · Instruction tuned models · Tool Use
- Nexus (0-shot)
- 58,7Llama 3.1 405B Instruct · Instruction tuned models · Tool Use · 0-shot
- Multilingual MGSM (CoT)
- 91,6Llama 3.1 405B Instruct · Instruction tuned models · Multilingual
- MMLU · Portuguese (5-shot, macro_avg/acc)
- 84,95Llama 3.1 405B · Multilingual benchmarks · General · 5-shot
- MMLU · Spanish (5-shot, macro_avg/acc)
- 85,08Llama 3.1 405B · Multilingual benchmarks · General · 5-shot
- MMLU · Italian (5-shot, macro_avg/acc)
- 85,04Llama 3.1 405B · Multilingual benchmarks · General · 5-shot
- MMLU · German (5-shot, macro_avg/acc)
- 84,36Llama 3.1 405B · Multilingual benchmarks · General · 5-shot
- MMLU · French (5-shot, macro_avg/acc)
- 84,66Llama 3.1 405B · Multilingual benchmarks · General · 5-shot
- MMLU · Hindi (5-shot, macro_avg/acc)
- 80,31Llama 3.1 405B · Multilingual benchmarks · General · 5-shot
- MMLU · Thai (5-shot, macro_avg/acc)
- 78,21Llama 3.1 405B · Multilingual benchmarks · General · 5-shot
Valores como impressos na ficha, com a configuração do próprio publicador (seção da ficha: Benchmark scores › Instruction tuned models; Benchmark scores › Instruction tuned models › Multilingual benchmarks). Não comparáveis entre publicadores e fora de qualquer ranking. Ficha do modelo
Roda em
Cabe na memória rápida 1
A estimativa de planejamento cabe na memória que o modelo usa rápido: a VRAM da placa de vídeo, ou a memória unificada dentro da fatia de GPU do macOS.
Falta um degrau de memória 1
As mesmas máquinas com o próximo tamanho de memória o comportariam na memória rápida.
Perfis de hardware agrupados pela estimativa de planejamento Q4 em cada máquina (GPUs dedicadas reservam 2 GB; memória unificada e do sistema, 25%, de 2 a 8 GB): cabe na memória rápida, fica na memória mas fora da parte rápida (camadas na RAM do PC, ou acima da fatia de GPU do macOS), ou falta um degrau de memória. Não é compatibilidade nem velocidade medida.
Velocidade medida
Nenhuma medição publicada para este checkpoint
Tokens por segundo só aparecem quando uma fonte os publica com hardware, build e configuração. Nunca são estimados.
Como rodar
Compatibilidade de runtime e tokens por segundo não foram medidos para este registro. Metadados publicados e estimativa de memória não comprovam uma execução local.
Biblioteca na fonte: transformers
Detalhes técnicos
O que a fonte e o catálogo guardam deste checkpoint. Campos ausentes ficam de fora, nunca como zero.
- Checkpoint / fonte
- meta-llama/Llama-3.1-405B-Instruct
- Tarefa
- text-generation
- Arquitetura
- LlamaForCausalLM
- Biblioteca na fonte
- transformers
- Licença dos pesos
- Termos do publicador: Llama 3.1
- Uso comercial
- Permitido com condições Acima de 700 mi de usuários mensais exige licença da Meta; exibir "Built with Llama" · Llama 3.1 Community License (meta-llama/llama-models) · consultado em 2026-10-18texto da licença
Todos os campos guardados
- Revisão conferida
- be673f326cab4cd22ccfef76109faf68e41aa5f1
- Arquitetura
- LlamaForCausalLM
- Biblioteca
- transformers
- Tag de tarefa no Hub
- text-generation
- Modelos base declarados
- meta-llama/Meta-Llama-3.1-405B
- Formatos
- safetensors, pt
- Acesso
- Restrito (manual)
- Tipo de publicador
- Oficial
- Evidência de tensores
- floating-tensor-elements · 405,85B · BF16conferido em 2026-09-26
- Repositório criado
- 2024-07-16criação não é o lançamento do modelo
- Repositório atualizado
- 2024-09-25um commit não é data de lançamento
- Downloads no Hub (30 dias) · curtidas
- 9.375 · 605só este repositório · lido em 2026-10-25
- Estado no catálogo
- Config ou pesos encontrados no Hub; sem vínculo de benchmark no inventário
Fontes
Identidade e especificações publicadas vêm da página do checkpoint. As notas pertencem à rodada indicada e não medem velocidade no seu computador.
Snapshot válido da fonte: 2026-11-19. Este registro da fonte ainda não recebeu revisão técnica completa. Dados ausentes permanecem desconhecidos; um commit do repositório não é a data de lançamento do modelo.
