Histórico do MakoBench Suite: Versões anteriores
- Categoria
- IA e LLM Local
- Publicado em
- 5 novembro 2026
- Atualizado em
- 10 novembro 2026
- Por
- Jacob Lloyd — escrito com ajuda de IA, depois do projeto
- Tempo de leitura
- 2 min de leitura
Em termos simples: As pontuações do MakoBench só fazem sentido em relação à versão dos testes que as gerou. Quando os testes são alterados, reexecutamos os modelos e mantemos o quadro antigo exatamente como estava. Esta página lista cada versão do conjunto de testes e onde encontrar seu respectivo quadro.
Ir para: CrucibleForge no GitHub
Os testes por trás do MakoBench mudam de tempos em tempos. Uma pontuação só faz sentido em relação ao conjunto de testes que a gerou; por isso, nunca comparamos números entre conjuntos diferentes, nem reescrevemos silenciosamente uma placa antiga.
Por que as suítes mudam?
Removemos testes que se revelam lentos ou problemáticos, corrigimos questões que eram injustas e adicionamos conjuntos de exercícios mais difíceis à medida que os modelos melhoram. Quando uma alteração afeta as pontuações, todos os modelos são executados novamente na nova suíte. O quadro anterior é então mantido exatamente como estava, com suas próprias margens, sua própria escala e a data em que foi criado.
Onde estão os fóruns anteriores?
As páginas Main Bench, +NSFW Bench e The tests possuem um menu de versões Suite na parte superior. Selecione uma versão anterior nesse menu para ver como o conteúdo era naquela época.
Versões
- Suite 4.1 (atual). Uma versão de correção: não há novos casos, e as respostas corretas foram ajustadas após uma revisão completa. Consulte o Painel Principal.
- Suite 4.0. O Total is Code somado ao Chat, cada um valendo 10 pontos nos testes padrão. Foi substituída pela suite 4.1 em 10 de novembro de 2026; compare apenas modelos dentro da mesma suite. Páginas: Painel Principal, +Painel NSFW e Os testes.
- Suite 3.0. A pontuação era calculada em uma escala de 100 nos testes antigos; portanto, não compare esses valores com os da suite 4.0. O painel arquivado contém 32 modelos e foi criado a partir do painel que arquivamos em 23/09/2026. Páginas: Painel Principal, +Painel NSFW e Os testes.
O que mudou entre eles?
O texto explicativo sobre a versão atual é MakoBench 4.1: o que mudou; o da versão anterior é Suite 4.0: o que mudou. Para cada lançamento do motor, incluindo aqueles que não afetaram as pontuações, consulte o registro de alterações do CrucibleForge no GitHub.
Relacionado: Como o MakoBench funciona.