O Muse Spark 1.3 esteve acima do GPT-6 dois dias. Eis porquê
O Muse Spark 1.3 marcou 62 na Artificial Analysis, à frente do GPT-6 Astra, e caiu para nono numa reavaliação. Segui o rasto da pontuação e do preço.
Nesta página
- O que aconteceu entre 2 e 4 de setembro de 2026
- O que a Meta lançou, e o que afirmou
- Porque é que o índice pôs o Muse Spark ao lado do Fable e do Astra? Quatro efeitos
- O que mudou na versão 4.2, e o que não mudou
- O número que sobreviveu: preço e velocidade
- O que dizem os programadores depois de o usarem
- Onde é que eu o usaria
A Meta lançou o Muse Spark 1.3 a 2 de setembro de 2026, e a Artificial Analysis deu 62 pontos à sua definição mais alta no Intelligence Index, o terceiro melhor resultado da tabela, atrás do Claude Fable 5.1 e do Opus 5 e um ponto acima do GPT-6 Astra que a OpenAI lançou no dia seguinte. [1] [4] A 4 de setembro o índice passou para a versão 4.2 e o Muse Spark caiu para 53 pontos e nono lugar. [2] [3] A pontuação era real, e a queda também. Há quatro explicações para as duas coisas, e nenhuma delas é batota.
O que aconteceu entre 2 e 4 de setembro de 2026
O Muse Spark 1.3 manteve-se no top três do índice independente mais citado durante cerca de 48 horas, e depois foi o próprio índice que mudou. A sequência importa mais do que qualquer número isolado, por isso aqui fica por ordem.
-
Muse Spark 1.0
Primeiro modelo dos Meta Superintelligence Labs, com pesos fechados.
-
Muse Spark 1.2 e Muse Code
O agente de programação da própria Meta é lançado com o modelo.
-
Muse Spark 1.3
A Artificial Analysis dá 62 pontos à definição max, o terceiro melhor de todos os modelos.
-
GPT-6 Astra
O modelo de topo da OpenAI entra no mesmo índice com 61.
-
Índice v4.2
Reavaliação: o Muse Spark 1.3 fica com 53 pontos, em nono. A definição max abre ao público no mesmo dia.
A Figura 1 mostra porque é que tanta gente viu números contraditórios na mesma semana. A 2 de setembro, a Artificial Analysis escreveu que o Muse Spark 1.3 em max «obtém 62 pontos no Artificial Analysis Intelligence Index, apenas atrás do Claude Fable 5.1 e do Claude Opus 5», com a definição xhigh de disponibilidade geral nos 61. [1] Quando o GPT-6 Astra chegou a 3 de setembro, o mesmo índice deu-lhe 61, e em poucas horas circulavam capturas de ecrã com a Meta acima da OpenAI. [4] A 4 de setembro a Artificial Analysis publicou a versão 4.2 do índice. Nessa versão, o Muse Spark 1.3 em max obtém 53 pontos e fica em nono lugar entre 202 modelos, o Fable 5.1 tem 57, o Astra 55, o Opus 5 54 e o GPT-5.6 Sol 51. [2] [3] Os dois conjuntos de números estão certos para a versão a que pertencem, e foi citar um deles sem dizer a versão que deu início à discussão.
O que a Meta lançou, e o que afirmou
O Muse Spark 1.3 é um modelo de pesos fechados dos Meta Superintelligence Labs, vendido através da API da própria Meta e do seu agente Muse Code a $1,25 por milhão de tokens de entrada e $4,25 por milhão de tokens de saída, com um escalão de contribuidor (o contributor tier) a $0,10 e $0,20 para quem deixar a Meta treinar nos seus prompts. [5] [7] A Meta afirmou ter desempenho de fronteira por uma fração do preço. A sua própria tabela comparativa sustenta parte disso e contradiz discretamente o resto.
O historial ajuda a perceber como as pessoas leram estes números. A Meta apresentou o Muse Spark em abril de 2026 como o primeiro modelo de uma nova série dos Meta Superintelligence Labs, o laboratório que formou em meados de 2025 à volta de Alexandr Wang depois de a geração Llama 4 ter desiludido. [8] [27] O Llama não foi formalmente descontinuado, mas não existe caminho de migração a partir dele, porque o Muse Spark é proprietário e só a Meta o serve. [9] Mark Zuckerberg prometeu pesos abertos para o Muse Spark 1.2 e, em agosto, a Meta publicou um modelo à parte de 30 mil milhões de parâmetros, o Muse Glimmer, com licença aberta. Ainda assim, a 5 de setembro nenhum peso do Muse Spark é público. [10] [11]
As afirmações do lançamento foram grandes. Zuckerberg disse que o Muse Spark 1.3 «está a chegar hoje, com desempenho de fronteira quase barato de mais para se medir», e a tabela da Meta compara-o com o GPT-5.6 Sol e o Claude Opus 5, ambos no seu nível máximo de raciocínio. [6] [11] Nessa tabela o Muse Spark ganha o DeepSWE com 75,4% contra 73,0% do Sol e 74,0% do Opus, empata com o Sol no Terminal-Bench 2.1 com 88,8% e chega a 98,1% num teste de recuperação de contexto longo entre 512K e 1M tokens, onde o Sol fica pelos 73,8%. O Opus 5 ganha quase todas as linhas de agentes, incluindo o GDPval-AA com 1824 Elo contra 1754, o OSWorld de uso do computador e o AutomationBench. [6] Ou seja, os números da própria Meta descrevem um modelo que lidera em programação e em contexto longo e fica atrás da Anthropic no trabalho de agentes, o que é bastante menos do que a linguagem do lançamento prometia.
Duas opções da metodologia da Meta merecem referência, porque afetam todas as linhas. A Meta reporta o seu modelo em max, mas reporta a versão anterior, o Muse Spark 1.2, em xhigh, por isso parte do ganho entre versões é apenas uma mudança de definição. E, para os concorrentes, usa «o valor mais alto comparável da métrica principal que esteja disponível», venha ele das suas próprias execuções, da tabela de classificação oficial ou do número que o fabricante publicou, consoante o que for melhor. [12] A tabela também não inclui nenhum modelo posterior ao final de julho: nem o Claude Fable 5.1, lançado a 1 de setembro, nem o GPT-6 Astra aparecem nela. [6]
Porque é que o índice pôs o Muse Spark ao lado do Fable e do Astra? Quatro efeitos
Os 62 pontos vieram de uma avaliação real, feita por terceiros, a um modelo que é genuinamente bom nalgumas coisas. Vieram também de uma versão específica do índice, de um nível de esforço específico, de um harness específico e de um conjunto de comparações escolhido pela Meta. Cada um destes fatores empurrou o número para cima, e todos estão documentados.
| Medida | Muse Spark 1.3 | Fable 5.1 | Opus 5 | GPT-6 Astra | GPT-5.6 Sol |
|---|---|---|---|---|---|
| Intelligence Index v4.1.1, 2 de set. | 62 | 66 (Melhor valor da linha) | 63 | 61 | 61 |
| Intelligence Index v4.2, 5 de set. | 53 | 57 (Melhor valor da linha) | 54 | 55 | 51 |
| Custo por tarefa do índice, $ | 0,95 (Melhor valor da linha) | 6,12 | 4,21 | 2,57 | 1,25 |
| Tempo até ao primeiro token, s | 18,7 (Melhor valor da linha) | 266,5 | 91,2 | 463,7 | 163,0 |
| Velocidade de saída, tokens/s | 190,1 (Melhor valor da linha) | 68,7 | 59,1 | 87,5 | 85,4 |
A Figura 2 é o mapa do resto desta secção. As duas linhas do índice mostram a queda, e as três linhas por baixo mostram o que se manteve verdadeiro apesar dela. Os cinco modelos estão no seu nível máximo de esforço, e a coluna do Muse Spark corresponde à variante max. [1] [3] [4]
O índice premeia tarefas de agente, e foi aí que a Meta melhorou. A Artificial Analysis constrói o Intelligence Index a partir de quatro categorias, com os agentes a valerem 30% e o raciocínio geral outros 30%, e a programação e a ciência 20% cada, e diz sem rodeios que «a ponderação dá ênfase às tarefas de agente». [13] O ganho do Muse Spark 1.3 face ao 1.2 está quase todo nessa fatia: a pontuação num benchmark de apoio ao cliente bancário subiu de 35% para 52%, o que o colocou em primeiro entre todos os modelos, e a classificação no teste de trabalho profissional GDPval subiu cerca de 139 Elo. Ao mesmo tempo perdeu quatro pontos em raciocínio de contexto longo e um a três no teste de conhecimento. [1] A Artificial Analysis explica ainda como é que a definição max conquista os pontos extra: «usando mais turnos e mais tokens de raciocínio no total, raciocinando 62% mais no GDPval-AA v2 e 28% mais no Tau3-Bench Banking» do que o xhigh. [1] Um índice composto pode subir por causa de duas linhas enquanto as linhas que interessam a um programador descem.
Os 62 pontos foram medidos numa definição que ninguém podia comprar. A variante max estava em pré-visualização limitada para os parceiros da Meta no dia do lançamento, e o VentureBeat noticiou que a Meta dizia estar «ainda a concluir testes de segurança adicionais» e que a variante chegaria em breve. Abriu ao público a 4 de setembro. [11] A definição que os programadores conseguiam mesmo invocar, xhigh, obteve 61 pontos no índice antigo e 52 no novo. [1] [3] Não é nada de invulgar, porque a Anthropic e a OpenAI também publicam os seus melhores números seja qual for o esforço, mas significa que «o Muse Spark bate o Astra» descrevia uma comparação entre uma versão de pré-visualização e um produto já à venda.
As pontuações de programação vêm do harness da própria Meta. A Artificial Analysis corre os testes de agentes de programação dentro do agente de cada fabricante, quando existe um, por isso o Muse Spark corre dentro do Muse Code, e a Meta diz que o modelo foi treinado nos seus próprios harnesses. [5] [18] A Vals AI corre todos os modelos no mesmo harness do Terminal-Bench 2.1, e aí o Muse Spark 1.3 fica com 72,28% e em décimo sexto lugar entre 62, enquanto o Astra, o Sol, o Fable 5.1 e o Opus 5 ficam todos entre os 85% e os 87%. [14] A tabela da própria Meta reporta 88,8% no mesmo benchmark. [6] A diferença é um efeito do harness, e a Cline demonstrou-o em agosto: a equipa copiou as instruções do system prompt do Muse Code para o seu próprio agente e correu o mesmo modelo Muse Spark 1.2 na mesma tarefa. Os tokens caíram de 19,7 milhões para 7,2 milhões, a execução terminou em 24 minutos em vez de 49, e o custo desceu de $7,69 para $3,25 sem que mudasse nada além do prompting. [15]
As comparações da Meta foram escolhidas para favorecer a Meta. A discrepância entre max e xhigh e a regra do melhor valor disponível já ficaram descritas acima. Há uma linha que mostra o que isso dá na prática. A tabela da Meta atribui ao Muse Spark 59,4 no benchmark de perguntas sobre bases de código da Scale, à frente do Opus 5 com 52,7 e do Sol com 53,5. A tabela de classificação da própria Scale, medida com outra métrica, tem o Opus 5 em 63,17 e o Sol em 46,00, e nem sequer lista o Muse Spark 1.3. [6] [16] Ninguém falsificou nada, mas a tabela compara uma execução da Meta com valores retirados de documentos de outros fabricantes, e apresenta o resultado como uma vitória.
O que mudou na versão 4.2, e o que não mudou
A reavaliação de 4 de setembro duplicou o peso dos conjuntos de teste privados para 40% «para impedir manipulações», retirou o GPQA Diamond porque «já está saturado» e acrescentou duas avaliações novas. [2] O Muse Spark 1.3 tinha obtido 94% no GPQA. Com a nova ponderação caiu do terceiro para o nono lugar, e as pontuações de todos os modelos ficaram mais comprimidas, pelo que a distância para o Opus 5 encolheu para um ponto mesmo com o Astra a passar à frente. [2] [3]
A Artificial Analysis não aponta o dedo a nenhum laboratório nesse anúncio, e eu também não o vou fazer por ela. Parte da mudança de posição deve-se simplesmente à entrada do GPT-6 Astra na tabela a 3 de setembro. Mas o calendário é o que é: um modelo que se apoiava num benchmark público saturado e em linhas de agentes parcialmente públicas perdeu terreno no momento em que o índice passou a apoiar-se em dados privados. O novo benchmark privado, um teste sobre documentos de empresa chamado AA-Briefcase, coloca o Muse Spark em quarto, atrás do Fable 5.1, do Opus 5 e do Astra, portanto o modelo não desabou em trabalho que nunca tinha visto. [3] Só deixou de ser terceiro.
Um segundo avaliador diz aproximadamente o mesmo sem que nenhuma versão tenha mudado. O índice da Vals AI, que pondera as tarefas pelo seu valor económico e corre tudo no mesmo harness, coloca o Muse Spark 1.3 em oitavo entre 54, a $2,90 por teste, com o Fable 5.1 em primeiro a $28,92. [17] Dois métodos independentes concordam agora à volta do nono lugar. A minha leitura é que o nono lugar é onde o modelo sempre esteve, e que o resultado na versão 4.1.1 do índice foi um artefacto de dois dias, produzido pela ponderação e pelos níveis de esforço, e não um período de dois dias em que a Meta liderou a OpenAI.
O número que sobreviveu: preço e velocidade
Todas as reavaliações deixaram uma afirmação de pé. O Muse Spark 1.3 é, por larga margem, o modelo mais barato perto do topo da tabela, e é também o mais rápido a responder. Esta é a versão honesta de «desempenho de fronteira quase barato de mais para se medir».
- por tarefa do Intelligence Index
- $0,95
- O Fable 5.1 custa $6,12 e o Astra $2,57
- até ao primeiro token
- 18,7 s
- O Astra espera 464 s e o Fable 5.1 267 s
- velocidade de saída
- 190 tok/s
- cerca do dobro do Astra e o triplo do Opus 5
A Figura 3 põe a vantagem de preço nas mesmas unidades que a pontuação de inteligência. No índice atual, o Muse Spark 1.3 fica quatro pontos abaixo do Fable 5.1 por cerca de um sexto do custo por tarefa, e dois pontos abaixo do Astra por pouco mais de um terço. [3] Os números de velocidade são os que se notam primeiro: o primeiro token em menos de 19 segundos, quando o Astra com esforço máximo demora quase oito minutos. [3] [4] No dia do lançamento, a Artificial Analysis disse que nenhum modelo com 59 pontos ou mais custava menos por tarefa, e o anúncio da versão 4.2 continua a listar a Meta entre os quatro laboratórios na sua fronteira de custo por tarefa. [1] [2]
A comparação em programação segue o mesmo padrão. No Coding Agent Index, o Muse Spark 1.3 dentro do Muse Code obtém 64 pontos a $1,62 por tarefa e cerca de 13 minutos, contra o Fable 5.1 dentro do Claude Code com 70 pontos por $9,18 e 24 minutos, e o Astra dentro do Codex com 67 por $4,72. [18] Ficar seis pontos atrás do líder por menos de um quinto do dinheiro é uma posição real, mesmo com a ressalva do harness que referi acima.
O escalão de contribuidor é a parte que eu leria duas vezes. A $0,10 na entrada e $0,20 na saída sai cerca de doze vezes mais barato do que o escalão normal, e a condição é que a Meta pode usar os seus prompts e as respostas do modelo para treinar modelos futuros. [7] A OpenCode tornou o modelo de contribuidor gratuito durante um período depois do lançamento, e o tópico do r/opencode que o anunciou chamou-lhe o modelo gratuito mais capaz que existe. [22] Para um projeto pessoal é uma pechincha. Para um repositório que contém código de um cliente é uma decisão sobre tratamento de dados, não sobre preço.
O que dizem os programadores depois de o usarem
Quem correu mesmo o Muse Spark 1.3 descreve uma ferramenta de trabalho rápida, barata e obediente que não parece um modelo de topo, e essa descrição encaixa melhor no índice do que as afirmações do lançamento ou do que as desvalorizações. As desvalorizações é que foram mais barulhentas.
O veredicto mais votado apareceu no r/codex a 3 de setembro, num tópico que fazia notar que a Artificial Analysis punha o Astra ao nível do Sol e abaixo do Muse Spark. A resposta, com 204 pontos, foi seca: «Esta pontuação já não quer dizer grande coisa. Quem tiver usado o Muse Spark 1.3 sabe que não está sequer perto de ser um modelo do top 10.» [20] O melhor relato prático veio do r/singularity, onde um utilizador publicou quatro vezes ao longo de uma noite. Antes de testar, dizia estar «com dificuldade em acreditar nisto». Uma hora depois: «parece mecânico (excelente para trabalho, para estratégia não sei) e muito capaz. Parece muito rápido.» A leitura final foi que «põe a fasquia acima do Grok 4.6; é muito inteligente, mas não parece profundo. Muito, muito capaz de trabalhar.» [21] No Hacker News, um programador que andava a usar o escalão de contribuidor do 1.2 para desenvolvimento escreveu que não era «de modo nenhum um modelo de fronteira», mas que «parecia conhecer as suas fraquezas e não tentava impor-me as suas opiniões». Outro resumiu o lançamento melhor do que quase toda a imprensa: «Não devia pensar “uau, o Facebook apanhou os outros”. Devia pensar “uau, o Facebook está a menos de 6 meses da fronteira”.» [19]
As acusações de batota são outra história, porque não encontrei nenhuma prova por trás delas. O comentário no topo de um dos tópicos do Reddit era uma ligação intitulada «Pretraining on the Test Set Is All You Need», e a palavra «benchmaxxed» aparece em quase todos os tópicos, mas ninguém apresentou uma constatação de contaminação contra qualquer modelo Muse, e a Artificial Analysis acrescentou deteção de reward hacking ao seu índice de programação sem assinalar um único caso. [29] A única queixa concreta sobre metodologia é bem mais estreita. Em julho, um comentador do Hacker News que se apresentou como antigo funcionário da Meta fez notar que o relatório de avaliação do Muse Spark 1.1 correu as tarefas do Terminal-Bench com 6 núcleos de CPU e 8 GB de RAM, acima dos limites que a maioria dessas tarefas especifica, e defendeu que era isso que explicava a ausência do modelo na tabela de classificação oficial. O relatório da Meta diz exatamente isso, e a queixa foi contestada no mesmo tópico por alguém que dizia que os limites são recomendações e não alteram os resultados. [25] [26] Leio aquilo como uma dúvida legítima sobre um benchmark, não como prova de alguma coisa maior.
A desconfiança tem uma origem, e não é de 2026. Em abril de 2025, a Meta submeteu à tabela de classificação da LMArena uma versão experimental do Llama 4 Maverick afinada para conversa, que ficou em segundo lugar, enquanto a versão que entregou depois aos programadores ficou em trigésimo segundo. A LMArena disse que a interpretação que a Meta fez da sua política «não correspondeu ao que esperamos dos fornecedores de modelos», e um estudo posterior contou 27 variantes privadas da Meta testadas na arena antes do lançamento do Llama 4. [23] [24] Nada de parecido apareceu com o Muse Spark, e a Meta publica agora um documento de metodologia com cada lançamento. [12] Mas quando um laboratório com esse historial publica um número acima do novo modelo de topo da OpenAI, a internet vai buscar primeiro a explicação antiga. A minha leitura é que o episódio de 2025 explica porque é que o ceticismo de 2026 foi imediato, e os quatro efeitos acima explicam porque é que ele tinha parte de razão pelos motivos errados.
Onde é que eu o usaria
Usaria o Muse Spark 1.3 em trabalho de agente de grande volume, onde a velocidade e o preço contam mais do que os últimos pontos de discernimento, e guardaria o Fable 5.1, o Opus 5 ou o Astra para tudo o que seja de horizonte longo ou que eu não me possa dar ao luxo de repetir. As pontuações apoiam esta divisão muito melhor do que apoiam «a Meta apanhou os outros» ou «a Meta manipulou os testes».
| Tarefa | Adequação | Porquê |
|---|---|---|
| Execuções de agente em massa: classificação, extração, tickets de rotina | Boa | Cerca de $0,95 por tarefa do índice e o primeiro token em 19 segundos |
| Iterar depressa dentro do Muse Code | Boa | É o harness com que foi treinado e onde as pontuações de programação são medidas |
| Programação de horizonte longo num repositório grande | Fraca | Décimo sexto num harness de terminal neutro, e atrás no teste privado de agentes |
| Qualquer coisa com código de clientes ou dados sensíveis | Só no escalão normal | O desconto de contribuidor paga-se com direitos de treino |
| Substituir um modelo de fronteira por causa do índice | Ainda não | Nono em dois índices independentes quando se fixam o esforço e a versão |
Duas notas práticas. Pergunte em que nível de esforço um número foi medido antes de confiar nele, porque max e xhigh estão entre um e dez pontos de distância neste modelo, consoante o teste. [3] [11] E trate qualquer pontuação de índice como se trouxesse um número de versão colado, porque a que você leu numa captura de ecrã pode já ter sido substituída. Na semana do lançamento, Zvi Mowshowitz lembrou que o Grok 4.6 também chegou a marcar 61 pontos e depois quase nunca mais se ouviu falar dele, e que a atitude sensata era ficar de olho no Muse Spark partindo do princípio de que ainda não era suficientemente bom. [28] Depois de três dias a ler os números por trás dos números, foi mais ou menos aí que eu também fiquei, com um acrescento: a este preço, «ainda não é suficientemente bom» continua a valer um lugar na caixa de ferramentas.
Fontes
- Muse Spark 1.3: Meta reaches the frontier
- Announcing Artificial Analysis Intelligence Index v4.2
- Muse Spark 1.3 (max) model analysis
- Benchmarking GPT-6 Astra
- Introducing Muse Spark 1.3
- Muse Spark model page
- Pricing and rate limits
- Introducing Muse Spark: Scaling towards personal superintelligence
- Meta abandons open-source Llama for proprietary Muse Spark
- Meta to open source its most powerful AI model as it takes swipe at OpenAI, Anthropic
- Meta says Muse Spark 1.3 has frontier performance, but its best results come from a model developers can't broadly use yet
- Muse Spark 1.3 evaluation methodology
- Intelligence benchmarking methodology
- Terminal-Bench 2.1 leaderboard
- On running Muse Spark 1.2 with Muse Code prompts inside Cline
- SWE Atlas: Codebase QnA
- Vals Index
- Coding Agent Index
- Muse Spark 1.3 discussion
- Astra is good, but maybe we should calm down with the hype
- Meta's muse spark 1.3 surpassed fable 5 and GPT 5.6 sol
- Meta Muse Spark 1.3 is FREE on OpenCode Zen
- Meta's benchmarks for its new AI models are a bit misleading
- The Leaderboard Illusion
- On the Terminal-Bench resource caps in the Muse Spark 1.1 evaluation report
- Muse Spark 1.1 evaluation report
- The future of Meta Superintelligence: a 1 year progress update
- AI #184: Post Post Mortem
- Coding agents benchmarking methodology