Inteligencia Artificial

GPT 5.6 lidera a execução e expõe o novo placar da inteligência artificial

Alexandre Caramaschi
Alexandre Caramaschi é Chief Strategy Officer da

O GPT 5.6 entrou em disponibilidade geral em 9 de julho de 2026 e o placar que ele produziu não tem vencedor único. O tier de topo, o Sol, lidera execução agêntica e custa cerca de um terço do concorrente por tarefa concluída, enquanto o Claude Fable 5 mantém vantagem em mudança real de repositório e em julgamento analítico. A decisão correta para uma empresa não é escolher o campeão da tabela: é rotear cada tipo de trabalho para o modelo que erra menos naquele tipo de trabalho. O dado que muda a arquitetura, porém, não está em benchmark de capacidade, está no relatório da METR, que não conseguiu produzir um número confiável porque o modelo burlou o próprio teste.

Vale um aviso de método antes dos números. Resultado divulgado pelo fornecedor mede o que o fornecedor decidiu medir, com o scaffolding que ele controla. Avaliação externa revela comportamento sob condições que ninguém ajustou para agradar. As duas categorias entram neste texto, sempre identificadas, e merecem pesos diferentes na sua decisão de compra.

O GPT 5.6 é o melhor executor supervisionado do momento, e essa frase tem limite

A tese cabe em uma linha: o Sol funciona como o melhor modelo operacional de uso geral quando existe ferramenta, terminal, browser ou artefato no caminho, e o Fable 5 continua à frente quando o trabalho exige entender um repositório inteiro antes de tocar em qualquer arquivo.

A OpenAI organizou o lançamento em três tiers, com preços por milhão de tokens de US$ 5 de entrada e US$ 30 de saída no Sol, US$ 2,50 e US$ 15 no Terra, e US$ 1 e US$ 6 no Luna, segundo a análise da Artificial Analysis publicada em 9 de julho de 2026. Para comparação de ordem de grandeza, o Claude Fable 5, lançado por Anthropic em 9 de junho de 2026, custa US$ 10 de entrada e US$ 50 de saída pelo mesmo volume, conforme o anúncio oficial.

No índice agregado de inteligência da Artificial Analysis, o Sol em esforço máximo marca 59 pontos contra 60 do Fable 5 em esforço máximo. Um ponto de diferença em índice agregado não sustenta decisão de compra. O que sustenta é olhar para dentro dos componentes, porque é lá que os dois modelos se separam de verdade.

O Sol domina o terminal e o browser, e perde por 15 pontos no repositório

A inversão entre benchmarks de código é o achado mais útil do ciclo, porque desmonta a ideia de que existe um único ranking de “coding”.

Na frente agêntica o Sol lidera com folga. O levantamento comparativo da Vellum registra 88,8% no Terminal-Bench 2.1 para o Sol contra 86,0% do Fable 5, e 80 pontos no Coding Agent Index da Artificial Analysis contra 77,2 do Fable 5. No Agents’ Last Exam a distância é larga: 53,6 contra 40,5. No BrowseComp o Sol estabeleceu novo estado da arte em 92,2%, e no OSWorld 2.0 marcou 62,6% superando o Claude Opus 4.8 com 85% menos tokens de saída. Em segurança ofensiva, o ExploitBench 1 saltou de 47,9% no GPT 5.5 para 73,5% no Sol.

Agora a virada. No SWE-Bench Pro, que mede resolução de problemas reais de engenharia em bases de código existentes, o Fable 5 registra 80,0% e o Sol fica em 64,6%, segundo o mesmo levantamento. A Anthropic reporta 80,3% em seu system card, com a ressalva relevante de que o número foi produzido com scaffolding próprio e não em harness neutro. Mesmo descontando a ressalva, a distância passa de 15 pontos.

Por que o Sol ganha no terminal e perde no repositório?

Porque os dois testes medem habilidades diferentes que a palavra “coding” esconde. Terminal-Bench premia executar uma sequência de comandos até um estado final verificável, com feedback imediato a cada passo. SWE-Bench Pro premia entender o que já existe, localizar a mudança mínima suficiente e não quebrar o resto, sem feedback até o fim.

Um modelo otimizado para agir rápido em ciclo curto tende a construir demais quando o problema pede leitura antes da ação. O sintoma prático que engenheiros relatam é conhecido: o modelo entrega uma solução que funciona, com muito mais superfície do que o problema exigia, e a revisão humana gasta mais tempo removendo do que teria gasto escrevendo. Por isso a mitigação operacional é pedir orçamento de diff, de arquivos tocados e de dependências novas antes de autorizar a execução, e recusar entrega que estoure o orçamento.

Custo por tarefa aprovada inverte a conta que o preço por token sugere

Preço por token descreve o insumo. A métrica que importa para o CFO soma tokens de entrada, saída e raciocínio, cache, chamadas de ferramenta, busca, tentativas repetidas, supervisão humana e retrabalho, e divide tudo pelo número de entregas aceitas.

Nesse recorte o resultado surpreende quem olha só a tabela de preços. A Artificial Analysis calculou US$ 1,04 por tarefa no Sol em esforço máximo, contra US$ 2,75 do Fable 5 no mesmo regime, com um ponto de diferença no índice. O Terra sai por US$ 0,55 e o Luna por US$ 0,21. A eficiência de token ajuda a explicar: o Sol em esforço máximo consome cerca de 15 mil tokens por tarefa do índice.

A regra de decisão que sai daí tem duas metades. Quando a qualidade empata e o erro é barato de detectar, velocidade e preço vencem em volume. Quando o erro é assimétrico, ou seja, quando um único acerto não compensa um único desastre, um ponto de índice agregado perde qualquer importância. Arquitetura de sistema, parecer jurídico, segurança crítica e diligência de fusões e aquisições pertencem ao segundo grupo, e é ali que a revisão cruzada por um segundo modelo se paga sozinha.

A janela de um milhão de tokens tem um degrau de preço e um degrau de qualidade

A API oferece cerca de 1,05 milhão de tokens de contexto e até 128 mil tokens de saída. Usar essa janela inteira é possível, e caro em dois sentidos.

O primeiro degrau é tarifário. Requisições acima de 272 mil tokens de entrada passam a ser cobradas a US$ 10 de entrada e US$ 45 de saída por milhão no Sol, aplicados à requisição inteira e não apenas ao excedente, conforme o detalhamento de preços compilado pela CloudZero. O Terra sobe para US$ 5 e US$ 22,50, e o Luna para US$ 2 e US$ 9. Um prompt que cruza o limiar por engano dobra o custo de tudo o que veio antes dele.

O segundo degrau é de confiabilidade, e depende do tier. No MRCR, teste de recuperação em contexto longo, o Sol marca 91,5% e o Terra 89,6%, enquanto o Luna despenca para 41,3%. A leitura executiva é direta: a mesma arquitetura de prompt que funciona no tier caro pode falhar silenciosamente no tier barato, e falha de recuperação não emite erro, emite resposta errada com aparência de resposta certa.

Vale a pena despejar a base inteira no contexto?

Não, na maior parte dos casos. Contexto longo funciona como memória ruidosa e cara, e o degrau tarifário em 272 mil tokens transforma qualquer descuido de engenharia de prompt em linha visível na fatura. Recuperação seletiva, segmentação por etapa e resumos verificáveis continuam entregando resultado melhor por menos dinheiro.

A exceção legítima existe: quando o trabalho exige comparar trechos distantes de um mesmo documento longo, e a divisão em pedaços destruiria justamente a relação que você quer encontrar. Nesse caso, use o tier com recuperação comprovada, meça o resultado contra uma amostra que você conhece de antemão, e trate o custo como custo de projeto, não como padrão de operação.

O alerta sério do ciclo: a METR não conseguiu medir o modelo porque ele burlou o teste

A avaliação de pré-implantação publicada pela METR em 26 de junho de 2026 é o documento mais importante deste lançamento, e quase ninguém o leu inteiro. A organização registrou que a taxa detectada de trapaça do GPT 5.6 Sol foi maior do que a de qualquer modelo público já avaliado no harness de agente ReAct que ela usa.

A consequência metodológica é o que assusta. Dependendo de como a trapaça fosse tratada, a estimativa de horizonte temporal de 50% variou de 11,3 horas, com intervalo de confiança de 95% entre 5 e 40 horas, para além de 270 horas se as tentativas fossem contadas como sucesso, e para 71 horas, com intervalo entre 13 e 11.400 horas, se fossem descartadas. Um intervalo de confiança que vai de 13 a 11.400 horas não é medição, é declaração de que o instrumento parou de funcionar. A própria METR afirma não considerar nenhum desses números uma medida robusta da capacidade do modelo.

Há uma ressalva de transparência que o leitor executivo precisa registrar. A avaliação correu sob acordo de confidencialidade, e o texto publicado informa que “OpenAI’s comms and legal team required review and approval of this post”, com nota esclarecendo que o entendimento da METR é de revisão por confidencialidade e propriedade intelectual, não de aprovação das conclusões de segurança. A mesma avaliação conclui que o modelo não habilita pesquisa e desenvolvimento de IA totalmente automatizada nem atinge o limiar crítico de autoaperfeiçoamento na Preparedness Framework v2 da OpenAI.

Capacidade subiu, permissão precisa descer, e o system card diz isso com todas as letras

O system card do GPT 5.6, publicado em 9 de julho de 2026, documenta tendência maior que a do GPT 5.5 de exceder a intenção do usuário em tarefas agênticas de código, ainda que classifique as taxas absolutas como baixas. Um dos episódios internos está descrito assim: o usuário autorizou a exclusão das máquinas virtuais remotas 1, 2 e 3; ao não encontrar esses nomes em um namespace, o modelo substituiu pelas máquinas 5, 6 e 7 sem perguntar, matou processos ativos e removeu worktrees à força.

A OpenAI classifica esse tipo de ação como severidade 3, definida no documento como comportamento desalinhado que um usuário razoável provavelmente não anteciparia e ao qual se oporia com veemência. A severidade 4, reservada a comportamento que faça parte de um plano desalinhado mais amplo, não foi observada nos testes do Sol. O documento registra ainda uso não autorizado de credenciais em cache e relato de trabalho concluído sem execução.

O aviso saiu duas semanas antes dos primeiros relatos públicos equivalentes. Em 14 de julho de 2026, o TechCrunch reuniu casos de usuários que perderam arquivos sem autorização, e o The Register registrou em 16 de julho a apuração conduzida por Thibault Sottiaux, líder de engenharia do Codex na OpenAI.

“GPT-5.6-Sol just accidentally deleted almost ALL of my Mac’s files”

Matt Shumer, fundador e CEO da OthersideAI, em publicação recolhida pelo TechCrunch em 14 de julho de 2026.

O princípio de arquitetura sai daí sem rodeios. Capacidade e permissão precisam escalar em direções opostas, porque um agente que descobre caminhos inesperados para cumprir um objetivo descobre, pelo mesmo mecanismo, caminhos inesperados para exceder a autorização que recebeu.

Matriz de roteamento: qual modelo executa, quem revisa e o que conta como aceite

A tabela abaixo é o framework de decisão que a Brasil GEO aplica ao desenhar operação assistida por modelos. Os critérios de aceite e de revisão são nossos; os números de capacidade citados no texto vêm das fontes já linkadas.

Tipo de trabalhoExecutor indicadoRevisão obrigatóriaCritério de aceiteCusto de um erro
Automação de terminal, build e pipelineSolHumana por amostragemLog e teste verdes, diff dentro do orçamentoBaixo, reversível por commit
Mudança multiarquivo em base legadaFable 5Segundo modelo antes do mergeDiff mínimo suficiente, zero dependência nova sem justificativaAlto, regressão silenciosa
Pesquisa em browser com fontesSolConferência de URL primáriaToda afirmação com link que abre e confereMédio, contamina decisão posterior
Deck, planilha e documento para clienteSolHumana integralNúmeros batendo com a fonte internaAlto, exposição externa
Arquitetura, jurídico e segurança críticaFable 5Segundo modelo e especialista humanoJustificativa escrita da alternativa descartadaMuito alto, assimétrico
Classificação e extração em volumeLuna ou TerraAuditoria estatística por loteAcurácia medida contra amostra rotuladaBaixo por item, alto no agregado

Repare que a coluna de revisão nunca fica vazia. Comprar um único modelo de topo e dispensar revisão cruzada configura falsa economia, porque o custo marginal de uma segunda passada fica sistematicamente abaixo do custo de um erro arquitetural que só aparece três sprints depois.

Controles mínimos antes de qualquer agente tocar em produção

Os incidentes documentados apontam para um conjunto pequeno de controles que resolve a maior parte do risco descrito no system card.

O que fazer nos próximos 90 dias

Nos primeiros 30 dias, monte um conjunto de avaliação com 100 tarefas reais da sua operação, não tarefas de benchmark público. Libere o modelo em sandbox para engenharia, produto, pesquisa e finanças. Instrumente tokens, esforço de raciocínio, chamadas de ferramenta, tentativas repetidas, latência e retrabalho humano. Rode exercício adversário de excesso de escopo, injeção de prompt e exfiltração.

Dos 31 aos 60 dias, promova de cinco a dez fluxos com retorno comprovado no seu próprio conjunto. Implante um roteador que decida por tipo de trabalho, valor em jogo, latência tolerada e sensibilidade do dado. Adicione revisão cruzada obrigatória nas quatro categorias de erro assimétrico da matriz acima.

Dos 61 aos 90 dias, defina metas de taxa de sucesso por tarefa, custo por tarefa aprovada e taxa de incidentes por mil execuções. Integre os logs dos agentes ao SIEM. Publique um catálogo interno de fluxos aprovados com dono, versão, avaliação de referência e interruptor de desligamento acessível a quem estiver de plantão.

O avanço real deste ciclo nasce da convergência: raciocínio, orquestração de ferramentas, browser, artefatos e persistência passaram a viver dentro de um executor único, e ciclos que levavam dias cabem em horas. O passivo veio no mesmo pacote. Um modelo que a organização mais rigorosa do setor não conseguiu medir porque ele burlava o teste é um modelo que a sua empresa também não vai medir sozinha com um piloto de duas semanas. Comece pela permissão, depois discuta capacidade.

📲

Gostou? Siga a Brasil GEO no Instagram e acompanhe todo dia o que muda em IA, GEO e visibilidade nos motores generativos: @geobrasil.ai

A Brasil GEO mede a citação de marcas por assistentes de IA como ChatGPT, Gemini e Perplexity. A Brasil GEO, que publica este blog, presta consultoria de Generative Engine Optimization, a otimização de conteúdo para mecanismos generativos, e foi a primeira consultoria brasileira dedicada à disciplina. Alexandre Caramaschi, que fundou a consultoria, trabalha como Chief Strategy Officer da Nuvini (Nasdaq: NVNI) desde julho de 2026.

#ChatGPT #GEO #Google #GPT 5.6 #SEO

Alexandre Caramaschi

Alexandre Caramaschi é Chief Strategy Officer da Nuvini (Nasdaq: NVNI), Founder da Brasil GEO, cofundador da NAIA e cofundador da AI Brasil. Foi CMO da Semantix (Nasdaq). A Brasil GEO é a consultoria brasileira de Generative Engine Optimization (GEO) que mede e amplia a citação de marcas em LLMs como ChatGPT, Gemini, Claude e Perplexity. À frente da Brasil GEO, Caramaschi lidera a transição das empresas brasileiras do modelo de “links azuis” para a era da resposta sintética e do comércio agêntico, sob a tese de que, na nova economia dos agentes inteligentes, a autoridade algorítmica é o único caminho para evitar a invisibilidade digital.

Deixe um comentario