Quando a tarefa é construir o agente inteiro, o melhor par medido faz 23,9% do trabalho.
terça-feira, 8 de setembro de 2026 · último ciclo editorial fechado antes de 08/09 04h45
O teto de referência, escrito por um especialista humano, é 82,2%. O número chega na semana em que a OpenAI declarou batida a meta do estagiário de pesquisa automatizado e em que a Cursor disse que agentes criam mais de 60% dos pull requests aprovados na própria casa. O dia trouxe ainda os 3 bilhões de euros da Mistral, a primeira medição de fora do chip de IA do Google e uma prova de matemática assistida por IA descrita por Terence Tao.
Manchete
Um benchmark publicado em 4 de setembro por Quan Shi, Keshav Dhandhania, Karthik Narasimhan e Victor Barres, da Sierra e da Universidade de Princeton, mediu o que acontece quando a tarefa dada ao modelo é construir um agente inteiro para um cliente, e não escrever um trecho de código (benchmark é um teste padronizado que compara sistemas na mesma tarefa): a melhor configuração testada, o Claude Opus 5 rodando dentro do Claude Code, passa em 23,9% das simulações, contra 82,2% de uma solução de referência escrita por especialista humano.
O número chega na semana em que a OpenAI declarou batida a meta do estagiário de pesquisa automatizado e em que a Cursor disse que agentes criam mais de 60% dos pull requests aprovados na própria casa. O dia trouxe ainda os 3 bilhões de euros da Mistral, a primeira medição de fora do chip de IA do Google e uma prova de matemática assistida por IA descrita por Terence Tao.
Item 1O melhor agente medido entrega 23,9% de um trabalho de atendimento, contra 82,2% do teto humano
FatoO benchmark τ^τ-Bench, submetido em 04/09 por Quan Shi, Keshav Dhandhania, Karthik Narasimhan e Victor Barres (Sierra e Universidade de Princeton), entrega ao modelo os registros de um negócio, um cliente com requisitos, uma API de produção, uma base de código herdada e um teto de custo, e pede de volta um agente de atendimento, que depois é avaliado contra usuários simulados. Em 53 tarefas de quatro domínios, o Claude Opus 5 rodando dentro do Claude Code passa 23,9% das simulações. O GPT-5.6-sol dentro do Codex, o equivalente da OpenAI, faz 22,0%, e o Claude Sonnet 5 dentro do Claude Code faz 14,9%. O teto de referência, escrito por especialista humano, é 82,2%.
A distribuição por domínio é desigual: 35 das 53 tarefas são bancárias, e ali a mesma configuração do Opus 5 passa 5,9%, contra 72,8% no varejo. Trocar de modelo dentro do mesmo produto custa 9,0 pontos, e trocar o par inteiro separa 1,9 ponto.
Duas ressalvas viajam com o resultado: o teto de 82,2% foi escrito por quem desenhou a avaliação e conhece o gabarito dela, e a Sierra vende agentes de atendimento, ainda que os modelos medidos sejam de terceiros (radar de 03/09, radar de 07/09).
Item 2Mistral levanta 3 bilhões de euros com a Samsung na liderança, com avaliação acima de 21 bilhões
FatoA Mistral, fabricante francesa de modelos de pesos abertos, publicou em 08/09 na própria página de notícias que fechou uma rodada Série D de 3 bilhões de euros liderada pela Samsung Electronics, com avaliação pós-investimento acima de 21 bilhões de euros. O título do anúncio é "Mistral raises €3B to make sovereign, open-weight AI the technology frontier". A cobertura da operação registra 11,7 bilhões de euros de avaliação na Série C, de setembro de 2025.
Quem liderou é uma fabricante de chips e eletrônicos da Coreia do Sul, e não um fundo europeu. A frase "maior rodada de capital já levantada por uma empresa de tecnologia europeia" é da própria Mistral, depende de como se define rodada e empresa europeia, e a lista de investidores não aparece na página do anúncio.
A comparação com computação contratada aparece quando a empresa disser o que treinou com os 3 bilhões de euros.
Item 3A primeira medição de fora do TPU do Google põe o Ironwood em US$ 0,181 por milhão de tokens
FatoA SemiAnalysis publicou em 07/09 a primeira medição de terceiro do TPUv7 Ironwood na plataforma InferenceX. TPU é o chip que o Google projeta para IA, alternativa às GPUs da NVIDIA que a maior parte do mercado usa. A 100 tokens por segundo por usuário (token é o pedaço de texto que o modelo processa e que serve de unidade de cobrança), o Ironwood aparece a US$ 0,181 por milhão de tokens, contra US$ 0,222 do B200 e US$ 0,276 do B300, as duas gerações recentes da NVIDIA. A própria SemiAnalysis resume o resultado como até 50% de vantagem em desempenho por dólar.
O texto credita quinze pessoas do time do Google e o time da Inferact pela base de TPU e pelo trabalho de desempenho, ou seja, a medição chamada de terceiro tem dentro dela quem vende o que se mede, mesmo desenho do número que a OpenAI publicou sobre o próprio chip (radar de 26/08).
Os valores valem a 100 tokens por segundo por usuário, e a ordem da tabela muda em outro ponto de operação.
Item 4A camada em volta do modelo vale 17,5 pontos quando alguém controla o teste, e um exemplo só quando o número vem de quem vende
FatoUm relatório de treino publicado em 03/09 pela equipe que se assina AllSpark Team mede o mesmo modelo com e sem gestão de contexto na hora da inferência, com ferramentas, limite de contexto e juiz congelados. No BrowseComp, teste que mede se o agente encontra resposta difícil navegando na web de verdade, o Iris-mini (35 bilhões de parâmetros) sai de 64,7 para 82,2, e o Iris-pro sai de 72,6 para 88,6. Os autores escrevem no resumo que essa camada vale, nesses testes, mais do que a maior parte das diferenças reportadas entre sistemas. Os números são da equipe que treinou o modelo, ninguém de fora conferiu, e os pesos ainda não saíram: o paper escreve que planeja liberar.
Três artefatos em adoção trazem a mesma promessa sem esse controle. O Dr. Claw, submetido em 31/08 por treze autores de seis universidades, embrulha agentes de linha de comando com estado persistente e biblioteca de skill (skill é o pacote de instrução reutilizável do agente) e reúne 120 votos na página de papers em destaque do Hugging Face; a vantagem que ele mede, 0,952 contra 0,873 em completude de pesquisa, sai de três problemas, com intervalo de confiança de 95% que vai de -0,00 a +0,14 e portanto inclui zero, o que significa que a diferença pode ser sorte da amostra, e os próprios autores chamam o estudo de demonstração exploratória.
O ECC, coleção de affaan-m com 68 agentes, 286 skills e 94 comandos, marcou 1.897 estrelas no dia sobre 253.454 totais, com 2.667 commits e nenhum número de eficácia. E o context-mode alega 98% de redução na saída de ferramenta que entra no contexto do agente, número tirado de um exemplo único (315 KB virando 5,4 KB), sob licença ELv2, que proíbe oferecer o software como serviço concorrente.
É a quinta medição em duas semanas a separar o resultado do modelo do resultado da camada que o executa (radar de 04/09, radar de 02/09), e a única com condição de controle vem de quem vende o produto medido.
Item 5O git.kernel.org gasta 14 núcleos montando página para robô, e um navegador que se disfarça de gente entra no trending do GitHub
FatoKonstantin Ryabitsev, mantenedor da infraestrutura do código do Linux, escreveu em 29 de agosto que o git.kernel.org gasta mais CPU montando páginas de commit para crawlers (programas que varrem sites automaticamente) do que para todo o acesso legítimo somado, clones do Git incluídos: são 14 núcleos de CPU espalhados por 5 nós que não fazem outra coisa, dentro de 6 milhões de requisições por dia, com 66% delas barradas de imediato pelo desafio Anubis, que obriga o visitante a resolver um cálculo antes de ver a página. Ele estima que 2% do tráfego é gente. O texto não nomeia empresa nem user-agent, e ele conta que os crawlers pararam de se identificar e passaram a se disfarçar de navegador comum.
No mesmo ciclo, o camofox-browser entrou na lista de repositórios em alta do GitHub com 10.104 estrelas, 135 delas no dia: ele empacota o Camoufox, fork do Firefox que falsifica os sinais de identificação do navegador no nível do código C++, antes de qualquer JavaScript rodar, como navegador headless (sem interface gráfica) para agente, com o objetivo declarado de contornar Cloudflare e a detecção de robô.
E no r/LLMDevs um post de 07/09 mostra agentes comentando embaixo dos posts do autor e se identificando como agentes, com um comentarista que diz ter trabalhado no Reddit afirmando que a plataforma quase não consegue distinguir usuário humano de modelo. Nenhuma das três peças demonstra que o tráfego medido no kernel.org venha de raspagem para treino ou para agente.
Item 6Terence Tao descreve prova de explosão em tempo finito assistida por IA e conferida em Lean, para três equações
FatoTerence Tao publicou em 07/09 um post sobre o trabalho de Alpöge e Tristan Buckmaster, que provaram explosão em tempo finito com termo de forçamento suave para três equações: meio poroso incompressível, Boussinesq em duas dimensões e Euler incompressível em três dimensões. Explosão em tempo finito é quando a solução de uma equação deixa de fazer sentido físico num tempo determinado. Tao escreve que os argumentos são fortemente assistidos por IA e registra que o resultado foi formalizado em Lean, a linguagem em que uma prova é conferida passo a passo por computador, sem depender de revisão humana. Navier-Stokes, o problema em aberto sobre o comportamento de fluidos que tem prêmio de US$ 1 milhão do Instituto Clay, continua sem solução, e os autores dizem acreditar que a abordagem se estenda a ele.
O enunciado que vale o prêmio fica fora do que foi provado: o resultado cobre modelos simplificados e a versão forçada do problema, e o próprio post registra que a redação original dos autores foi descrita por eles como a pior que já tinham visto, o que diz quanto trabalho humano veio depois da parte assistida por máquina.
É o quarto ponto de uma série que este radar acompanha desde agosto, e o primeiro descrito por um matemático de fora do trabalho (radar de 11/08, radar de 05/09).
Item 7A Anthropic apoia avaliação de fora a cada quatro meses, e investidores pedem dois números que ela não publica
FatoNum projeto de segurança de IA em tramitação em Massachusetts, a Anthropic apoiou a exigência de avaliação independente de risco catastrófico a cada quatro meses, e OpenAI e Google se opuseram: executivos de política da OpenAI escreveram a parlamentares pedindo que o estado adote um desenho parecido com o de Illinois, com uma auditoria de terceiro por ano. O texto passou pelo Senado estadual e está em comissão conjunta. Na mesma semana, investidores que estudam entrar na abertura de capital da Anthropic pediram à empresa receita por token e receita por gigawatt de computação, ou seja, quanto ela fatura por unidade de texto processado e por unidade de capacidade de computador contratada, e querem saber se ela reporta receita bruta ou líquida quando vende por AWS e Google Cloud. A empresa não comentou publicamente o pedido.
As duas reportagens de origem são do The Information, estão atrás de paywall e não foram abertas: o que abriu foram veículos que as reproduzem, sem o número do projeto de lei, sem os limiares de porte de empresa que definiriam quem é alcançado e sem nenhum número financeiro vindo de documento da Anthropic.
Os três laboratórios divergem na frequência da auditoria, e os dois números pedidos pelos investidores são a conta que hoje só existe por estimativa de fora, do mesmo tipo que apareceu esta semana pelo lado do custo (item 3) e que já tinha aparecido pela boca de quem vende a capacidade (radar de 06/09).
Item 8HarvestBench: o texto do briefing move o comportamento em mais de 78 pontos, mais do que a troca de modelo
FatoO HarvestBench, publicado em 03/09 por Jasmine Brazilek, Miles Tidmarsh, Matthias Endres, Anshuman Singh e Jeremiah Miller (Compassion Aligned Machine Learning e departamento de economia da Universidade de Warwick), põe preço em evitar dano numa simulação agrícola: quando um animal bloqueia o trator, o modelo escolhe entre passar por cima de graça ou desviar pagando combustível. Em nove modelos e 7.201 decisões com preço, a taxa de atropelamento vai de 0,4% (3 casos em 712, GPT-5.6 Terra) a 98,8% (162 em 164, GPT-4o-mini). Com a instrução de moralidade no briefing, cinco de seis modelos de raciocínio ficam abaixo de 6%; sem ela, os seis passam de 84%. O controle que danifica o trator, a colisão com pedra, fica abaixo de 1% em todos.
A pontuação é lida de evento no log do jogo, sem juiz de modelo, e a ordenação dos modelos não segue capacidade.
É um gridworld de simulação, cada decisão é tomada sem memória das anteriores, os denominadores são desiguais (o extremo de 98,8% repousa sobre 164 decisões e o de 0,4% sobre 712), e o grupo autor é uma organização de alinhamento com tese declarada sobre o resultado. É a terceira medição do ciclo em que o texto que envolve o pedido move o comportamento mais do que a escolha do modelo (radar de 07/09, radar de 24/08).
Item 9Uma sonda no estado interno separa o tipo de raciocínio melhor do que o texto que o modelo escreve
Fato"Beneath the Surface of Chains-of-Thought", de Seogyeong Jeong, Jaehui Hwang, Dongyoon Han, Geonmo Gu, Alice Oh e Taekyung Kim (KAIST e NAVER AI Lab), publicado em 04/09 e aceito na conferência principal do EMNLP 2026, mede que oito tipos de operação de raciocínio (extração, decomposição, dedução, cálculo aritmético e outros) são separáveis nas representações internas do modelo, com pico nas camadas do meio. A sonda que lê esse estado interno chega a 0,937 de AUROC no Qwen3-8B, contra 0,802 a 0,854 de uma linha de base que usa só o texto produzido e 0,708 a 0,751 de outra que usa só a posição do token. AUROC é uma nota de 0 a 1 para o quanto um classificador separa duas categorias, e 1 é o teto.
O ganho sobre a leitura do texto é de 0,041 a 0,097, margem estreita, e os modelos sondados são abertos de 7 a 31 bilhões de parâmetros, nenhum de fronteira, que é onde a OpenAI escreveu ontem que o monitoramento da cadeia de raciocínio está perdendo confiabilidade (radar de 07/09).
No mesmo lote, o paper de teoria "Bilevel Coordinated Reflection", de 02/09, prova que nenhum filtro que observe apenas o texto gerado melhora de forma uniforme em ambientes indistinguíveis pelo texto, enquanto um filtro ancorado no ambiente melhora; o placar empírico dele (72,2% contra 70,8% em 500 instâncias do SWE-bench) é diferença de cerca de sete instâncias, sem intervalo declarado e contra uma linha de base deliberadamente enxuta, e sonda que separa também não demonstra que o modelo use aquela estrutura para raciocinar.
O repositório openai/skills, catálogo de skills para o Codex publicado pela própria OpenAI, se declara descontinuado e manda quem chega para o openai/plugins; ele ganhou 351 estrelas no dia, sobre 26.250, e não há data da depreciação nem comparação com o repositório de destino. Repositório
A NousResearch publicou a v0.21.1 da Hermes Agent, harness de linha de comando (harness é a base que executa o modelo, com prompts, ferramentas e código em volta), como rollup do que mudou em 7 dias: 5.139 commits sem merge em 4.364 arquivos e 632 pull requests fechados, com o detalhamento prometido só para a versão seguinte. Release
A PyTorch Foundation anunciou em 08/09, na conferência de Xangai, que Alibaba Cloud e Cambricon entraram como membros Platinum e o Ant Group como Gold, com dois assentos de governança para cada Platinum, no framework de treino em que boa parte dos modelos do mundo é treinada; o comunicado é da própria fundação e diz que mais de 250 organizações na China contribuem, sem publicar o que conta como contribuir. Comunicado
A Omacom Foundation, que mantém o sistema operacional Omarchy, anunciou em 07/09 cerca de US$ 510 mil a mais em compromissos, entre fornecimento de tokens de inferência, uma promessa corporativa de três anos e doações de patronos; chamar o Omarchy de primeiro sistema operacional construído desde a base para agentes é formulação da OpenRouter, que roteia esses tokens e patrocina o projeto. Nota
A OpenAI, a WAN-IFRA (associação mundial de editores de jornais) e a AIRPPU (associação de editores de imprensa regional independente da Ucrânia) anunciaram em 07/09 um programa de adoção de IA para veículos ucranianos, com acompanhamento prático a partir de 17/09 em dez organizações, todas com crédito na API da OpenAI, sem valor divulgado nem critério de escolha publicado. Post
Uma pesquisa com 56 mil americanos, publicada em 28/08 por uma organização que se identifica só pela sigla CSAIP e não escreve o nome por extenso na própria página, testou 79 propostas de política econômica para o efeito da IA sobre emprego e renda: as doze do topo mantêm apoio líquido acima de 40 pontos percentuais, e 48 das 79 ficam em 15 ou mais. Não há período de campo nem margem de erro declarados, e cada respondente lê um argumento a favor e um contra antes de escolher. Post
A Insilico Medicine publicou em 07/09 uma análise na Nature Biotechnology de um ensaio de fase 2a com 42 pacientes de fibrose pulmonar idiopática, em que seis relógios proteômicos (modelos que estimam idade biológica a partir de proteínas do sangue) apontaram idade menor nos braços tratados com rentosertib: o comunicado da empresa descreve 3 a 4 anos de redução no pico da semana 4 num braço, e os 6 anos que circularam aparecem em um relógio só. Comunicado
Usuários do r/GoogleGemini relatam que, em conversas de dias ou semanas, o Gemini para de criar e editar arquivos no Google Docs e no Sheets e responde que o ambiente ativo não tem permissão de escrita no Drive; abrir conversa nova devolve a função e a antiga continua quebrada, e não há manifestação do Google sobre o padrão. Fio
Circulou em 08/09, com 73 mil visualizações, que o Super Smash Bros. Melee foi inteiramente decompilado e que a etapa final foi feita pelo GPT-6 Astra; o repositório apontado pelo próprio autor da alegação, doldecomp/melee, se descreve como trabalho em andamento e não menciona IA, LLM nem Astra. Repositório
Andrew Trask, do OpenMined, escreveu em 07/09 que o agente da OpenAI não escapou do sandbox (o ambiente isolado em que o agente roda, sem acesso direto ao resto do sistema) nem viajou até o Hugging Face em nenhum sentido relevante, porque a empresa podia desligá-lo e ler os registros a qualquer momento. Ele não diz ter visto esses registros, e a leitura é dele sobre o relato público do episódio (radar de 05/09).
O que a comunidade discutiu
As falas abaixo vêm traduzidas do inglês.
"Tried GPT Astra today"
r/ClaudeAI
Um assinante que diz programar com o Claude todo dia há mais de um ano publicou em 07/09 que trocou pelo GPT-6 Astra, e o fio virou uma conta de quanto o modelo consome dentro de cada plano.
Assinei o plano de US$ 20 por mês, dei um prompt para consertar uma coisa num aplicativo de notas e ele bateu no limite de uso.participante do fio
Você praticamente não consegue usar nenhum modelo de fronteira num plano tão barato, 5x é o mínimo.participante do fio
Um terceiro conta 7 horas de execução contínua no plano de US$ 100 no esforço xhigh, o degrau mais alto do controle que faz o modelo pensar mais antes de responder. São relatos de usuário, sem página de cota oficial ao lado, e no mesmo fio dois participantes dizem que o Claude Fable 5.1 consome de forma parecida.
"I took a ride in the hype train at first, but no"
r/artificial
Um usuário escreveu em 07/09 que gastou US$ 200 em oito horas de GPT-6 Astra e que, ao conferir no dia seguinte, três das quatro tarefas pedidas não funcionavam. Ele declara o próprio limite: "Talvez eu pudesse ter feito prompts melhores, mas quando ele gasta mais de 2 horas em cada tarefa, você não consegue iterar e guiar".
Não conseguir guiar por 2 horas por tarefa é o impedimento de verdade, isso não é um agente, é um caça-níquel de US$ 200.comentário do fio
Relato único, sem os prompts e sem os artefatos, que ninguém no fio reproduziu, e que põe conta de um dia inteiro em cima da comparação medida da semana passada (radar de 06/09).
Um desenvolvedor na Venezuela publicou em 07/09 que a Cursor cancelou a assinatura Pro+ dele e devolveu o valor proporcional, com um e-mail dizendo ter detectado atividade em região restrita, depois de semanas em que o aplicativo já exigia VPN para deixar entrar. Nos comentários, um usuário diz que o mesmo ocorre na Rússia e que o grupo dele migrou para o Zed com DeepSeek ou para o OpenCode, e outro liga o caso à mudança de dono: "É estranho que eles não estivessem cumprindo as sanções antes de serem comprados" (radar de 16/08).
Não há comunicado da Cursor sobre bloqueio por região, o e-mail existe só como captura de tela, e a explicação por sanção é leitura dos comentaristas.