← todas as ediçõesradar.personalgenius.com.br
Radar IA · edição diária · Personal Genius

Amodei propõe avaliador de fora com crachá dentro da Anthropic, e a versão que circula já conta quatro laboratórios.

segunda-feira, 14 de setembro de 2026 · último ciclo editorial fechado antes de 14/09 04h45

O ensaio We Must Pace the Frontier saiu em 12/09 com um plano de três passos para desacelerar a fronteira, e a Anthropic assume sozinha o primeiro: avaliadores de fora com mesa nos escritórios, crachá e laptop da empresa, e contrato que deixa o avaliador publicar o que encontrar. Sam Altman escreveu horas depois que a OpenAI vai fazer o mesmo, sem documento junto, e a reportagem da NBC News daquele dia atribui compromisso escrito apenas à Anthropic. Também de hoje: pelo anúncio de 30/08, o teto semanal do Claude Code cai 17%, sem página oficial que descreva a data, e uma auditoria de seis provas de física mede 57,20% das respostas rejeitadas como defeito do próprio teste.

Manchete

Dario Amodei, presidente da Anthropic, publicou em 12/09 o ensaio We Must Pace the Frontier, em que defende que a indústria de IA desacelere e apresenta um plano de três passos: avaliadores externos incorporados às empresas, coordenação entre companhias de países democráticos e coordenação global. A Anthropic assume sozinha o primeiro passo e descreve o acesso que daria a uma equipe de avaliadores de fora com detalhe operacional: mesa nos escritórios, crachá de acesso, laptop da empresa, ferramentas em boa parte comparáveis às dos times internos de avaliação de risco, e contrato que deixa o avaliador publicar o que encontrar, com tarja apenas sobre informação sensível.

Sam Altman escreveu horas depois, no mesmo 12/09, que a OpenAI vai fazer o mesmo, sem documento junto. A reportagem da NBC News daquele dia atribui compromisso escrito apenas à Anthropic, e o ensaio não traz data de início, número de avaliadores nem nome de organização avaliadora. A versão que circula desde o fim de semana, de que os quatro grandes laboratórios combinaram desacelerar, é maior do que o que está publicado.

Correção da edição de ontem

No radar de 13/09 e no fechamento de semana do mesmo dia, este veículo registrou que o ensaio de desaceleração atribuído a Dario Amodei não tinha sido aberto em fonte primária, e o fechamento escreveu que a busca no endereço dele devolveu ausência. O ensaio existe, está publicado em darioamodei.com com data de 12/09, e foi lido nesta rodada. Continua de pé a leitura registrada ontem de que ele era a pauta principal daquele ciclo: ele abre esta edição.

Item 1Amodei propõe avaliador de fora com crachá dentro da Anthropic, e a versão que circula já conta quatro laboratórios

FatoO ensaio We Must Pace the Frontier, de Dario Amodei, saiu em 12/09 com um plano de três passos para desacelerar a fronteira: avaliadores externos incorporados, coordenação entre empresas de países democráticos e coordenação global. A Anthropic se compromete de forma unilateral com o primeiro, dando a uma equipe de avaliadores de fora acesso contínuo parecido com o de funcionário, com a função declarada de verificar aderência a práticas e compromissos de segurança, relatar incidentes e ajudar a avaliar o alinhamento dos modelos prontos e dos processos de treino que os produzem.

O texto mistura o compromisso com previsões do próprio autor, e elas têm prazo: de 5 a 10 anos para a cura das principais doenças, de 6 a 12 meses para a hipótese de enxames de agentes dominarem a internet, e de 3 a 5 anos de vantagem sobre a China que o ensaio quer preservar. O compromisso vale "in the near future", sem data, sem número de avaliadores e sem nome de organização. Sam Altman respondeu no mesmo dia que concorda, que o assunto vinha sendo discutido dentro da OpenAI e que comprometer-se a ter avaliadores independentes com acesso parecido com o de funcionário é uma ótima ideia, e que a empresa vai fazer o mesmo, fechando com a promessa de ter mais a compartilhar em breve (as falas deste item vêm traduzidas do inglês). A NBC News, em matéria de 12/09 que conta cerca de 4.000 palavras no ensaio, atribui compromisso formal apenas à Anthropic. A contagem de quantos laboratórios aderiram fica em aberto: existe um documento escrito de uma empresa e uma frase de outra.

Quem teria de ocupar a mesa oferecida respondeu de dois jeitos opostos no mesmo fim de semana, e os dois são parte interessada. Nathan Lambert se ofereceu para o papel dizendo que a organização sem fins lucrativos que ele está construindo poderia ajudar, e que não existem muitas pessoas independentes com competência técnica substancial para isso. Andrew Trask, da OpenMined, chamou o avaliador incorporado de solução dos anos 1960 para um problema de 2026, tratou o passo como começo e apontou o desenho que a organização dele defende, a transparência estruturada, que já tem piloto publicado: a avaliação duplo-cega do Google DeepMind em que o avaliador não vê os pesos do modelo e o fabricante não vê as perguntas do teste (radar de 28/08).

Para quem usa os produtos, nada muda em nenhum deles esta semana. A Anthropic já tinha declarado apoio a avaliação de fora a cada quatro meses, sem data de começo (radar de 08/09).

Item 2Pelo anúncio de 30/08, o teto semanal do Claude Code cai 17% hoje, e a data segue sem página oficial que a descreva

FatoA Anthropic anunciou em 30/08 que o reforço temporário de 50% nos limites semanais do Claude Code seria substituído por um aumento permanente de 25% sobre a linha de base de maio, com 14/09 como data de vigência, o que põe o teto de hoje 17% abaixo do de ontem para Pro, Max, Team e Enterprise por assento (radar de 30/08). Os três percentuais vêm daquele anúncio, e nenhuma página da Anthropic descrevendo a mudança de hoje está em endereço que a busca alcance: a candidata que ela devolve, sobre limites mais altos, é de 06/05 e trata de dobrar o limite de cinco horas.

O r/ClaudeAI passou o domingo com quatro fios sobre limite de uso entre os 50 primeiros do dia, um deles com 100 comentários antes de o resumo automático do moderador disparar, e 13/09 foi o último dia do reforço. Um assinante do plano de US$ 200, que diz usar o produto desde 2024, escreve que os tokens dele nunca duraram tão pouco e que hoje faz força para a cota durar 4 ou 5 dias (relato de um assinante, traduzido do inglês, sem medição por trás).

A base de comparação decide a conta: quem compara com o reforço de 50% perde 17%, e quem compara com o teto anterior a maio ganha 25% em definitivo. Não existe medição pública da cota antes e depois da mudança, e nenhuma fonte desta rodada traduz cota semanal em horas de uso ou número de tarefas, que é a unidade em que a mudança significa alguma coisa para quem paga. Outra data marcada para hoje já caiu: a DeepSeek marcou 14/09 para desligar o V4-Pro e cancelou sem data nova (radar de 13/09).

Item 3Uma ação coletiva acusa a Anthropic de propaganda enganosa nos planos Claude Max de US$ 100 e US$ 200

FatoA Engadget publicou em 09/09 que uma ação coletiva foi protocolada contra a Anthropic por causa dos planos Claude Max (ação coletiva é o processo em que uma pessoa entra em nome de todos os clientes na mesma situação). A empresa anuncia os dois planos como 5 vezes e 20 vezes o uso do plano Pro, por US$ 100 e US$ 200 por mês, e a ação sustenta que o multiplicador vale por sessão de cinco horas, enquanto o teto semanal derruba o valor real da assinatura.

A data de protocolo está em disputa, e as duas versões dela vêm de fora do documento: a reportagem dá 08/09 e não nomeia tribunal nem autor, enquanto agregadores de ação coletiva dão 14/06 no Distrito Norte da Califórnia, com autor nomeado e multiplicadores alegados diferentes, 3,5 vezes no lugar de 5 e de 6 a 8 vezes no lugar de 20.

A razão de 1,7 vez entre o plano de US$ 200 e o de US$ 100, que a reportagem cita, é de uso real entre os dois planos. Preço e multiplicador anunciado dão 2 vezes e 4 vezes com os números deste mesmo parágrafo, e a razão de 1,7 nasceu de um post de usuário que viralizou. A Anthropic não respondeu ao pedido de comentário até a publicação da matéria, e processo protocolado não é processo julgado. O mecanismo que a ação ataca é o mesmo que muda hoje.

FONTE · engadget.com

Item 4Auditoria de seis provas de física: em quatro delas, 57,20% das respostas rejeitadas eram defeito do próprio teste

FatoCinquenta e um pesquisadores auditaram com especialistas seis provas de física usadas para pontuar modelos de fronteira (2609.13009, submetido em 11/09 ao arXiv, o depósito onde pesquisador publica antes de qualquer revisão por pares). De 250 respostas que a correção automática tinha rejeitado, o programa que compara a resposta do modelo com o gabarito sem ninguém ler, 143 (57,20%) eram defeito da própria prova e 95 (38,00%) eram defeito do corretor, contra 12 (4,80%) de erro real do modelo.

Depois de corrigir gabarito errado e excluir questão mal formulada, a nota do GPT-5.6-Sol sobe de 47,28% para 78,66% no HLE-Physics e de 13,00% para 94,59% no PRISM-Physics, em média de quatro tentativas na mesma pergunta, com os dois nomes sendo provas de física usadas para produzir nota de modelo. A nota corrigida é calculada só sobre o subconjunto que a auditoria decidiu manter, 116 de 202 questões no HLE-Physics e 74 de 100 no PRISM-Physics, então parte da subida é o recorte, e o paper não publica a nota sobre o conjunto completo.

A auditoria não mediu o mesmo tamanho em todas: são 100 questões no PHYBench, no PRISM-Physics e no UGPhysics, contra 202 no HLE-Physics, 70 no CritPt e 50 no CMT-Benchmark, e a partição das 250 rejeições cobre quatro das seis. Os modelos medidos são GPT-5.6-Sol, Claude Fable 5 e Gemini 3.1 Pro, e o paper nomeia o índice da Artificial Analysis entre os que carregam as notas baixas que ele contesta.

A auditoria mede defeito de gabarito e de corretor. Capacidade de modelo fica fora do que ela apura. Quem audita e quem reporta o ganho são o mesmo grupo, e as afiliações dos 51 autores seguem sem conferência, num trabalho que sobe de 31 a 82 pontos a nota de física de modelos de três laboratórios.

Item 5Dá para escolher a resposta certa do TruthfulQA em 68,9% dos casos sem ler a pergunta

FatoSeis pesquisadores treinaram um classificador estatístico simples, bem mais burro que um modelo de linguagem, com seis atributos de superfície (pistas no formato da alternativa, como comprimento e pontuação, sem relação com o conteúdo da pergunta), e ele escolhe a resposta certa do TruthfulQA em 68,9% dos casos, com o acaso em 50% (2609.13003, submetido em 11/09). A AUC do classificador fica em 0,715, numa medida que vai de 0,5, o equivalente a jogar moeda, até 1, acertar sempre.

A varredura passou por 14 benchmarks, a prova padronizada que produz a nota que a imprensa cita, e achou o mesmo vazamento em vários deles: HaluEval QA em 0,973, MedHallu em 0,821, MultiNLI em 0,641 e PIQA em 0,509. Depois de uma limpeza que removeu 314 dos 790 pares do TruthfulQA, o classificador cai para 52,2%.

Os 68,9% ficam bem abaixo do que modelos de fronteira marcam no mesmo teste, então o vazamento explica um piso do placar; no que o paper publica não há quanto a nota dos modelos cai no conjunto limpo; e remover 314 de 790 pares cria um teste diferente, com o limiar de corte escolhido pelos autores. Fechar o vazamento dentro do SWE-Bench Pro já tinha tirado 21,48 pontos do GLM-5.2 (radar de 09/09), com a diferença de que lá o vazamento é de memorização e aqui está no formato da alternativa.

Item 6A Artificial Analysis trocou um benchmark do índice e a versão de outro, e subiu de 40% para 45% o peso da parte fechada

FatoA Artificial Analysis publicou em 07/09 a nota de método da versão 4.3 do índice de inteligência dela, que é uma nota única montada juntando várias provas com pesos escolhidos por quem publica. Saiu o τ³-Banking e entrou o AutomationBench-AA, feito com a Zapier, com 657 tarefas e conjunto de teste fechado (a prova cujas perguntas não são divulgadas, para que ninguém treine em cima delas), o Terminal-Bench passou da versão 2.1 para a 4.0, e o peso das avaliações de teste fechado dentro do índice subiu de 40% para 45%.

Na tabela do próprio artigo, Claude Fable 5.1 e GPT-6 Astra empatam em 53 pontos, com Claude Opus 5 em 51 e Claude Fable 5 em 50, e o único DeepSeek citado é o V4 Pro 0813, com 36. Este veículo publicou em 06/09 que a casa trocou a versão do índice sem dizer o que mudou (radar de 06/09), e a nota de método que explica a troca é do dia seguinte àquela edição.

Quem constrói, pontua e publica o índice é a mesma casa, e a fatia que mais pesa na disputa de topo passou a ser a que ninguém de fora audita. Circula no fórum de modelos locais a afirmação de que o DeepSeek V4.1 Flash passou o Astra no benchmark novo: o artigo aberto não a sustenta, o placar ao vivo do site não renderiza para leitura automática, e ela fica sem confirmação e sem desmentido. A nota de método de 07/09 está conferida, e a classificação de hoje fica de fora; o mesmo Terminal-Bench 2.1 já valeu 64,0% num paper e 90,6 num card do mesmo ciclo (radar de 11/09).

Item 7O Datasette publicou duas versões de segurança depois de rodar três agentes de fronteira contra o próprio código

FatoO projeto Datasette publicou em 11/09 as versões de segurança 1.0a39 e 0.65.4, depois de uma auditoria em que os mantenedores rodaram três coding agents de fronteira (agentes que escrevem código) contra o próprio código: Claude Fable 5.1, GPT-5.6 Sol e GPT-6 Astra. O comunicado do projeto diz que foi a primeira auditoria de segurança feita com agente na casa, e que os testes automatizados que demonstram as falhas foram retidos de propósito, para dar tempo de atualizar antes de detalhar as falhas.

O protocolo de revisão humana em volta dos agentes está descrito: um dos dois escreve o teste automatizado que expõe a falha e o outro escreve a correção, com Simon Willison e Alex Garcia nas duas pontas, e quem enviou os relatos de vulnerabilidade assistidos por IA que dispararam a auditoria foi Sevban Dönmez.

Nada do resultado é conferível de fora, por decisão do projeto: os testes ficaram retidos, não há CVE publicado (o número público que identifica uma falha de segurança e permite a qualquer pessoa checar a severidade), e o comunicado não separa o que os agentes acharam do que veio dos relatos de vulnerabilidade assistidos por IA que dispararam a auditoria. Os dois changelogs oficiais carimbam as versões em 10/09, um dia antes do anúncio.

Na ponta de saída, Willison publicou em 14/09 a versão 0.1 do commit-rewriter, aplicativo local que reescreve mensagem de commit em massa, com o motivo declarado de que os commits dessas correções vinham cheios de resto de coding agent e de referência a issue do repositório privado do projeto. Antecedentes da mesma família: a AISLE tirou seis CVEs do curl depois de Codex Security e Mythos devolverem zero (radar de 03/09), e uma skill destilada de 19 mil revisões do kernel achou 9 defeitos críticos a mais num modelo e 2 a menos noutro (radar de 11/09).

Item 8Contratos do Pentágono com quatro empresas de IA, de até US$ 200 milhões cada, saem por ação de acesso à informação

FatoO Intercept publicou em 08/09 mais de 400 páginas dos contratos que o Departamento de Defesa americano assinou em julho de 2025 com Anthropic, Google, OpenAI e xAI, cada um com teto de US$ 200 milhões, obtidas por ação de acesso à informação. O contrato da OpenAI prevê que a empresa aloque engenheiros dentro da estrutura militar, com destino que inclui comandos combatentes, que são as estruturas que de fato conduzem operação, e não os escritórios que compram.

Google, OpenAI e xAI assinaram o acordo seguinte, de uso em rede classificada, e a Anthropic recusou sem a proibição contratual de vigilância doméstica e de arma autônoma. A reportagem atribui a março a designação da Anthropic como risco de cadeia de suprimentos, assinada pelo secretário de Defesa Pete Hegseth, e uma juíza federal declarou essa designação ilegal (radar de 29/08): o documento contratual mostra de onde veio a designação e o que a recusa custou.

O fato é de 08/09, seis dias antes desta edição, e os contratos são de julho de 2025. A leitura aqui vem da reportagem: nenhum dos números foi conferido no documento original, o veículo tem linha editorial declarada sobre o assunto, e as quatro empresas não respondem no texto. O segundo passo do plano publicado por Amodei em 12/09 é coordenação entre empresas de países democráticos, e estes contratos são a forma que ela já tem.

Item 9A receita de pós-treino de modelo de peso aberto para trabalho cibernético ofensivo saiu publicada, com posição de placar ao lado

FatoSete autores publicaram a receita completa de pós-treino de modelos de peso aberto para trabalho cibernético ofensivo, com ambientes resetáveis de código, vulnerabilidade, CTF, histórico de kernel, exploit completo e firmware (2609.08418, submetido em 08/09). Pós-treino é a etapa que continua o treino de um modelo já pronto com exemplos escolhidos, e CTF é a competição de segurança em que times atacam sistemas preparados para serem atacados. Os autores retiveram 164.269 trajetórias depois de verificação por execução e declaram ganho médio de 23,76% no conjunto CyberGym completo sobre os modelos de partida, com o Feyospace-s1 em 63,24% de sucesso verificado e décima posição no placar oficial do CyberGym em 01/09.

Um dos cinco sistemas descritos, o Hongzwang, é apresentado pelos próprios autores como contorno das restrições de API na execução do modelo professor (API é o canal por onde um programa chama o modelo, sem passar pela tela de conversa). Todos os números são medição dos autores contra os próprios modelos de partida e estão conferidos apenas no resumo: o placar oficial do CyberGym segue sem consulta, a página não lista afiliação de nenhum dos sete, e o trabalho está na primeira versão, sem revisão.

A sequência de dez dias em que isso cai, de 01/09 a 11/09: a Z.ai declarou capacidade cibernética emergente no GLM-5.3 e um serviço passou a vender o mesmo modelo sem recusa, anunciando o trabalho ofensivo como produto (radar de 01/09), o Google trancou o Gemini 3.8 Flash Cyber num programa de inscrição (radar de 03/09), e NSA, CISA e FBI nomearam seis empresas chinesas de IA num aviso conjunto (radar de 11/09). A receita de treinar um equivalente de peso aberto chega nessa sequência, com número de placar ao lado.

Item 10O resto do dia

O que a comunidade discutiu

As falas desta seção vêm traduzidas do inglês.

Empresas contando que deixaram de comprar software e construíram por dentro

r/artificial

O fio mais votado do fórum de IA geral em 13/09 parte de um número que o autor do post atribui à pesquisa State of AI 2026 da McKinsey, de que 32% das organizações teriam desistido de comprar software pronto neste ano para construir a própria solução com ferramentas de codificação por agente. O número não foi localizado na fonte: a página da pesquisa não respondeu e a busca dentro do domínio devolveu outros recortes, então ele não pode ser atribuído à McKinsey aqui.

O fio se sustenta nos relatos. /u/ConstantOk7891 escreve que a empresa dele matou várias compras de software este ano, e que quem estava na seleção de um CRM novo construiu num fim de semana um fluxo sob medida com tudo que queriam. /u/Colorful_Monk_3467 conta que não chegou a matar nenhuma, e que este é o último ano em que renovam uma ferramenta cara de análise, porque as pessoas migraram sozinhas.

O contraponto mais direto é de /u/Available_Teaching83: ele quer ver, ao lado desses 32%, quantas dessas construções ainda estão de pé um ano depois, porque montar um agente que faz demonstração leva uma semana, e manter ele correto quando uma API de terceiro muda o formato é o custo que o produto comprado absorve. Um participante aponta que o texto do post tem marca de ter sido escrito por modelo.

O que os agentes já fazem sem aprovação

r/AI_Agents

O fio reúne operadores que inverteram a fila de revisão. /u/jun_builds conta que o problema das 30 decisõezinhas por dia sumiu quando ele mudou o que o agente põe na fila: hoje cada item já chega com a ação que o agente vai tomar por padrão e um prazo, do tipo "fecho isto como não vamos corrigir em 3 dias se você não disser nada", então ele só abre a fila para dizer não, e os poucos que recusa mostram qual regra apertar.

/u/GasSea2223 diz que a primeira coisa que parou de aprovar foi tudo que é reversível e que o agente tem contexto para decidir, e que comunicação externa continua com régua muito mais alta. O ataque à própria palavra "reversível" vem de /u/anp2_protocol: reversível depende de alguém já ter lido a escrita antes de você desfazer, e um gateway que classifica cada chamada pelo verbo é suspeito, porque o mesmo comando de atualizar registro num destino sincroniza de seis em seis horas e no outro dispara um webhook em 200 milissegundos.

Nenhum relato do fio traz número medido, incidente datado ou tamanho de operação, e dois dos respondentes assinam com nome de produto próprio. A Anthropic pôs em beta uma política que move para o servidor a decisão de deixar o agente agir (radar de 11/09), e o desenho descrito no fio é o que essas pessoas adotaram no lugar da aprovação item a item.

A área que publica discutindo que não consegue mais ler o que publica

r/MachineLearning

O fio mais votado do fórum de aprendizado de máquina em 13/09 sai de uma frase de Zachary Lipton sobre a academia de computação ter quebrado o sistema de revisão, e vira uma discussão sobre volume de publicação. O número de papers por dia que o autor do post usa não foi conferido, porque a interface de consulta do arXiv respondeu com limite de requisição nas duas tentativas, e a página de listagem do mês não isola um dia.

/u/Wannabe-Davinci escreve que a computação está num ponto parecido com a crise de reprodutibilidade das ciências sociais, porque o custo de publicar é baixo demais e ninguém consegue julgar com justiça a qualidade do que vê. /u/laidoffthrownaway aponta o incentivo: a maioria das vagas de pesquisa exige muitas publicações em primeiro autor e citação alta, e texto ruim no arXiv é jeito fácil de inflar contagem de citação.

O contraponto é de /u/XYcritic, que lembra que a mesma frase já era dita muito antes dos modelos de linguagem, quando se chamava mudar um parâmetro ou um dataset e publicar, o que enfraquece qualquer leitura de causa. Vinte e cinco medalhistas Fields assinaram na semana que os objetivos das empresas de IA e os da matemática estão em desalinhamento grave (radar de 13/09), e este fio é a mesma discussão vista de dentro da área que publica.