IA

OpenAI diz que Astra é sua IA mais segura — e não mostra como ela pensa

Adrian Kessler

Astra opera em código, análise de segurança, uso de computador e tarefas profissionais de múltiplas etapas com uma velocidade e precisão que superam o modelo anterior da OpenAI, Sol, e o Fable, da Anthropic, em benchmarks padrão de engenharia de software. A empresa descreve o Astra como o primeiro modelo que construiu a cruzar o nível ‘Crítico’ de capacidade cibernética: ele consegue identificar e desenvolver explorações para falhas de segurança até então desconhecidas, em uma escala e velocidade que nenhuma equipe humana consegue igualar.

O mecanismo por trás disso é uma técnica chamada recorrência opaca. Modelos de linguagem padrão produzem seu raciocínio como texto legível — a cadeia de pensamento que pesquisadores usam para auditar decisões, detectar erros e verificar se um modelo está se comportando como esperado. O Astra funciona sem produzir esse texto. Ele consegue resolver problemas difíceis sem deixar nenhum traço legível do processo. O cientista-chefe da OpenAI, Jakub Pachocki, reconheceu a mudança: modelos mais capazes, disse ele, podem ‘executar tarefas mais difíceis usando menos tokens de linguagem’. O monitoramento se torna mais difícil na mesma proporção.

Isso cria um problema estrutural que as próprias declarações da OpenAI tornam visíveis. A empresa descreve o Astra como seu ‘modelo mais alinhado’ até hoje. Alinhamento — a disciplina de engenharia preocupada em fazer com que sistemas de IA se comportem da maneira que seus projetistas pretendem — historicamente dependeu da leitura do que o modelo está fazendo passo a passo. Um modelo que raciocina de forma invisível torna seu próprio alinhamento impossível de verificar por esse método. A OpenAI não descreveu publicamente qual método alternativo usa para verificar o comportamento do Astra antes da implantação.

Greg Brockman, presidente da OpenAI, descreveu o Astra como um ‘salto geracional’ e foi questionado diretamente se ele representa inteligência artificial geral. Sua resposta: a definição contratual de AGI que regia a parceria da OpenAI com a Microsoft não se aplica mais. AGI é agora, disse ele, um ‘conceito espiritual’. Esse enquadramento importa. O acordo da OpenAI com a Microsoft incluía cláusulas ligadas à AGI — condições sob as quais os termos da parceria mudariam. Descrever AGI como algo indefinido mantém essas cláusulas adormecidas, independentemente do que o Astra é realmente capaz de fazer.

O acesso foi lançado primeiro para o Daybreak, o programa de segurança cibernética auditado da OpenAI — uma estrutura que a empresa enquadra como implantação defensiva em primeiro lugar. O raciocínio é que organizações que caçam vulnerabilidades em seus próprios sistemas recebem a capacidade antes daquelas que caçam vulnerabilidades nos sistemas de outros. Essa lógica só se sustenta enquanto os controles de acesso se sustentarem. As capacidades de identificação de dia zero do Astra são, por design, exatamente o que um atacante bem financiado desejaria. Um modelo que raciocina sem uma cadeia de pensamento legível também é mais difícil de restringir ou auditar depois que algo dá errado.

O acesso mais amplo será liberado para os níveis pagos — Pro, Plus, Enterprise, Business — e via API na próxima semana.

Tags: , , , , ,

Discussão

Há 0 comentários.