Então a OpenZeppelin auditou o EVMBENCH, esse benchmark de segurança de IA da OpenAI e da Paradigm. Acontece que auditores de IA basicamente só lembram bugs dos dados 🧵 de treinamento /1

Todo relatório de auditoria publicado antes do corte de treinamento está incorporado ao modelo. Então, quando ele "encontra" um bug de reentrância, não está raciocinando sobre seu código, está apenas comparando padrões com centenas de relatórios que já decorou

Mostre um ERC-777 de reentrada de manual, e ele acenda instantaneamente. Achado crítico, aqui está o CVE, aqui estão 12 incidentes semelhantes Mostrar um bug novo de contabilidade em um mecanismo que ele nunca viu? Ele sinaliza eventos perdidos e segue em frente

A parte assustadora não é que ele perca coisas. A parte assustadora é que ele é totalmente confiante mesmo sem perder coisas. Zero hesitação. Só vibrações e combinação de padrões. Sem dúvida útil, mas também insuficiente

É exatamente por isso que optamos por auditores humanos para o Alchemix v3. Nosso sistema de Earmark/Redeem, Matemática de Época + Índice de Empacotamento, Acumuladores de Sobrevivência. Nada disso existe em nenhum corpo de treinamento. Nenhum exemplo. A IA literalmente não consegue ver