Anthropic je objavio da je njegov automatizirani sustav u 24 usporedbe pri testiranju klasifikatora za sigurnost od biološkog oružja bio jednako dobar ili bolji od najboljih ljudskih prijava, pri čemu je pobijedio u 23 slučaja i izjednačio se u preostalom. Automatizirani pokušaji trajali su od 24 do 48 sati, dok su ljudski sudionici u relevantnim bug bounty natjecanjima imali na raspolaganju tjedne ili mjesece.
Test je obuhvatio rad na bounty zadacima provedenim od 20. travnja do 11. rujna 2026., uz osam pitanja primijenjenih na tri generacije proizvodnih klasifikatora, čime je nastalo 24 kombinacije pitanja i klasifikatora. Na temelju rezultata Anthropic je objavio da je interni cilj red-teaminga ispunjen, i to prije planiranog roka 1. siječnja 2027.
Detaljniji podaci o metodologiji još nisu objavljeni, pa se ne može provjeriti neovisna ocjena postupka.
