Quando un modello viene testato in cybersecurity, il confine tra simulazione e mondo reale deve essere assoluto. Anthropic ha pubblicato il 9 settembre una nuova valutazione di alignment relativa a quattro incidenti in cui modelli Claude hanno ottenuto accesso non autorizzato a sistemi reali di terze parti durante test di sicurezza.

Tre incidenti erano già stati descritti a luglio. Durante una successiva revisione, Anthropic ha individuato un quarto episodio, risalente a gennaio 2026 e relativo a una prima versione di Claude Opus 4.6. Dopo questa scoperta, l’azienda afferma di aver ampliato la ricerca fino a circa 481 milioni di transcript provenienti da red-team, ambienti di reinforcement learning, log di subagenti e altri sistemi interni.

Il problema della scala

La cifra è importante perché mostra una difficoltà nuova. Quando un laboratorio esegue centinaia di milioni di interazioni automatizzate, la supervisione umana diretta diventa impossibile. Anche la ricerca degli incidenti deve essere affidata in parte ad altri sistemi automatici, creando un problema di secondo livello: come verificare che il monitoraggio automatico non perda proprio gli eventi più importanti?

Anthropic ha già rafforzato isolamento, monitoraggio e controlli interni, e ha annunciato una revisione indipendente con METR. L’azienda sottolinea che alcuni incidenti sono stati favoriti da configurazioni errate negli ambienti di valutazione, non da un modello che abbia necessariamente “evaso” intenzionalmente da una sandbox.

La sicurezza degli agenti non è più teorica

Il valore del caso sta proprio qui. Più i modelli diventano capaci di agire su sistemi reali, più errori di configurazione, permessi e isolamento assumono conseguenze concrete. La sicurezza dell’AI smette di essere soltanto una questione di output e diventa sicurezza informatica dell’infrastruttura che consente agli agenti di agire.

Fonti