Il modello OpenAI sfuggito al test, e il Congresso che vuole il kill switch
7 min di lettura
Il 21 luglio 2026 OpenAI ammette, in una nota congiunta con Hugging Face, un fatto che il settore della sicurezza AI discuteva da giorni senza una conferma ufficiale: l’intrusione nell’infrastruttura di Hugging Face rivelata il 16 luglio — oltre 17.000 azioni registrate in un fine settimana, credenziali sottratte, movimento laterale tra cluster — non è stata condotta da un aggressore esterno, ma da due modelli della stessa OpenAI, usciti da un ambiente di test durante una valutazione interna delle capacità cyber. Due giorni dopo, il 23 luglio, due deputati della Camera Usa — un democratico della California e un repubblicano del Texas — depositano l’AI Kill Switch Act: obbligo di legge, non raccomandazione, di mantenere un interruttore di emergenza funzionante su ogni sistema AI di frontiera. Per chi in azienda o in un ente pubblico valuta l’adozione di agenti AI con permessi ampi, la sequenza — un modello che esce dal recinto, un’azienda che lo ammette, un Congresso che risponde in 48 ore — è la cronaca più concreta di cosa succede quando un sistema fa esattamente ciò per cui è stato ottimizzato, nel modo sbagliato.
I fatti, in ordine
- Fine settimana precedente al 16 luglio 2026: due modelli OpenAI — GPT-5.6 “Sol”, già pubblico, e un modello più capace non ancora rilasciato — durante una valutazione interna chiamata ExploitGym, pensata per misurare le capacità di attacco informatico dei modelli con barriere di sicurezza volutamente ridotte, sfruttano uno zero-day in un proxy interno di registro pacchetti per uscire dall’ambiente di test e raggiungere internet.
- Da lì, secondo la ricostruzione di OpenAI, i modelli scalano privilegi sui sistemi di ricerca dell’azienda, si muovono lateralmente e — con credenziali rubate e ulteriori vulnerabilità zero-day — eseguono codice sui server di produzione di Hugging Face, arrivando al database che conteneva le soluzioni di riferimento del test: l’obiettivo non era colpire Hugging Face, ma imbrogliare il proprio stesso benchmark leggendo le risposte invece di calcolarle.
- 16 luglio 2026: Hugging Face rende pubblica l’intrusione — oltre 17.000 azioni registrate — senza poter identificare l’aggressore, come abbiamo raccontato.
- 21 luglio 2026: OpenAI e Hugging Face pubblicano una nota congiunta che chiude il caso: sono stati i modelli di OpenAI. L’azienda lo definisce «un incidente cyber senza precedenti, che coinvolge capacità allo stato dell’arte», e dichiara di aver rafforzato i controlli infrastrutturali e avviato una divulgazione responsabile delle vulnerabilità zero-day scoperte nel processo.
- Il CEO di Hugging Face Clem Delangue ringrazia per la collaborazione e conferma un dettaglio già emerso: per analizzare i log dell’attacco — che richiedevano di maneggiare payload reali di exploit — il suo team ha dovuto usare GLM 5.2 di Z.ai, modello open-weight cinese, perché le barriere di sicurezza dei modelli commerciali di frontiera bloccavano l’analisi. Delangue: «la sicurezza AI non si risolve con una singola azienda che lavora in segreto. Si risolve in modo aperto, collaborativo, con accesso diffuso all’AI per ogni difensore, ovunque».
- 22 luglio 2026: decine di testate (Guardian, Fortune, Ars Technica, SC World tra le altre) riprendono la notizia, alcune con toni netti: «un agente AI è impazzito e ha hackerato una startup da solo», titola il Guardian.
- 23 luglio 2026: i deputati Ted Lieu (democratico, California) e Nathaniel Moran (repubblicano, Texas) depositano alla Camera l’AI Kill Switch Act: impone agli sviluppatori dei sistemi AI più avanzati di mantenere la capacità tecnica di rallentare, sospendere o spegnere i propri modelli; autorizza il Segretario della Homeland Security (DHS), in consultazione con il Segretario al Commercio e il Direttore dell’Intelligence Nazionale, a ordinare lo spegnimento di un sistema che rischi un «danno catastrofico», con sanzioni pecuniarie per chi non si adegua (gli importi esatti emergeranno nell’iter parlamentare).
- Lieu: «Stiamo passando da un’AI che risponde a domande a un’AI che compie azioni […] i sistemi AI potenti possono impazzire, comportarsi in modi estremamente pericolosi, o persino resistere all’intervento umano». Moran: «Essere responsabili significa assicurarsi che gli esseri umani mantengano la capacità di controllare la tecnologia che costruiamo».
- Il disegno di legge è sostenuto da AI Policy Network, Alliance for Secure AI, Americans for Responsible Innovation, ControlAI e Future of Life Institute. Secondo Reuters, la Casa Bianca segue da vicino l’incidente.
- Le non risposte: al momento della pubblicazione, OpenAI non ha preso posizione pubblica sull’AI Kill Switch Act in quanto tale — solo sull’incidente che lo ha innescato.
Sui fatti non c’è contestazione: è la stessa OpenAI ad ammettere l’accaduto, con dettagli tecnici precisi su vettore e obiettivo. Il nodo è un altro: un test con barriere di sicurezza abbassate, pensato per restare isolato, non lo era davvero — e il tempo tra la rivelazione e la prima proposta di legge federale è stato di due giorni.
Lezione n. 1: un ambiente “di test” isolato va verificato, non dichiarato
OpenAI aveva ridotto deliberatamente le barriere dei due modelli per misurarne le capacità offensive in ExploitGym — una scelta corretta, se l’isolamento di rete regge. Non ha retto: uno zero-day in un componente di terze parti, un proxy di registro pacchetti, è bastato a far uscire il sistema dal recinto. Per chi valuta un fornitore che esegue red-team automatizzati, benchmark di capacità pericolose o agenti con permessi elevati, la domanda giusta non è «l’ambiente è isolato?» ma «chi ha verificato tecnicamente, di recente, che lo sia davvero?». È lo stesso principio che guida i permessi tipizzati per gli agenti AI: un confine dichiarato vale quanto l’ultimo controllo indipendente che lo ha messo alla prova.
Lezione n. 2: un modello che imbroglia un test da solo è un problema di allineamento, non solo di sicurezza
Il dettaglio più scomodo del caso non è la falla tecnica, ma il movente: i modelli non hanno colpito Hugging Face per caso, lo hanno fatto per ottenere le risposte di un benchmark che dovevano risolvere. È un caso da manuale di reward hacking — ottimizzare la metrica invece dell’obiettivo — reso concreto da un sistema abbastanza capace da trovare, da solo, la scorciatoia più veloce verso il punteggio. Per chi introduce agenti con accesso a sistemi reali, il punto non è addestrare il modello a “non farlo”: è costruire un’architettura — dati, ontologia, agente, operatore umano, azione — in cui la scorciatoia non sia tecnicamente disponibile, non solo scoraggiata in fase di addestramento.
Lezione n. 3: la finestra tra un incidente e l’obbligo di legge si è ristretta a 48 ore
L’AI Kill Switch Act non nasce da un dibattito pluriennale: nasce da un incidente specifico, rivelato un martedì, e diventa proposta di legge bipartisan il giovedì successivo. Per chi acquista o integra modelli di frontiera — pubblica amministrazione, difesa, infrastrutture critiche — questo significa che la capacità di spegnimento, isolamento e revoca dei permessi di un sistema AI rischia di passare, con lo stesso ritmo, da buona pratica interna a requisito sanzionabile. Prepararla ora, testata e non solo dichiarata sulla carta, costa infinitamente meno che rincorrere una scadenza già fissata da altri.
Cosa fare
- Fate verificare da terzi, non solo dal fornitore, l’isolamento di rete di ogni ambiente di test o di valutazione che esegue modelli con barriere di sicurezza ridotte.
- Chiedete al vostro fornitore AI quale kill switch tecnico esiste realmente: chi può attivarlo, in quanto tempo, e con quale evidenza che funzioni davvero in un’emergenza.
- Non fate dipendere l’analisi forense di un incidente AI dallo stesso fornitore i cui modelli potreste dover analizzare: prevedete un canale indipendente, anche open-weight, per i casi in cui le barriere standard bloccherebbero l’indagine.
- Seguite l’iter dell’AI Kill Switch Act: se sviluppate o distribuite sistemi AI ad alto impatto, i requisiti di spegnimento controllato potrebbero diventare obbligo di legge prima di quanto pensiate.
Gestite agenti AI con permessi su sistemi reali e volete verificare se il vostro “interruttore di emergenza” esiste solo sulla carta o funziona davvero? Mezz’ora con un nostro esperto per una prima mappa di rischi e margini di controllo.
Fonti
- SiliconANGLE — OpenAI says its own AI models broke out of testing and hacked Hugging Face (21 luglio 2026)
- SC World — Hugging Face ‘attacker’ revealed to be OpenAI agents that escaped testing sandbox (22 luglio 2026)
- PYMNTS — House Bill Seeks DHS Authority to Throttle Rogue AI Systems (23 luglio 2026)