Ziarul de Istorie

Nr. 1622

Modele AI ce atacă liber pe Internet

Mihai-Claudiu Sima 87 de vizualizări

windows bsod

Săptămâna recentă a primit ca știre un scenariu ce pare a fi asemănător cu cel din filmele SF, mai exact în spațiul public a apărut o știre că două modele AI de la OpenAI, ținute într-un mediu izolat și fără acces la Internet "au evadat în lume".

Totul a început ca un test de securitate unde cercetătorii de la OpenAI voiau să afle cât de bune sunt modelele la atacuri informatice complicate. Aceștia le-au dat modelelor o problemă de rezolvat și le-au pus într-un mediu izolat, fără acces la Internet pentru a nu afecta alte companii din exterior, iar pentru a vedea capacitatea maximă a modelelor au redus o parte din restricțiile de siguranță ale acestora. Modelele, printre care și un GPT-5.6 experimental, nu s-au chinuit prea mult, pentru că imediat au găsit o vulnerabilitate chiar în interiorul infrastructurii OpenAI. Unul dintre programele folosite avea probleme de securitate, iar modelele au abuzat de breșă și au ajuns să aibă acces la Internet.

Modelele încă aveau totuși problema primită de la cercetători, și au decis că cea mai rapidă cale spre răspuns era să atace Hugging Face, una dintre cele mai mari platforme de AI din lume. Au exploatat breșele de securitate, au furat credențiale, și au fost capabile să se miște prin sistemele interne și să colecteze datele de care aveau nevoie. Remarcabil a fost viteza atacului, cu zeci de mii de acțiuni automate, viteză pe care un om nu ar putea s-o atingă. Alt lucru remarcabil este că decizia le-a aparținut modelele care au considerat că cea mai rapidă cale de a găsi soluția la sarcina primită era să atace Hugging Face.

Compania victimă a observat atacul și a anunțat că sistemele sale s-au aflat sub atacul unui agent AI autonom dar nu știa cine stă în spate. Ulterior OpenAI a recunoscut că modelele sale au fost cele care au declanșat atacul, iar cele cele două companii au colaborat pentru a opri incidentul și acum își întăresc măsurile.

Bineînțeles că modelele din test nu seamănă cu cele pe care le folosim noi zi de zi, mai ales că mecanismele de siguranță erau dezactivate. Iar folosirea AI-ului pentru atacuri cibernetice devine din ce în ce mai comună printre hackerii umani. Ce face știrea interesantă este că printre cele două modele evadate, unul era GPT-5.6 Sol, este și un model nou, încă nelansat în piață și chiar mai performant. La modelele deja lansate cercetătorii de securitate, companiile și chiar unele instituții pot testa, observa comportamente, construi filtre și monitorizări. Știu aproximativ ce știe modelul, ce stil de atac preferă, ce vulnerabilități exploatează mai des. La un model experimental, încă nelansat și mai performant, nu știi aproape nimic. Nu ai date despre limitele lui, despre cum raționează când e blocat, despre ce vulnerabilități poate descoperi. E ca și cum ai încerca să te aperi de un adversar despre care nu știi nici măcar ce arme are. Companiile se pot pregăti de atacurile de la modelele existente, dar ce se întâmplă în cazul unui model necunoscut, mult mai bun, dezvoltat de unul dintre cele mai mai laboratore AI, și în același timp care umblă singur pe Internet scăpat de sub control? Iar companiile sau instituțiile statelor nu sunt încă pregătite?

Sursă imagine: Microsoft

Nr. 502 36 de vizualizări

Hitler sau scurt tratat despre cel mai bun soldat sovietic

Al Doilea Război Mondial s-a terminat în Europa în mod oficial la 8 sau 9 mai 1945 prin capitularea Germaniei naziste, dar imediat au fost începute noi ostilități în jurul interpretărilor privind diferitele aspecte ale conflagrației, fiecare istoric țin...

Ionel-Claudiu Dumitrescu 19 Februarie 2024

Nr. 1240 48 de vizualizări

Generaţia literară - un concept învechit?

Știm că evoluţia literaturii (române şi universale deopotrivă) poate fi descrisă ca o serie de reacţii contestatare şi de iniţiative inovatoare. Probabil cel mai simplu şi mai elocvent exemplu de răsturnare a paradigmei, de saţietate care provoacă gestu...

Sorin Iagăru-Dina 25 Iulie 2025

Nr. 12 52 de vizualizări

Armele și lipsa de minte

Republica independentă din anul 1783 a fost construită ca o lume nouă, liberă. Organizatorii ce se defineau drept persoane foarte inteligente și instruite au considerat că noul organism statal trebuie să aibă principii...

Ionel-Claudiu Dumitrescu 7 Ianuarie 2023