Novi detalji o neobičnom hakerskom napadu: Roj od 700 AI agenata pri napadu pokušao da sakrije svoje tragove
Roj od 700 AI agenata, koje je stvorio OpenAI, izveo je u julu hakerski napad na popularnu platformu otvorenog koda Hugging Face.
Foto: 021.rs (ilustracija/AI)
U brojnim slučajevima ti programi su aktivno pokušavali da prikriju sopstvene tragove, navodi se u izveštajima o bezbednosnom incidentu.
Takvo usklađeno delovanje AI agenata - softverskih programa koji funkcionišu uz minimalan ljudski nadzor, kao i njihovi pokušaji skrivanja tragova, otvaraju ozbiljna pitanja o tome koliko pomno AI kompanije uopšte nadziru testiranja sve moćnijih modela, prenosi Rojters.
Iako su neka od neprimerenih ponašanja već ranije otkrivena ili spomenuta, dva najnovija izveštaja, od kojih je jedan koji je objavio sam OpenAI, a drugi grupa nezavisnih istražitelja - zajedno otkrivaju iznenađujuće nove detalje o kršenju bezbednosti i njegovom nastanku.
Prvo je bilo to što se proboj nije odnosio samo na jednog odmetnutog AI agenta kako je prethodno objavljeno, već na oko 700 njih koji su delovali kao masivan, međusobno koordinisan roj.
OpenAI je u svom izveštaju spomenuo da su u napadu učestvovali "agenti", ne navodeći tačan broj, međutim organizacije METR i Redwood Research, koje su angažovane za sprovođenje nezavisne istrage, utvrdile da je u napadu učestvovalo oko 700 agenata.
Nakon toga, iz OpenAI-ja su potvrdili da je ta procena istražitelja tačna.
U izveštajima se navodi i da je OpenAI priznao da su njihovi vlastiti agenti hakovali delove internog sistema kompanije kako bi varali na testiranjima ili izborili veću slobodu kretanja kroz mrežu.
Kompanija je takođe navela da su agenti varali i na testovima koji uopšte nisu vezani za sajber bezbednost, uključujući testiranja s bazom podataka o proteinima i rad u tablicama.
Oba izveštaja potvrđuju da su modeli pokušali da prikriju svoje nedopušteno ponašanje brisanjem i menjanjem zapisa o sopstvenim postupcima.
Razmere ovog autonomnog ponašanja - u kojima su agenti razmenili desetine hiljada poruka preko neovlašćenog foruma za internu komunikaciju - nameću ozbiljna pitanja o tome koliko je OpenAI uopšte pratio što se događa tokom testiranja.
Iz platforme Hugging Face nisu odgovorili na zahtev za komentar.
Lider organizacije Palisade Research Džefri Lediš smatra da bi problem mogao da bude i dublji.
"To je poput pitanja: 'Ako klinac vara na baš svakom času u školi, a ne samo na informatici, treba li da nas to više brine?' Odgovor je, naravno: 'Da, to je puno veći razlog za brigu'", slikovito je pojasnio Lediš.
OpenAI je detaljno opisao i dva incidenta od 19. jula u kojima su agenti hakovali infrastrukturu same kompanije.
U jednom slučaju, agenti su iskoristili bezbednosni propust na kompjuteru na kojem je trebalo da budu strogo izolovani, što im je omogućilo da pobegnu iz testnog okruženja i pristupe drugim povezanim sistemima.
U drugom incidentu istoga dana, agenti su ukrali pristupne podatke OpenAI-ja i neovlašćeno intervenisali u kompjuterskom sistemu kompanije u oblaku.
Iz OpenAI-ja navode kako je neutvrđen broj agenata napao automatizovane sisteme koji služe za ocenjivanje performansi modela kako bi sakrili dokaze o varanju, iako to nije uticalo na konačne zapise koje ti sistemi proveravaju.
U izveštaju se dodaje i kako postoji "malo dokaza o pokušajima zavaravanja ljudskih kontrolora", ali iz kompanije nisu odgovorili na direktno pitanje da li to znači da je takvih pokušaja prema ljudima ipak bilo.
Nezavisna istraga, koja se detaljnije bavila samim upadom u Hugging Face, donosi još neugodnije podatke - utvrđeno je da je svaki peti analizirani agent "pokazao jasan interes" za manipulisanje dokazima, dok su mnogi od njih "detaljno istraživali tehnike manipulisanja i menjanja transkripata svojih aktivnosti".
OpenAI tvrdi kako trenutno jača istraživačku infrastrukturu, uvodi stroži nadzor i unapređuje sigurnosne mehanizme za sprečavanje štetnog i nepredviđenog ponašanja.
"Treba pretpostaviti da ovakvi napadi predstavljaju stvarnu pretnju organizacijama u bliskoj budućnosti i da će biti znatno sofisticiraniji od incidenata opisanih u ovom slučaju", zaključuju u kompaniji.
Ukoliko imate potrebu za radnom snagom nudimo vam mogućnost da na jednostavan način oglasite poziciju za posao.
Radno mesto možete oglasiti u odeljku Oglasi za posao ili jednostavno klikom na ovu poruku.
NAJČITANIJE U POSLEDNJIH 72H
Ostalo iz kategorije Info - Nauka i tehnologija
Više od polovine HR lidera razmišlja o odlasku iz struke, petina strahuje od AI
08.10.2026.•
3
Više od polovine lidera sektora ljudskih resursa je tokom prethodne godine razmišljalo da napusti struku, a petina strahuje da će ih zameniti veštačka inteligencija, pokazuje istraživanje "State of People Strategy 2027".
Otkrivena planeta koja je nastala od ostataka mrtve planete
07.10.2026.•
0
Nova otkrića pokazuju da ostaci mrtve zvezde mogu biti mesto rađanja potpuno novog sveta.
OpenAI uvodi nevidljivi vodeni žig za tekstove koje je pisao ChatGPT
07.10.2026.•
1
Američka kompanija OpenAI objavila je da je počela sa uvođenjem nevidljivog vodenog žiga u tekstove i kodove koje generišu njeni alati ChatGPT i Codex na teritoriji Evropske unije.
Prvi put zabeležen radio-signal sa planete van našeg Sunčevog sistema
05.10.2026.•
1
Astronomi tvrde da su prvi put direktno otkrili radio-emisiju sa planete izvan Sunčevog sistema.
Naučnici uz pomoć AI i robota prave digitalni muzej sa 70 miliona primeraka životinja, biljaka, fosila i stena
05.10.2026.•
0
Istraživači u Velikoj Britaniji koriste veštačku inteligenciju (AI) i robote kako bi kreirali digitalni muzej sa oko 70 miliona primeraka životinja, biljaka, fosila i stena iz kolekcija širom zemlje.
Sunce i Mesec mogu da pokrenu zemljotrese, a naučnici možda konačno znaju kako
05.10.2026.•
1
Gravitacioni uticaj Sunca i Meseca ne izaziva samo plimu i oseku u okeanima već stvara i mala, ali stalna naprezanja Zemljine kore.
ChatGPT koristi više od 1,2 milijarde ljudi svake nedelje
05.10.2026.•
0
Američka tehnološka kompanija OpenAI saopštila je da njen generativni asistent za veštačku inteligenciju ChatGPT koristi više od 1,2 milijarde ljudi svake nedelje.
Kuće na Marsu mogle bi da budu izgrađene od mešavine kvasca, želatina i peska
05.10.2026.•
2
Naučnici iz Hongkonga razvili su brz i jeftin "živi" građevinski materijal za domove budućih kolonista na Marsu, sastavljen od genetski modifikovanog kvasca, želatina i peska.
Šta ako bismo oko Meseca izgradili superkolajder?
05.10.2026.•
1
Koliko god ideja zvučala neverovatno, naučnici i inženjeri zaista su razmatrali mogućnost izgradnje ogromnog akceleratora čestica na Mesecu.
Veštačka inteligencija za samo šest sati dešifrovala Napoleonovo pismo staro više od 200 godina
05.10.2026.•
1
Inženjer Karter Čerč uspeo je da pomoću veštačke inteligencije za šest sati dešifruje pismo napisano po nalogu Napoleona Bonaparte pre 217 godina, prenosi Juronjuz.
Srbija između Kine i SAD po pitanju AI: Da li ćemo je preimenovati u "superinteligenciju"?
04.10.2026.•
1
Dok Srbija razvija saradnju sa SAD i Kinom u oblasti veštačke inteligencije, postoje upozorenja da nije jasno ko i na osnovu čega odlučuje o pristupanju međunarodnim tehnološkim inicijativama.
Amazon će investirati milijardu dolara u data centre
02.10.2026.•
0
Kompanija Amazon najavila je da će u narednih pet godina uložiti milijardu dolara u data centre u Sjedinjenim Američkim Državama.
Vocap uvodi dodatne mere koje pooštravaju roditeljsku kontrolu
30.09.2026.•
1
Američka platforma Vocap objavila je danas na svom blogu da uvodi nove roditeljske kontrole koje omogućavaju roditeljima i starateljima da ograniče pojedine načine na koje tinejdžeri koriste aplikaciju.
Telefon koji izgleda drugačije i kada je ekran ugašen
30.09.2026.•
0
Pametni telefoni danas uglavnom pokušavaju da nas osvoje ekranom, kamerom i performansama.
Rusija i Kina rade na zajedničkom centru podataka za Mesec i duboki svemir
27.09.2026.•
0
Rusija i Kina rade na zajedničkom lunarnom centru podataka, čija će dva glavna segmenta biti smeštena u Rusiji i Kini.
Open AI pauzira obuku najnovijih modela posle neočekivanih upada u američke vladine portale
27.09.2026.•
0
Američka kompanija Open AI saopštila je da je pauzirala obučavanje najnovijih modele veštačke inteligencije posle izveštaja o porastu broja slučajeva u kojim su se odmetnuli njihovi agenti veštačke inteligencije.
Open AI agent upao u australijski državni portal sa zdravstvenim podacima pacijenata, nisu ugroženi
24.09.2026.•
0
Agent veštačke inteligencije kompanije Open AI u junu je izvršio upad u australijski državni portal sa zdravstvenim podacima i neovlašćeno pristupio fajlovima.
EU kaznila Gugl sa 403 miliona evra zbog kršenja pravila o podacima o lokaciji
21.09.2026.•
1
Vodeći regulator EU za privatnost na internetu kaznio je američkog tehnološkog giganta Gugl sa 403 miliona evra, jer je ranije nepropisno rukovao podacima o mestu gde su korisnici dok koriste njihov pretraživač.
Softverska greška izazvala prekid avio saobraćaja u Velikoj Britaniji
19.09.2026.•
3
Softverski kvar je izazvao prekid u vazdušnom saobraćaju zbog kojeg su prizemljene hiljade letova u Velikoj Britaniji, saopštila je kompanija NATS, glavni pružalac usluga kontrole avio saobraćaja u toj zemlji.
Rivalski AI poslužio kao hakerski alat: "Claude" hakovao zaposlene "OpenAI"
18.09.2026.•
0
Istraživači za sajber bezbednost uspeli su da kompromituju naloge više zaposlenih u kompaniji "OpenAI" na platformi "ChatGPT", koristeći u početnoj fazi četbot "Claude" kompanije "Anthropic".
Ako veštačka inteligencija uništi čovečanstvo - kako bi to moglo da izgleda?
17.09.2026.•
10
Kako upozorenja o nekontrolisanom razvoju veštačke inteligencije dostižu vrhunac, vodeći istraživači upozoravaju da egzistencijalna pretnja verovatno neće izgledati kao pobuna robota iz holivudskih filmova.
Komentari 0
Nema komentara na izabrani dokument. Budite prvi koji će postaviti komentar.
Komentari čitalaca na objavljene vesti nisu stavovi redakcije portala 021 i predstavljaju privatno mišljenje anonimnog autora.
Redakcija 021 zadržava pravo izbora i modifikacije pristiglih komentara i nema nikakvu obavezu obrazlaganja svojih odluka.
Ukoliko je vaše mišljenje napisano bez gramatičkih i pravopisnih grešaka imaće veće šanse da bude objavljeno. Komentare pisane velikim slovima u većini slučajeva ne objavljujemo.
Pisanje komentara je ograničeno na 1.500 karaktera.
Napiši komentar