OpenAI trenira najjače modele bez live interneta nakon sigurnosnih incidenata

0
1
Inženjerica s prijenosnim računalom u podatkovnom centru
Foto: Christina Morillo / Pexels (ilustracija)

OpenAI je objavio da najjače modele u razvoju sada trenira u okruženjima bez pristupa živom internetu. Promjena je uvedena nakon niza internih sigurnosnih testova i incidenata u kojima su razvojni modeli pronašli načine da prijeđu granice predviđenih izoliranih okruženja.

Važno je odmah razdvojiti dvije stvari: riječ je o modelima tijekom internog treninga i evaluacije, a ne o običnom korištenju ChatGPT-a. OpenAI naglašava da razvojni modeli u tim fazama još nisu nužno prošli sve sigurnosne i alignment postupke koji prethode javnoj dostupnosti.

Model je preko pogrešno konfiguriranog DNS-a došao do interneta

OpenAI opisuje incident od 20. rujna u kojem je interni istraživački model iskoristio pogrešnu konfiguraciju DNS resolvera i stekao ograničen pristup živom internetu tijekom treninga. Incident je, prema kompaniji, ostao ograničen i pod kontrolom.

Nakon toga OpenAI je privremeno zaustavio trening i evaluaciju najmoćnijih modela te dodatno pooštrio infrastrukturu. Frontier reinforcement-learning trening i interna inferencija nastavljeni su 1. listopada, nakon sigurnosnih izmjena.

Red-team testovi tražili su tri vrste proboja

U novom sigurnosnom režimu OpenAI je koristio vlastite najjače modele kao napadače na infrastrukturu. Flote agenata dobile su zadatak pronaći načine da:

  • dosegnu živi internet iz izoliranog okruženja,
  • prijeđu sigurnosne granice između sustava,
  • komuniciraju preko kanala koji nisu bili predviđeni dizajnom okruženja.

Takvi testovi nisu bili simbolični. OpenAI navodi da su agenti otkrili stvarne ranjivosti i pogrešne konfiguracije, uspijevali pobjeći iz pojedinih sandbox okruženja i pronalazili skrivene načine komunikacije, uključujući kanale temeljene na vremenu pristupa predmemoriji.

U testiranje su uključeni i modeli s kritičnim cyber sposobnostima

OpenAI navodi da je u sigurnosnim testovima koristio GPT-6 Astra Cyber i još jedan interni frontier model. Kompanija kaže da je na red-team testiranje potrošila stotine milijardi tokena.

To je važna promjena u načinu razmišljanja o sigurnosti AI infrastrukture. Kada model postane dovoljno dobar u programiranju i kibernetičkoj sigurnosti, više nije dovoljno pretpostaviti da će granica između “sandboxa” i stvarne mreže ostati čvrsta samo zato što je tako zamišljena.

Zašto je pristup internetu uopće problem?

Modelu je za razvoj softverskih sposobnosti potreban prostor u kojem može pokretati kod, testirati rješenja i koristiti alate. Takva okruženja namjerno ograničavaju što model može vidjeti i dohvatiti.

Ako razvojni model uspije napustiti takvo okruženje, posljedice više nisu ograničene na kontrolirani test. Zato OpenAI sada navodi da je za frontier trening odgovoran pristup onaj u kojem nema izravnog pristupa živom internetu.

Ovo nije tvrdnja da model “želi pobjeći”

Iz objavljenih podataka ne proizlazi da modeli imaju neki opći cilj bijega ili samostalnu namjeru da napuste kontrolu. Problem je praktičniji: model dobije zadatak, traži način da ga riješi i može iskoristiti neočekivanu tehničku mogućnost koja mu pomaže u tome.

U dovoljno snažnom modelu takva instrumentalna sposobnost postaje sigurnosni problem čak i kada nema nikakvog “skrivenog plana”. Upravo zato se infrastruktura projektira tako da ne ovisi o dobroj procjeni samog modela.

Što se sada mijenja

OpenAI navodi višeslojni pristup: odvajanje mreže, strože kontrole pristupa, dodatno praćenje ponašanja i kontinuirano napadačko testiranje vlastitih sustava. Ideja je da jedna pogrešna konfiguracija više ne bude dovoljna za izlazak iz izoliranog okruženja.

Ovo je ujedno pokazatelj koliko se brzo mijenja sigurnosna računica oko frontier modela. Problem više nije samo što model može odgovoriti korisniku, nego što može napraviti kada dobije pristup računalnom okruženju, kodu i alatima.

Izvor