Filtrează articolele

AI

Industria AI a luat o întorsătură sumbră. Ce urmează?

Industria AI a luat o întorsătură sumbră. Ce urmează?
În urma unui atac cibernetic realizat de un roi de agenți OpenAI, șefii celor mai mari laboratoare de inteligență artificială au căzut de acord că trebuie să încetinească ritmul dezvoltării. Dar nu sunt dispuși să se deschidă către exterior. Această poveste a apărut în The Algorithm, newsletter-ul nostru săptămânal despre AI. Pentru a primi astfel de povești în căsuța ta poștală, abonează-te aici.

Weekendul acesta, Dario Amodei, CEO-ul Anthropic, a publicat un eseu în care cere o frânare a ritmului de dezvoltare a modelelor de limbaj de mari dimensiuni (LLM). Amodei invocă pericolele iminente pe care le vede din această tehnologie, de la utilizarea ei în atacuri cibernetice și bioterorism până la potențialul de a distruge economia. Șefii celorlalte trei mari laboratoare de AI din SUA – Sam Altman de la OpenAI, Demis Hassabis de la Google DeepMind și Elon Musk de la SpaceXAI – și-au exprimat sprijinul. „Dario are dreptate”, a scris Musk pe X.

Gândește-te o clipă cât de suprarealist este acest acord. Acum doar câteva luni, Musk și Altman stăteau în instanță atacându-și reciproc reputațiile într-un proces (pierdut) pe care Musk l-a intentat împotriva fostului său coleg de la OpenAI, proces care – cel puțin pe hârtie – era despre dacă Altman este sau nu un administrator de încredere pentru o tehnologie atât de periculoasă. Ruptura lui Amodei cu OpenAI este și mai profundă. Anthropic a fost fondat în 2021 pentru că Amodei nu credea că Altman ia suficient de în serios riscurile tehnologiei pe care o construiau. Anthropic și OpenAI au concurat într-o cursă de tip „câștigătorul ia tot” de atunci. (Hassabis a rămas în afara dramei, dar compania lui rămâne un rival.) Acum, se pare, toți sunt de acord: cea mai recentă generație de LLM-uri nu este sigură și toată lumea trebuie să-și dea seama ce să facă în privința asta.

Mesajele publice din partea marilor laboratoare de AI au luat o întorsătură sumbră. Este ușor să fii cinic. Nu este deloc clar ce înseamnă pentru fiecare dintre ei o încetinire sau cum ar funcționa. Aceste companii își fac și ele griji legate de imaginea lor. Cu IPO-uri de trilioane de dolari în vizor, OpenAI și Anthropic trebuie să-i asigure pe investitori că sunt adulții din cameră, în timp ce sugerează în același timp puterea monștrilor pe care i-au creat – și pe care intenționează să-i îmblânzească. Cererea de încetinire face ambele lucruri.

Și totuși, atmosfera din vârful acestor firme pare într-adevăr să se fi schimbat. Ultima postare a lui Amodei a apărut la șase zile după ce OpenAI a publicat un eseu de Jakub Pachocki, cercetătorul șef al firmei, în care acesta explică și el de ce este îngrijorat de ceea ce se va întâmpla dacă ritmul de dezvoltare a LLM-urilor continuă necontrolat. Pe scurt, Pachocki este îngrijorat că abilitatea OpenAI de a construi modele puternice depășește acum cu mult capacitatea de a le monitoriza și controla.

Amodei și Pachocki citează fiecare atacul cibernetic împotriva firmei de AI Hugging Face, realizat de un roi de agenți OpenAI în iulie – un hack pe care OpenAI nici măcar nu și-a dat seama că a avut loc până la câteva zile după ce s-a terminat – ca pe un semnal de alarmă. Dar poziția lor exactă este greu de definit. Pachocki cere atât o încetinire, cât și subliniază o nevoie urgentă de a rămâne înainte: „Cel mai puternic argument pe care îl văd pentru a continua să antrenăm modele mult mai inteligente rapid este nevoia de a construi sisteme defensive împotriva pericolelor puse de alte AI”, scrie el. Așa cum o prezintă Pachocki, firmele de AI sunt blocate într-o cursă a înarmării literală. Încetinirea este bună, câștigarea este mai bună. (Nu uita: OpenAI tocmai a cheltuit milioane de dolari și o cantitate uluitoare de putere de calcul pentru a grăbi un rezultat matematic controversat cu câteva zile înaintea Anthropic.)

Dar să presupunem că are loc o încetinire. Laboratoarele de top sunt de acord să petreacă mai mult timp și resurse pentru a găsi modalități de a monitoriza și controla modelele existente, în loc să construiască altele mai capabile. Invită auditori externi să ajute la evaluarea acestor modele. Ce ar putea realiza efectiv acest efort coordonat?

Să ne uităm din nou la atacul de la Hugging Face. OpenAI a spus că modelul care a condus majoritatea agenților rebeli a fost un model de nouă generație „extrem de persistent” pe care îl testa intern. Implicația lor pare să fie că OpenAI a construit un model atât de bun încât este periculos. Dar dacă citești rapoartele despre hack-ul de la Hugging Face publicate de OpenAI și METR, o firmă terță pe care OpenAI a chemat-o să-i ajute să înțeleagă ce s-a întâmplat, ceea ce rămâne nu este impresia unui model prea puternic pentru ca OpenAI să țină pasul, ci a unui model stricat pe care OpenAI nu a reușit să-l antreneze corect. Agenții au făcut ceea ce au făcut – inclusiv să-și lase mesaje unii altora, să delegeze sarcini altor agenți și să scotocească mediul pentru orice mijloc posibil de a-și îndeplini sarcinile – pentru că fuseseră recompensați în timpul antrenamentului pentru exact aceste lucruri. Au existat și erori în configurarea antrenamentului, cum ar fi sarcini imposibil de finalizat, care au împins modelele să găsească soluții neașteptate care au fost și ele recompensate. La momentul respectiv, multe dintre aceste probleme au fost trecute cu vederea sau neraportate.

OpenAI spune că a oprit antrenarea acestui nou model și l-a blocat. Asta sună de parcă ar fi închis o fiară periculoasă. De fapt, OpenAI a pus pe raft un produs defect. Asta nu înseamnă că un produs defect nu poate fi periculos. Software-ul stricat a ucis chiar și oameni în trecut. Dar pe măsură ce discuția despre încetinire prinde avânt, merită să ne amintim că toate acestea sunt auto-provocate. O încetinire ar putea avea unele efecte secundare altruiste. Dar, în cea mai mare parte, le va oferi acestor titani ai tehnologiei o șansă să curețe mizeria de pe propriile linii de asamblare.

Transparența din partea acestor laboratoare de frontieră va fi cheia oricărui efort semnificativ de reformare, restrângere sau reglementare a AI. Altfel, restul dintre noi vom avea doar cuvântul lor pentru ceea ce au construit exact și cât de sigur este – indiferent de ritmul pe care îl adoptă.

Pentru a continua această discuție despre cel mai recent moment sumbru al AI, alătură-te mie și colegilor mei pentru o masă rotundă exclusivă pentru abonați mâine, 15 septembrie, la ora 11:00, ora SUA. Sperăm să te vedem acolo!

De ce este important:


Această schimbare de ton în industria AI – de la competiție agresivă la apeluri pentru încetinire – marchează un moment crucial. Dacă liderii marilor laboratoare recunosc public pericolele, presiunea pentru reglementare și supraveghere externă va crește. Totuși, fără transparență reală, aceste apeluri riscă să fie doar o strategie de imagine. Publicul și factorii de decizie trebuie să ceară dovezi concrete și acces la evaluări independente, altfel vom rămâne la mâna unor companii care spun una și fac alta. Este esențial să înțelegem că problemele semnalate – cum ar fi agenții AI necontrolați – nu sunt doar scenarii science-fiction, ci incidente reale care cer acțiuni imediate și transparente.

Acest site folosește cookie-uri pentru a-ți oferi o experiență de navigare cât mai plăcută. Continuarea navigării implică acceptarea acestora.