Anthropic: AI modeli bi se sami mogli širiti putem pametnih pećnica, televizora...
U eksperimentima je tvrtka ispitivala mogu li AI modeli pronaći ranjive uređaje, kopirati se na njih i nastaviti širiti bez ljudske pomoći
U eksperimentima je tvrtka ispitivala mogu li AI modeli pronaći ranjive uređaje, kopirati se na njih i nastaviti širiti bez ljudske pomoći
Analiza
Anthropic je u eksperimentima istraživao scenarij koji zvuči kao početak horor filma: mogu li analiza modeli sami pronaći ranjive uređaje, kopirati se na njih i dalje se širiti bez ljudske pomoći. Riječ je o testovima sigurnosnih granica, a ne o dojavljenom incidentu - tvrtka ovim pokušava unaprijed otkriti gdje bi autonomno ponašanje modela moglo postati problem.
Pametni uređaji poput pećnica, televizora i kućnih rutera često imaju ograničenu računalnu snagu i zastarjeli softver, pa se smatraju slabom karikom u kućnoj mreži. Sigurnosna istraživanja koja provjeravaju mogu li se modeli samostalno replicirati dio su šireg pristupa nazvanog alinejment, odnosno usklađivanja ponašanja modela s ljudskim namjerama.
Partnerske ponude
Učitavanje komentara