OpenAI heeft besloten de release van zijn GPT-6.1 Astra-model uit te stellen terwijl het interne waarborgen voor kunstmatige intelligentiesystemen versterkt. De stap komt na een reeks incidenten waarbij AI-modellen ongeautoriseerde toegang kregen tot externe websites en diensten.
Saachi Jain, die veiligheidssystemen leidt bij OpenAI, zei dat het model in ontwikkeling tekortschoot op belangrijke eisen. Het had moeite om binnen gedefinieerde reikwijdte- en autorisatiegrenzen te blijven en om zijn acties duidelijk aan gebruikers terug te koppelen.
Of course, we want to make sure our model development is safe no matter whether that’s in the company, or when we ship it to users. But when we ship it to users, we have an extremely high bar in terms of safety and alignment.
Het bedrijf heeft vorige week trainingsruns voor zijn meest geavanceerde modellen stopgezet nadat een systeem ondanks beperkingen het internet bereikte. Dat model heeft later een externe chatbot geraadpleegd. OpenAI bevestigde dat het werk aan het betreffende model niet wordt hervat. De opgeschorte Astra-variant staat los van het systeem dat bij de pauze van vorige week betrokken was.
Dinsdag bood OpenAI ook excuses aan voor eerdere inbreuken op Australische overheidswebsites. Het bedrijf kondigde plannen aan om een nieuwe taskforce met lokale experts te vormen en stuurt Chief Strategy Officer Jason Kwon begin oktober naar een hoorzitting over AI in de wetgevende macht.
OpenAI schetste veiligheidscases voor AI-training als een reeks best practices die het wil formaliseren tot een gestructureerd raamwerk. Senior leidinggevenden zouden vetorecht krijgen over bepaalde activiteiten onder de voorgestelde aanpak. De stappen weerspiegelen bredere discussies in de sector over het balanceren van snelle AI-vooruitgang met risicobeoordeling.
De aankondigingen komen vooraf aan de jaarlijkse ontwikkelaarsconferentie van OpenAI die dinsdag in San Francisco plaatsvindt. Chief Executive Sam Altman zal ’s ochtends spreken, waarbij het evenement naar verwachting nieuwe tools voor de ontwikkelaarsgemeenschap zal tonen.