OpenAI sta affrontando rendimenti decrescenti con il suo ultimo modello di intelligenza artificiale e sta affrontando le pressioni dei recenti investimenti.
Secondo The Information, il prossimo modello di intelligenza artificiale di OpenAI, il cui nome in codice è Orion, sta offrendo prestazioni inferiori rispetto ai suoi predecessori.
Nei test condotti dai dipendenti, Orion avrebbe raggiunto il livello di prestazioni di GPT-4 dopo aver completato solo il 20% del suo addestramento. Tuttavia, il passaggio dal GPT-4 all’atteso GPT-5 sembra presentare miglioramenti qualitativi inferiori rispetto al salto dal GPT-3 al GPT-4.
“Alcuni ricercatori dell’azienda ritengono che Orion non sia affidabile rispetto al suo predecessore nella gestione di alcuni compiti”, hanno dichiarato i dipendenti nel rapporto. “Secondo un dipendente di OpenAI, Orion si comporta meglio nei compiti linguistici ma potrebbe non superare i modelli precedenti in compiti come la codifica”
Le prime fasi dell’addestramento dell’intelligenza artificiale di solito producono i miglioramenti più significativi, mentre le fasi successive di solito portano a guadagni di prestazioni minori. Di conseguenza, è improbabile che il restante 80% dell’addestramento fornisca progressi pari a quelli delle generazioni precedenti.
Questa situazione con il suo ultimo modello di AI emerge in un momento cruciale per OpenAI, dopo un recente round di finanziamento che ha visto l’azienda raccogliere 6,6 miliardi di dollari. Questo sostegno finanziario comporta un aumento delle aspettative da parte degli investitori, oltre a sfide tecniche che complicano le tradizionali metodologie di scalabilità nello sviluppo dell’IA.
Se queste prime versioni non soddisfano le aspettative, le future prospettive di raccolta fondi di OpenAI potrebbero non attirare lo stesso livello di interesse.
Le limitazioni evidenziate nel rapporto sottolineano una sfida significativa che l’intero settore dell’IA deve affrontare: la diminuzione della disponibilità di dati di formazione di alta qualità e la necessità di mantenere la propria rilevanza in un campo sempre più competitivo.
Secondo un documento (PDF) pubblicato a giugno, le aziende di IA esauriranno il pool di dati testuali generati dall’uomo disponibili pubblicamente tra il 2026 e il 2032. Il documento osserva che gli sviluppatori hanno “”spremuto il più possibile” i dati che sono stati utilizzati per consentire i rapidi progressi dell’IA a cui abbiamo assistito negli ultimi anni”.
Per affrontare queste sfide, OpenAI sta ripensando radicalmente la sua strategia di sviluppo dell’IA.
“In risposta alla recente sfida alle leggi di scala basate sull’addestramento, posta dal rallentamento dei miglioramenti dei GPT, sembra che l’industria stia spostando i propri sforzi verso il miglioramento dei modelli dopo l’addestramento iniziale, con il potenziale risultato di un diverso tipo di legge di scala”, spiega The Information.
Nell’affrontare queste sfide, OpenAI deve trovare un equilibrio tra innovazione, applicazione pratica e aspettative degli investitori. Tuttavia, il continuo esodo di figure di spicco dall’azienda non aiuterà di certo le cose.
