Anteprima GPT-5: tutto ciò che sappiamo finora sul nuovo modello OpenAI
Pubblicato: 2024-03-20Mentre la maggior parte di noi continua a provare ammirazione per ChatGPT e le sue capacità in continua evoluzione, il CEO di OpenAI Sam Altman è apparso recentemente poco impressionato dall'attuale offerta della sua azienda.
Più specificamente, ha affermato che il cervello di ChatGPT, il modello linguistico di grandi dimensioni (LLM) noto come GPT-4, "fa ancora abbastanza schifo". Ha descritto lo sviluppo di GPT come su una “curva esponenziale” che attualmente offre un “barlume di qualcosa di straordinario” ma che sarà presto messo in ombra dalle capacità di GPT-5.
Dire che questo ha dato fuoco a Internet sarebbe un'esagerazione, ma ha fatto parlare molte persone, e gran parte di quelle chiacchiere ruotano attorno a cosa aspettarsi da GPT-5. Ecco tutto ciò che sappiamo finora, comprese tutte le ultime notizie su GPT-5 e alcune delle nostre previsioni.
Cos'è GPT-5?
GPT è un gergo AI che significa "trasformatore generativo pre-addestrato". Si tratta di un modello linguistico di grandi dimensioni, o LLM, sviluppato dal potente motore di intelligenza artificiale OpenAI che funge da struttura per il chatbot dell'azienda, ChatGPT, uno dei migliori chatbot di intelligenza artificiale in circolazione.
Un altro modo di pensarlo è che un modello GPT è il cervello di ChatGPT, o il suo motore se preferisci. GPT-5 sarà la quinta versione completa di tale modello da parte di OpenAI.
Vuoi navigare sul Web in privato? O apparire come se fossi in un altro paese?
Ottieni un enorme sconto dell'86% su Surfshark con questa offerta speciale di tech.co.
La prima è stata una prova di concetto rivelata in un documento di ricerca nel 2018, e la più recente, GPT-4, è diventata pubblica nel 2023.
Al momento, sembra che GPT-5 sia ancora lontano dal rilascio, anche se lo sviluppo del nuovo modello è stato confermato e si ritiene che la sua formazione sia in corso.
Quanto tempo ci vorrà è una domanda senza risposta, dato che OpenAI potrebbe impiegare tutto il tempo che vuole per perfezionare le sue capacità di base – o provare a lanciare la nuova versione il prima possibile per rimanere in pole position nella corsa agli armamenti dell’IA.
Anteprima GPT-5: ultime notizie e cosa aspettarsi
Per quanto riguarda il presunto rilascio di GPT-5, il panorama attuale è dominato principalmente dalla speculazione, anche se ora conosciamo anche una manciata di fatti concreti.
Ecco cosa pensiamo di vedere da GPT-5, concludendo con quando potrebbe essere effettivamente rilasciato.
La perdita di GPT-4.5 suggerisce la finestra di rilascio di giugno 2024
Come dimostrato dal rilascio incrementale di GPT-3.5, che ha aperto la strada allo stesso ChatGPT-4, OpenAI sembra stia adottando una strategia di aggiornamento incrementale che vedrà GPT-4.5 rilasciato prima di GPT-5.
Ciò significa che prima di arrivare a ciò che potremmo vedere in GPT-5, dobbiamo soffermarci a considerare GPT-4.5.
In effetti, una finestra di rilascio dichiarata di GPT-4.5 potrebbe già essere trapelata da OpenAI, se si deve credere agli investigatori della tecnologia di Internet. Apparentemente, sia Bing di Microsoft che il motore di ricerca DuckDuckGo hanno indicizzato un post sul blog OpenAI che faceva riferimento alla disponibilità di un modello GPT-4.5 con una "data limite per la conoscenza" di giugno 2024.
Ne consegue che lo stesso GPT-4.5 potrebbe essere rilasciato intorno all'estate 24, poiché OpenAI cerca di tenere il passo con i rivali appena rilasciati come Claude 3 di Anthropic e, infine, aprendo la strada al lancio di GPT-5 alla fine del 2024 o ad un certo punto nel 2025. .
Ad aggiungere ancora più peso alla voce secondo cui il rilascio di GPT-4.5 potrebbe essere imminente è il fatto che ora puoi utilizzare GPT-4 Turbo gratuitamente in Copilot , mentre in precedenza Copilot era solo uno dei modi migliori per ottenere GPT-4 gratuitamente .
Aggiungi l' evento Microsoft Surface del marzo 2024 e avrai anche una passerella per GPT-4.5 da mostrare inizialmente, dato che Microsoft è uno dei maggiori partner, investitori e persino membro del consiglio di amministrazione di OpenAI.
È sull'anatra, vai uno pic.twitter.com/7Jw45v8ybr
— Matteo (@Matthew35342706) 12 marzo 2024
GPT-5 confermato in fase di sviluppo
Oltre alla probabilità che il rilascio di GPT-4.5 da parte di OpenAI sia prossimo, ora abbiamo anche la conferma che la società sta effettivamente lavorando su GPT-5, quindi il suo LLM di nuova generazione è effettivamente in fase di sviluppo invece di essere solo un progetto. sogno irrealizzabile di Internet.
Il CEO di OpenAI, Sam Altman, lo ha rivelato all'inizio del 2024, parlando con Bill Gates nel podcast Unconfuse Me dell'icona della tecnologia.
Aspettatevi un grande salto nei parametri GPT-5 rispetto a GPT-4
Ora, mentre ci avviciniamo al territorio più speculativo e alle voci su GPT-5, un'altra cosa che sappiamo più o meno per certo è che GPT-5 offrirà specifiche di apprendimento automatico significativamente migliorate rispetto a GPT-4.
Quello principale probabilmente saranno i suoi parametri, da cui si prevede un enorme balzo in avanti poiché le capacità di GPT-5 superano di gran lunga qualsiasi cosa di cui fossero capaci i modelli precedenti. Non sappiamo esattamente cosa sarà, ma a titolo di idea, il salto dai 175 miliardi di parametri di GPT-3 ai 1,5 trilioni riportati di GPT-4 è un aumento di 8-9 volte.
Resta da vedere se OpenAI possa eguagliarlo o meno, ma potrebbe emergere una legge di rendimenti decrescenti basata sul fatto che il salto di 115x da GPT-2 a GPT-3 quasi certamente non si ripeterà mai.
Se OpenAI potesse avvicinarsi a un aumento dei parametri di 4-5 volte con GPT-5, sarebbe un risultato fenomenale, soprattutto se si considera che l'ultimo benchmark del settore, Claude 3 Opus di Anthropic, è un modello da 2 trilioni di parametri, quindi anche raddoppiando i parametri di GPT-4 sarebbe un’impresa impressionante.
Poiché qui parliamo di trilioni, l’impatto di qualsiasi aumento sarà accattivante. È anche lecito aspettarsi che GPT-5 abbia una finestra di contesto più ampia e una data limite per le conoscenze più attuali, con una possibilità esterna che possa anche essere in grado di elaborare determinate informazioni (come le fonti dei social media) in tempo reale.
Sora e la multimodalità al centro di GPT-5
Per quanto le persone siano entusiaste per il lancio apparentemente imminente di GPT-4.5, c'è ancora più interesse per il generatore di testo-video recentemente annunciato da OpenAI, soprannominato Sora .
Sora è l'ultima salva nel tentativo di OpenAI di integrare una vera multimodalità nei suoi prodotti in questo momento, ChatGPT Plus (il livello a pagamento del chatbot, che costa $ 20 al mese) offre l'integrazione con il generatore di immagini AI DALL-E di OpenAI. Ti consente di creare immagini AI "originali" semplicemente inserendo un messaggio di testo in ChatGPT.
Con Sora potrai fare lo stesso, solo che otterrai un'uscita video. Le prime dimostrazioni dei poteri di Sora hanno mandato in delirio Internet, e anche dopo più di 10 anni in cui ho visto la "prossima grande novità" della tecnologia andare e venire, devo dire che è davvero impressionante.
Ci sono tutte le possibilità che Sora possa farsi strada nella beta pubblica o nella disponibilità di ChatGPT Plus prima ancora che GPT-5 venga rilasciato, ma anche se così fosse, sarà più grande e migliore che mai quando il LLM di nuova generazione di OpenAI finalmente arriverà.
GPT-5 potrebbe inaugurare l'era del Progetto Q* dell'AGI
Naturalmente, in qualsiasi discussione su GPT-5 è impossibile ignorare il fatto che, dietro le quinte, OpenAI sta lavorando per sviluppare non solo la sua attuale suite di prodotti IA, ma anche per portare avanti una nuova generazione di Intelligenza Generale Artificiale (AGI). ) tecnologie attualmente denominate Project Q* .
AGI è il termine dato quando l’intelligenza artificiale diventa “superintelligente” o acquisisce la capacità di apprendere, ragionare e prendere decisioni con livelli cognitivi umani. Ciò significa sostanzialmente che i sistemi AGI sono in grado di operare in modo completamente indipendente dalle informazioni apprese, facendo così un passo avanti verso l’essere esseri senzienti.
Quando le attuali tecnologie di intelligenza artificiale non sembrano riuscire a smettere di fornire allucinazioni o di generare una strana immagine razzista per stupidaggini, si tratta di una prospettiva a dir poco estremamente controversa e viene contrastata da molti all'interno del settore per motivi etici.
Tuttavia, OpenAI è uno dei suoi principali sostenitori e con la prossima importante versione di GPT, GPT-5, c'è la possibilità di saperne di più sui suoi obiettivi finali per la superintelligenza Project Q* AGI, se non di vedere un prodotto finito, secondo Altman proprie dichiarazioni.
GPT-6 “Confermato” anche da OpenAI
Perché semplicemente andare avanti rispetto a noi stessi quando possiamo andare completamente oltre noi stessi? In un'altra dichiarazione, questa volta risalente a un evento Y Combinator dello scorso settembre, il CEO di OpenAI Sam Altman ha fatto riferimento non solo allo sviluppo di GPT-5 ma anche al suo successore, GPT-6.
Ha affermato che entrambi erano ancora lontani in termini di rilascio; entrambi miravano a una maggiore affidabilità a un costo inferiore; e come abbiamo appena accennato in precedenza, entrambi non sarebbero classificati come prodotti AGI.
Costruire nell'intelligenza artificiale? Ecco le gemme di un discorso completo di @sama a @OpenAI, da @ycombinator
Fine settimana di riunione degli ex studenti:Le lezioni più importanti fin dai primi giorni di costruzione:
Pensare a lungo termine ti porterà lontano. L'intelligenza artificiale aperta ha sperimentato [molti] perni. Dai bracci robotici a... pic.twitter.com/ikDJ2CcS4F
— Iba Masood (@IbaMasood) 24 settembre 2023
Previsioni di rilascio potenziale GPT-5
Sulla base di ciò che abbiamo sentito e visto in passato, azzardiamo l'ipotesi che GPT-5 potrebbe essere rilasciato nel novembre 2024 al prossimo OpenAI DevDay a San Francisco.
È stato allora che ci è stato presentato per la prima volta GPT-4 Turbo, la versione più recente e potente di GPT-4, e se GPT-4.5 verrà effettivamente presentato quest'estate, il DevDay 2024 potrebbe darci il nostro primo sguardo a GPT-5.
Questo, o GPT-4.5 Turbo, potrebbe farsi strada sotto gli occhi del pubblico al DevDay 2024, aprendo la strada al lancio di GPT-5 nel 2025 , il che coinciderebbe con i recenti commenti del CEO di OpenAI Sam Altman.
In un'intervista del marzo 2024 con il podcast Lex Freidman, Altman ha affermato che la "risposta onesta" è che non sa quando GPT-5 sarà pronto, affermando che la sua azienda ha "molte altre cose importanti da rilasciare" prima del suo prossimo lancio. importante aggiornamento LLM.
"Molto" presumibilmente si riferisce sia a Sora che a GPT-4.5, ma dovremo aspettare e vedere.
Altrove, un rapporto di Business Insider di questo marzo affermava che fonti anonime avevano suggerito alla pubblicazione che GPT-5 sarebbe arrivato a metà del 2024, quindi nessuno lo sa in questa fase.
Cronologia e cronologia del rilascio del modello GPT
Per avere un'idea di quando potrebbe essere lanciato GPT-5, è utile guardare quando sono stati rilasciati i modelli GPT precedenti. Ecco una panoramica della cronologia del modello GPT di OpenAI.
GPT-1
Il GPT originale è stato presentato nel giugno 2018 , ma solo come prova di concetto che costituisce una parte fondamentale del documento di ricerca di OpenAI "Improving Language Understanding by Generative Pre-Training".
Il modello da 117 milioni di parametri non è stato rilasciato al pubblico e sarebbero passati ancora alcuni anni prima che OpenAI avesse un modello che fosse felice di includere in un prodotto rivolto al consumatore.
GPT-2
La seconda versione fondamentale di GPT è stata rivelata per la prima volta nel febbraio 2019 , prima di essere rilasciata completamente nel novembre dello stesso anno. Capace di generare testi di base, riassumere, tradurre e ragionare, è stato salutato come una svolta nel suo campo.
Il modello da 1,5 miliardi di parametri è stato pre-addestrato su un set di dati di otto milioni di pagine web, diventando la prima versione GPT disponibile pubblicamente, sebbene il suo utilizzo fosse in gran parte di tipo sperimentale e limitato alla comunità del machine learning.
GPT3
GPT-3 ha rappresentato un altro importante passo avanti per OpenAI ed è stato rilasciato a giugno 2020 . Il modello da 175 miliardi di parametri era ora in grado di produrre testo che molti revisori ritenevano indistinguibile da quello scritto da esseri umani.
Anche se mancano ancora un paio d'anni al rilascio di ChatGPT, l'ultimo sforzo di OpenAI ha fatto parlare tutti nel mondo della tecnologia, mentre The Guardian ha persino pubblicato un intero articolo scritto da GPT-3 per dimostrare le sue capacità fino ad allora inconcepibili.
GPT-3.5
Rilasciato nel marzo 2022 , GPT-3.5 è stato il fondamento su cui è stato costruito ChatGPT. Era basato sullo stesso trasformatore da 175 miliardi di parametri di GPT-3, ma è stato messo a punto e addestrato sui dati fino a giugno 2021.
L'annuncio di GPT-3.5 è stato seguito da vicino, nel novembre 2022, dal lancio di ChatGPT. Il resto, come si suol dire, è storia.
GPT-4
Come ti dirà chiunque abbia utilizzato ChatGPT nelle sue prime incarnazioni, il chatbot AI preferito al mondo era ovviamente imperfetto quanto incredibilmente impressionante. Presentato nel marzo 2023 , GPT-4 è stato il tentativo di OpenAI di risolvere questo problema.
Per stessa ammissione di Altman, è ancora un lavoro in corso, ma GPT-4 è stato un passo avanti strabiliante per la tecnologia AI che ora è abbastanza buona da essere ampiamente utilizzata non solo dagli studenti universitari pigri, ma dalle grandi aziende come parte del loro operazioni quotidiane.
Sebbene il numero effettivo di parametri GPT-4 non sia confermato da OpenAI, si ritiene generalmente che si aggiri intorno a 1,5 trilioni .