Possono i modelli di intelligenza artificiale open-source, decentralizzati e scrausi, competere con quelli proprietari ben finanziati, come il potente GPT-4 di OpenAI? Questa domanda frequente ha alimentato un vivace dibattito su Twitter dopo che un ex ricercatore di Google AI ha scelto da che parte stare.
Arnaud Benard, cofondatore di Galileo AI, ha lanciato il guanto di sfida: “Se pensate che i modelli open-source batteranno il GPT-4 quest’anno, vi sbagliate”. Ha citato il talento e le risorse di OpenAI e la natura robusta di GPT-4 come prodotto al di là di un LLM, e ha affermato che i progetti open-source potrebbero faticare a passare da sfidanti a campioni dell’AI.
Se pensate che i modelli open-source batteranno il gpt-4 quest’anno, vi sbagliate.
Ho lavorato nei migliori laboratori di ricerca sull’ai (google ai) e ho costruito librerie open-source con ☻ 5 milioni di download mensili.
Il gpt-4 ha un anno di vita e finora nessun modello lo eguaglia, ecco perché:
1. talento – openai ha assunto…
– Arnaud Benard (@arnaudai) January 1, 2024
Non sorprende che il tweet di Benard abbia scatenato reazioni contrastanti, che vanno dal forte sostegno al feroce disaccordo.
Ryan Casey, un popolare appassionato di IA che scrive la newsletter “Beyond The Yellow Woods”, ha offerto una visione più ottimistica del potenziale dell’IA open-source, affermando: “L’open source eguaglierà o batterà [i modelli privati] quest’anno”, secondo i suoi calcoli. “Se c’è domanda, ci sarà innovazione. “
Eh, credo che l’open source sarà all’altezza di quest’anno o lo batterà. pic.twitter.com/y99qKJ2iKF
– Ryan Casey (@ryansweb) January 1, 2024
D’altra parte, lo stratega dell’intelligenza artificiale Jeremi Traguna ha osservato che “i modelli di OpenAI si muovono continuamente”, aggiungendo che “i modelli open source avranno difficoltà a mantenersi al passo per colpire un bersaglio in movimento nel momento in cui questo si trova nella posizione per essere colpito”. In altre parole, mentre i modelli open-source potrebbero essere al passo con GPT-3.5 nell’era di GPT-4, potrebbe esserci un GPT-5 quando avremo LLM generalisti paragonabili a GPT-4.5 Turbo.
Un analista tecnologico, Jon Howells, ritiene che le risorse non siano l’unico standard che separa gli LLM open da quelli closed-source.
“Mistral dispone di ingenti finanziamenti, di un ottimo team e ha recentemente presentato un modello open-source che batte GPT-3.5”, ha scritto. “Loro o un’azienda simile presenterà un modello open-source di livello GPT-4 entro la fine di quest’anno”.
Mistral AI, una startup francese, si è fatta conoscere dopo aver rilasciato il suo Mixtral LLM, che offre prestazioni migliori rispetto al GPT-3.5 in molti casi d’uso.
In una discussione, il cofondatore di Nous Research, “Teknium”, ha fatto un’osservazione importante, ma filosofica. “Ogni aumento di capacità in un sistema operativo (Open Source) è una cosa permanente che non potrà mai essere tolta al mondo e che potrà essere usata in modo affidabile per sempre”, ha detto. In pratica, finché ci saranno progressi nella tecnologia AI open source, nessuna azienda potrà limitarne l’accesso.
Ho introdotto together e mistral, nessuna delle due parti è arrabbiata per questo fwiw. Ma in questo post aveva detto che nessun modello di OS batterà GPT-4, ma GPT-4 sarà una notizia vecchia – probabilmente quest’anno – non ci è voluto molto per battere 3.5, e il CEO di Mistral ha detto che intende rilasciare un GPT4 di livello Open…
– Teknium (e/λ) (@Teknium1) January 1, 2024
Aperto o chiuso? Un dibattito senza fine
Il dibattito tra open-source e closed-source ricorda le prime battaglie sui sistemi operativi tra Windows e Linux. Santiago Pino di ML School ha scritto che i modelli di intelligenza artificiale proprietari possono conquistare i consumatori in generale, come ha fatto Windows, ma che il software open-source offre una personalizzazione e un controllo che possono essere estremamente utili per gli utenti aziendali.
Pino ha sottolineato come molte aziende inizino a sperimentare con ChatGPT ma poi migrino verso modelli open-source, che possono mettere a punto e personalizzare per le loro esigenze specifiche e per i requisiti di conformità dei dati. Le soluzioni open-source evitano il vendor lock-in e offrono trasparenza, ha affermato.
“I modelli chiusi e proprietari possono conquistare i singoli, ma la maggior parte delle aziende non vuole inviare i propri dati a Microsoft o Google. Vogliono il controllo. I modelli open-source sono la risposta”, ha dichiarato in un tweet qualche giorno prima che il thread di Bernard diventasse virale.
I modelli open-source distruggeranno ChatGPT e Gemini.
La storia dei Large Language Models open-source è la storia di Linux. Windows e Mac hanno conquistato i consumatori, ma Linux è diventato il sistema operativo di Internet.
Lo stesso accadrà con ChatGPT, Gemini e i modelli open-source. Chiuso,… pic.twitter.com/fdmS1VNtqf
– Santiago (@svpino) Dicembre 22, 2023
Questo tipo di opinione è stata condivisa nel dibattito sul tweet di Bernard da Sciumo Inc., una società di sviluppo software, che ha sottolineato il potenziale di nicchia dei modelli open-source: “(I modelli open-source) competeranno dove conta: problemi specifici del dominio con dati e competenze specifiche del dominio che (OpenAI) non ha”.
Anche Furkan Gözükara, ingegnere informatico noto per il suo canale YouTube SECourses, è tra coloro che hanno una posizione più sfumata. Parlando con TCN, si è detto d’accordo con Bernard, affermando che “solo in compiti specifici i LLM Open Source supereranno OpenAI”.
Gözükara fa l’esempio di un’azienda che “forma i LLM sui (propri) documenti”. Sì, OpenAI ha la capacità di personalizzare i GPT sulla base di istruzioni e documenti specifici, ma la gestione di dati sensibili a terzi è sempre una preoccupazione. Questa preoccupazione è stata recentemente confermata quando è stato rivelato che i GPT personalizzati fornivano dati sensibili a utenti terzi.
Yan Lecun, responsabile dello sviluppo dell’IA di Meta e accanito difensore dell’open-source, ha ripetutamente affermato che “i modelli di base dell’IA open-source spazzeranno via i modelli di IA chiusi e proprietari”. Anche Google, un altro gigante dell’IA, riconosce la minaccia rappresentata dall’IA open-source: “I modelli open-source sono più veloci, più personalizzabili, più privati e più capaci”, si legge in una nota di Google trapelata nel 2023.
Resta da vedere se i modelli open-source riusciranno a eguagliare o superare il GPT-4 e le future iterazioni di quest’anno. Tuttavia, le prospettive degli esperti di entrambe le parti rivelano un’intrigante tensione. I modelli closed-source possono avere un vantaggio in termini di risorse e iterazione rapida, ma gli strumenti open-source si stanno evolvendo rapidamente, offrendo capacità e personalizzazione permanenti. Per il momento, la comunità dell’intelligenza artificiale può assistere allo svolgimento della competizione e godere dei vantaggi derivanti dall’utilizzo della migliore tecnologia disponibile.
