Oggi, la startup open source Mistral AI ha compiuto un passo audace nel mondo dell’intelligenza artificiale rilasciando il suo nuovo Large Language Model (LLM) con un’approccio insolito: un semplice collegamento torrent.
Questo movimento ha destato notevole attenzione nella comunità dell’IA, specialmente alla luce del recente lancio di Gemini di Google, che è stato presentato in modo professionale e definito una “rivoluzione nell’intelligenza artificiale” da Andrej Karpathy di OpenAI.
In contrasto, Mistral ha optato per la semplicità, pubblicando un collegamento per scaricare il loro nuovo modello chiamato MoE 8x7B tramite un file torrent.
Un post su Reddit ha descritto il Mistral LLM come un “GPT-4 ridotto” che sembra essere “un MoE composto da 8 esperti 7B”. Per l’inferenza di ciascun token, vengono utilizzati solo 2 esperti, continua il post, aggiungendo che “dalle perdite di GPT-4, possiamo ipotizzare che GPT-4 sia un modello MoE con 8 esperti, ciascuno con parametri 111B propri e 55B parametri di attenzione condivisa (parametri 166B per modello). Anche per l’inferenza di ciascun token vengono utilizzati solo 2 esperti.”
Uri Eliabayev, consulente AI e fondatore della comunità “Machine & Deep Learning Israel”, ha spiegato che Mistral è ben noto per questo tipo di rilascio, “senza alcun documento, blog, codice o comunicato stampa”. Jay Scambler, sostenitore dell’IA open source, ha sottolineato che il rilascio è stato “decisamente insolito, ma ha generato un bel po’ di buzz e penso sia questo il punto”.
Questa mossa audace ha immediatamente attirato l’attenzione di molti nell’ambito dell’intelligenza artificiale. Persone come l’imprenditore George Hotz hanno reagito positivamente, mentre Eric Jang, vicepresidente dell’intelligenza artificiale di 1X Technologies ed ex ricercatore di robotica presso Google, ha dichiarato che il marchio Mistral “sta già diventando uno dei miei preferiti nello spazio dell’intelligenza artificiale”.
Da ricordare che Mistral, una startup con sede a Parigi, ha recentemente raggiunto una valutazione di 2 miliardi di dollari grazie a un round di finanziamento guidato da Andreessen Horowitz. In passato, la società ha ottenuto un finanziamento seed record di 118 milioni di dollari ed è stata al centro del dibattito sull’EU AI Act, con segnalazioni secondo cui ha cercato di influenzare il Parlamento europeo per una minore regolamentazione sull’IA open source.