Lo sviluppatore di chip di intelligenza artificiale (AI) Cerebras ha rilasciato sette piccoli modelli di linguaggio addestrati sul proprio supercomputer “Andromeda” come open source.
Il modello linguistico rilasciato gratuitamente dalla società è un modello di intelligenza artificiale che funziona in modo simile a “ChatGPT”. Tuttavia, il numero di parametri utilizzati per la formazione variava da 111 milioni a 13 miliardi, che è molto piccolo rispetto ai 175 miliardi utilizzati in ChatGPT.
Secondo Reuters, Cerebras ha annunciato di aver rilasciato questi modelli gratuitamente per promuovere una maggiore collaborazione nella comunità di ricerca e sviluppo dell’IA.
A questo proposito, il CEO Andrew Feldman ha dichiarato: “C’è una tendenza a non rilasciare la tecnologia AI come open source, il che non sorprende perché lo sviluppo costa un sacco di soldi.” è rilasciato gratuitamente”, ha affermato.
Cerebras ha spiegato che il piccolo modello di linguaggio svelato questa volta può essere ulteriormente addestrato o personalizzato sul sistema Nvidia e che il periodo di addestramento per il modello più grande ha richiesto poco più di una settimana.
Ha anche rivelato che i modelli con parametri piccoli possono essere distribuiti su telefoni o altoparlanti intelligenti e i modelli con parametri grandi possono essere utilizzati su personal computer o server.
I modelli di linguaggio di grandi dimensioni con molti parametri possono eseguire funzioni generative più complesse, mentre i modelli di linguaggio di piccole dimensioni possono ridurre i costi e la durata della formazione e hanno il vantaggio di essere più facili da integrare con applicazioni reali.