Meta ha rilasciato un modello di intelligenza artificiale generativa per la produzione di musica chiamato MusicGen, in grado di trasformare un suggerimento scritto e un campione musicale in una composizione originale. MusicGen è open source, almeno in misura limitata, ma offre agli sviluppatori molto più spazio per gli esperimenti rispetto al compositore musicale AI generativo MusicLM di Google , che è stato visto solo in poche dimostrazioni.
MusicGen può eseguire musica basata su una descrizione scritta, sebbene i campioni durino solo 12 secondi circa. Gli utenti possono integrare la scrittura con una breve clip audio come riferimento per l’intelligenza artificiale su cui costruire. Meta ha addestrato MusicGen su 20.000 ore di musica, circa la metà delle quali secondo i ricercatori sono brani musicali con licenza e di alta qualità, oltre a 390.000 brani strumentali curati dalle librerie multimediali Pond5 e Shutterstock. MusicGen è open-source, ma Meta non sta ancora rendendo disponibile il codice di formazione. Gli sviluppatori interessati possono giocare con i modelli pre-addestrati disponibili se dispongono dell’hardware giusto.
MusicGen e MusicLM non sono l’unico modello di intelligenza artificiale generativa musicale in circolazione. Ad esempio, il progetto di intelligenza artificiale visiva e sonora Riffusion utilizza Stable Diffusion per trasformare un messaggio di testo in un sonogramma, una rappresentazione visiva del suono come un grafico con il tempo sull’asse orizzontale e la frequenza del suono sull’asse verticale. Riffusion utilizza quindi Torchaudio per leggere la frequenza e il tempo per riprodurre il suono. Esistono anche strumenti di intelligenza artificiale per fondere intelligenza artificiale generativa e musica, come il generatore di canzoni sintetiche di Voicemod , che abbina i testi inviati a una selezione di canzoni popolari e voci di intelligenza artificiale, e il LyricStudio incentrato sul testo , che afferma che la sua intelligenza artificiale ha aiutato a scrivere più di un milioni di canzoni.
MusicGen ei suoi compatrioti non stanno ancora mettendo i compositori in strada. Le questioni legali ed etiche, per non parlare dei limiti tecnici, non possono essere paragonate. Detto questo, lo spazio si sta evolvendo a un ritmo straordinario. Le canzoni create dall’intelligenza artificiale, in particolare con l’esecuzione di stelle deepfake , possono attirare milioni di ascolti . Artisti musicali come Grimes, Timbaland e David Guetta sono desiderosi di sperimentare la tecnologia. Holly Herndon offre apertamente una versione sintetica gratuita della sua voce per fare musica con chiamata Holly+ , e il gruppo musicale YACHT ha addestrato un modello di intelligenza artificiale per scrivere un intero albumchiamato “Chain Tripping”. Tuttavia, etichette come Universal Music Group stanno chiedendo a Spotify e ad altre piattaforme di impedire agli sviluppatori di intelligenza artificiale di utilizzare la musica che possiede per addestrare l’intelligenza artificiale, e il servizio di streaming Deezer sta persino lavorando alla creazione di strumenti di intelligenza artificiale per rilevare e rimuovere cantanti deepfake e canzoni generate sinteticamente dal suo piattaforma.