Le sfide di YouTube Shorts mettono alla prova TikTok con l’IA per la creazione di musica per i creatori

La sfida di YouTube Shorts un confronto con TikTok nell'utilizzo dell'IA per la creazione di musica per i creatori

Gli strumenti di TikTok per aggiungere musica ai video brevi hanno contribuito a trasformare i video di breve durata in un fenomeno. Ora Google sta dando a alcuni creatori di YouTube Shorts una funzione di intelligenza artificiale chiamata Dream Track che può generare canzoni, comprensive di testi, melodia e accompagnamento, nello stile di sette artisti diversi, tra cui Charlie Puth, Demi Lovato, Sia e T-Pain, con uno strumento chiamato Dream Track.

Per creare un clip di 30 secondi con Dream Track, un creatore deve semplicemente inserire una prompt, come ad esempio “una ballata sul fatto che gli opposti si attraggono, allegra acustica”, quindi selezionare quale artista dovrà dare lo stile alla canzone.

Il nuovo strumento di generazione di musica Dream Track AI di YouTube per creatori può creare nuove canzoni nello stile di artisti esistenti, in questo caso Charlie Puth.

Registrati oggi

Newsletter Fast Forward di ENBLEWill Knight

Le nuove capacità dell’IA potrebbero aiutare Google a conquistare utenti da TikTok, dove gli strumenti di intelligenza artificiale per aggiungere effetti visivi o sonori sono estremamente popolari. YouTube afferma che sta studiando come gli artisti il cui lavoro ha contribuito ad addestrare gli algoritmi della generazione di musica riceveranno una parte dei futuri ricavi pubblicitari generati dai video con audio generato dall’IA. Questo rappresenterebbe una prova di un modo innovativo per gli artisti di trarre profitto dall’IA costruita in parte sul loro lavoro.

Dream Track utilizza un algoritmo di IA chiamato Lyria sviluppato da Google DeepMind, l’unità incaricata di mantenere l’azienda all’avanguardia dell’IA. Il responsabile globale della musica di YouTube, lo storico magnate della musica Lyor Cohen, che ha contribuito al lancio delle carriere di artisti come Public Enemy, Run-DMC e Beastie Boys, ha detto a ENBLE mercoledì che è rimasto sbalordito dopo aver ascoltato una demo della sua produzione presso la sede londinese di Google DeepMind a maggio. “Sapevo che non avevamo solo qualcosa di unico e speciale, ma qualcosa che credevo che l’industria musicale avrebbe apprezzato e avrebbe voluto lavorarci”, ha detto Cohen.

Cohen afferma che i sette artisti che hanno scelto di far replicare il loro stile a Dream Track lo hanno fatto per abbracciare l’IA generativa secondo i loro termini. “I nostri partner, molti dei quali hanno vissuto i tempi di Napster, non volevano giocare in difesa, volevano giocare in attacco e erano entusiasti delle possibilità”, ha detto. Ad agosto, YouTube ha annunciato di creare un incubatore per collaborare con gli artisti su modi di utilizzare l’IA generativa.

Sette artisti diversi hanno permesso a Google di addestrare Dream Track, un generatore di musica tramite IA, a imitare il loro stile, come in questo esempio ispirato da T-Pain.

Lyria è stata anche utilizzata per creare un secondo strumento chiamato Music AI, annunciato oggi, che consente agli artisti del programma incubatore di YouTube di creare, remixare e modificare tracce in modi nuovi. Demis Hassabis, CEO di Google DeepMind, afferma che questo software può convertire automaticamente una canzone da un genere all’altro, ad esempio da hip hop a country. Può anche generare una melodia strumentale completa e una base da un motivo fischiettato e convertire un input di testo astratto come “sole” in un’interpretazione musicale.

Hassabis afferma che questo ultimo trucco è un buon esempio delle capacità “multimodali” che i modelli potenti esibiscono sempre di più. L’ultima versione di ChatGPT di OpenAI può lavorare con audio e immagini oltre al testo. Google DeepMind sta sviluppando un potente modello di IA chiamato Gemini, che si dice abbia capacità multimodali.

La recente proliferazione di strumenti di intelligenza artificiale capaci di creare immagini, passaggi di testo e musica ha suscitato proteste da parte di alcuni artisti e autori che ritengono che l’inclusione del loro lavoro nei dati di addestramento dei sistemi di intelligenza artificiale senza il permesso o il pagamento sia ingiusta. Un movimento crescente coinvolge il blocco delle aziende che raccolgono contenuti web per alimentare programmi IA generativi o il tentativo di rimuovere materiale protetto da copyright da set di dati comuni.

Alcuni musicisti stanno abbracciando la rivoluzione dell’IA nonostante tali problemi. L’artista Grimes ha recentemente dichiarato a ENBLE che intende rendere open source la sua personalità musicale in modo che chiunque possa replicare il suo stile con l’IA.

I musicisti coinvolti negli ultimi esperimenti di AI di YouTube sembrano meno preoccupati, senza dubbio perché hanno voce in capitolo su come il loro lavoro viene riproposto – e potrebbero ricevere una parte dei guadagni col tempo. “Sono estremamente eccitato e ispirato dal mondo delle possibilità musicali che derivano dalla collaborazione tra la mente umana e quella non umana”, afferma una dichiarazione di Charlie Puth. “Sono aperta di mente e spero che questo esperimento con Google e YouTube sia un’esperienza positiva e illuminante”, afferma un’altra di Demi Lovato.

Google afferma di utilizzare una tecnologia chiamata Synth-ID per aggiungere watermark inaudibili all’orecchio umano alla musica generata usando Lyria, in modo che possa essere identificata come tale. L’azienda sostiene che Lyria è stata addestrata su “un ampio insieme di contenuti musicali”, quindi sarà interessante vedere se potrà trovare un modo per dare credito a ogni artista che ha contribuito.