Questo nuovo strumento di doppiaggio con intelligenza artificiale può tradurre l’audio preservando la voce del speaker.

Questo nuovo strumento di doppiaggio con intelligenza artificiale è in grado di tradurre l'audio senza alterare la voce del speaker.

Donna con microfono

Se hai mai guardato un film o uno spettacolo doppiato, sai quanto sia innaturale. Molte volte la voce del doppiatore non cambia tra i diversi personaggi, o i modelli e le fluttuazioni sono completamente fuori. La nuova funzione IA di ElevenLab è pensata per risolvere questo problema. 

Martedì, ElevenLabs ha presentato AI Dubbing, una nuova funzionalità che può convertire il contenuto parlato in un’altra lingua mantenendo la voce, i modelli di pronuncia, le emozioni e le intonazioni del parlante originale. 

Anche: Gen AI è una minaccia lavorativa? Al contrario, i lavoratori umani hanno molto da guadagnare

La funzionalità AI Dubbing è pensata per consentire al pubblico di tutto il mondo di godersi i propri contenuti preferiti nella propria lingua madre, convertendoli in pochi minuti. 

La funzionalità AI Dubbing combina la sintesi del parlato multilingue, il clonaggio della voce, il testo e l’elaborazione audio di ElevenLab per preservare la natura del contenuto originale durante la creazione di una traduzione, secondo l’azienda. 

Nel comunicato stampa, il CEO e co-fondatore di ElevenLabs, Mati Staniszewski, ha condiviso la sua esperienza negativa con i contenuti doppiati che ha avuto crescendo e come la nuova tecnologia potrebbe essere una soluzione.

“Crescendo in Polonia, abbiamo guardato film in lingua inglese che erano stati doppiati da un solo narratore. Significa che ogni attore ha la stessa voce. Toglie tanto dalla magia dell’esperienza”, ha detto Staniszewski. 

“Il lancio di AI Dubbing è il nostro passo più importante fino ad oggi nel superare queste barriere linguistiche dei contenuti. Aiuterà il pubblico a godere di qualsiasi contenuto desiderino, indipendentemente dalla lingua che parlano.”

Anche: IA e dati: perfezionare l’iper-personalizzazione per costruire la banca del futuro

La funzionalità AI Dubbing supporterà oltre 20 lingue attualmente supportate dal modello multilingue v2 di Eleven Multilingual v2 model

L’ elenco completo include inglese, giapponese, cinese, tedesco, hindi, francese, coreano, portoghese, italiano, spagnolo, indonesiano, olandese, turco, filippino, polacco, svedese, bulgaro, rumeno, arabo, ceco, greco, finlandese, croato, malese, slovacco, danese, tamil e ucraino.

AI Dubbing è disponibile per tutti gli utenti a partire da oggi e il prezzo dipende dal numero di personaggi che si desidera doppiare.