Deepdub, una delle principali aziende nel campo del doppiaggio audiovisivo e della localizzazione linguistica basata sull’intelligenza artificiale, ha recentemente lanciato Deepdub GO. Si tratta di una nuova piattaforma basata sull’intelligenza artificiale per la localizzazione e la creazione di contenuti audio-video, rivolta ad aziende, agenzie pubblicitarie, piattaforme di apprendimento online e creatori di contenuti.
Inizialmente, Deepdub ha sviluppato la propria tecnologia di intelligenza artificiale per l’industria dell’intrattenimento e ha collaborato con numerosi studi di Hollywood su una varietà di progetti cinematografici e televisivi, inclusi spettacoli attualmente in streaming su Hulu e Amazon Prime. Con il lancio di Deepdub GO, l’azienda offre per la prima volta la possibilità di localizzazione video di alta qualità e su larga scala in diversi settori.
La localizzazione dei contenuti video attraverso il doppiaggio offre un’esperienza coinvolgente per gli spettatori e permette di rendere i contenuti accessibili a un pubblico più ampio. Tuttavia, a causa dei tempi di consegna lunghi, della complessità del processo e dei costi elevati associati al doppiaggio tradizionale, questa pratica è stata limitata principalmente all’industria dell’intrattenimento.
Ofir Krakowski, CEO e co-fondatore di Deepdub, ha dichiarato: “La stragrande maggioranza dei contenuti oggi può essere fruita solo da una piccola parte della popolazione mondiale. C’è un enorme valore che può essere sfruttato portando contenuti educativi, commerciali e di interesse umano a un pubblico globale. Sebbene i sottotitoli generati automaticamente possano essere d’aiuto, non sono coinvolgenti e non sono accessibili a tutti. Inoltre, non sono adatti a molte tipologie di contenuti, come ad esempio i video di fitness”.
La nuova piattaforma Deepdub GO offre una qualità vocale e un’emozione senza pari. Dispone di una tecnologia vocale simile a quella umana, di una guida vocale e di una stimolazione emotiva unica nel suo genere, nonché di un potente compositore per la clonazione vocale ad alta qualità. Le funzionalità avanzate della piattaforma includono la modifica delle caratteristiche vocali, le traduzioni in diverse lingue e altre potenti funzioni di modifica come il controllo della durata e del conteggio delle parole per la regolazione della sincronizzazione labiale. Oltre a clonare la voce originale, gli utenti possono scegliere tra migliaia di voci disponibili sulla piattaforma, in 65 lingue diverse, per adattarsi a qualsiasi stile.
Deepdub GO offre ai creatori di contenuti un controllo preciso sull’espressività emotiva dell’audio generato tramite il “emotion prompting”, un nuovo approccio che utilizza un modello di linguaggio di grandi dimensioni personalizzato (LLM). Ciò consente agli utenti di guidare le performance vocali attraverso prompt testuali. Inoltre, la piattaforma permette il controllo attraverso la “guida vocale”, una tecnica sviluppata da Deepdub per ottenere risultati di qualità cinematografica nei film di Hollywood. Gli utenti possono fornire una registrazione vocale che funge da guida per l’espressività emotiva desiderata nell’audio generato dall’intelligenza artificiale.
Ofir Krakowski ha dichiarato: “Per la prima volta nella storia, il doppiaggio di livello professionale è disponibile per qualsiasi tipo di contenuto, che si tratti di un video di formazione aziendale, un corso universitario o un video di un influencer. Deepdub GO è uno strumento che consente la narrazione globale, permettendo ai creatori di contenuti di stabilire un collegamento profondo e personale con il proprio pubblico. Con la nostra piattaforma di studio, i creatori possono ampliare il potenziale di diffusione di ogni contenuto oltre i tradizionali confini geografici e linguistici”.
L’utilizzo di Deepdub GO è semplice: gli utenti caricano i propri video sulla piattaforma, selezionano lo stile e le lingue desiderate, e il video sarà presto disponibile per il download. Il processo end-to-end comprende la trascrizione automatica, la traduzione, la generazione della voce e il missaggio audio. Gli utenti hanno il pieno controllo su ogni fase del processo e possono apportare modifiche e regolazioni in base alle proprie esigenze. Deepdub GO è disponibile anche come API, consentendo l’integrazione con strumenti esistenti e flussi di lavoro automatizzati.