ElevenLabs esce dalla Beta e lancia Eleven Multilingual v2: un modello IA per la sintesi vocale in quasi 30 lingue
- Pubblicato
AscoltaAscolta questo articolo
- La piattaforma di IA vocale ElevenLabs compie un salto radicale nel suo impegno a eliminare le barriere linguistiche dei contenuti con il rilascio di un nuovo modello di deep learning fondamentale che supporta funzionalità multilingue in 28 lingue - il Eleven Multilingual v2
- Questo progresso consentirà ad aziende media, sviluppatori di videogiochi, editori e creatori indipendenti di tutto il mondo di migliorare notevolmente l'accessibilità dei propri contenuti
- Queste nuove funzionalità, che seguono numerosi rilasci di nuove funzionalità e miglioramenti dall'avvio della piattaforma a gennaio, segnano anche la fine ufficiale della fase Beta dell'azienda
- La missione di ElevenLabs è rendere tutti i contenuti universalmente accessibili in qualsiasi lingua e con qualsiasi voce
ElevenLabs, leader mondiale nel software di IA vocale, ha lanciato oggi un nuovo multilingue modello di generazione vocale in grado di produrre con precisione audio IA «ricco di emozioni» in quasi 30 lingue.
Questo progresso, basato interamente sulla ricerca interna, consentirà ai creatori di produrre contenuti audio localizzati per i mercati internazionali in Europa, Asia e Medio Oriente. Negli ultimi 18 mesi, ElevenLabs ha analizzato gli elementi distintivi del parlato umano, sviluppando nuovi meccanismi per comprendere il contesto e trasmettere emozioni nella generazione vocale, oltre a sintetizzare voci nuove e uniche.
Con Eleven Multilingual v2, quando inserisci un testo nella piattaforma ElevenLabs di Text to Speech, il nuovo modello può identificare automaticamente quasi 30 lingue scritte e generare parlato in tali lingue con un livello di autenticità senza precedenti.
Allo stesso tempo, indipendentemente dall'uso di una voce sintetica o clonata, le caratteristiche vocali uniche del parlante vengono mantenute in tutte le lingue, incluso il suo accento originale. Ciò significa che la stessa voce può dare vita ai contenuti in 28 lingue diverse.
Questo lancio segue la disponibilità pubblica di Professional Clonazione Vocale IA per tutti i creatori sulla piattaforma. Questo aggiornamento del prodotto, reso disponibile insieme a ulteriori funzionalità di sicurezza e protezione, permette agli utenti di creare una copia digitale perfetta della propria voce, virtualmente indistinguibile dall'originale. Il rilascio di oggi significa che la tua voce potrà parlare nelle quasi 30 lingue offerte dal modello multilingue.
Le lingue ora supportate includono: cinese, coreano, olandese, turco, svedese, indonesiano, filippino, giapponese, ucraino, greco, ceco, finlandese, rumeno, danese, bulgaro, malese, slovacco, croato, arabo classico arabo e tamil.
Si aggiungono alle lingue già disponibili tra cui inglese, polacco, tedesco, spagnolo, francese, italiano, hindi e portoghese.
Dopo i recenti rilasci di funzionalità e i continui miglioramenti della piattaforma, ElevenLabs ha inoltre confermato oggi che la piattaforma esce ufficialmente dalla fase Beta. Questa transizione rappresenta un momento cruciale nell'impegno dell'azienda a fornire strumenti affidabili e all'avanguardia ai suoi oltre 1 milione di utenti globali.
Guardando al futuro, ElevenLabs prevede di introdurre un meccanismo che permetta agli utenti di condividere le voci sulla piattaforma e trarre vantaggio dallo sviluppo di nuovi contenuti audio, favorendo opportunità di collaborazione tra esseri umani e IA.
Mati Staniszewski, CEO e cofondatore di ElevenLabs, commenta:
ElevenLabs è nata con il sogno di rendere tutti i contenuti universalmente accessibili in qualsiasi lingua e con qualsiasi voce. Con il rilascio di Eleven Multilingual v2, siamo un passo più vicini a trasformare questo sogno in realtà e a rendere disponibili voci di qualità umana voci IA in ogni dialetto.
«I nostri strumenti di generazione Text to Speech contribuiscono a rendere il settore più equo e offrono capacità audio parlate di altissima qualità a tutti i creatori. Questi vantaggi si estendono ora alle applicazioni multilingue in quasi 30 lingue. In futuro speriamo di coprire ancora più lingue e voci con l'aiuto dell'IA, eliminando le barriere linguistiche dei contenuti. In ElevenLabs crediamo che questi progressi nell'accessibilità favoriranno in definitiva maggiore creatività, innovazione e diversità.»
Riducendo i costi e le risorse necessarie per creare contenuti audio di alta qualità in più lingue, ElevenLabs permette ad aziende e creatori di produrre contenuti più creativi e accessibili, capaci di coinvolgere culture e lingue diverse.
Per gli sviluppatori di videogiochi e gli editori indipendenti, lo strumento di generazione vocale multilingue offre nuove opportunità per tradurre esperienze di gioco e contenuti audio destinati a un pubblico internazionale, connettendo giocatori e ascoltatori nelle loro lingue senza compromettere la qualità o l'accuratezza dell'audio parlato.
Allo stesso modo, le istituzioni educative dispongono ora dei mezzi per fornire istantaneamente agli studenti contenuti audio accurati nelle lingue di destinazione, rafforzando la comprensione linguistica e le capacità di pronuncia, oltre ad adattarsi a diversi stili di insegnamento e necessità di apprendimento degli studenti internazionali.
I creatori di ogni tipo possono usare lo strumento di ElevenLabs per migliorare l'accessibilità dei contenuti per le persone con disabilità visive o ulteriori esigenze di apprendimento, integrando i contenuti visivi con parlato disponibile in più lingue.
La suite iniziale di strumenti di IA vocale, presentata a gennaio 2023, includeva la possibilità di trasformare qualsiasi testo in parlato tramite una selezione di voci sintetiche predefinite e di creare un clone della propria voce. Lo strumento di sintesi vocale multilingue è un ulteriore passo avanti nella missione di ElevenLabs di rendere tutti i contenuti universalmente accessibili in qualsiasi lingua e con qualsiasi voce.
La tecnologia è già stata adottata in numerosi ambiti e settori creativi: consente agli autori indipendenti di creare audiolibri, di dare voce ai personaggi secondari nei videogiochi, di supportare le persone con disabilità visive nell'accesso ai contenuti scritti online e di alimentare il primo canale radiofonico IA al mondo. ElevenLabs ha inoltre collaborato con diversi importanti creatori di contenuti e studi, tra cui i generatori di video IA D-ID, uno dei più grandi editori di audiolibri al mondo Storytel, la piattaforma di video scientifici ad accesso aperto ScienceCast il cui strumento di generazione video sintetizza gli articoli di ricerca scientifica pubblicati su arXiv, la principale piattaforma globale per creatori di contenuti TheSoul Publishing, sviluppatori di videogiochi di grande talento come Embark Studios e Paradox Interactive, e la piattaforma media MNTN.
Contatta
press@elevenlabs.io



