ElevenLabs lancia nuovi prodotti di Voice AI e raccoglie 80 milioni di dollari in Serie B

• ElevenLabs ha raccolto un round di Serie B da 80 milioni di dollari guidato congiuntamente da Andreessen Horowitz, Nat Friedman, Daniel Gross, con la partecipazione di Sequoia Capital, Smash Capital, SV Angel, BroadLight Capital e Credo Ventures per rafforzare la sua posizione di leader nell'IA vocale.
• Oggi l'azienda presenta anche una serie di nuovi prodotti, tra cui Studio di Doppiaggio, Voice Library marketplace, un'anteprima di una App mobile per la lettura, e nuovi modelli con velocità e copertura linguistica migliorate.
• Dal lancio, la tecnologia di ElevenLabs ha migliorato l'accessibilità dei contenuti a livello globale in settori quali la creator economy, l'editoria, IA conversazionale, l'intrattenimento, l'istruzione e l'accessibilità; l'adozione da parte di milioni di persone ha portato l'azienda allo status di unicorno.

22 gennaio / Globale - ElevenLabs, azienda di ricerca nelle tecnologie vocali, ha raccolto un round di Serie B da 80 milioni di dollari guidato congiuntamente da Andreessen Horowitz, Nat Friedman, Daniel Gross, con la partecipazione di Sequoia Capital, SV Angel, Smash Capital, BroadLight Capital e Credo Ventures, per consolidare la sua posizione di leader globale nella ricerca sull'IA vocale e nella distribuzione di prodotti.

Dal suo lancio pubblico, ElevenLabs è leader del settore nella sintesi vocale naturale e consente agli utenti di creare e progettare voci IA in un'ampia gamma di lingue e accenti, capaci di esprimere numerose emozioni e intonazioni. Dal lancio, gli utenti di ElevenLabs hanno generato oltre 100 anni di audio, mentre l'azienda è passata da 5 a 40 dipendenti. Oggi, la tecnologia di ElevenLabs viene utilizzata dai dipendenti del 41% delle aziende Fortune 500. 

La tecnologia di ElevenLabs è stata adottata in numerosi settori. Ha aiutato i creator a migliorare l'esperienza del pubblico con voci fuori campo e doppiaggio IA, ha ampliato l'accesso all'istruzione e ha fornito soluzioni innovative per l'editoria di audiolibri, l'intrattenimento e l'uso personale, migliorando anche l'accessibilità. I fondi saranno impiegati per perfezionare ulteriormente l'offerta di prodotti dell'azienda, garantendo al contempo un'implementazione sicura della tecnologia IA.

Oltre all'annuncio odierno della Serie B, ElevenLabs presenta anche diverse novità di prodotto, che saranno disponibili nelle prossime settimane:

• Un nuovo workflow di Studio di Doppiaggio consente agli utenti di doppiare interi film, nonché di generare e modificare trascrizioni, traduzioni e timecode, offrendo un maggiore controllo sulla produzione dei contenuti. Queste funzionalità integrano la funzione di doppiaggio IA già disponibile, che consente la localizzazione automatizzata e completa di video in 29 lingue.
• Un marketplace di Voice Library che offrirà agli utenti una piattaforma sicura per guadagnare dalle versioni IA della propria voce. Gli utenti possono creare la propria replica vocale IA professionale, verificarla e condividerla tramite Voice Library. Quando altri utilizzano queste voci verificate, i creator originali ricevono un compenso. Gli utenti mantengono sempre il controllo sulla disponibilità della propria voce e sulle condizioni di compenso. Il marketplace sta già generando entrate per un piccolo gruppo di utenti alpha.
• Un'anteprima della App mobile per la lettura che consente di convertire istantaneamente testi e URL in audio, facilitando l'accesso ai contenuti in un altro formato anche quando si è in movimento. Come prova introduttiva, l'app sarà disponibile gratuitamente per i primi tre mesi e gli utenti potranno registrarsi per l'accesso anticipato tramite una lista d'attesa.

Nel corso del 2023, ElevenLabs ha inoltre ampliato la propria presenza in diversi settori, tra cui editoria, gaming, media e IA conversazionale, e ha stretto partnership B2B con importanti gruppi media, tra cui:

• Editoria: Storytel, The Washington Post, Rheinische Post, Curio
• IA conversazionale: FlowGPT, SimpleTalk AI, Ollang, VoiceDrop, Vana
• Media e intrattenimento: Wondershare Filmora, Futuri Media, TheSoul Publishing
• Gaming: Paradox Interactive, NetEase, Inworld AI

Questi ultimi lanci di prodotto e partnership seguono un periodo in cui ElevenLabs ha ampliato costantemente la propria suite di strumenti, tutti sviluppati dalla ricerca interna. I rilasci hanno incluso: Sintesi vocale per la conversione text-to-speech realistica, insieme a un modello Turbo ottimizzato per la latenza; Voice Design e Clonazione Vocale IA per creare voci personalizzate; Speech to Speech per trasformare una voce in un'altra. L'azienda ha inoltre rilasciato il suo strumento leader di settore Doppiaggio IA, in grado di tradurre automaticamente audio e video in 29 lingue preservando al contempo la voce e le emozioni dell'oratore originale. L'azienda amplierà inoltre presto i modelli Turbo e Speech to Speech, attualmente disponibili in inglese, a un insieme più ampio di lingue. 

Sulla base della ricerca che alimenta queste funzionalità, ElevenLabs ha lavorato anche allo sviluppo di strumenti avanzati per workflow più complessi, come Studio per l'editoria e lo Studio di Doppiaggio per la localizzazione video. Studio semplifica la modifica, la strutturazione, la navigazione e la generazione di contenuti di lunga durata per gli editori, mentre Studio di Doppiaggio aiuta a preparare i contenuti per un pubblico globale, offrendo un controllo diretto su trascrizione, traduzione e tempistiche delle sequenze.

L'azienda ha sviluppato anche prodotti orientati alla community come Voice Library - un ambiente per condividere voci generate dall'IA. In precedenza limitata alla condivisione di voci artificiali create con lo strumento Voice Design, Voice Library ora consente agli utenti di condividere le proprie repliche vocali verificate, realizzate con Clonazione Vocale IA Professionale, nell'ambito del nuovo marketplace di Voice Library, e di guadagnare quando altri le utilizzano. Per garantire la sicurezza e l'integrità del marketplace, ElevenLabs utilizza la tecnologia di Clonazione Vocale IA Professionale per creare repliche vocali ad alta fedeltà. Prima di condividere una voce, gli utenti devono superare una verifica Voice Captcha leggendo un testo entro un intervallo di tempo specifico, per confermare che la loro voce corrisponda ai campioni di addestramento. Questo processo, insieme alla moderazione e all'approvazione manuale del team di ElevenLabs, garantisce che vengano condivise e monetizzate voci autentiche e verificate dagli utenti, creando un ambiente più sicuro e affidabile.

Una priorità fondamentale per ElevenLabs è lo sviluppo sicuro e responsabile dell'IA, con l'obiettivo di rendere possibile il rilevamento e garantire che tutti i contenuti generati dall'IA siano chiaramente identificabili. L'azienda ha lanciato un Classificatore di parlato IA lo scorso anno: uno strumento in grado di verificare se un campione audio contiene contenuti generati da ElevenLabs. Quest'anno l'azienda lavorerà per potenziare le capacità del Classificatore affinché copra più modelli di IA vocale, oltre a collaborare con altre piattaforme di distribuzione per un'implementazione più ampia. ElevenLabs sta sviluppando attivamente ulteriori misure di protezione per migliorare la sicurezza nel dominio pubblico.

Con questo investimento di Serie B, ElevenLabs intende consolidare la propria posizione di leader globale nella ricerca sull'IA vocale e nella distribuzione di prodotti. Il capitale sarà destinato al progresso della ricerca, all'espansione dell'infrastruttura, allo sviluppo di nuovi prodotti per settori specifici e al potenziamento delle misure di sicurezza, per garantire uno sviluppo responsabile ed etico della tecnologia IA.

Piotr Dąbkowski, CTO di ElevenLabs, aggiunge:

“La dedizione del nostro team ha già avuto un impatto duraturo sull'IA vocale. Questo nuovo finanziamento ci consente di affrontare sfide ancora più grandi e di concentrarci sul mantenimento del nostro vantaggio competitivo nella ricerca e nello sviluppo di prodotti.”

Mati Staniszewski conclude:

“La nostra ambizione rimane la stessa: trasformare il modo in cui interagiamo con i contenuti abbattendo le barriere linguistiche e comunicative. Stiamo creando tecnologie all'avanguardia per rendere i contenuti accessibili in tutte le lingue - e con tutte le voci - consentendo a chiunque di connettersi con le informazioni e le storie che contano. I nostri progressi finora sono una testimonianza del nostro team e dei nostri investitori, e sebbene siamo ancora all'inizio del nostro percorso, insieme stiamo contribuendo a dare forma al futuro dell'accessibilità e della comunicazione.”