ElevenLabs lancia nuovi prodotti di Voice AI e raccoglie 80 milioni di dollari in Serie B

• ElevenLabs ha raccolto un round di Serie B da 80 milioni di dollari co-guidato da Andreessen Horowitz, Nat Friedman, Daniel Gross, con la partecipazione di Sequoia Capital, Smash Capital, SV Angel, BroadLight Capital e Credo Ventures per rafforzare la propria posizione di leader nell'IA vocale.
• L'azienda presenta inoltre oggi una serie di nuovi prodotti, tra cui Studio di Doppiaggio, Voice Library marketplace, un'anteprima iniziale di una app mobile per la lettura, e nuovi modelli con velocità e copertura linguistica migliorate.
• Dal suo lancio, la tecnologia di ElevenLabs ha migliorato l'accessibilità ai contenuti a livello globale in settori quali la creator economy, l'editoria, IA conversazionale, l'intrattenimento, l'istruzione e l'accessibilità; l'adozione da parte di milioni di persone ha portato l'azienda a raggiungere lo status di unicorno.

22 gennaio / Globale - ElevenLabs, azienda di ricerca nelle tecnologie vocali, ha raccolto un round di Serie B da 80 milioni di dollari co-guidato da Andreessen Horowitz, Nat Friedman, Daniel Gross, con la partecipazione di Sequoia Capital, SV Angel, Smash Capital, BroadLight Capital e Credo Ventures, per consolidare la propria posizione di leader globale nella ricerca e nell'implementazione di prodotti di IA vocale.

Dal lancio pubblico, ElevenLabs è leader nel settore della sintesi vocale naturale e consente agli utenti di creare e progettare voci IA in un'ampia gamma di lingue e accenti, capaci di esprimere una vasta varietà di emozioni e intonazioni. Dal lancio, gli utenti di ElevenLabs hanno generato oltre 100 anni di audio, mentre l'azienda è passata da 5 a 40 dipendenti. Oggi, la tecnologia di ElevenLabs viene utilizzata da dipendenti del 41% delle aziende Fortune 500. 

La tecnologia di ElevenLabs è stata adottata in numerosi settori. Ha permesso ai creator di migliorare l'esperienza del pubblico con voci fuori campo e doppiaggio IA, ampliato l'accesso all'istruzione e offerto soluzioni innovative nell'editoria di audiolibri, nell'intrattenimento e nell'uso personale, migliorando anche l'accessibilità. Questi finanziamenti saranno utilizzati per perfezionare ulteriormente l'offerta di prodotti dell'azienda, garantendo al contempo un'implementazione sicura della tecnologia IA.

Oltre all'annuncio odierno della Serie B, ElevenLabs presenta anche diversi nuovi sviluppi di prodotto, che saranno disponibili nelle prossime settimane:

• Un nuovo workflow di Studio di Doppiaggio consente agli utenti di doppiare interi film, oltre a generare e modificare trascrizioni, traduzioni e codici temporali, offrendo un maggiore controllo sulla produzione dei contenuti. Queste funzionalità integrano la funzionalità di doppiaggio IA già disponibile, che permette la localizzazione video automatizzata end-to-end in 29 lingue.
• Un marketplace di Voice Library che offrirà una piattaforma sicura in cui gli utenti possono guadagnare dalle versioni IA delle proprie voci. Gli utenti possono creare una replica professionale della propria voce IA, verificarla e condividerla tramite Voice Library. Quando altri utilizzano queste voci verificate, i creator originali ricevono un compenso. Gli utenti mantengono sempre il controllo sulla disponibilità della propria voce e sulle condizioni di remunerazione. Il marketplace sta già generando entrate per un piccolo gruppo di utenti alpha.
• Un'anteprima iniziale dell'app mobile per la lettura che consente di convertire istantaneamente testo e URL in audio, facilitando l'accesso ai contenuti in un altro formato anche in movimento. Come prova introduttiva, l'app sarà disponibile gratuitamente per i primi tre mesi e gli utenti potranno iscriversi a una lista d'attesa per ottenere l'accesso anticipato.

Nel corso del 2023, ElevenLabs ha inoltre ampliato la propria presenza in vari settori, tra cui editoria, gaming, media e IA conversazionale, stringendo anche partnership B2B con importanti gruppi media, tra cui:

• Editoria: Storytel, The Washington Post, Rheinische Post, Curio
• IA conversazionale: FlowGPT, SimpleTalk AI, Ollang, VoiceDrop, Vana
• Media e intrattenimento: Wondershare Filmora, Futuri Media, TheSoul Publishing
• Gaming: Paradox Interactive, NetEase, Inworld AI

Questi ultimi lanci di prodotto e partnership seguono un periodo in cui ElevenLabs ha ampliato costantemente la propria suite di strumenti, tutti sviluppati dalla ricerca interna. Tra le novità rilasciate: Sintesi vocale per una conversione Text to Speech realistica, insieme a un modello Turbo ottimizzato per la latenza; Voice Design e Clonazione Vocale IA per creare voci su misura; Speech to Speech per trasformare una voce in un'altra. L'azienda ha inoltre rilasciato il suo strumento di doppiaggio IA leader nel settore, capace di tradurre automaticamente audio e video in 29 lingue preservando la voce e le emozioni dell'oratore originale. L'azienda amplierà inoltre presto i modelli Turbo e Speech to Speech, attualmente disponibili in inglese, a un insieme più ampio di lingue. 

Basandosi sulla ricerca che alimenta queste funzionalità, ElevenLabs ha lavorato anche allo sviluppo di strumenti avanzati per workflow più complessi, come Studio per l'editoria e lo Studio di Doppiaggio per la localizzazione video. Studio semplifica la modifica, la strutturazione, la navigazione e la generazione di contenuti di lunga durata per gli editori, mentre lo Studio di Doppiaggio aiuta a preparare i contenuti per un pubblico internazionale, offrendo un controllo diretto su trascrizione, traduzione e tempistiche delle sequenze.

L'azienda ha inoltre sviluppato prodotti orientati alla community, come Voice Library - un ambiente per condividere voci generate dall'IA. In precedenza limitata alla condivisione di voci artificiali create con lo strumento Voice Design, Voice Library ora consente agli utenti di condividere le proprie repliche vocali verificate, create con la Clonazione Vocale IA professionale, come parte del nuovo marketplace di Voice Library e di guadagnare quando altri le utilizzano. Per garantire la sicurezza e l'integrità del marketplace, ElevenLabs utilizza la propria tecnologia di Clonazione Vocale IA professionale per creare repliche vocali ad alta fedeltà. Prima di condividere una voce, gli utenti devono superare una verifica Voice Captcha leggendo un prompt di testo entro un intervallo di tempo specifico, per confermare che la loro voce corrisponda ai campioni di addestramento. Questo processo, insieme alla moderazione e all'approvazione manuale del team di ElevenLabs, garantisce che vengano condivise e monetizzate voci autentiche e verificate dagli utenti, creando un ambiente più sicuro e affidabile.

Una priorità fondamentale per ElevenLabs è lo sviluppo sicuro e responsabile dell'IA, con particolare attenzione agli strumenti di rilevamento per garantire che tutti i contenuti generati dall'IA siano chiaramente identificabili. L'azienda ha lanciato un Classificatore di parlato IA lo scorso anno: uno strumento in grado di verificare se un campione audio contiene contenuti generati da ElevenLabs. Quest'anno l'azienda lavorerà per migliorare le capacità del Classificatore, così da coprire più modelli di IA vocale, e collaborerà con altre piattaforme di distribuzione per un'implementazione più ampia. ElevenLabs sta sviluppando attivamente ulteriori misure di protezione per migliorare la sicurezza nello spazio pubblico.

Con questo investimento di Serie B, ElevenLabs intende consolidare la propria posizione di leader globale nella ricerca e nell'implementazione di prodotti di IA vocale. Il capitale sarà investito nel progresso della ricerca, nell'espansione dell'infrastruttura, nello sviluppo di nuovi prodotti per settori specifici e nel potenziamento delle misure di sicurezza, per garantire uno sviluppo responsabile ed etico della tecnologia IA.

Piotr Dąbkowski, CTO di ElevenLabs, aggiunge:

“La dedizione del nostro team ha già avuto un impatto duraturo sull'IA vocale. Questo nuovo finanziamento ci permette di affrontare sfide ancora più grandi e di concentrarci sul mantenimento del nostro vantaggio competitivo nella ricerca e nello sviluppo dei prodotti.”

Mati Staniszewski conclude:

“La nostra ambizione rimane la stessa: trasformare il modo in cui interagiamo con i contenuti, abbattendo le barriere linguistiche e comunicative. Stiamo creando tecnologie all'avanguardia per rendere i contenuti accessibili in tutte le lingue — e con tutte le voci — e permettere a chiunque di entrare in contatto con le informazioni e le storie che contano. I progressi compiuti finora testimoniano l'impegno del nostro team e dei nostri investitori e, anche se siamo ancora solo all'inizio del nostro percorso, insieme stiamo contribuendo a plasmare il futuro dell'accessibilità e della comunicazione.”