ElevenLabs lancia nuovi prodotti di Voice AI e raccoglie 80 milioni di dollari in Serie B

• ElevenLabs ha raccolto 80 milioni di dollari in un round di Serie B guidato da Andreessen Horowitz, Nat Friedman, Daniel Gross, e con la partecipazione di Sequoia Capital, Smash Capital, SV Angel, BroadLight Capital e Credo Ventures per rafforzare la sua posizione di leader nella voice AI.
• Oggi l’azienda presenta anche una serie di nuovi prodotti, tra cui Studio di Doppiaggio, Voice Librarymarketplace, un’anteprima della App mobile Reader, e nuovi modelli con velocità migliorata e copertura linguistica ampliata.
• Dalla sua nascita, la tecnologia di ElevenLabs ha migliorato l’accessibilità ai contenuti a livello globale in settori come creator economy, editoria, status di unicorno, intrattenimento, istruzione e accessibilità, con milioni di utenti che l’hanno adottata portando l’azienda a

22 gennaio / Globale - ElevenLabs, azienda di ricerca sulla tecnologia vocale, ha raccolto 80 milioni di dollari in un round di Serie B guidato da Andreessen Horowitz, Nat Friedman, Daniel Gross, e con la partecipazione di Sequoia Capital, SV Angel, Smash Capital, BroadLight Capital e Credo Ventures, per consolidare la sua posizione di leader globale nella ricerca e nello sviluppo di prodotti di voice AI.

Dal lancio pubblico, ElevenLabs ha guidato il settore nella sintesi vocale naturale, permettendo agli utenti di creare e progettare voci IA in tantissime lingue e accenti diversi, con la possibilità di esprimere una vasta gamma di emozioni e intonazioni. Dalla nascita, gli utenti di ElevenLabs hanno generato oltre 100 anni di audio, mentre il team è cresciuto da 5 a 40 persone. Oggi la tecnologia ElevenLabs viene utilizzata dai dipendenti del 41% delle Fortune 500.

La tecnologia ElevenLabs è stata adottata in numerosi settori. Ha permesso ai creator di migliorare l’esperienza del pubblico con voiceover e doppiaggio IA, ampliato l’accesso all’istruzione e offerto soluzioni innovative nell’editoria di audiolibri, nell’intrattenimento e nell’uso personale, inclusa una maggiore accessibilità. Questo finanziamento servirà a perfezionare ulteriormente l’offerta di prodotti, garantendo al tempo stesso un utilizzo sicuro della tecnologia IA.

Oltre all’annuncio della Serie B di oggi, ElevenLabs presenta anche diversi nuovi sviluppi di prodotto, che saranno disponibili nelle prossime settimane:

• Un nuovo workflow di Studio di Doppiaggio permette di doppiare interi film, generare e modificare trascrizioni, traduzioni e timecode, offrendo un controllo aggiuntivo sulla produzione dei contenuti. Queste funzionalità si aggiungono al doppiaggio IA già esistente, che consente la localizzazione automatica e completa dei video in 29 lingue.
• Un Voice Librarymarketplace che offrirà una piattaforma sicura per guadagnare dalle versioni IA della propria voce. Puoi creare la replica professionale della tua voce IA, verificarla e condividerla tramite Voice Library. Quando altri utilizzano queste voci verificate, i creatori originali ricevono un compenso. Hai sempre il controllo sulla disponibilità della tua voce e sulle condizioni di compenso. Il marketplace sta già generando entrate per un piccolo gruppo di utenti alpha.
• Un’anteprima della App mobile Reader che permette di convertire istantaneamente testi e URL in audio, rendendo più facile accedere ai contenuti in un altro formato anche in movimento. Come prova introduttiva, l’app sarà disponibile gratuitamente per i primi tre mesi e potrai registrarti per l’accesso anticipato tramite una lista d’attesa.

Nel corso del 2023, ElevenLabs ha anche ampliato la sua presenza in diversi settori, tra cui editoria, gaming, media e conversational, stringendo partnership B2B con grandi media company, tra cui:

• Editoria: Storytel, The Washington Post, Rheinische Post, Curio
• IA conversazionale: FlowGPT, SimpleTalk AI, Ollang, VoiceDrop, Vana
• Media & Intrattenimento: Wondershare Filmora, Futuri Media, TheSoul Publishing
• Gaming: Paradox Interactive, NetEase, Inworld AI

Questi ultimi lanci di prodotto e partnership seguono un periodo in cui ElevenLabs ha ampliato costantemente la propria suite di strumenti, tutti sviluppati internamente. Tra le novità rilasciate: Sintesi vocale per una conversione Text to Speech realistica, insieme a un modello Turbo ottimizzato per la latenza; Voice Designe Clonazione Vocale IA per creare voci personalizzate; Speech to Speech per trasformare una voce in un’altra. L’azienda ha anche lanciato il suo strumento di Doppiaggio IA leader di settore, in grado di tradurre automaticamente audio e video in 29 lingue mantenendo la voce e le emozioni originali del parlante. Presto l’azienda amplierà anche i modelli Turbo e Speech to Speech, attualmente disponibili in inglese, a un numero maggiore di lingue.

Sulla base della ricerca che alimenta queste funzionalità, ElevenLabs ha anche sviluppato strumenti avanzati per workflow più complessi, come Studio per l’editoria e lo Studio di Doppiaggio per la localizzazione video. Studio semplifica l’editing, la strutturazione, la navigazione e la generazione di contenuti lunghi per gli editori, mentre lo Studio di Doppiaggio aiuta a preparare i contenuti per il pubblico globale offrendo controllo diretto su trascrizioni, traduzioni e tempistiche.

L’azienda ha anche sviluppato prodotti orientati alla community come Voice Library - un ambiente per condividere voci generate dall’IA. In passato limitata alla condivisione di voci artificiali create con Voice Design, Voice Library ora permette di condividere le proprie repliche vocali verificate realizzate con la Clonazione Vocale Professionale, come parte del nuovo Voice Librarymarketplace, e guadagnare quando altri le utilizzano. Per garantire la sicurezza e l’integrità del marketplace, ElevenLabs utilizza la tecnologia di Clonazione Vocale Professionale per creare repliche vocali ad alta fedeltà. Prima di condividere una voce, è necessario superare una verifica Voice Captcha leggendo un testo entro un tempo specifico, così da confermare che la voce corrisponda ai campioni di addestramento. Questo processo, insieme alla moderazione e all’approvazione manuale del team ElevenLabs, assicura che vengano condivise e monetizzate solo voci autentiche e verificate dagli utenti, creando un ambiente più sicuro e affidabile.

Una priorità fondamentale per ElevenLabs è lo sviluppo sicuro e responsabile dell’IA, con particolare attenzione alla rilevazione per garantire che tutti i contenuti generati dall’IA siano chiaramente identificabili. L’azienda ha lanciato lo scorso anno un Classificatore vocale IA: uno strumento che può verificare se un campione audio contiene contenuti generati da ElevenLabs. Quest’anno lavoreremo per potenziare le capacità del Classifier, includendo più modelli di voice AI, e collaboreremo con altre piattaforme di distribuzione per una diffusione più ampia. ElevenLabs sta sviluppando ulteriori misure di sicurezza per aumentare la protezione nello spazio pubblico.

Con questo investimento in Serie B, ElevenLabs punta a consolidare la sua posizione di leader globale nella ricerca e nello sviluppo di prodotti di voice AI. Il capitale sarà investito per avanzare nella ricerca, espandere l’infrastruttura, sviluppare nuovi prodotti per settori specifici e rafforzare le misure di sicurezza per garantire uno sviluppo responsabile ed etico della tecnologia IA.

Piotr Dąbkowski, CTO di ElevenLabs, aggiunge:

“La dedizione del nostro team ha già lasciato un segno duraturo nella voice AI. Questo nuovo finanziamento ci permette di affrontare sfide ancora più grandi e di concentrarci sul mantenere il nostro vantaggio competitivo nella ricerca e nello sviluppo di prodotti.”

Mati Staniszewski conclude:

“La nostra ambizione resta la stessa: trasformare il modo in cui interagiamo con i contenuti abbattendo le barriere linguistiche e di comunicazione. Stiamo costruendo una tecnologia all’avanguardia per rendere i contenuti accessibili in tutte le lingue – e voci – così che tutti possano connettersi con informazioni e storie importanti. I risultati raggiunti finora sono merito del nostro team e degli investitori, e anche se siamo solo all’inizio del nostro percorso, insieme stiamo contribuendo a plasmare il futuro dell’accessibilità e della comunicazione.”