ElevenLabs Lança Novos Produtos de Voz IA e Levanta $80M na Série B

• ElevenLabs levantou uma rodada Série B de $80M co-liderada por Andreessen Horowitz, Nat Friedman, Daniel Gross, e com participação de Sequoia Capital, Smash Capital, SV Angel, BroadLight Capital e Credo Ventures para fortalecer sua posição como líder em voz IA.
• A empresa também está revelando hoje um conjunto de novos produtos, incluindo Dubbing Studio, Voice Library marketplace, uma prévia de um Mobile Reader App, e novos modelos com velocidade e cobertura de idiomas aprimoradas.
• Desde seu lançamento, a tecnologia ElevenLabs melhorou a acessibilidade de conteúdo globalmente em setores como economia criativa, publicação, Conversational AI, entretenimento, educação e acessibilidade, com sua adoção por milhões levando a empresa a status de unicórnio.

22 de janeiro / Global - ElevenLabs, uma empresa de pesquisa em tecnologia de voz, levantou uma rodada Série B de $80M co-liderada por Andreessen Horowitz, Nat Friedman, Daniel Gross, e com participação de Sequoia Capital, SV Angel, Smash Capital, BroadLight Capital e Credo Ventures, para consolidar sua posição como líder global em pesquisa de voz IA e implantação de produtos.

Desde seu lançamento público, ElevenLabs lidera a indústria em síntese de fala natural, permitindo que usuários criem e projetem vozes IA em uma vasta gama de idiomas e sotaques, com a capacidade de entregar uma ampla gama de emoções e entonações. Desde o lançamento, os usuários da ElevenLabs geraram mais de 100 anos de áudio, enquanto a empresa cresceu de 5 para 40 funcionários. Hoje, a tecnologia ElevenLabs está sendo usada por funcionários em 41% das empresas da Fortune 500.

A tecnologia da ElevenLabs foi adotada em diversos setores. Ela capacitou criadores a melhorar experiências de audiência com locuções e dublagem IA, ampliou o acesso à educação e forneceu soluções inovadoras na publicação de audiolivros, entretenimento e uso pessoal, incluindo a melhoria da acessibilidade. Este financiamento será usado para refinar ainda mais a oferta de produtos da empresa, garantindo o uso seguro da tecnologia IA.

Além do anúncio da Série B de hoje, ElevenLabs também está revelando vários novos desenvolvimentos de produtos, que serão lançados nas próximas semanas:

• Um novo Dubbing Studioworkflow permite que usuários dublem filmes inteiros, além de gerar e editar suas transcrições, traduções e códigos de tempo, proporcionando controle adicional sobre a produção de conteúdo. Essas capacidades complementam a já existente funcionalidade de dublagem IA que permite a localização automatizada de vídeos de ponta a ponta em 29 idiomas.
• Um Voice Library marketplace que fornecerá uma plataforma segura para que os usuários ganhem com versões IA de suas próprias vozes. Os usuários podem criar sua réplica profissional de voz IA, verificá-la e compartilhá-la via Voice Library. Quando outros usam essas vozes verificadas, os criadores originais recebem compensação. Os usuários sempre mantêm o controle sobre a disponibilidade e os termos de compensação de sua voz. O marketplace já está gerando renda para um pequeno grupo de usuários alfa.
• Uma prévia do Mobile App reader que permite a conversão instantânea de texto e URLs em áudio, facilitando o acesso dos usuários ao conteúdo em outro meio enquanto estão em movimento. Como um teste introdutório, o aplicativo estará disponível gratuitamente nos primeiros três meses e os usuários poderão se inscrever para acesso antecipado através de uma lista de espera.

Ao longo de 2023, ElevenLabs também expandiu sua presença em vários setores, incluindo publicação, jogos, mídia e verticais de conversação, além de estabelecer parcerias B2B com grandes casas de mídia, entre elas:

• Publicação: Storytel, The Washington Post, Rheinische Post, Curio
• Conversational AI: FlowGPT, SimpleTalk AI, Ollang, VoiceDrop, Vana
• Mídia & Entretenimento: Wondershare Filmora, Futuri Media, TheSoul Publishing
• Jogos: Paradox Interactive, NetEase, Inworld AI

Esses lançamentos de produtos e parcerias mais recentes seguem um período em que ElevenLabs expandiu continuamente seu conjunto de ferramentas, todas desenvolvidas a partir de pesquisa interna. Os lançamentos incluíram: Síntese de Fala para conversão realista de text-to-speech, junto com um modelo Turbo otimizado para latência; Voice Design e Voice Cloning para criar vozes personalizadas; Speech to Speech para transformar uma voz em outra. A empresa também lançou sua ferramenta líder do setor, AI Dubbing capaz de traduzir automaticamente áudio e vídeo em 29 idiomas enquanto preserva a voz e as emoções do locutor original. A empresa também expandirá em breve os modelos Turbo e Speech to Speech, atualmente disponíveis em inglês, para um conjunto mais amplo de idiomas.

Com base na pesquisa que impulsiona esses recursos, ElevenLabs também trabalhou no desenvolvimento de ferramentas avançadas para workflows mais complexos, como Studio para publicação, e o Dubbing Studio para localização de vídeo. Studio simplifica a edição, estruturação, navegação e geração de conteúdo de longa duração para editores, e Dubbing Studio ajuda a preparar conteúdo para audiências globais, proporcionando controle prático sobre transcrição, tradução e tempo de sequência.

A empresa também desenvolveu produtos orientados para a comunidade, como Voice Library - um ambiente para compartilhar vozes geradas por IA. Anteriormente limitado ao compartilhamento de vozes artificiais criadas com a ferramenta Voice Design, o Voice Library agora permite que os usuários compartilhem suas próprias réplicas de voz verificadas feitas com o Professional Voice Cloning como parte do recém-introduzido Voice Library marketplace, e ganhem dinheiro quando outros as utilizam. Para garantir a segurança e integridade do marketplace, ElevenLabs usa sua tecnologia Professional Voice Cloning para criar réplicas de voz de alta fidelidade. Antes de compartilhar uma voz, os usuários devem passar por uma verificação Voice Captcha lendo um texto dentro de um prazo específico para confirmar que sua voz corresponde às amostras de treinamento. Este processo, juntamente com a moderação e aprovação manual da equipe ElevenLabs, garante que vozes autênticas e verificadas pelos usuários sejam compartilhadas e monetizadas, criando um ambiente mais seguro e confiável.

Uma prioridade central para ElevenLabs é o desenvolvimento seguro e responsável da IA, com foco em permitir a detecção para garantir que todo o conteúdo gerado por IA seja claramente identificável. A empresa lançou um AI Speech Classifier no ano passado; uma ferramenta que pode verificar se uma amostra de áudio contém conteúdo gerado pela ElevenLabs. Este ano, a empresa trabalhará para aprimorar as capacidades do Classifier para cobrir mais modelos de voz IA, além de fazer parcerias com outras plataformas de distribuição para uma implementação mais ampla. ElevenLabs está desenvolvendo ativamente salvaguardas adicionais para aumentar a segurança no domínio público.

Com este investimento da Série B, ElevenLabs pretende consolidar sua posição como líder global em pesquisa de voz IA e implantação de produtos. O capital será investido em avançar na pesquisa, expandir a infraestrutura, desenvolver novos produtos para verticais específicos e aprimorar medidas de segurança para garantir o desenvolvimento responsável e ético da tecnologia IA.

Piotr Dąbkowski, CTO da ElevenLabs, acrescenta:

“A dedicação da nossa equipe já causou um impacto duradouro na voz IA. Este novo financiamento nos permite enfrentar desafios ainda maiores e focar em manter nossa vantagem competitiva em pesquisa e desenvolvimento de produtos.”

Mati Staniszewski conclui:

“Nossa ambição continua a mesma – transformar a forma como interagimos com o conteúdo, quebrando barreiras de linguagem e comunicação. Estamos construindo tecnologia de ponta para tornar o conteúdo acessível em diferentes idiomas - e vozes - para permitir que todos se conectem com informações e histórias que importam. Nosso progresso até agora é um testemunho de nossa equipe dedicada e investidores, e embora ainda estejamos apenas no começo de nossa jornada, juntos estamos ajudando a moldar o futuro da acessibilidade e comunicação.”