ElevenLabs apresenta tecnologia de voz IA multilíngue com NVIDIA ACE na Computex

Fizemos parceria com a NVIDIA, pioneira em computação acelerada, para oferecer novas experiências com a tecnologia de voz IA da ElevenLabs. Apresentações principais tradicionalmente exigiam tradutores ao vivo ou legendas para suportar vários idiomas. Agora, a ElevenLabs está possibilitando apresentações multilíngues que preservam as características da voz do palestrante usando sua tecnologia proprietária de fala IA e clonagem de voz.

O fundador e CEO da NVIDIA, Jensen Huang, narrou vários capítulos de seu discurso na Computex em inglês e mandarim usando uma voz IA. Ele conseguiu criar a voz IA na ElevenLabs em menos de uma hora com apenas sete minutos de áudio gravado. Este uso da tecnologia de voz sintética no discurso marca um ponto de virada: não só torna o conteúdo mais acessível a um público mais amplo, mas também abre possibilidades para oferecer novas experiências que antes eram impossíveis.

Além do discurso, estamos fazendo parceria para criar personagens não jogáveis (NPCs) dinâmicos para videogames. Tradicionalmente, as interações com NPCs eram breves e roteirizadas. Agora, os desenvolvedores podem adicionar NPCs com características humanas que reagem e se adaptam aos jogadores, proporcionando uma experiência mais imersiva e realista.

NVIDIA ACE é um conjunto de tecnologias para dar vida a humanos digitais com IA generativa.ACE NIM microservices são os blocos de construção de humanos digitais, NPCs IA e avatares interativos. Os desenvolvedores podem integrar individualmente – ou todos – os ACE NIM microservices diretamente em seus produtos, ferramentas, serviços ou jogos e experiências.

A demonstração técnica Covert Protocol, usa a voz IA da ElevenLabs para impulsionar essas interações. Desenvolvedores, jornalistas e influenciadores que a experimentaram destacaram o quão realistas e envolventes esses personagens parecem. Suas vozes realistas, que variam em tom e altura, foram particularmente elogiadas por sua capacidade de aumentar a imersão do jogador.

“O trabalho que a NVIDIA e a ElevenLabs estão fazendo está transformando nossas interações com o mundo e o conteúdo que pode ser criado – desde interações em tempo real e jogos, até apresentações e acessibilidade,” diz Mati Staniszewski, CEO e cofundador da ElevenLabs.“A NVIDIA construiu a infraestrutura para a revolução da IA generativa com computação acelerada; estamos construindo a tecnologia para gerar conteúdo realista em qualquer idioma, de maneira escalável, emocional e personalizada”.