ElevenLabs apresenta tecnologia de voz IA multilíngue com NVIDIA ACE na Computex

Fizemos uma parceria com a NVIDIA, pioneira em computação acelerada, para oferecer novas experiências com a tecnologia de voz IA realista da ElevenLabs. Tradicionalmente, apresentações principais exigiam tradutores ao vivo ou legendas para atender a vários idiomas. Agora, a ElevenLabs está viabilizando apresentações principais multilíngues que preservam as características da voz do palestrante usando sua tecnologia proprietária de fala por IA e clonagem de voz . 

Jensen Huang, fundador e CEO da NVIDIA, narrou vários capítulos de sua apresentação principal na Computex em inglês e mandarim usando uma voz IA. Ele conseguiu criar a voz IA na ElevenLabs em menos de uma hora, com apenas sete minutos de áudio gravado. O uso dessa tecnologia de voz sintética na apresentação marca um ponto de virada: além de tornar o conteúdo mais acessível a um público maior, abre possibilidades para oferecer novas experiências que antes eram impossíveis.

Além da apresentação, estamos trabalhando juntos para criar personagens não jogáveis (NPCs) dinâmicos para videogames. Tradicionalmente, as interações com NPCs eram breves e roteirizadas. Agora, desenvolvedores podem adicionar NPCs realistas que reagem e se adaptam aos jogadores, proporcionando uma experiência mais imersiva e fiel à realidade. 

NVIDIA ACE é um conjunto de tecnologias para dar vida a humanos digitais com IA generativa. Microsserviços ACE NIM são os blocos de construção de humanos digitais, NPCs com IA e avatares interativos. Desenvolvedores podem integrar microsserviços ACE NIM individuais — ou todos eles — diretamente em seus produtos, ferramentas, serviços, jogos e experiências. 

A demonstração técnica do Covert Protocol usa a voz IA da ElevenLabs para dar vida a essas interações. Desenvolvedores, jornalistas e influenciadores que a experimentaram destacaram o quanto esses personagens parecem realistas e envolventes. Suas vozes realistas, que variam em tom e altura, foram especialmente elogiadas por aumentar a imersão dos jogadores.

“O trabalho que a NVIDIA e a ElevenLabs estão fazendo está transformando nossas interações com o mundo e o conteúdo que pode ser criado — de interações em tempo real e jogos a apresentações e acessibilidade”, afirma Mati Staniszewski, CEO e cofundador da ElevenLabs. “A NVIDIA construiu a infraestrutura para a revolução da IA generativa com computação acelerada; nós estamos desenvolvendo a tecnologia para gerar conteúdo realista em qualquer idioma, de forma escalável, emocional e personalizada”.