ElevenLabs presenta la tecnología de voz de IA multilingüe con NVIDIA ACE en Computex

Nos hemos asociado con NVIDIA, pionera en computación acelerada, para ofrecer nuevas experiencias con la tecnología de voz IA natural de ElevenLabs. Tradicionalmente, las presentaciones principales requerían intérpretes en directo o subtítulos para admitir varios idiomas. Ahora, ElevenLabs permite crear presentaciones principales multilingües que conservan los rasgos de la voz del ponente mediante su tecnología propia de IA para generar voz y clonación de voz. 

Jensen Huang, fundador y CEO de NVIDIA, narró varios capítulos de su presentación principal en Computex tanto en inglés como en mandarín mediante una voz IA. Pudo crear la voz IA en ElevenLabs en menos de una hora con solo siete minutos de audio grabado. Este uso de tecnología de voz sintética en la presentación marca un punto de inflexión: no solo hace que el contenido sea más accesible para un público más amplio, sino que también abre posibilidades para ofrecer nuevas experiencias que antes eran imposibles.

Además de la presentación, colaboramos para crear personajes no jugables (NPC) dinámicos para videojuegos. Tradicionalmente, las interacciones con NPC eran breves y guionizadas. Ahora desarrolladores pueden añadir NPC con rasgos humanos que reaccionan y se adaptan a jugadores, ofreciendo una experiencia más inmersiva y realista. 

NVIDIA ACE es un conjunto de tecnologías para dar vida a humanos digitales con IA generativa. microservicios ACE NIM son los componentes básicos de humanos digitales, NPC con IA y avatares interactivos. Desarrolladores pueden integrar microservicios ACE NIM individuales, o todos ellos, directamente en sus productos, herramientas, servicios, juegos y experiencias. 

La demo técnica de Covert Protocol utiliza la voz IA de ElevenLabs para impulsar esas interacciones. Desarrolladores, periodistas e influencers que la han probado han destacado lo realistas y atractivos que resultan estos personajes. Sus voces naturales, que varían en tono y altura, han recibido elogios especiales por su capacidad para aumentar la inmersión de jugadores.

«El trabajo que NVIDIA y ElevenLabs están realizando está transformando nuestras interacciones con el mundo y el contenido que se puede crear, desde las interacciones en tiempo real y los videojuegos hasta las presentaciones y la accesibilidad», afirma Mati Staniszewski, CEO y cofundador de ElevenLabs. «NVIDIA ha creado la infraestructura para la revolución de la IA generativa mediante computación acelerada; nosotros estamos creando la tecnología para generar contenido natural en cualquier idioma, de forma escalable, emocional y personalizada».