ElevenLabs lanza herramienta de traducción de voz para romper barreras lingüísticas en contenido

• La plataforma de voz IA ElevenLabs presenta nueva AI Dubbing función - el mayor hito hasta ahora en los esfuerzos de la empresa por eliminar barreras lingüísticas y fomentar la accesibilidad universal del contenido
• Esta herramienta de traducción de voz puede convertir contenido hablado a otro idioma en minutos, preservando la voz del hablante original.Basado en la propia investigación de la empresa, esto significa que audiencias de todo el mundo podrán disfrutar de contenido en su idioma nativo
• La nueva función de AI Dubbing permite a creadores, educadores y empresas de medios llegar a una audiencia global con unos pocos clics. Esto sigue al reciente lanzamiento de Studio herramienta para apoyar la creación de audio de larga duración de manera simplificada

10 de octubre, Global - ElevenLabs, el líder global en tecnología de voz IA, anuncia hoy la incorporación de una innovadora función de traducción de voz a su plataforma. Nacida de la misión fundamental de eliminar las barreras lingüísticas del contenido sobre la cual se fundó ElevenLabs, y como culminación de la investigación de la empresa hasta la fecha, la herramienta de AI Dubbing permite a los usuarios traducir automáticamente cualquier discurso a un idioma diferente manteniendo la voz del hablante original, creando una nueva forma de doblaje de audio y video de alta calidad y efectiva.

El CEO y cofundador de ElevenLabs, Mati Staniszewski, comenta:

“El lanzamiento de AI Dubbing es nuestro mayor paso hasta ahora para eliminar estas barreras lingüísticas del contenido. Ayudará a las audiencias a disfrutar de cualquier contenido que deseen, independientemente del idioma que hablen. Y significará que creadores de contenido pueden acceder fácil y auténticamente a una audiencia mucho mayor en todo el mundo. Habiendo experimentado estas barreras lingüísticas de primera mano, mi cofundador Piotr y yo estamos muy emocionados de finalmente dar vida al doblaje con IA.”

Señalando una nueva era en la accesibilidad del contenido a través de medios como streaming, videojuegos y películas, la nueva herramienta va más allá de la traducción y subtitulado tradicionales al preservar la identidad del hablante y los patrones de discurso originales cuando se traduce. Esto significa que la voz del mismo actor puede ser escuchada por audiencias en más de 20 idiomas diferentes, entregando líneas con las características y matices de la grabación original.

AI Dubbing combina la investigación de la empresa sobre síntesis de voz multilingüe, clonación de voz, procesamiento de texto y audio, en una sola herramienta; mejorando la autenticidad del contenido traducido y haciéndolo más accesible a una audiencia más amplia mientras se mantiene la esencia de la entonación original. La función de AI Dubbing admite la traducción de voz en más de 20 idiomas actualmente soportados por el modelo Eleven Multilingual v2, incluyendo hindi, portugués, español, japonés, ucraniano, polaco o árabe.

Este movimiento amplía aún más la investigación de ElevenLabs en el espacio de audio IA; permitiendo que las emociones y la entonación del audio original se transformen en audio doblado. La empresa también ha desarrollado su propio método para detectar las voces de diferentes hablantes y métodos para eliminar el ruido de fondo, diferenciando música y ruido del diálogo. Esto significa que la herramienta puede manejar eficazmente audio o video que contenga múltiples hablantes, asegurando que cada voz permanezca distinta y reconocible en diferentes idiomas.

Al automatizar el proceso de doblaje y garantizar una salida de alta calidad, ElevenLabs simplifica la creación de contenido multilingüe para creadores, educadores y empresas de medios. Solo el 6% de la población mundial son hablantes nativos de inglés y el 75% no habla inglés. Este lanzamiento significa que cada video ahora puede estar disponible para una audiencia global, rápidamente y a bajo costo.

El anuncio sigue al reciente lanzamiento de Studio - el avanzado workflow de ElevenLabs para generar y editar audio de larga duración, apoyando una variedad de funciones de edición, como asignación de hablantes, inserción de pausas y regeneración de segmentos.

Con esta adición, ElevenLabs continúa su misión de romper barreras lingüísticas y hacer que el contenido sea universalmente accesible en cualquier idioma y voz.