ElevenLabs lanza nuevos productos de voz IA y recauda $80M en Serie B

• ElevenLabs ha recaudado una ronda Serie B de 80 millones de dólares codirigida por Andreessen Horowitz, Nat Friedman, Daniel Gross, con la participación de Sequoia Capital, Smash Capital, SV Angel, BroadLight Capital y Credo Ventures para reforzar su posición como líder en voz IA.
• La empresa también presenta hoy una serie de productos nuevos, entre ellos Dubbing Studio, Voice Library Marketplace, una versión preliminar de una app móvil de lectura, y nuevos modelos con mayor velocidad y cobertura de idiomas.
• Desde su lanzamiento, la tecnología de ElevenLabs ha mejorado la accesibilidad del contenido en todo el mundo en sectores como la economía de creadores, la edición, la IA conversacional, el entretenimiento, la educación y la accesibilidad; su adopción por millones de personas ha llevado a la empresa a alcanzar el estatus de unicornio.

22 de enero / Global - ElevenLabs, empresa de investigación en tecnología de voz, ha recaudado una ronda Serie B de 80 millones de dólares codirigida por Andreessen Horowitz, Nat Friedman, Daniel Gross, con la participación de Sequoia Capital, SV Angel, Smash Capital, BroadLight Capital y Credo Ventures, para consolidar su posición como líder mundial en investigación de voz IA y lanzamiento de productos.

Desde su lanzamiento público, ElevenLabs lidera el sector de la síntesis de voz natural y permite a usuarios crear y diseñar voces IA en una amplia variedad de idiomas y acentos, capaces de transmitir un gran abanico de emociones y entonaciones. Desde su lanzamiento, usuarios de ElevenLabs han generado más de 100 años de audio, mientras que la empresa ha pasado de 5 a 40 empleados. Hoy, empleados de el 41 % de las empresas Fortune 500 utilizan la tecnología de ElevenLabs. 

La tecnología de ElevenLabs se ha adoptado en numerosos sectores. Ha permitido a creadores mejorar la experiencia de sus audiencias con locuciones y doblaje IA, ha ampliado el acceso a la educación y ha aportado soluciones innovadoras en la edición de audiolibros, el entretenimiento y el uso personal, incluida la mejora de la accesibilidad. Esta financiación se utilizará para seguir perfeccionando la oferta de productos de la empresa y garantizar al mismo tiempo un despliegue seguro de la tecnología de IA.

Además del anuncio de la Serie B de hoy, ElevenLabs también presenta varias novedades de producto que estarán disponibles durante las próximas semanas:

• Un nuevo workflow de Dubbing Studio permite a usuarios doblar películas completas, así como generar y editar sus transcripciones, traducciones y códigos de tiempo, con mayor control sobre la producción de contenido. Estas funciones complementan la funcionalidad de doblaje IA ya existente, que permite localizar vídeos de forma automatizada e integral en 29 idiomas.
• Un marketplace de Voice Library que proporcionará una plataforma segura para que usuarios obtengan ingresos con versiones de IA de sus propias voces. Usuarios pueden crear su réplica de voz IA profesional, verificarla y compartirla a través de Voice Library. Cuando otras personas usan estas voces verificadas, creadores originales reciben una compensación. Usuarios siempre conservan el control sobre la disponibilidad de su voz y las condiciones de compensación. El marketplace ya está generando ingresos para un pequeño grupo de usuarios alfa.
• Una versión preliminar del lector de la app móvil de lectura que convierte al instante texto y URL en audio, facilitando que usuarios accedan al contenido en otro formato mientras se desplazan. Como prueba inicial, la app estará disponible sin coste durante los tres primeros meses y usuarios podrán registrarse para obtener acceso anticipado mediante una lista de espera.

A lo largo de 2023, ElevenLabs también ha ampliado su presencia en múltiples sectores, como la edición, los videojuegos, los medios y la IA conversacional, además de establecer alianzas B2B con importantes grupos de comunicación, entre ellos:

• Edición: Storytel, The Washington Post, Rheinische Post, Curio
• IA conversacional: FlowGPT, SimpleTalk AI, Ollang, VoiceDrop, Vana
• Medios y entretenimiento: Wondershare Filmora, Futuri Media, TheSoul Publishing
• Videojuegos: Paradox Interactive, NetEase, Inworld AI

Estos últimos lanzamientos de productos y alianzas llegan tras un periodo en el que ElevenLabs ha ampliado continuamente su conjunto de herramientas, todas desarrolladas a partir de investigación propia. Entre los lanzamientos se incluyen: Síntesis de voz para una conversión de texto a voz realista, junto con un modelo Turbo optimizado para reducir la latencia; Diseño de voz y Clonar Voz IA para crear voces a medida; Voz a Voz para transformar una voz en otra. La empresa también lanzó su herramienta líder del sector de doblaje IA, capaz de traducir automáticamente audio y vídeo a 29 idiomas conservando la voz y las emociones de la persona que habla. La empresa también ampliará próximamente los modelos Turbo y Voz a Voz, disponibles actualmente en inglés, a un conjunto más amplio de idiomas. 

A partir de la investigación que impulsa estas funciones, ElevenLabs también ha trabajado en el desarrollo de herramientas avanzadas para workflows más complejos, como Studio para la edición, y Dubbing Studio para la localización de vídeo. Studio agiliza la edición, estructuración, navegación y generación de contenido de formato largo para editores, y Dubbing Studio ayuda a preparar contenido para audiencias de todo el mundo, ofreciendo control directo sobre la transcripción, la traducción y la duración de las secuencias.

La empresa también ha desarrollado productos orientados a la comunidad como Voice Library; un entorno para compartir voces generadas con IA. Antes limitada a compartir voces artificiales creadas con la herramienta Diseño de voz, Voice Library permite ahora a usuarios compartir sus propias réplicas de voz verificadas creadas con Clonar Voz IA profesional como parte del nuevo marketplace de Voice Library y obtener ingresos cuando otras personas las utilicen. Para garantizar la seguridad e integridad del marketplace, ElevenLabs utiliza su tecnología de Clonar Voz IA profesional para crear réplicas de voz de alta fidelidad. Antes de compartir una voz, usuarios deben superar una verificación Voice Captcha leyendo un texto en un plazo concreto para confirmar que su voz coincide con las muestras de entrenamiento. Este proceso, junto con la moderación y aprobación manual del equipo de ElevenLabs, garantiza que se compartan y moneticen voces auténticas y verificadas por usuarios, lo que crea un entorno más seguro y fiable.

Una prioridad fundamental para ElevenLabs es el desarrollo seguro y responsable de la IA, con el objetivo de facilitar la detección para garantizar que todo el contenido generado con IA sea claramente identificable. El año pasado, la empresa lanzó un Clasificador de voz IA; una herramienta que puede verificar si una muestra de audio contiene contenido generado por ElevenLabs. Este año, la empresa trabajará para mejorar las capacidades del Clasificador y cubrir más modelos de voz IA, además de colaborar con otras plataformas de distribución para lograr una implementación más amplia. ElevenLabs está desarrollando activamente medidas de protección adicionales para reforzar la seguridad en el ámbito público.

Con esta inversión de Serie B, ElevenLabs pretende consolidar su posición como líder mundial en investigación de voz IA y lanzamiento de productos. El capital se destinará a avanzar en investigación, ampliar la infraestructura, desarrollar productos para sectores específicos y mejorar las medidas de seguridad para garantizar un desarrollo responsable y ético de la tecnología de IA.

Piotr Dąbkowski, CTO de ElevenLabs, añade:

«La dedicación de nuestro equipo ya ha tenido un impacto duradero en la voz IA. Esta nueva financiación nos permite asumir retos aún mayores y centrarnos en mantener nuestra ventaja competitiva en investigación y desarrollo de productos».

Mati Staniszewski concluye:

«Nuestra ambición sigue siendo la misma: transformar la forma en que interactuamos con el contenido eliminando las barreras lingüísticas y de comunicación. Estamos creando tecnología de vanguardia para que el contenido sea accesible en todos los idiomas —y con todas las voces— y para que todo el mundo pueda conectar con la información y las historias que importan. Nuestro progreso hasta ahora es testimonio de nuestro equipo e inversores, y aunque esto no es más que el comienzo de nuestro camino, juntos ayudamos a dar forma al futuro de la accesibilidad y la comunicación».