ElevenLabs lanza nuevos productos de voz IA y recauda $80M en Serie B

• ElevenLabs ha conseguido una ronda de financiación Serie B de 80 millones de dólares coliderada por Andreessen Horowitz, Nat Friedman, Daniel Gross, con la participación de Sequoia Capital, Smash Capital, SV Angel, BroadLight Capital y Credo Ventures para reforzar su posición como líder en voz IA.
• La empresa también presenta hoy una serie de nuevos productos, entre ellos Doblaje IA, Voice Library Marketplace, una versión preliminar de una App móvil de lectura, y nuevos modelos con mayor velocidad y cobertura de idiomas.
• Desde su lanzamiento, la tecnología de ElevenLabs ha mejorado la accesibilidad al contenido en todo el mundo en sectores como la economía de creadores, la edición, la IA conversacional, el entretenimiento, la educación y la accesibilidad; su adopción por millones de personas ha llevado a la empresa a alcanzar el estatus de unicornio.

22 de enero / Global - ElevenLabs, empresa de investigación en tecnología de voz, ha conseguido una ronda de financiación Serie B de 80 millones de dólares coliderada por Andreessen Horowitz, Nat Friedman, Daniel Gross, con la participación de Sequoia Capital, SV Angel, Smash Capital, BroadLight Capital y Credo Ventures, para consolidar su posición como líder mundial en investigación de voz IA y lanzamiento de productos.

Desde su lanzamiento público, ElevenLabs ha liderado el sector de la síntesis de voz natural, permitiendo a usuarios crear y diseñar voces IA en una amplia variedad de idiomas y acentos, capaces de transmitir un gran abanico de emociones y entonaciones. Desde su lanzamiento, usuarios de ElevenLabs han generado más de 100 años de audio, mientras que la empresa ha pasado de 5 a 40 empleados. Hoy, empleados de el 41 % de las empresas Fortune 500 utilizan la tecnología de ElevenLabs. 

La tecnología de ElevenLabs se ha adoptado en numerosos sectores. Ha permitido a creadores mejorar la experiencia de su audiencia con locuciones y doblaje con IA, ha ampliado el acceso a la educación y ha aportado soluciones innovadoras en la publicación de audiolibros, el entretenimiento y el uso personal, incluida la mejora de la accesibilidad. Esta financiación se utilizará para seguir perfeccionando la oferta de productos de la empresa y garantizar al mismo tiempo el despliegue seguro de la tecnología de IA.

Además del anuncio de la Serie B de hoy, ElevenLabs también presenta varias novedades de producto que estarán disponibles durante las próximas semanas:

• Un nuevo workflow de Doblaje IA permite a usuarios doblar películas completas, además de generar y editar sus transcripciones, traducciones y códigos de tiempo, para ofrecer un mayor control sobre la producción de contenido. Estas capacidades complementan la funcionalidad ya disponible de doblaje con IA, que permite localizar vídeos de forma automática e integral en 29 idiomas.
• Un marketplace de Voice Library que proporcionará una plataforma segura para que usuarios obtengan ingresos con versiones de IA de sus propias voces. Usuarios pueden crear una réplica profesional de su voz IA, verificarla y compartirla a través de Voice Library. Cuando otras personas usan estas voces verificadas, creadores originales reciben una compensación. Usuarios siempre conservan el control sobre la disponibilidad de su voz y las condiciones de remuneración. El marketplace ya genera ingresos para un pequeño grupo de usuarios alfa.
• Una versión preliminar de la App móvil de lectura que permite convertir al instante texto y URL en audio, facilitando a usuarios el acceso al contenido en otro formato mientras se desplazan. Como prueba introductoria, la app estará disponible gratis durante los tres primeros meses y usuarios podrán registrarse para obtener acceso anticipado mediante una lista de espera.

A lo largo de 2023, ElevenLabs también ha ampliado su presencia en múltiples sectores, entre ellos la edición, los videojuegos, los medios y los ámbitos conversacionales, además de establecer alianzas B2B con importantes grupos de medios, entre los que se incluyen:

• Edición: Storytel, The Washington Post, Rheinische Post, Curio
• IA conversacional: FlowGPT, SimpleTalk AI, Ollang, VoiceDrop, Vana
• Medios y entretenimiento: Wondershare Filmora, Futuri Media, TheSoul Publishing
• Videojuegos: Paradox Interactive, NetEase, Inworld AI

Estos últimos lanzamientos y alianzas se producen tras un periodo en el que ElevenLabs ha ampliado continuamente su conjunto de herramientas, todas desarrolladas a partir de investigación propia. Los lanzamientos han incluido: Síntesis de voz para una conversión de texto a voz realista, junto con un modelo Turbo optimizado para reducir la latencia; Diseño de voz y Clonar Voz IA para crear voces a medida; Voz a voz para transformar una voz en otra. La empresa también lanzó su herramienta líder del sector de Doblaje con IA, capaz de traducir automáticamente audio y vídeo a 29 idiomas conservando la voz y las emociones de la persona que habla originalmente. La empresa también ampliará próximamente los modelos Turbo y Voz a voz, disponibles actualmente en inglés, a un conjunto más amplio de idiomas. 

A partir de la investigación que impulsa estas funciones, ElevenLabs también ha trabajado en el desarrollo de herramientas avanzadas para workflows más complejos, como Studio para la edición y Doblaje IA para la localización de vídeo. Studio simplifica la edición, estructuración, navegación y generación de contenido extenso para editoriales, y Doblaje IA ayuda a preparar contenido para audiencias de todo el mundo al proporcionar control directo sobre la transcripción, la traducción y los tiempos de las secuencias.

La empresa también ha desarrollado productos centrados en la comunidad como Voice Library; un entorno para compartir voces generadas con IA. Antes limitada a compartir voces artificiales creadas con la herramienta Diseño de voz, Voice Library permite ahora a usuarios compartir sus propias réplicas de voz verificadas creadas con Clonar Voz IA profesional como parte del recién presentado marketplace de Voice Library y obtener ingresos cuando otras personas las utilizan. Para garantizar la seguridad e integridad del marketplace, ElevenLabs usa su tecnología profesional de Clonar Voz IA para crear réplicas de voz de alta fidelidad. Antes de compartir una voz, usuarios deben superar una verificación Voice Captcha leyendo un texto en un plazo específico para confirmar que su voz coincide con las muestras de entrenamiento. Este proceso, junto con la moderación y aprobación manual del equipo de ElevenLabs, garantiza que se compartan y moneticen voces auténticas y verificadas por usuarios, creando un entorno más seguro y fiable.

Una prioridad fundamental para ElevenLabs es el desarrollo seguro y responsable de la IA, con el objetivo de facilitar la detección para garantizar que todo el contenido generado con IA sea claramente identificable. La empresa lanzó el año pasado un Clasificador de voz IA; una herramienta que puede verificar si una muestra de audio contiene contenido generado por ElevenLabs. Este año, la empresa trabajará para mejorar las capacidades del Clasificador y abarcar más modelos de voz IA, además de colaborar con otras plataformas de distribución para lograr una implantación más amplia. ElevenLabs está desarrollando activamente medidas de protección adicionales para mejorar la seguridad en el ámbito público.

Con esta inversión de la Serie B, ElevenLabs pretende consolidar su posición como líder mundial en investigación de voz IA y lanzamiento de productos. El capital se destinará a impulsar la investigación, ampliar la infraestructura, desarrollar nuevos productos para sectores específicos y reforzar las medidas de seguridad para garantizar un desarrollo responsable y ético de la tecnología de IA.

Piotr Dąbkowski, CTO de ElevenLabs, añade:

«La dedicación de nuestro equipo ya ha tenido un impacto duradero en la voz IA. Esta nueva financiación nos permite afrontar retos aún mayores y centrarnos en mantener nuestra ventaja competitiva en investigación y desarrollo de productos».

Mati Staniszewski concluye:

«Nuestra ambición sigue siendo la misma: transformar nuestra forma de interactuar con el contenido derribando las barreras lingüísticas y de comunicación. Estamos desarrollando tecnología de vanguardia para hacer que el contenido sea accesible en todos los idiomas —y con todas las voces—, de modo que todo el mundo pueda conectar con la información y las historias que importan. Nuestro progreso hasta ahora demuestra la dedicación de nuestro equipo e inversores y, aunque esto no es más que el comienzo de nuestro recorrido, juntos estamos ayudando a dar forma al futuro de la accesibilidad y la comunicación».