ElevenLabs lance de nouveaux produits d'IA vocale et lève 80 millions de dollars en série B

• OnzeLabs a soulevé une Tour de série B de 80 millions de dollars codirigé par Andreessen Horowitz, Nat Friedman, Daniel Gross, et rejoint par Sequoia Capital, Smash Capital, Ange SV, BroadLight Capital et Credo Ventures pour renforcer sa position de leader en IA vocale.
• L'entreprise dévoile également aujourd'hui une série de nouveaux produits, notamment Studio de doublage, Bibliothèque vocale marché, un aperçu précoce d'un Application de lecture mobile, et nouveaux modèles avec amélioration de la vitesse et de la couverture linguistique.
• Depuis son lancement, la technologie ElevenLabs a amélioré l'accessibilité du contenu à l'échelle mondiale dans des secteurs tels que l'économie des créateurs, l'édition, l'IA conversationnelle, le divertissement, l'éducation et l'accessibilité, son adoption par des millions de personnes conduisant l'entreprise à statut de licorne.

22 janvier / Mondial - OnzeLabs, une société de recherche sur les technologies vocales, a levé 80 millions de dollars en série B, codirigée par Andreessen Horowitz, Nat Friedman, Daniel Gross, et rejoint par Sequoia Capital, Ange SV, Smash Capital, BroadLight Capital et Credo Ventures, pour consolider sa position de leader mondial dans la recherche et le déploiement de produits en matière d'IA vocale.

Depuis son lancement public, ElevenLabs est leader du secteur en matière de synthèse vocale naturelle, permettant aux utilisateurs de créer et de concevoir des voix d'IA dans un large éventail de langues et d'accents, avec la capacité de délivrer une large gamme d'émotions et d'intonations. Depuis le lancement, les utilisateurs d'ElevenLabs ont généré plus de 100 ans de l'audio, tandis que l'entreprise est passée de 5 à 40 employés. Aujourd'hui, la technologie ElevenLabs est utilisée par les employés de 41 % des entreprises du Fortune 500 entreprises. 

La technologie d’ElevenLabs a été adoptée dans de nombreux secteurs verticaux. Il a permis aux créateurs d’améliorer l’expérience du public grâce aux voix off et au doublage par l’IA, d’élargir l’accès à l’éducation et de fournir des solutions innovantes dans l’édition de livres audio, le divertissement et l’utilisation personnelle, notamment en améliorant l’accessibilité. Ce financement servira à affiner davantage l’offre de produits de l’entreprise tout en garantissant le déploiement sûr de la technologie de l’IA.

En plus de l'annonce de la série B d'aujourd'hui, ElevenLabs dévoile également plusieurs nouveaux développements de produits, qui seront mis en ligne au cours des prochaines semaines :

• Un nouveau Studio de doublage Le flux de travail permet aux utilisateurs de doubler des films entiers, ainsi que de générer et de modifier leurs transcriptions, traductions et codes temporels, offrant ainsi un contrôle supplémentaire sur la production de contenu. Ces fonctionnalités complètent la fonction de doublage IA déjà existante qui permet une localisation vidéo automatisée de bout en bout dans 29 langues.
• A Bibliothèque vocale une place de marché qui fournira une plateforme sécurisée aux utilisateurs pour gagner de l'argent grâce à des versions IA de leurs propres voix. Les utilisateurs peuvent créer leur réplique vocale IA professionnelle, la vérifier et la partager via la bibliothèque vocale. Lorsque d’autres utilisent ces voix vérifiées, les créateurs originaux reçoivent une compensation. Les utilisateurs gardent toujours le contrôle sur la disponibilité de leur voix et sur les conditions de rémunération. La place de marché génère déjà des revenus pour un petit groupe d’utilisateurs alpha.
• Un aperçu préliminaire de la Application mobile lecteur que permet la conversion instantanée de texte et d'URL en audio, ce qui permet aux utilisateurs d'accéder plus facilement au contenu d'un autre support lors de leurs déplacements. En guise d'essai, l'application sera disponible gratuitement pendant les trois premiers mois et les utilisateurs pourront s'inscrire pour un accès anticipé via une liste d'attente.

Tout au long de l'année 2023, ElevenLabs a également étendu sa présence dans de nombreux secteurs, notamment l'édition, les jeux, les médias et les secteurs verticaux conversationnels, tout en forgeant des partenariats B2B avec de grandes maisons de médias, parmi lesquelles :

• Édition: Conte, The Washington Post, Rheinische Post, Curio
• IA conversationnelle: FlowGPT, SimpleTalk AI, Ollang, VoiceDrop, Vana
• Médias et divertissement: Wondershare Filmora, Futuri Media, TheSoul Publishing
• Jeux: Paradox Interactive, NetEase, Inworld AI

Ces derniers lancements de produits et partenariats font suite à une période au cours de laquelle ElevenLabs a continuellement élargi sa gamme d'outils, tous développés à partir de recherches internes. Les versions publiées incluent : Synthèse vocale pour réaliste text-to-speech conversion, ainsi qu'un modèle Turbo optimisé pour la latence ; Conception de la voix et Clonage de voix pour créer des voix sur mesure ; Discours à discours pour transformer une voix en une autre. La société a également publié son produit phare du secteur Doublage par IA outil capable de traduire automatiquement l'audio et la vidéo en 29 langues tout en préservant la voix et les émotions de l'orateur d'origine. L'entreprise étendra également bientôt les modèles Turbo et Speech to Speech, actuellement disponibles en anglais, à un ensemble de langues plus large. 

S'appuyant sur les recherches à l'origine de ces fonctionnalités, ElevenLabs a également travaillé sur le développement d'outils avancés pour des flux de travail plus complexes, tels que Projets pour la publication, et le Studio de doublage pour la localisation vidéo. Projets rationalise l'édition, la structuration, la navigation et la génération de contenu long pour les éditeurs, et Studio de doublage aide à préparer le contenu pour un public mondial en offrant un contrôle pratique sur la transcription, la traduction et le minutage des séquences.

L'entreprise a également développé des produits axés sur la communauté tels que Bibliothèque vocale - un environnement de partage de voix générées par l'IA. Auparavant limitée au partage de voix artificielles créées avec l'outil Voice Design, Voice Library permet désormais aux utilisateurs de partager leurs propres répliques vocales vérifiées réalisées avec Professional Voice Cloning dans le cadre de la nouvelle version introduite Bibliothèque vocale marché et gagnez de l'argent lorsque d'autres les utilisent. Pour assurer la sécurité et l’intégrité du marché, ElevenLabs utilise sa technologie de clonage vocal professionnel pour créer des répliques vocales haute fidélité. Avant de partager une voix, les utilisateurs doivent passer une vérification Voice Captcha en lisant une invite de texte dans un délai spécifique pour confirmer que leur voix correspond aux échantillons de formation. Ce processus, associé à la modération et à l'approbation manuelle de l'équipe ElevenLabs, garantit que les voix authentiques vérifiées par les utilisateurs sont partagées et monétisées, créant ainsi un environnement plus sûr et plus fiable.

L’une des principales priorités d’ElevenLabs est le développement sûr et responsable de l’IA, en mettant l’accent sur la détection afin de garantir que tout le contenu généré par l’IA soit clairement identifiable. La société a lancé une Classificateur de discours IA l'année dernière ; un outil qui peut vérifier si un échantillon audio contient du contenu généré par ElevenLabs. Cette année, la société travaillera à l'amélioration des capacités du classificateur pour couvrir davantage de modèles d'IA vocale, ainsi qu'à s'associer à d'autres plateformes de distribution pour une mise en œuvre plus large. ElevenLabs développe activement des mesures de protection supplémentaires pour améliorer la sécurité dans le domaine public.

Avec cet investissement de série B, ElevenLabs entend consolider sa position de leader mondial dans la recherche et le déploiement de produits d'IA vocale. Le capital sera consacré à l’avancement de la recherche, à l’expansion des infrastructures, au développement de nouveaux produits pour des secteurs verticaux spécifiques et au renforcement des mesures de sécurité pour garantir un développement responsable et éthique de la technologie de l’IA.

Piotr Dąbkowski, directeur technique d'ElevenLabs, ajoute :

« Le dévouement de notre équipe a déjà eu un impact durable sur l'IA vocale. Ce nouveau financement nous permet de relever des défis encore plus grands et de nous concentrer sur le maintien de notre avantage concurrentiel en matière de recherche et de développement de produits. »

Mati Staniszewski conclut :

« Notre ambition reste la même : transformer la façon dont nous interagissons avec le contenu en brisant les barrières linguistiques et de communication. Nous développons une technologie de pointe pour rendre le contenu accessible dans toutes les langues - et toutes les voix - afin de permettre à chacun de se connecter aux informations et aux histoires qui comptent. « Nos progrès jusqu'à présent témoignent du dévouement de notre équipe et de nos investisseurs, et même si ce n'est encore que le début de notre voyage, ensemble nous contribuons à façonner l'avenir de l'accessibilité et de la communication. »