ElevenLabs haalt $2 miljoen op en kondigt AI-spraakplatform aan dat audioverhalen belooft te transformeren

• ElevenLabs lanceert Beta-platform waarmee creators en uitgevers hun content in lange vorm kunnen inspreken
• De pre-seedfinancieringsronde werd geleid door Credo Ventures, met deelname van Concept Ventures en individuele investeerders
• Het kapitaal zal onderzoek en ontwikkeling van de AI-nasynchronisatie financieren, die later dit jaar moet verschijnen

2023-01-23, Londen, VK | ElevenLabs, een startup voor AI-stemtechnologie, ontwikkelt levensechte tools voor spraaksynthese met als langetermijndoel gesproken audio direct tussen talen te converteren. Vandaag kondigde het bedrijf de lancering van zijn Beta-platform aan, na $2 miljoen te hebben opgehaald in een pre-seedfinancieringsronde onder leiding van Credo Ventures, waaraan ook Concept Ventures en andere individuele investeerders deelnamen.

Met het platform van het bedrijf kunnen creators en uitgevers content in lange vorm inspreken en uitbreiden naar het audioformat. De functies worden aangedreven door een intern ontwikkeld deep learning-model voor spraaksynthese dat menselijke intonatie en verbuigingen realistisch weergeeft en de voordracht op basis van de context kan aanpassen. ElevenLabs biedt ook een reeks tools voor stemklonen en het ontwerpen van synthetische stemmen, waarmee gebruikers nieuwe creatieve mogelijkheden krijgen. Het bedrijf werkt momenteel met geselecteerde uitgevers aan een speciaal werkstation voor voice-overbewerking dat begin februari aan het platform wordt toegevoegd. ElevenLabs wil de eerste AI-verteller worden die de kwaliteit biedt die nodig is om nieuws en luisterboeken op grote schaal in te spreken.

Grote vooruitgang in mogelijkheden vraagt om innovatie. Daarom ziet ElevenLabs zichzelf in de eerste plaats als een onderzoeksbedrijf. Veel van dit onderzoek was tot nu toe gericht op de ontwikkeling van nieuwe text-to-speechmodellen die vertrouwen op hoge compressie en begrip van context om menselijke spraak uiterst realistisch weer te geven. Het bedrijf bouwde ook een nieuw model voor stemklonen dat zonder training (geen fine-tuning) een hoge gelijkenis in de output bereikt met samples van slechts 5 seconden – een prestatie die eerder ongekend was. Ontwikkelaars hebben via de API toegang tot al deze functies.

Dit onderzoek vormt de basis voor de huidige functies van het platform, maar draagt ook bij aan het verwezenlijken van het uiteindelijke doel van het bedrijf: gesproken audio direct tussen talen converteren. Met de AI-nasynchronisatietool, die later dit jaar moet verschijnen, kunnen gebruikers audio of video automatisch in een andere taal laten inspreken, terwijl de stem van de oorspronkelijke spreker behouden blijft. ElevenLabs hoopt in eerste instantie klanten in het onderwijs aan te trekken, met als langetermijndoel om meertalige audio-ondersteuning op aanvraag mogelijk te maken voor streaming, luisterboeken, gaming, films en zelfs realtime gesprekken.

De tools van het bedrijf voor spraaksynthese en nasynchronisatie vullen elkaar niet alleen aan, maar komen ook op het juiste moment: beide beloven audio en video toegankelijk te maken voor een breder publiek, in een tijd waarin de audiomarkt sterk groeit. Een eerste groep testers, waaronder YouTube-creators, uitgevers en ontwikkelaars, gebruikt het platform al dagelijks om video's, verhalen en personages in te spreken. Het bedrijf verwacht dat het aantal mogelijke toepassingen voor generatieve spraak alleen maar zal toenemen. Nieuwsuitgevers hebben al ontdekt dat een grotere aanwezigheid in audio een goede manier is om abonnees te betrekken en te behouden. Maar stemacteurs inhuren is duur, net als verslaggevers hun eigen verhalen laten voorlezen. Ook auteurs van boeken en nieuwsbrieven, en zelfs gameontwikkelaars, staan voor vergelijkbare uitdagingen: de eersten lezen steeds vaker hun eigen werk voor en de laatsten moeten beslissen of een bepaald personage de opnamekosten rechtvaardigt. Wie bestaande text-to-speechsoftware gebruikt, bespaart geld, maar betaalt een andere prijs door in te leveren op kwaliteit. ElevenLabs stelt dat compromissen niet langer nodig zijn en bereidt zich voor om creators en uitgevers te voorzien van de meest geavanceerde en veelzijdige AI-tools voor storytelling.

“Het platform dat we nu lanceren draait volledig om het omzetten van tekst in gesproken audio van topkwaliteit. We willen mensen laten genieten van hun favoriete boek of nieuwsbrief door een stem te geven aan alle auteurs, creators en ontwikkelaars die zich er geen konden veroorloven” - zegt medeoprichter Mati Staniszewski. “Ons uiteindelijke doel is mensen te laten genieten van alle content die zij relevant en interessant vinden, ongeacht welke taal ze spreken” - voegt Piotr Dabkowski, eveneens medeoprichter, toe.

Bij Credo Ventures werken we graag samen met slimme en ambitieuze oprichters uit de CEE-regio. Al tijdens onze eerste ontmoeting zagen we de gedrevenheid en vonk in de ogen van Mati en Piotr. Een paar maanden later ontwikkelen ze zich tot een onderzoekshub voor spraaktechnologie op OpenAI-niveau, die de grootste uitdagingen in kunstmatige audio aanpakt. Hun gesynthetiseerde stemmen zijn al niet meer te onderscheiden van echte stemmen. Deze doorbraak heeft niet alleen de drempels voor het creëren van content met ongekende kwaliteit en natuurgetrouwheid enorm verlaagd, maar stelt creators binnenkort ook in staat hun publiek aanzienlijk uit te breiden door meertalig te werken. – zegt Maciek Gnutek, General Partner bij Credo Ventures.

Hoewel audio zowel in entertainment als in het bedrijfsleven alledaags is, heeft het relatief weinig aandacht gekregen in recente ontwikkelingen binnen onderzoek. We zijn enorm enthousiast dat we Mati en Piotr kunnen steunen in dit gouden tijdperk voor generatieve AI, en we geloven dat ElevenLabs het team is dat deze technologie stap voor stap, stem voor stem, naar een breed publiek kan brengen - zegt Oliver Kicks, Principal bij Concept Ventures.

Over ElevenLabs:
ElevenLabs is een onderzoeksbedrijf dat software voor AI-stemsynthese ontwikkelt voor creators en uitgevers. De tools van het bedrijf produceren opmerkelijk levensechte spraak en kunnen intonatie en verbuigingen aanpassen op basis van context of gebruikersinstructies. Het platform van het bedrijf wil de kwaliteit en veelzijdigheid bieden die nodig zijn om één centrale plek te worden voor het inspreken van nieuws, nieuwsbrieven, boeken en video's. Belangrijke functies zijn onder meer: tekstgebaseerde spraakgeneratie, stemklonen, stemontwerp en binnenkort een projectworkflow voor het bewerken van vertellingen. ElevenLabs werd in 2022 opgericht door Piotr, voormalig machine learning-engineer bij Google, en Mati, voormalig deploymentstrateeg bij Palantir. Het langetermijndoel van het bedrijf is gesproken content universeel toegankelijk te maken in elke taal en stem.

Venturekapitaal verstrekt door Credo Ventures en Concept Ventures. Individuele investeerders zijn onder anderen Peter Czaban, Tytus Cytowski, Talfan Evans, Dr Fatima Godall, Tomasz Karwatka, Piotr Karwatka, Akhil Paul, Bartek Pucek, Marta Pyrzyk, Carles Reina, Parin Shah, Charlie Songhurst en Harry Songhurst.

Neem contact op
press@elevenlabs.io