
Översätt ljud och video samtidigt som du bevarar känslor, timing, tonfall och unika egenskaper hos varje talare
Presenterar Eleven v3 Alpha
Prova v3Detta röstöversättningsverktyg kan omvandla talat innehåll till ett annat språk på några minuter, samtidigt som den ursprungliga talarens röst bevaras.
10 oktober, Globalt - ElevenLabs, den globala ledaren inom voice AI-teknologi, tillkännager idag tillägget av en banbrytanderöstöversättningsfunktiontill sin plattform. Född ur den grundläggande missionen att eliminera de språkliga barriärerna för innehåll som ElevenLabs grundades på, och en kulmination av företagets forskning hittills, görAI Dubbingverktyget det möjligt för användare att automatiskt översätta tal till ett annat språk samtidigt som den ursprungliga talarens röst bevaras - vilket skapar ett nytt, högkvalitativt och effektivt sätt att dubba ljud- och videoinnehåll.
Översätt ljud och video samtidigt som du bevarar känslor, timing, tonfall och unika egenskaper hos varje talare
VD och medgrundare av ElevenLabs, Mati Staniszewski, kommenterar:
“Lanseringen av AI Dubbing är vårt största steg hittills mot att eliminera dessa språkliga barriärer för innehåll. Det kommer att hjälpa publiker att njuta av vilket innehåll de vill, oavsett vilket språk de talar. Och det innebär att innehållsskapare enkelt och autentiskt kan nå en mycket större publik över hela världen. Efter att ha upplevt dessa språkbarriärer själva är min medgrundare Piotr och jag så glada att äntligen kunna ge liv åt AI dubbning.”
Signalera en ny era i innehållstillgänglighet över medier som streaming, spel och filmer, går det nya verktyget bortom traditionell översättning och textning genom att bevara talarens identitet och ursprungliga talmönster vid översättning. Detta innebär att samma skådespelares röst kan höras av publiker på över 20 olika språk, med leverans av repliker med originalinspelningens karaktär och nyans.
AI Dubbingkombinerar företagets forskning om flerspråkig talsyntes, voice cloning, text- och ljudbearbetning, till ett enda verktyg; vilket förbättrar äktheten i det översatta innehållet och gör det mer tillgängligt för en bredare publik samtidigt som essensen av den ursprungliga leveransen bevaras. AI Dubbing-funktionen stöder röstöversättning över mer än 20 språk som för närvarande stöds av Eleven Multilingual v2-modellen, inklusive hindi, portugisiska, spanska, japanska, ukrainska, polska eller arabiska.
Detta steg utökar ytterligare ElevenLabs forskning inom AI-ljudområdet; vilket möjliggör att känslor och intonation från originalaudio kan omvandlas till dubbat ljud. Företaget har också utvecklat sin egen metod för att upptäcka olika talares röster och metoder för att ta bort bakgrundsljud, skilja musik och ljud från dialog. Detta innebär att verktyget effektivt kan hantera ljud eller video med flera talare, vilket säkerställer att varje röst förblir distinkt och igenkännbar över olika språk.
Genom att automatisera dubbningsprocessen och säkerställa högkvalitativt resultat förenklar ElevenLabs skapandet av flerspråkigt innehåll för skapare, utbildare och medieföretag. Endast 6% av världens befolkning har engelska som modersmål och 75% talar inte engelska alls. Denna lansering innebär att varje video nu kan göras tillgänglig för en global publik, snabbt och till låg kostnad.
Tillkännagivandet följer den senaste lanseringen avStudio- ElevenLabs avancerade arbetsflöde för att generera och redigera långformat ljud, som stöder en mängd olika redigeringsfunktioner, såsom talartilldelning, pausinsättning och segmentregenerering.
Med detta tillägg fortsätter ElevenLabs sin mission att bryta ner språkbarriärer och göra innehåll universellt tillgängligt på vilket språk och röst som helst.
Översätt ljud och video samtidigt som du bevarar känslor, timing, tonfall och unika egenskaper hos varje talare
ESTsoft and ElevenLabs partner to bring natural voiceovers and frame-accurate lip-sync to global video localization.