ElevenLabs wprowadza narzędzie do tłumaczenia głosu, by przełamywać bariery językowe w treściach

• Platforma Voice AI ElevenLabs wprowadza nowąAI Dubbing funkcję - największy krok w dążeniu firmy do usuwania barier językowych i zapewnienia uniwersalnego dostępu do treści
• To narzędzie do tłumaczenia głosu potrafi przekształcić mowę na inny język w kilka minut, zachowując głos oryginalnego mówcy.Oparte na badaniach firmy, oznacza to, że odbiorcy na całym świecie będą mogli cieszyć się treściami w swoim języku ojczystym
• Nowa funkcja AI Dubbing umożliwia twórcom, edukatorom i firmom medialnym dotarcie do globalnej publiczności kilkoma kliknięciami. To kontynuacja niedawnego wprowadzenia ElevenLabs’Studio narzędzia wspierającego tworzenie długich form audio

10 października, Globalnie - ElevenLabs, globalny lider w technologii Voice AI, ogłasza dziś dodanie przełomowejfunkcji tłumaczenia głosu do swojej platformy. Powstała z misji eliminacji barier językowych, na której opiera się ElevenLabs, i będąca kulminacją dotychczasowych badań firmy,narzędzie AI Dubbingpozwala użytkownikom automatycznie tłumaczyć mowę na inny język, zachowując głos oryginalnego mówcy - tworząc nowy, wysokiej jakości i skuteczny sposób dubbingu treści audio i wideo.

CEO i współzałożyciel ElevenLabs, Mati Staniszewski, komentuje:

„Wprowadzenie AI Dubbing to nasz największy krok w kierunku eliminacji barier językowych. Pomoże to odbiorcom cieszyć się dowolnymi treściami, niezależnie od języka, którym się posługują. Oznacza to, że twórcy treści mogą łatwo i autentycznie dotrzeć do znacznie większej publiczności na całym świecie. Doświadczając tych barier językowych osobiście, mój współzałożyciel Piotr i ja jesteśmy podekscytowani, że w końcu wprowadzamy AI dubbing do życia.”

Sygnalizując nową erę w dostępności treści w takich mediach jak streaming, gry i filmy, nowe narzędzie wykracza poza tradycyjne tłumaczenie i napisy, zachowując tożsamość mówcy i oryginalne wzorce mowy podczas tłumaczenia. Oznacza to, że głos tego samego aktora może być słyszany przez odbiorców w ponad 20 różnych językach, dostarczając kwestie z cechami i niuansami oryginalnego nagrania.

AI Dubbingłączy badania firmy nad wielojęzyczną syntezą mowy, klonowaniem głosu, przetwarzaniem tekstu i dźwięku w jedno narzędzie; zwiększając autentyczność tłumaczonej treści i czyniąc ją bardziej dostępną dla szerszej publiczności, zachowując istotę oryginalnego przekazu. Funkcja AI Dubbing wspiera tłumaczenie głosu w ponad 20 językach obecnie obsługiwanych przez model Eleven Multilingual v2, w tym hindi, portugalski, hiszpański, japoński, ukraiński, polski czy arabski.

Ten krok dalej rozszerza badania ElevenLabs w przestrzeni audio AI; umożliwiając przekształcenie emocji i intonacji z oryginalnego dźwięku na dubbingowany. Firma opracowała również własną metodę wykrywania głosów różnych mówców oraz metody usuwania szumów tła, odróżniając muzykę i hałas od dialogu. Oznacza to, że narzędzie może skutecznie obsługiwać audio lub wideo zawierające wielu mówców, zapewniając, że każdy głos pozostaje wyraźny i rozpoznawalny w różnych językach.

Automatyzując proces dubbingu i zapewniając wysoką jakość, ElevenLabs upraszcza tworzenie treści wielojęzycznych dla twórców, edukatorów i firm medialnych. Tylko 6% światowej populacji to native speakerzy języka angielskiego, a 75% nie mówi po angielsku. To wydanie oznacza, że każdy film może być teraz dostępny dla globalnej publiczności, szybko i tanio.

Ogłoszenie to następuje po niedawnym wydaniuStudio- zaawansowanego workflow ElevenLabs do generowania i edytowania długich form audio, wspierającego różnorodne funkcje edycji, takie jak przypisanie mówcy, wstawianie pauz i regeneracja segmentów.

Dzięki temu dodatku ElevenLabs kontynuuje swoją misję przełamywania barier językowych i zapewniania uniwersalnego dostępu do treści w dowolnym języku i głosie.