ElevenLabs, 언어 장벽을 허무는 음성 번역 도구 출시

• 음성 AI 플랫폼 ElevenLabs가 새로운 AI 더빙 기능을 공개했습니다. 이는 언어 장벽을 허물고 누구나 콘텐츠에 접근할 수 있도록 하는 회사의 가장 큰 성과입니다.
• 이 음성 번역 도구는 몇 분 만에 음성 콘텐츠를 다른 언어로 변환하면서, 원래 화자의 목소리를 그대로 유지할 수 있습니다. 자체 연구를 바탕으로 개발되어, 전 세계 시청자들이 자신이 사용하는 언어로 콘텐츠를 즐길 수 있습니다.
• 새로운 AI 더빙 기능은 모든 크리에이터, 교육자, 미디어 기업이 몇 번의 클릭만으로 전 세계 시청자에게 다가갈 수 있도록 지원합니다. 이는 최근 출시된 ElevenLabs의 스튜디오 도구로 장시간 오디오 제작을 간편하게 지원합니다.

10월 10일, 글로벌 - ElevenLabs, 음성 AI 기술 분야의 글로벌 리더인 ElevenLabs가 혁신적인 음성 번역 기능을(를) 플랫폼에 추가했다고 오늘 발표했습니다. ElevenLabs가 설립된 근본적인 미션인 콘텐츠의 언어 장벽 제거와 지금까지의 연구가 결실을 맺어, AI 더빙 도구는 사용자가 어떤 음성이든 원래 화자의 목소리를 유지하면서 자동으로 다른 언어로 번역할 수 있게 해줍니다. 이를 통해 오디오와 비디오 콘텐츠를 새로운, 고품질의 효과적인 방식으로 더빙할 수 있습니다.

ElevenLabs CEO이자 공동 창업자인 Mati Staniszewski의 코멘트:

“AI 더빙 출시로 콘텐츠의 언어 장벽을 허무는 데 있어 지금까지 가장 큰 진전을 이뤘습니다. 이제 누구나 원하는 콘텐츠를 사용하는 언어와 상관없이 즐길 수 있습니다. 그리고 콘텐츠 제작자들은 전 세계 더 많은 시청자에게 쉽고 자연스럽게 다가갈 수 있습니다. 저와 공동 창업자 Piotr 모두 실제로 언어 장벽을 경험해봤기에, AI 더빙을 드디어 선보이게 되어 정말 기쁩니다.”

스트리밍, 게임, 영화 등 다양한 미디어에서 콘텐츠 접근성의 새로운 시대를 여는 이번 도구는, 기존 번역이나 자막을 넘어 번역 시에도 화자의 개성과 원래 말투를 그대로 살려줍니다. 즉, 같은 성우의 목소리가 20개 이상의 다양한 언어로 전달되어, 원본 녹음의 특성과 뉘앙스를 그대로 느낄 수 있습니다.

AI 더빙은(는) 다국어 음성 합성, 음성 복제, 텍스트 및 오디오 처리에 대한 ElevenLabs의 연구를 하나의 도구로 결합했습니다. 번역된 콘텐츠의 진정성을 높이고, 원본의 느낌을 살리면서 더 많은 시청자가 쉽게 접근할 수 있도록 합니다. AI 더빙 기능은 Eleven Multilingual v2 모델이 지원하는 20개 이상의 언어(힌디어, 포르투갈어, 스페인어, 일본어, 우크라이나어, 폴란드어, 아랍어 등)에서 음성 번역을 지원합니다.

이번 출시로 ElevenLabs는 오디오 AI 분야에서의 연구를 한층 확장했습니다. 원본 오디오의 감정과 억양을 더빙 오디오로 자연스럽게 전달할 수 있습니다. 또한, 여러 화자의 목소리를 구분하는 자체 기술과 배경 소음을 제거하고 음악과 대화를 분리하는 방법도 개발했습니다. 이를 통해 여러 명의 화자가 등장하는 오디오나 비디오도 각 목소리를 명확하게 구분하여 다양한 언어로 전달할 수 있습니다.

더빙 과정을 자동화하고 고품질 결과를 보장함으로써, ElevenLabs는 크리에이터, 교육자, 미디어 기업이 다국어 콘텐츠를 쉽게 제작할 수 있도록 지원합니다. 전 세계 인구의 6%만이 영어를 모국어로 사용하고, 75%는 영어를 전혀 사용하지 않습니다. 이번 출시로 모든 비디오를 빠르고 저렴하게 전 세계 시청자에게 제공할 수 있게 되었습니다.

이번 발표는 최근 출시된 스튜디오 - ElevenLabs의 장시간 오디오 생성 및 편집을 위한 고급 워크플로우로, 화자 지정, 일시정지 삽입, 구간 재생성 등 다양한 편집 기능을 지원합니다.

이번 기능 추가로 ElevenLabs는 언어 장벽을 허물고, 어떤 언어와 목소리로도 누구나 콘텐츠를 이용할 수 있도록 하는 미션을 이어갑니다.