더빙
화자의 감정, 타이밍 및 톤을 유지하면서 오디오와 비디오를 번역하는 방법을 알아보세요.
개요
ElevenLabs 더빙은 각 화자의 감정, 타이밍, 톤 및 고유한 특성을 유지하면서 90개 이상의 언어로 오디오와 비디오를 번역합니다. 원본 배경 오디오는 유지되므로 사운드트랙을 다시 믹싱하지 않고도 각 화자의 전달 방식을 다른 언어로 재현할 수 있습니다. 다음과 같은 용도로 사용할 수 있습니다.
- 도달 가능한 잠재고객을 4배로 늘려 해외 시청자에게 도달
- 감정적 뉘앙스를 보존하면서 기존 자료를 새로운 시장에 맞게 조정
- 성우를 다시 녹음하지 않고 여러 언어로 콘텐츠 제공
비디오 및 팟캐스트 크리에이터를 위한 완전 관리형 더빙 서비스도 제공합니다.
사용 방법
- 자동 더빙 — 최신 Dubbing v2 Alpha 모델을 기반으로 몇 번의 클릭만으로 콘텐츠를 한 언어에서 다른 언어로 더빙합니다.
- 업로드 제한: 앱에서는 최대 1GB 및 180분, API를 통해서는 소스 파일당 최대 3GB
- 더빙 스튜디오 — 트랜스크립트 편집, 화자 재할당, 클립별 재생성을 포함해 더빙을 세밀하게 제어할 수 있습니다. v1 모델에서만 사용할 수 있습니다.
- 업로드 제한: 최대 1GB 및 45분
- 참고: 더빙 스튜디오는 유지 관리 모드이며 중요한 버그 수정만 제공됩니다.
- ElevenLabs Productions의 사람 검수 더빙 — 자세한 내용은 productions@elevenlabs.io로 문의하세요.
음성 복제 강도
클로닝 강도는 더빙 v2 알파 모델의 자동 더빙에서 0~10 범위로 설정할 수 있는 옵션입니다. 앱에서 화자 유사도를 클릭해 조정하세요. 기본값인 7은 대부분의 콘텐츠에 적합합니다. 값이 높을수록 원본 화자와의 음성 유사도를 우선시하지만, 음성학적 특성이 크게 다른 언어에서는 다소 부자연스럽게 들릴 수 있습니다. 설정값이 높으면 원본 억양도 더빙 결과에 더 많이 반영될 수 있습니다. 값이 낮을수록 원본 음성과의 유사성은 줄어들지만, 모델이 대상 언어에서 더 자연스럽게 표현할 수 있는 여유가 커집니다.
주요 기능
- 여러 화자: 발화가 겹치는 경우에도 여러 화자를 자동으로 감지합니다.
- 다국어 출력: 90개 이상의 언어로 현지화된 트랙을 생성합니다.
- 원본 음성 보존: 화자의 정체성과 감정적 톤을 유지합니다.
- 배경 오디오 유지: 음악, 효과음 또는 주변 소리를 다시 믹싱할 필요가 없습니다.
- 지원 파일 형식: YouTube, TikTok, 직접 URL, 파일 업로드 등 다양한 소스의 비디오와 오디오를 더빙할 수 있습니다.
Dubbing v2에는 워터마크 토글이 없습니다. 무료 티어 더빙에는 워터마크가 자동으로 적용되며, 유료 티어 더빙에는 적용되지 않습니다. Dubbing v2에는 워터마크 적용 시 크레딧 할인을 제공하는 옵션이 없습니다. 기존 v1 더빙 흐름과 더빙 스튜디오에서만 워터마크 할인이 제공되었습니다.
Dubbing v2의 경우 API를 통한 트랜스크립트 편집 및 오디오 재생성은 엔터프라이즈 요금제에서만 사용할 수 있습니다.
비용
자세한 크레딧 비용은 가격 페이지를 참조하세요.
지원 언어
더빙은 영어, 스페인어, 프랑스어, 독일어, 일본어, 중국어, 아랍어 등을 포함한 90개 이상의 언어를 지원합니다. API는 source_language 및 target_language 매개변수에서 fr 또는 es-MX와 같은 BCP-47 언어 태그를 허용합니다. Dubbing v2에서 es-MX와 같은 지역 지정 태그는 아래 나열된 지원 방언 중 하나여야 하며, 그 외 모든 언어에는 기본 언어 태그를 사용합니다. Dubbing v1은 방언을 지원하지 않습니다.
Dubbing v2 언어 및 방언
Dubbing v1 언어
Dubbing v1은 Eleven v3 모델과 동일한 언어를 지원합니다. 지역 지정 방언 태그는 지원되지 않으므로 기본 언어 태그를 사용하세요.
주요 정보
- Dubbing v2 Alpha — Dubbing v2는 현재 알파 단계입니다. 모델을 계속 개선하는 과정에서 간헐적으로 매끄럽지 않은 부분이 있을 수 있습니다.
- 콘텐츠 유형: 모든 오디오 및 비디오 콘텐츠 유형을 지원하며, 파일당 최대 32명의 고유 화자를 지원합니다.
- 화자 보존: 각 화자의 톤, 속도 및 스타일이 대상 언어에서도 유지됩니다.
- 출력 품질: 더빙 비디오는 프로덕션 마스터가 아닌 고품질 미리보기입니다. 대부분 1080p로 출력되며 소스 해상도와 일치하지 않을 수 있습니다. 오디오는 Dubbing v1에서는 모노, Dubbing v2에서는 최대 스테레오이므로 5.1 및 기타 멀티채널 오디오는 보존되지 않습니다. 프로덕션용으로는 더빙 오디오를 다운로드하여 원본 비디오의 오디오 트랙을 교체하세요.
- 동시 실행: 모든 셀프서비스 요금제(무료, 스타터, 크리에이터, 프로, 스케일, 비즈니스)는 최대 3개의 동시 더빙 작업을 허용하며, 엔터프라이즈 요금제의 기본값은 10개입니다. 제한은 워크스페이스별 및 모델별로 적용되므로 v1과 v2 작업은 동일한 풀을 공유하지 않습니다. 한도에 도달하면
too_many_concurrent_requests오류가 발생하며, 새 작업을 시작하기 전에 기존 작업이 완료될 때까지 기다려야 합니다.
FAQ
실시간 또는 라이브 더빙을 사용할 수 있나요?
현재 실시간 또는 라이브 더빙은 제공되지 않습니다.
더빙이 실패하거나 멈추면 어떻게 되나요?
더빙 스튜디오 작업이 실패하거나 취소하면 크레딧이 자동으로 계정에 환불됩니다. 자동 더빙에서 미국 달러로 분당 과금되는 Dubbing v2는 실패한 작업에 대해 과금하지 않습니다. 더빙이 장시간 대기 중 또는 로딩 중 상태에 머무르면 취소한 후 다시 제출하세요. 이 경우 크레딧은 차감되지 않습니다.
Dubbing v2를 API로 사용할 수 있나요?
예. 모든 요금제에서 더빙 생성 및 다운로드를 사용할 수 있습니다. API를 통한 트랜스크립트 편집과 재생성은 엔터프라이즈 요금제에서만 사용할 수 있습니다. 더빙 빠른 시작 및 더빙 정교화 및 재생성을 참조하세요.
Dubbing v2 프로젝트를 편집하거나 재생성할 수 있나요?
앱에서 Dubbing v2는 자동으로 생성되며 UI에서 편집할 수 있습니다. API를 통한 트랜스크립트 편집 및 오디오 재생성은 엔터프라이즈 요금제에서만 사용할 수 있습니다. 더빙 정교화 및 재생성을 참조하세요. 기존 더빙 스튜디오는 기존 v1 모델에서 사용할 수 있습니다.
기존 v1 더빙 모델은 어떻게 사용하나요?
기본 더빙 페이지의 자동 더빙은 기본적으로 Dubbing v2를 사용합니다. 기존 v1 모델을 사용하려면 모델로 Dubbing v1 을 선택하세요. 더빙 스튜디오 프로젝트를 만들려면 Dubbing v1 을 선택한 다음 더빙 프로젝트 를 선택하세요. v1을 사용하는 것만이 더빙 스튜디오 프로젝트를 만드는 유일한 방법입니다.
더빙은 어떤 비디오 해상도를 지원하나요?
더빙은 최대 4K 소스 비디오를 지원합니다. 출력 해상도는 달라질 수 있으며 항상 소스와 일치하지는 않지만, 대부분 1080p입니다. 더빙 비디오는 미리보기로 취급하세요. 프로덕션용으로는 더빙 오디오를 사용하여 원본 비디오의 오디오 트랙을 교체하세요.