ElevenLabs로 내 목소리 복제하기: 완벽 가이드

모든 목소리는 저마다 다릅니다. 목소리는 타고난 특성과 환경의 영향을 받아 형성되고, 오랜 시간 자신을 표현하며 다듬어집니다. 지극히 개인적인 것입니다.

최근까지 이러한 개성은 복제할 수 없었습니다. 하지만 AI의 발전으로 매우 정교하게 목소리를 복제할 수 있게 되었습니다. 단 몇 분의 오디오만으로도 AI 시스템은 원본과 놀라울 만큼 비슷한 음성을 생성할 수 있습니다.

이 가이드에서는 ElevenLabs로 목소리를 복제하는 정확한 방법을 알려드립니다. 녹음할 내용부터 인스턴트 및 프로페셔널 음성 복제 중 선택하는 방법, 그리고 복제가 완료된 뒤 활용하는 방법까지 살펴봅니다. 두 방식 모두 따라 할 수 있는 단계별 상세 가이드를 제공합니다.

요약

• ElevenLabs는 인스턴트 음성 복제와 프로페셔널 음성 복제 서비스를 제공합니다.
• 인스턴트 음성 복제에는 깨끗하고 일관된 오디오가 몇 분 분량 필요합니다.
• 프로페셔널 음성 복제에는 최대 3시간 분량의 음성 데이터가 필요합니다.
• 복제를 완료한 후에는 다른 ElevenLabs 제품과 연결할 수 있습니다.
• 음성을 복제하려면 명시적인 동의가 필요합니다. ElevenLabs는 이 서비스를 이용하기 전에 동의 확인을 요구합니다.

인스턴트 복제 vs. 프로페셔널 음성 복제: 무엇이 필요할까요?

ElevenLabs는 선택할 수 있는 서로 다른 2가지 음성 복제 방식을 제공합니다. 

인스턴트 복제는 단 몇 분 만에 사용할 수 있는 음성을 제공하므로 음성 복제를 빠르게 실용적으로 활용할 수 있습니다. 프로페셔널 음성 복제는 시간이 더 걸리지만 매우 높은 충실도의 모델을 생성합니다.

가장 적합한 옵션을 선택할 수 있도록 빠른 비교 가이드를 준비했습니다:

두 방식의 차이를 이해하면 시간을 절약하고 더 빠르게 시작할 수 있습니다.

ElevenLabs로 음성을 복제하기 전에 필요한 것

ElevenLabs의 프로페셔널 또는 인스턴트 음성 복제 중 어떤 방식을 선택하든, 준비해 두면 유용한 기본 사항이 몇 가지 있습니다. 특히 인스턴트 방식에서는 필수는 아니지만, 복제 품질에 큰 차이를 만들 수 있습니다.

녹음 버튼을 누르기 전에 다음 사항을 고려해 보세요:

• 오디오 품질 요구 사항: 전문 녹음용 마이크를 사용하면 큰 차이를 만들 수 있습니다. 최소 요구 사항은 44.1kHz 또는 48kHz, 최소 24비트 비트레이트의 WAV 파일을 녹음할 수 있는 환경입니다. WAV 파일을 지원하는 디지털 오디오 워크스테이션(DAW)에서 조용한 장소를 골라 녹음해 보세요. 무료로 사용할 수 있는 좋은 도구로 Audacity가 있습니다.
• 최소 샘플 길이: 제공해야 하는 오디오 데이터의 양을 확인하세요. 중요한 것은 파일 개수가 아니라 합산된 총 재생 시간입니다. 프로페셔널 음성 복제에는 가능한 한 3시간에 가까운 파일을 업로드하세요.
• 말할 내용: ElevenCreative의 음성 복제는 제공한 목소리를 재현하는 것을 목표로 합니다. 느리고 단조로운 목소리로 읽으면 녹음에도 그러한 특성이 반영됩니다. 다양한 감정과 속도를 살려 자연스럽게 말하세요. ElevenLabs는 프로페셔널 음성 복제용 기본 스크립트를 제공합니다.

몇 분만 더 들여 이러한 요소를 미리 준비하면 최종 음성 복제의 품질이 더 높아집니다.

ElevenLabs로 인스턴트 음성 복제 만들기

몇 분의 시간과 조용한 장소만 있다면 음성을 복제할 준비가 된 것입니다. ElevenCreative는 자연스러운 말투의 감정적 톤과 운율을 살린 디지털 음성 복제본을 만들어 32개 이상의 언어로 활용할 수 있게 해줍니다. 

ElevenLabs 인스턴트 음성 복제 사용 방법은 다음과 같습니다:

1. Voices 열기
2. 샘플 업로드
3. 음성 이름 지정 및 저장
4. 스크립트로 테스트
5. 안정성 및 유사성 설정 조정

각 단계를 자세히 살펴보겠습니다.

1단계: Voices에서 인스턴트 음성 복제 페이지로 이동

먼저 ElevenLabs 대시보드에 로그인하세요. 왼쪽 사이드바에서 Voices를 선택한 다음 더하기 아이콘을 클릭합니다.

화면에 아래와 같은 팝업이 표시되며, 몇 가지 옵션을 선택할 수 있습니다:

• 보이스 디자인
• 인스턴트 음성 복제
• 프로페셔널 음성 복제
• 음성 리믹싱 

모듈에서 인스턴트 음성 복제를 선택하면 해당 페이지로 이동합니다.

2단계: 샘플 업로드

화면의 안내에 따라 미리 녹음한 오디오 파일을 업로드하거나 브라우저에서 바로 녹음하세요. 이 단계에서는 여러 파일을 엔진에 업로드할 수 있습니다. ElevenLabs는 음성 복제 시 개별 파일 길이가 아닌 합산된 총 재생 시간을 사용합니다.

최소 1~2분 분량의 깨끗하고 일관된 오디오를 제공하는 것이 좋습니다.

시끄러운 환경을 피하고, 마이크 품질을 확인하며, 모든 녹음에 같은 장비를 사용하는 등의 모범 사례도 확인할 수 있습니다.

3단계: 음성 이름 지정 및 저장

음성을 녹음하면 ElevenLabs가 음성 복제를 합성하기 시작합니다. 이 단계에서 음성을 미리 들어 보고 이름을 지정할 수 있습니다.

언어, 억양, 성별, 연령 등의 라벨을 추가해 복제 음성 정보를 더 자세히 입력할 수도 있습니다. 이 음성을 분류하거나 나중에 참고할 때 유용한 내용을 설명란에 추가할 수 있습니다. 

마지막으로 동의 상자를 클릭해 내용을 읽고 동의했음을 확인해야 합니다. 자신의 음성이든 다른 사람의 음성이든, 작업 중인 음성을 복제하려면 반드시 동의를 받아야 합니다.

4단계: 인스턴트 음성 복제 테스트

음성을 만든 후 My Voices로 이동해 Use voice를 클릭하면 텍스트 음성 변환 플레이그라운드에서 복제 음성을 사용할 수 있습니다. 음성 복제가 말할 짧은 스크립트를 작성하세요. 제대로 테스트하려면 학습 오디오에 포함하지 않은 내용을 작성해야 합니다.

음성 복제를 선택하고 텍스트를 작성한 뒤 페이지 하단의 Generate speech를 클릭해 음성을 생성하세요.

5단계: 모델 조정 및 반복

음성 복제를 들어 봤는데 어딘가 자연스럽지 않더라도 처음부터 다시 시작할 필요는 없습니다. ElevenLabs는 최종 오디오 결과물을 설정할 수 있는 다양한 슬라이더를 제공합니다.

화면 오른쪽의 다음 컨트롤을 조정해 음성 복제에 어떤 영향을 주는지 확인해 보세요:

• 안정성: 안정성을 높이면 일관되고 예측 가능한 음성이 생성됩니다. 낮은 값은 표현력을 높일 수 있지만 다소 일관성이 떨어질 수 있습니다. 대부분의 사용 사례에는 중간 설정이 가장 적합합니다.
• 유사성: 음성 복제가 제공한 음성 샘플을 얼마나 충실히 따를지 결정합니다. 이 슬라이더를 높이면 음성이 본인 목소리처럼 느껴집니다. 왜곡이 들린다면 이 값을 낮추세요.
• 스타일: 학습 오디오의 표현력을 더 강조하고 싶으신가요? 이 슬라이더를 높이세요. 다만 값이 너무 높으면 최종 샘플이 왜곡될 수 있습니다.

슬라이더 값을 조정한 후 Generate speech를 다시 클릭해 모델이 어떻게 달라지는지 확인하세요. 

이 5단계를 완료하면 바로 사용할 수 있는 ElevenLabs 음성 복제가 준비됩니다.

원본

음성 복제

Lily

원본

Lily

복제

Chris

원본

Chris

복제

Laura

원본

Laura

복제

본인과 똑같이 들리는 음성 복제본을 만들어보세요.

ElevenLabs로 프로페셔널 음성 복제 만들기

ElevenLabs로 음성을 프로페셔널하게 복제하려면 인스턴트 옵션보다 시간이 더 걸리지만, 목소리를 매우 정밀하게 재현하는 모델을 얻을 수 있습니다. 

크리에이터 이상 요금제를 사용 중이라면 다음 단계에 따라 ElevenLabs로 프로페셔널 음성 복제를 만들 수 있습니다:

1. Voices 열기
2. 오디오 업로드
3. 샘플 길이 피드백 확인
4. 품질 향상을 위한 오디오 샘플 처리
5. 보안을 위한 본인 음성 인증
6. 음성 파인튜닝 과정 대기
7. 음성 복제 사용

각 단계를 자세히 살펴보겠습니다.

1단계: Voices에서 프로페셔널 음성 복제 페이지로 이동

ElevenLabs 대시보드에 로그인하고 왼쪽 사이드바에서 Voices를 선택한 뒤 Create Voice를 클릭하세요. 팝업에서 앞서 본 것과 같은 옵션이 표시됩니다.

이번에는 Professional Voice Clone을 선택하세요. 다음을 포함한 다양한 권장 사항이 표시됩니다:

• 팝 필터 사용
• 녹음 시 노이즈 방지
• 음향 처리가 된 공간에서 녹음
• 오디오 사전 처리
• 전체 녹음에서 일관된 볼륨 유지
• 최소 30분, 이상적으로는 3시간에 가까운 오디오 제공

2단계: 오디오 업로드

Upload samples를 클릭하고 미리 녹음한 오디오 파일을 추가하세요. 직접 녹음하여 소프트웨어에 바로 업로드할 수도 있습니다. 광고, 내레이션, 대화형 모델링 등 용도별로 사용할 수 있는 다양한 스크립트를 제공합니다.

이 오디오 파일에는 말소리만 포함되어야 합니다. 현재 노래는 입력 또는 출력 소스로 지원하지 않습니다. 

3단계: 샘플 길이 피드백 확인

오디오를 성공적으로 업로드한 후 길이에 관한 피드백을 반드시 확인하세요. 인스턴트 음성 복제에는 1~2분이면 충분하지만, 이 서비스에는 1~3시간 분량의 오디오 업로드를 권장합니다.

다양한 감정이 담긴 오디오 파일을 포함하세요. 모델이 최상의 결과를 만들 수 있도록 스튜디오 품질의 다양한 콘텐츠를 제공하는 것이 좋습니다.

4단계: 품질 향상을 위한 오디오 샘플 처리

프로페셔널 음성 복제 플랫폼에서는 오디오 샘플의 품질을 직접 개선할 수 있습니다. 배경 소음을 제거하거나 여러 화자를 분리하는 등 ElevenLabs는 고품질 오디오 입력을 만드는 데 도움을 줍니다.

필수 단계는 아니지만, 최종 음성 복제 모델의 품질을 높여 주므로 유용합니다.

5단계: 보안을 위한 본인 음성 인증

ElevenLabs는 프로페셔널 음성 복제를 만들 때 인증을 요구합니다. 모든 파일을 업로드한 후 인터페이스에서 짧은 클립을 직접 녹음해 달라는 안내가 표시됩니다. 가능하다면 학습 녹음과 같은 마이크 및 공간 설정을 사용하고, 말하는 톤과 스타일도 최대한 비슷하게 맞추세요.

인증에 실패하면 24시간 후 다시 시도할 수 있습니다. 그 전에 시작해야 한다면 ElevenLabs 고객지원팀에 직접 문의해 도움을 받으세요. 

6단계: 음성 파인튜닝 과정 대기

음성 인증을 완료하면 ElevenLabs가 모델 파인튜닝을 시작합니다. 일반적으로 3~6시간이 걸리지만, 앞서 대기 중인 프로페셔널 음성 복제가 많으면 더 오래 걸릴 수 있습니다.

복제 상태를 확인하려면 My Voices로 이동하세요. 음성 모델을 사용할 준비가 되면 알림도 보내드립니다.

7단계: 음성 복제 사용

축하합니다. 이제 완전히 작동하는 전문가급 음성 복제가 준비되었습니다. 완성된 모델은 My Voices에 표시되며 텍스트 음성 변환, Studio, 더빙 및 API, 음성 에이전트 등 다른 모든 ElevenLabs 제품에서 사용할 수 있습니다.

음성 선택기 대시보드에서 제작 과정에서 지정한 이름으로 음성을 선택해 시작하세요.

ElevenLabs 음성 복제 모범 사례

위 단계를 따라 인스턴트 또는 프로페셔널 음성 복제를 만들 수 있지만, 사전에 몇 가지를 더 준비할 수 있습니다. 다음 팁은 녹음 도구나 전략에 적용할 수 있는 작은 조정으로, 음성 복제 품질을 높이는 데 도움이 됩니다.

다음 AI 음성 복제 모범 사례는 인스턴트 및 프로페셔널 복제 모두에 적용됩니다:

• 공간 음향과 배경 소음: 오디오가 얼마나 깨끗한지가 최종 품질에 직접적인 영향을 미칩니다. 배경 소음이나 울림이 없는 곳에서 녹음하세요. 전문 녹음에는 녹음 부스가 좋습니다. 스튜디오를 예약하지 않고도 이러한 품질을 원한다면, 지역 코워킹 스페이스에 방음 부스가 있는지 확인해 보세요.
• 마이크 거리: 말할 때 마이크와 주먹 두 개 정도의 거리를 두는 것이 좋습니다. 좋은 기준이지만 자세한 내용은 마이크 사양을 확인하세요.
• 샘플의 감정 표현 범위: AI 모델은 목소리의 자연스러운 운율과 발화 특성을 활용합니다. 표현이 밋밋하면 모델도 같은 방식으로 단조롭게 말할 수 있습니다. 다양한 상황에서 자연스러운 말하기 스타일을 보여 줄 수 있도록 폭넓은 감정의 샘플을 포함해 최선을 다해 녹음하세요. 
• 문장 다양성 vs. 스크립트 낭독: 긴 샘플을 제공하려면 스크립트를 소리 내어 읽는 것이 좋은 시작점이지만, 지나치게 연습한 듯하거나 부자연스럽게 느껴질 수 있습니다. 특히 처음 읽는 스크립트라면 문장에 필요한 감정적 뉘앙스를 정확히 표현하지 못할 수 있습니다. 균형을 맞추려면 다양한 스크립트 문장을 더 대화하듯 전달해 보세요. 

이 모범 사례를 따르면 ElevenLabs가 활용할 수 있는 더 높은 품질의 입력을 제공하게 됩니다. 이를 바탕으로 본인의 음성 정체성에 더 정확한 음성 복제를 만들 수 있습니다. 

ElevenLabs 음성 복제는 어떻게 활용할 수 있나요?

ElevenLabs로 프로페셔널 또는 인스턴트 음성 복제를 만들면 음성이 My Voices에 표시됩니다. 여기에서 다른 모든 ElevenLabs 제품으로 음성에 접근할 수 있습니다.

ElevenLabs 음성 복제는 다음에서 사용할 수 있습니다:

• 앱 내 텍스트 음성 변환: ElevenLabs 텍스트 음성 변환 플레이그라운드에서는 음성을 선택하고 입력한 내용을 읽게 할 수 있습니다. 보이스오버나 팟캐스트 인트로처럼 일회성 음성 생성에 활용할 수 있습니다. 실시간 설정에서 스타일, 유사성, 안정성을 조정해 음성이 최대한 자연스럽게 느껴지도록 하세요.
• API를 통해: List Voices API 엔드포인트를 사용하면 API 호출에서 사용할 수 있는 모든 음성의 목록을 반환할 수 있습니다. 각 음성에는 고유한 음성 ID가 있으며, ElevenAPI를 연결하는 모든 곳에 이를 구현할 수 있습니다. 
• 음성 에이전트에서: ElevenLabs 음성 복제를 에이전트에 연결하면 에이전트가 말할 때 본인의 목소리를 사용할 수 있습니다. 특히 여러 플랫폼에서 일관된 음성 존재감을 원하는 기업이라면, 에이전트에 브랜드에 맞는 접근 방식을 적용하는 데 도움이 됩니다. 
• 여러 언어에서: 음성 복제는 32개 언어에서 작동하므로 콘텐츠를 번역해 본인의 목소리로 제작할 수 있습니다. 해당 언어의 음성 샘플이 없어도 ElevenCreative는 여러 언어에서 말하기의 운율과 감정적 특성을 가깝게 재현합니다. 

모든 제품에 적용하면 목소리에 생동감을 더하고 고품질 콘텐츠를 대규모로 제작할 준비가 됩니다.

ElevenCreative로 음성 복제하기

비디오 제작을 가속하려는 콘텐츠 크리에이터든, 단순히 자신의 목소리를 보존하려는 경우든 ElevenLabs 음성 복제는 간단하고 빠르며 효과적입니다. 

인스턴트 음성 복제는 무료 요금제에서 이용할 수 있으며 몇 분이면 완료됩니다. 크리에이터 요금제에서는 프로페셔널 음성 복제를 시작할 수 있습니다. ElevenLabs의 음성 복제에 대해 자세히 알아보거나 가입하여 오늘 바로 음성을 복제하세요.

FAQ