ElevenLabs로 내 목소리 복제하기: 완벽 가이드

똑같은 목소리는 없습니다. 목소리는 타고난 특성과 환경의 영향을 받아 형성되고, 오랜 시간 표현을 거치며 다듬어집니다. 지극히 개인적인 것이죠.

최근까지는 이런 고유함을 재현할 수 없었습니다. 하지만 AI의 발전으로 놀라울 만큼 정교하게 목소리를 복제할 수 있게 되었습니다. 오디오가 몇 분만 있어도 AI 시스템은 원본과 매우 유사하게 들리는 음성을 생성할 수 있습니다.

이 가이드에서는 ElevenLabs로 목소리를 복제하는 방법을 자세히 알려드립니다. 무엇을 녹음해야 하는지, 인스턴트 및 프로페셔널 음성 복제 중 어떤 방식을 선택할지, 복제가 완료된 후 어떻게 활용할지 살펴보겠습니다. 두 방식 모두 따라 할 수 있는 단계별 상세 가이드를 담았습니다.

요약

• ElevenLabs는 인스턴트 음성 복제와 프로페셔널 음성 복제 서비스를 제공합니다.
• 인스턴트 음성 복제에는 깨끗하고 일관된 오디오가 몇 분 필요합니다.
• 프로페셔널 음성 복제에는 최대 3시간의 음성 데이터가 필요합니다.
• 복제를 완료한 뒤에는 ElevenLabs의 다른 제품과 연결해 사용할 수 있습니다.
• 목소리를 복제하려면 명시적인 동의가 필요합니다. ElevenLabs에서는 이 서비스를 사용하기 전에 동의를 확인해야 합니다.

인스턴트 복제와 프로페셔널 음성 복제: 무엇이 필요할까요?

ElevenLabs는 선택할 수 있는 2가지 음성 복제 방식을 제공합니다. 

인스턴트 복제는 몇 분 만에 바로 사용할 수 있는 음성을 제공하므로 음성 복제를 빠르게 실용적으로 활용할 수 있습니다. 프로페셔널 음성 복제는 시간이 더 걸리지만 매우 높은 충실도의 모델을 생성합니다.

자신에게 가장 적합한 옵션을 선택할 수 있도록 간단한 비교 가이드를 준비했습니다:

두 방식의 차이를 이해하면 처음부터 시간을 절약하고 빠르게 시작할 수 있습니다.

ElevenLabs로 목소리를 복제하기 전에 필요한 사항

프로페셔널 또는 인스턴트 ElevenLabs 음성 복제 중 어느 방식을 선택하든, 미리 준비해 두면 좋은 기본 사항이 있습니다. 특히 인스턴트 방식에서는 필수는 아니지만, 복제 품질에 큰 차이를 만들 수 있습니다.

녹음 버튼을 누르기 전에 다음 사항을 고려해 보세요:

• 오디오 품질 요구 사항: 전문 녹음용 마이크를 사용하면 큰 차이를 만들 수 있습니다. 최소 요구 사항은 44.1kHz 또는 48kHz, 최소 24비트 비트레이트로 WAV 파일을 녹음할 수 있는 환경입니다. WAV 파일을 지원하는 디지털 오디오 워크스테이션(DAW)에서 조용한 곳에서 녹음해 보세요. Audacity는 무료로 사용할 수 있는 좋은 선택지입니다.
• 최소 샘플 길이: 제공해야 하는 오디오 데이터의 양을 꼭 확인하세요. 중요한 것은 파일 수가 아니라 전체 오디오의 합산 재생 시간입니다. 프로페셔널 음성 복제의 경우 가능한 한 3시간에 가까운 파일을 업로드하세요.
• 말할 내용: ElevenCreative의 음성 복제는 제공한 목소리를 재현하는 것을 목표로 합니다. 느리고 단조로운 목소리로 읽으면 녹음에도 그런 특성이 반영됩니다. 다양한 감정과 속도로 자연스럽게 말하세요. ElevenLabs는 프로페셔널 음성 복제를 위한 내장 스크립트를 제공합니다.

몇 분만 더 투자해 이러한 사항을 미리 준비하면 최종 음성 복제의 품질을 높일 수 있습니다.

ElevenLabs로 인스턴트 음성 복제를 만드는 방법

몇 분의 시간과 조용한 장소만 있다면 목소리를 복제할 준비가 된 것입니다. ElevenCreative는 자연스러운 말의 감정적 특성과 운율을 유지하면서 32개 이상의 언어로 사용할 수 있는 디지털 음성 복제본을 만듭니다. 

ElevenLabs 인스턴트 음성 복제를 사용하는 방법은 다음과 같습니다:

1. Voices에 접속하기
2. 샘플 업로드하기
3. 음성 이름 지정 및 저장하기
4. 스크립트로 테스트하기
5. 안정성 및 유사성 설정 조정하기

각 단계를 자세히 살펴보겠습니다.

1단계: Voices에서 인스턴트 음성 복제 페이지로 이동하기

먼저 ElevenLabs 대시보드에 로그인하세요. 왼쪽 사이드바에서 Voices를 선택한 다음 더하기 아이콘을 클릭합니다.

화면에 아래와 같은 팝업이 표시되며, 몇 가지 옵션을 선택할 수 있습니다:

• 보이스 디자인
• 인스턴트 음성 복제
• 프로페셔널 음성 복제
• 음성 리믹싱 

모듈에서 인스턴트 음성 복제를 선택하면 해당 페이지로 이동합니다.

2단계: 샘플 업로드하기

화면의 안내에 따라 미리 녹음한 오디오 파일을 업로드하거나 브라우저에서 바로 녹음하세요. 이 단계에서는 여러 파일을 엔진에 업로드할 수 있습니다. ElevenLabs는 음성 복제 시 개별 파일의 길이가 아닌 전체 파일의 합산 재생 시간을 사용합니다.

사용할 수 있도록 깨끗하고 일관된 오디오를 최소 1~2분 제공하는 것이 좋습니다.

소음이 많은 환경 피하기, 마이크 품질 확인하기, 모든 녹음에 동일한 장비 사용하기 등의 모범 사례도 여기에서 확인할 수 있습니다.

3단계: 음성 이름 지정 및 저장하기

목소리를 녹음하면 ElevenLabs가 음성 복제를 합성하기 시작합니다. 이 단계에서 음성을 미리 들어보고 이름을 지정할 수 있습니다.

언어, 억양, 성별, 연령 등의 라벨을 추가해 복제 음성의 정보를 보완할 수도 있습니다. 이 음성을 분류하거나 나중에 기억하는 데 유용한 세부 사항을 설명란에 추가할 수 있습니다. 

마지막으로 동의 확인란을 클릭해 내용을 읽고 동의했음을 확인해야 합니다. 자신의 목소리든 다른 사람의 목소리든, 작업 중인 목소리를 복제하려면 반드시 동의를 받아야 합니다.

4단계: 인스턴트 음성 복제 테스트하기

음성을 만든 후 My Voices로 이동해 Use voice를 클릭하면 텍스트 음성 변환 플레이그라운드에서 복제 음성을 사용할 수 있습니다. 복제 음성이 말할 짧은 스크립트를 작성하세요. 제대로 테스트하려면 학습 오디오에 포함하지 않은 내용을 작성해야 합니다.

음성 복제를 선택하고 텍스트를 작성한 후 페이지 하단의 Generate speech를 누르면 음성이 생성됩니다.

5단계: 모델 조정 및 반복하기

음성 복제를 들어봤는데 어딘가 어색하게 느껴져도 처음부터 다시 시작할 필요는 없습니다. ElevenLabs는 최종 오디오 결과물을 구성할 수 있는 다양한 설정 슬라이더를 제공합니다.

화면 오른쪽의 다음 컨트롤을 조정해 보면서 음성 복제에 어떤 영향을 주는지 확인하세요:

• 안정성: 안정성을 높이면 일관되고 예측 가능한 음성이 생성됩니다. 값을 낮추면 표현력이 높아질 수 있지만 다소 일관성이 떨어질 수 있습니다. 대부분의 용도에는 중간 설정이 가장 적합합니다.
• 유사성: 음성 복제가 제공한 음성 샘플을 얼마나 충실히 따를지 결정합니다. 이 슬라이더를 높이면 음성이 더 본인 목소리처럼 느껴집니다. 왜곡이 들린다면 이 값을 낮추세요.
• 스타일: 학습 오디오의 표현력을 더 강조하고 싶으신가요? 이 슬라이더를 높이세요. 단, 값이 너무 높으면 최종 샘플이 왜곡될 수 있습니다.

슬라이더 값을 조정한 후 Generate speech를 다시 눌러 모델이 어떻게 달라지는지 확인하세요. 

이 5단계를 마치면 바로 사용할 수 있는 ElevenLabs 음성 복제가 완성됩니다.

원본

음성 복제

Lily

원본

Lily

복제

Chris

원본

Chris

복제

Laura

원본

Laura

복제

본인과 똑같이 들리는 음성 복제본을 만들어보세요.

ElevenLabs로 프로페셔널 음성 복제를 만드는 방법

ElevenLabs로 목소리를 프로페셔널하게 복제하려면 인스턴트 옵션보다 시간이 더 걸리지만, 목소리를 매우 정밀하게 재현하는 모델을 얻을 수 있습니다. 

크리에이터 이상 요금제를 사용 중이라면 다음 단계에 따라 ElevenLabs로 프로페셔널 음성 복제를 만들 수 있습니다:

1. Voices에 접속하기
2. 오디오 업로드하기
3. 샘플 길이 피드백 확인하기
4. 품질 개선을 위해 오디오 샘플 처리하기
5. 보안을 위해 본인 음성 인증하기
6. 음성 미세 조정 과정 기다리기
7. 음성 복제 사용하기

각 단계를 자세히 살펴보겠습니다.

1단계: Voices에서 프로페셔널 음성 복제 페이지로 이동하기

ElevenLabs 대시보드에 로그인하고 왼쪽 사이드바에서 Voices를 선택한 뒤 Create Voice를 클릭하세요. 팝업에서 앞서 본 것과 같은 옵션이 표시됩니다.

이번에는 Professional Voice Clone을 선택하세요. 다음을 포함한 다양한 권장 사항이 표시됩니다:

• 팝 필터 사용하기
• 녹음 시 소음 없애기
• 음향 처리가 된 공간에서 녹음하기
• 오디오 사전 처리하기
• 처음부터 끝까지 일관된 볼륨 유지하기
• 최소 30분, 이상적으로는 3시간에 가까운 오디오 제공하기

2단계: 오디오 업로드하기

Upload samples를 클릭하고 미리 녹음한 오디오 파일을 추가하세요. 직접 녹음한 뒤 소프트웨어에 바로 업로드할 수도 있습니다. 광고, 내레이션, 대화형 모델링 등 다양한 목적에 사용할 수 있는 여러 스크립트도 제공합니다.

이 오디오 파일에는 말하는 음성만 포함되어야 합니다. 현재는 노래를 입력 또는 출력 소스로 지원하지 않습니다. 

3단계: 샘플 길이 피드백 확인하기

오디오를 성공적으로 업로드한 후에는 길이에 대한 피드백을 꼭 확인하세요. 인스턴트 음성 복제에는 1~2분이면 충분하지만, 이 서비스에서는 1~3시간의 오디오 업로드를 권장합니다.

다양한 감정이 담긴 오디오 파일을 포함하세요. 모델이 최대한 좋은 정보를 활용할 수 있도록 스튜디오 품질의 다양한 콘텐츠를 제공하는 것이 좋습니다.

4단계: 품질 개선을 위해 오디오 샘플 처리하기

프로페셔널 음성 복제 플랫폼 내에서 오디오 샘플의 품질을 직접 개선할 수 있습니다. 배경 소음 제거부터 서로 다른 화자 분리까지, ElevenLabs가 고품질 오디오 입력을 만들 수 있도록 지원합니다.

반드시 필요한 단계는 아니지만, 최종 음성 복제 모델의 품질을 개선하므로 유용합니다.

5단계: 보안을 위해 본인 음성 인증하기

ElevenLabs는 프로페셔널 음성 복제를 만들 때 인증을 요구합니다. 모든 파일을 업로드한 후 인터페이스에서 짧은 클립을 직접 녹음해 달라는 안내가 표시됩니다. 가능하다면 학습 녹음과 동일한 마이크와 공간 설정을 사용하고, 말하는 톤과 스타일도 최대한 비슷하게 맞추세요.

인증에 실패하면 24시간 후에 다시 시도할 수 있습니다. 그보다 먼저 시작해야 한다면 ElevenLabs 지원팀에 직접 문의해 도움을 받으세요. 

6단계: 음성 미세 조정 과정 기다리기

음성을 인증하면 ElevenLabs가 모델 미세 조정을 시작합니다. 일반적으로 3~6시간이 걸리지만, 앞서 대기 중인 프로페셔널 음성 복제가 많으면 더 오래 걸릴 수 있습니다.

복제 상태를 확인하려면 My Voices로 이동하세요. 음성 모델을 사용할 수 있게 되면 알림도 보내드립니다.

7단계: 음성 복제 사용하기

축하합니다. 이제 완전하게 작동하는 전문가급 음성 복제를 만들었습니다. 완성된 모델은 My Voices에 표시되며, 텍스트 음성 변환, Studio, 더빙 및 API, 음성 에이전트 등 다른 모든 ElevenLabs 제품에서 사용할 수 있습니다.

시작하려면 음성 선택기 대시보드에서 제작 과정에서 지정한 이름으로 음성을 선택하세요.

ElevenLabs 음성 복제 모범 사례

위 단계에 따라 인스턴트 또는 프로페셔널 음성 복제를 만들 수 있지만, 미리 추가로 따라 할 수 있는 몇 가지 단계가 있습니다. 이 팁은 녹음 도구나 전략에 작은 조정을 더해 음성 복제 품질을 높이는 방법입니다.

다음 AI 음성 복제 모범 사례는 인스턴트 및 프로페셔널 복제 모두에 적용됩니다:

• 실내 음향과 배경 소음: 오디오가 얼마나 깨끗한지가 최종 품질에 직접적인 영향을 줍니다. 배경 소음이나 울림이 없는 곳에서 녹음하세요. 전문 녹음에는 녹음 부스가 좋습니다. 스튜디오를 예약하지 않고도 그 수준의 품질을 원한다면, 가까운 코워킹 스페이스에 방음 부스가 있는지 확인해 보세요.
• 마이크 거리: 말할 때는 마이크에서 주먹 2개 정도 떨어진 거리를 유지하는 것이 좋습니다. 유용한 기준이지만, 자세한 내용은 마이크 사양을 확인하세요.
• 샘플의 감정 표현 범위: AI 모델은 목소리의 자연스러운 운율과 말하기 특성을 활용합니다. 표현이 밋밋하면 모델도 비슷하게 생동감 없는 전달을 할 수 있습니다. 다양한 상황에서 자연스러운 말하기 스타일을 보여주는 감정 샘플을 폭넓게 포함해 최대한 풍부하게 녹음하세요. 
• 문장 다양성 및 스크립트 낭독: 스크립트를 소리 내어 읽는 것은 긴 샘플을 제공하기에 좋은 출발점이지만, 지나치게 연습한 듯하거나 부자연스럽게 들릴 수 있습니다. 특히 처음 읽는 스크립트라면 문장에 기대되는 미묘한 감정을 정확히 표현하지 못할 수 있습니다. 균형을 맞추려면 여러 스크립트 문단을 좀 더 대화하듯 읽어 제공하세요. 

이 모범 사례를 따르면 ElevenLabs가 활용할 수 있는 고품질 입력을 제공하게 됩니다. 이를 바탕으로 목소리의 고유한 특성을 더욱 정확하게 반영한 음성 복제를 만들 수 있습니다. 

ElevenLabs 음성 복제는 어떻게 사용할 수 있나요?

ElevenLabs에서 프로페셔널 또는 인스턴트 음성 복제를 만드는 과정을 완료하면 My Voices에 음성이 표시됩니다. 여기서 다른 모든 ElevenLabs 제품에서 해당 음성에 접근할 수 있습니다.

ElevenLabs 음성 복제를 사용할 수 있는 곳은 다음과 같습니다:

• 앱 내 텍스트 음성 변환: ElevenLabs 텍스트 음성 변환 플레이그라운드에서는 음성을 선택하고 입력란에 작성한 모든 내용을 읽게 할 수 있습니다. 보이스오버나 팟캐스트 인트로처럼 일회성 음성을 생성할 때 사용할 수 있습니다. 음성이 최대한 자연스럽게 들리도록 실시간 설정에서 스타일, 유사성, 안정성을 조정하세요.
• API를 통해: List Voices API 엔드포인트를 사용하면 API 호출에서 사용할 수 있는 모든 음성 목록을 반환할 수 있습니다. 모든 음성에는 고유한 voice ID가 있으며, ElevenAPI를 연결하는 모든 곳에 이를 구현해 사용할 수 있습니다. 
• 음성 에이전트에서: ElevenLabs 음성 복제를 에이전트에 연결하면 에이전트가 말할 때 내 목소리를 사용하도록 할 수 있습니다. 여러 플랫폼에서 일관된 음성 존재감을 원하는 기업이라면, 에이전트에 브랜드 정체성을 부여하는 데 도움이 됩니다. 
• 여러 언어에서: 음성 복제는 32개 언어에서 작동하므로 콘텐츠를 번역하고 본인 목소리로 제작할 수 있습니다. 해당 언어의 음성 샘플이 없어도 ElevenCreative는 여러 언어에서 말의 운율과 감정적 특성을 충실하게 재현합니다. 

모든 제품에 적용하면 목소리에 생동감을 더하고 고품질 콘텐츠를 대규모로 제작할 준비가 됩니다.

ElevenCreative로 목소리 복제하기

비디오 제작 속도를 높이고 싶은 콘텐츠 크리에이터든, 단순히 자신의 목소리를 보존하고 싶은 경우든, ElevenLabs 음성 복제는 간단하고 빠르며 효과적입니다. 

인스턴트 음성 복제는 무료 요금제에서 사용할 수 있으며 몇 분밖에 걸리지 않습니다. 크리에이터 요금제에서는 프로페셔널 음성 복제를 시작할 수 있습니다. ElevenLabs의 음성 복제에 대해 자세히 알아보거나 가입하고 지금 바로 목소리를 복제해 보세요.

FAQ