ElevenLabs AI 음성, 살바도르 달리의 목소리를 초현실적으로 되살리다

살바도르 달리는 1989년에 세상을 떠났지만, 30년이 넘은 지금도 그에게 전화를 걸어 인생, 우주, 그리고 코끼리의 꿈에 대해 대화할 수 있습니다.

이번 주, 달리 미술관이 미국 플로리다 세인트피터즈버그에서 "Dial Dalí"라는 AI 기반 체험을 선보였습니다. 미국 내 누구나 772-ASK-DALI로 전화해, 재현된 달리의 목소리와 실시간으로 대화할 수 있습니다. 통화는 Twilio를 통해 관리됩니다.

이 프로젝트는 크리에이티브 에이전시 굿바이 실버스타인 & 파트너스 (GS&P)와 협업하여 개발되었으며, ElevenLabs의 첨단 음성 기술로 달리 특유의 목소리를 재현했습니다.

딥페이크나 정적인 음성 녹음과 달리, 이 AI 체험은 역동적인 양방향 대화를 가능하게 해줍니다. 전화를 건 사람은 달리에게 궁금한 존재론적 질문을 자유롭게 할 수 있고, AI가 실제 달리와 매우 흡사한 목소리로 답변을 들려줍니다.

예술, 시간, 꿈, 바닷가재, 좋아하는 음식 등 무엇이든 물어보세요. 생일 축하 인사도 좋습니다. AI 달리는 그의 모든 글과 연설을 학습했습니다. 오직 달리만의 방식으로 대화해줍니다.

달리의 목소리는 달리 미술관 전시에서만 체험할 수 있지만, ElevenReader 앱에서는 아이코닉 보이스로 마야 안젤루, 버트 레이놀즈, 로렌스 올리비에, 제리 가르시아, 주디 갈랜드 등 다양한 목소리도 경험할 수 있습니다.

Dial Dalí는 이렇게 만들어졌습니다

GS&P 팀은 달리의 아카이브 녹음과 인터뷰 자료를 활용해 음성 모델을 만들고, 이를 ElevenLabs의 독자적인 음성 복제 기술에 입력했습니다. 누구나 Instant 또는 Professional Voice 복제 도구를 사용해 이 작업을 할 수 있지만, 음성의 출처를 확인하므로 해당 목소리를 사용할 권리가 필요합니다.

ElevenLabs의 다국어 및 억양 보존 기능을 활용해, GS&P는 달리 특유의 어조, 리듬, 그리고 스페인어와 영어를 오가는 독특한 말투까지 정교하게 재현할 수 있었습니다.

이번 최신 경험은 ElevenLabs가 지원하는 달리 미술관의 이전 설치 작품인 Ask Dalí를 기반으로 합니다. 해당 전시에서 관람객들은 달리의 유명한 랍스터 전화기 복제품을 들어 작가와 1:1 보이스 채팅을 할 수 있었습니다. 이 전시만으로도 75,000건이 넘는 AI 기반 대화가 생성되었으며, 각각이 고유하고 즉흥적이며 실시간으로 전달되었습니다.

ElevenLabs의 기술은 이러한 프로젝트에서 핵심적인 역할을 합니다. 창의성과 접근성 모두를 위해 설계된 이 회사의 음성 AI 플랫폼은 감정 표현, 고음질, 자연스러운 억양의 즉각적인 음성 생성을 가능하게 합니다. Dial Dalí 경험에서는 AI가 GPT-4와 통합되어, 단순히 말을 하는 것뿐만 아니라 달리의 인격으로 지능적이고 인간다운 대화까지 할 수 있습니다.

랍스터 전화기

"달리의 랍스터 전화기는 전화기가 항상 초현실주의적 오브젝트였음을 보여줍니다. 이제 우리는 그것을 실제로 만들었습니다."라고 GS&P의 공동 회장 제프 굿비가 말했습니다. 달리의 엉뚱함은 이 경험의 핵심입니다. 전화를 건 사람들은 그에게 인생 조언, 현대 미술에 대한 생각, 또는 AI에 대한 의견까지 물어볼 수 있습니다. 실시간으로 생성되는 답변은 초현실주의, 통찰력, 재치가 어우러져 있습니다. 모두 달리가 생전에 보여줬던 특징들입니다.

이 프로젝트는 2024년 5월 11일, 달리의 120번째 생일에 맞춰 공개되었으며, 여름 내내 관람객들과의 소통을 이어갈 예정입니다. 미국 어디서나 전화 연결이 가능해, 미술관의 현장 경험을 전국적으로 제공합니다.

ElevenLabs에게 이 프로젝트는 더 넓은 미션을 반영합니다. AI를 통해 인간의 목소리를 보존하고 확장하는 것—엔터테인먼트, 교육, 접근성, 문화유산 등 다양한 목적을 위해서입니다. 이번에는 과거의 상징적인 목소리에 새로운 생명을 불어넣어, 현재와 소통할 수 있도록 하는 데 의미가 있습니다.

작동 원리

자연스러운 음성 합성과 생성형 AI를 결합함으로써 Dial Dalí 프로젝트는 AI와 예술에 대한 대화에 독특한 가치를 더합니다. 단순히 AI가 무엇을 만들 수 있는지가 아니라, 우리가 무엇을 기억하고, 다시 상상하며, 새롭게 발견할 수 있는지에 관한 이야기입니다.

살바도르 달리는 한 번 이렇게 말했습니다: “중요한 것은 혼란을 없애는 것이 아니라, 퍼뜨리는 것이다.” 그의 목소리를 다시 들려주며, ElevenLabs는 어쩌면 바로 그 일을—가장 즐거운 초현실주의 방식으로—하고 있는지도 모릅니다.

"달리의 랍스터 전화기는 전화기가 항상 초현실주의적 오브젝트였음을 보여줍니다. 이제 우리는 그것을 실제로 만들었습니다. Dial Dalí를 통해 누구나 과거의 목소리와 연결되어, 미래에 대해 여전히 할 말이 있는 그와 대화할 수 있습니다."라고 GS&P 공동 창립자 제프 굿비가 말했습니다.

"달리는 새로운 현실을 상상했습니다. 그의 생일을 맞아 전 세계가 그 상상력과 직접 대화할 수 있도록 초대하게 되어 자랑스럽습니다. 이번 경험은 그의 정신, 유머, 그리고 시대를 초월한 호기심을 잘 담아냈습니다."라고 달리 미술관의 헹크 하인 관장이 전했습니다.