ElevenLabs AI 음성, 살바도르 달리의 목소리를 초현실적으로 되살리다

살바도르 달리는 1989년에 세상을 떠났지만, 30년이 넘은 지금도 그에게 전화를 걸어 인생, 우주, 그리고 코끼리의 꿈에 대해 대화할 수 있습니다.

이번 주, 달리 미술관이 미국 플로리다 세인트피터즈버그에서 "Dial Dalí"라는 AI 기반 체험을 선보였습니다. 미국 내 누구나 772-ASK-DALI로 전화해, 재현된 달리의 목소리와 실시간으로 대화할 수 있습니다. 통화는 Twilio를 통해 관리됩니다.

이 프로젝트는 크리에이티브 에이전시 굿바이 실버스타인 & 파트너스 (GS&P)와 협업하여 개발되었으며, ElevenLabs의 첨단 음성 기술로 달리 특유의 목소리를 재현했습니다.

딥페이크나 정적인 음성 녹음과 달리, 이 AI 체험은 역동적인 양방향 대화를 가능하게 해줍니다. 전화를 건 사람은 달리에게 궁금한 존재론적 질문을 자유롭게 할 수 있고, AI가 실제 달리와 매우 흡사한 목소리로 답변을 들려줍니다.

예술, 시간, 꿈, 바닷가재, 좋아하는 음식 등 무엇이든 물어보세요. 생일 축하 인사도 좋습니다. AI 달리는 그의 모든 글과 연설을 학습했습니다. 오직 달리만의 방식으로 대화해줍니다.

달리의 목소리는 달리 미술관 전시에서만 체험할 수 있지만, ElevenReader 앱에서는 아이코닉 보이스로 마야 안젤루, 버트 레이놀즈, 로렌스 올리비에, 제리 가르시아, 주디 갈랜드 등 다양한 목소리도 경험할 수 있습니다.

Dial Dalí는 이렇게 만들어졌습니다

GS&P 팀은 달리의 아카이브 녹음과 인터뷰 자료를 활용해 음성 모델을 만들고, 이를 ElevenLabs의 독자적인 음성 복제 기술에 입력했습니다. 누구나 Instant 또는 Professional Voice 복제 도구를 사용해 이 작업을 할 수 있지만, 음성의 출처를 확인하므로 해당 목소리를 사용할 권리가 필요합니다.

ElevenLabs의 다국어 및 억양 보존 기능을 활용해, GS&P는 달리 특유의 어조, 리듬, 그리고 스페인어와 영어를 오가는 독특한 말투까지 정교하게 재현할 수 있었습니다.

이번 체험은 ElevenLabs가 지원한 이전 달리 미술관 설치작품 달리에게 물어보기를 기반으로 합니다. 그 전시에서는 관람객이 달리의 유명한 바닷가재 전화기를 집어 들어, 달리와 1:1 음성 대화를 나눌 수 있었습니다. 이 전시만으로도 75,000건이 넘는 AI 기반 대화가 생성되었으며, 모두 각기 다르고 대본 없이 실시간으로 진행되었습니다.

ElevenLabs의 기술은 이 프로젝트에서 핵심 역할을 합니다. 창작과 접근성 모두를 위해 설계된 이 음성 AI 플랫폼은 감정 표현, 고음질, 자연스러운 억양의 즉각적인 음성 생성을 지원합니다. 달리에게 전화하기 체험에서는 AI가 GPT-4와 연동되어, 단순히 말하는 것뿐 아니라 달리의 인격으로 지능적이고 인간다운 대화까지 나눌 수 있습니다.

바닷가재 전화기

"달리의 바닷가재 전화기는 전화기가 항상 초현실주의적 오브젝트였음을 보여줍니다. 이제 우리는 그것을 현실로 만들었습니다."라고 GS&P의 공동 회장 제프 굿비가 말했습니다. 달리의 엉뚱함은 이 체험의 핵심입니다. 전화를 건 사람들은 인생 조언, 현대 미술에 대한 생각, 또는 AI에 대한 의견까지 물어볼 수 있습니다. 실시간으로 생성되는 답변은 초현실주의, 통찰력, 재치가 어우러져 있습니다. 모두 달리가 생전에 보여줬던 특징들입니다.

이 프로젝트는 2024년 5월 11일, 달리의 120번째 생일에 맞춰 공개되었으며, 여름 내내 관람객과의 소통을 이어갈 예정입니다. 미국 어디서나 전화가 가능해, 미술관의 현장 경험을 전국적으로 제공합니다.

ElevenLabs에게 이 프로젝트는 더 큰 미션을 보여줍니다. AI를 통해 인간의 목소리를 보존하고 확장하는 것—엔터테인먼트, 교육, 접근성, 문화유산 등 다양한 목적을 위해서입니다. 이번에는 과거의 상징적인 목소리에 새 생명을 불어넣어, 현재와 소통하게 하는 것이죠.

왜 효과적일까요

자연스러운 음성 합성과 생성형 AI를 결합해, 달리에게 전화하기 프로젝트는 AI와 예술에 대한 대화에 새로운 가치를 더합니다. AI가 무엇을 만들 수 있는지에 그치지 않고, 우리가 무엇을 기억하고, 다시 상상하며, 재발견할 수 있는지에 대한 이야기입니다.

살바도르 달리 는 한 번 이렇게 말했습니다: “중요한 것은 혼란을 퍼뜨리는 것이지, 없애는 것이 아니다.” 다시 목소리를 얻게 된 달리처럼, ElevenLabs도 어쩌면 가장 즐거운 초현실주의 방식으로 바로 그 일을 하고 있는지도 모릅니다.

"달리의 바닷가재 전화기는 전화기가 항상 초현실주의적 오브젝트였음을 보여줍니다. 이제 우리는 그것을 현실로 만들었습니다. Dial Dalí를 통해 누구나 과거의 목소리와 연결되어, 미래에 대해 이야기할 수 있습니다."라고 GS&P 공동 창립자 제프 굿비가 말했습니다.

"달리는 새로운 현실을 상상했습니다. 그의 생일을 맞아 전 세계가 그 상상력과 직접 대화할 수 있도록 하게 되어 자랑스럽습니다. 이 체험은 그의 정신, 유머, 그리고 영원한 호기심을 담고 있습니다."라고 달리 미술관의 Hank Hine 관장이 전했습니다.