
全新 Dubbing Studio 上线
- 分类
- 产品
- 日期
借助 ElevenLabs 的语音克隆技术,萨尔瓦多·达利去世数十年后,已与观众进行了超过 70,000 次对话。
位于佛罗里达圣彼得堡的达利博物馆于 1982 年开馆,致力于纪念超现实主义大师萨尔瓦多·达利的生平与艺术。馆藏超过 2,400 件作品,包括绘画、插画、雕塑、书籍和照片。
博物馆由达利的忠实支持者兼朋友 A. Reynolds 和 Eleanor Morse 夫妇收藏的作品创立。40 多年来,他们的私人收藏成为美国最大的达利作品收藏。如今,博物馆策展人持续丰富展览内容。
现在,借助一项名为问达利的 AI 装置,艺术家的“在场感”被数字化重现。该项目由博物馆与创意 机构 Goodby Silverstein & Partners(GS&P)合作开发,采用ElevenLabs AI 语音和语音克隆技术,观众可通过复刻的龙虾电话与达利对话。
观众可以提问,并收到以达利语音和风格作答的回复。
该展览融合了先进语音技术与互动超现实界面。自上线以来,问达利已记录超过 75,000 次对话,涵盖艺术、历史、当代事件及个人思考等话题。
GS&P 项目负责人 Martin Pagh Ludvigsen 介绍了达利之声的灵感:“最初想做一个参观时可用的导览工具,但发现太复杂,于是专注于在一个地点与达利问答聊天。”
选择龙虾电话作为媒介,体现了达利对电话的迷恋和复杂情感。他曾创作四款彩色和六款米色的龙虾电话,其中一部现陈列于博物馆。
.webp&w=3840&q=95)
非营利性质的达利博物馆一直积极拥抱新技术。除了常规 VR 体验,还设有达利重现,这是一个永久展览,通过 AI 生成的真人大小视频再现达利。自 2018 年推出以来,这一获奖展览一直是博物馆最受欢迎的数字体验之一。
达利之声由 ElevenLabs 的Eleven Multilingual V2 文本转语音模型和 OpenAI 的 GPT-4 提供支持,后者负责对话回复。AI 语音基于达利的访谈、著作和说话风格训练,尽可能还原艺术家本人的数字形象。
结合 ElevenLabs 的低延迟音频处理,可实现即时、自然的语音回复。AI 模型会持续学习和优化互动体验,提升参与感。
Martin Pagh Ludvigsen 讲述了创意的诞生过程:“我们团队的两位成员在一次客服通话中听到 ElevenLabs 的语音模型演示,由此产生了灵感——为什么不做一个可以和达利对话的展览?”
一个挑战是达利的母语是加泰罗尼亚语、西班牙语和法语。但 ElevenLabs 的多语言能力让团队可以用英语训练模型,同时保留达利独特的说话风格。
有趣的是,达利的 AI 说西班牙语时带有加泰罗尼亚口音,真实还原了他的说话方式。到目前为止,观众对这种细节表现反响积极。团队发现,用达利说英语的样本训练语音模型,比用西班牙语样本更接近加泰罗尼亚口音, 。
训练达利语音需要反复迭代。团队多次调整模型,优化输出,直到尽可能接近原声。
另一个挑战是还原达利的个性。正如达利博物馆的 Beth Harrison 所说:“我们的目标是在博物馆让达利‘复活’,数字形象必须尽量真实。”
为此,团队根据达利的录音和著作,为 GPT-4 设计了详细提示词,确保语音不仅像达利,还能像他一样作答。
AI 的首次实测是在德克萨斯州奥斯汀的 SXSW 大会上进行的预演。虽然系统仍在开发中,但语音还原度和达利式的超现实回复让观众印象深刻。

项目中最令人惊喜的成果之一,是达利回复的即兴和不可预测。
Beth Harrison 分享道:“有些回复非常超现实,只有达利本人才能想到。有时他甚至用问题回答问题,仿佛在主动引导对话。”
这些并非 AI 预设,而是自然生成的。
展览充分考虑隐私。观众通过电话逐一提问,回复会被记录,但不会保存公开问题。
此外,无需注册,体验流畅且私密。电话听筒的触感增强了互动感,让人仿佛真的在与达利通话。
团队已在探索未来更多装置,持续突破技术与创意边界,让达利的奇思妙想以全新方式呈现。
问达利 证明了 AI 不只是复制语音,更能还原艺术家的精髓。通过这项装置,观众能以更个人化的方式体验超现实主义大师的幽默、魅力与神秘。
