Dalís röst: Hur AI återupplivar surrealisten

Dalí-museet i St. Petersburg, Florida, öppnade 1982 för att hylla livet och konsten av den legendariske surrealisten Salvador Dalí. Samlingen innehåller över 2 400 verk, inklusive målningar, illustrationer, skulpturer, böcker och fotografier.

Museet grundades med verk samlade av A. Reynolds och Eleanor Morse, hängivna mecenater och vänner till Dalí. Under över 40 år växte deras privata samling till den största av hans verk i USA. Idag fortsätter museets intendenter att utöka utställningarna.

Nu, tack vare en AI-driven installation kallad Ask Dalí, har konstnärens närvaro digitalt återskapats. Projektet — utvecklat i samarbete med museet och den kreativa  byrån Goodby Silverstein & Partners (GS&P) — använder ElevenLabs AI Voice och Voice Cloning teknologi, vilket gör det möjligt för besökare att samtala med Dalí via en reproduktion av hans berömda hummertelefon.

Besökare kan ställa frågor och få svar i konstnärens röst och stil.

AI Möter Surrealism

Utställningen blandar avancerad röstteknologi med ett interaktivt, surrealistiskt gränssnitt. Sedan lanseringen har Ask Dalí registrerat över 75 000 konversationer, med ämnen som sträcker sig från konst och historia till samtida händelser och personliga funderingar.

Martin Pagh Ludvigsen, projektledare på GS&P, förklarade inspirationen bakom Dalís röst: “Den ursprungliga idén var att skapa en guide som folk kunde använda medan de gick genom museet. Det visade sig vara lite för komplicerat, så vi fokuserade på en Q&A-chatt med Dalí på en enda plats.”

Att använda hummertelefonen som medium speglar Dalís fascination — och hatkärlek — till telefoner. Han skapade fyra färgversioner och sex benvita modeller av det berömda surrealistiska objektet, varav en stolt visas i museet.

Museets Engagemang för Innovation

Det ideella Dalí-museet har en stark historia av att omfamna teknologi. Tillsammans med regelbundna VR-upplevelser driver det Dalí Lives, en permanent utställning med en AI-genererad, livsstor videorekreation av konstnären. Sedan lanseringen 2018 har denna prisbelönta utställning förblivit en av museets mest populära digitala upplevelser.

Hur Dalís Röst Fungerar

Dalís röst drivs av ElevenLabs’ Eleven Multilingual V2 text-to-speech-modell, tillsammans med OpenAI’s GPT-4, som hanterar konversationssvar. AI-rösten tränades på exempel från Dalís intervjuer, skrifter och talmönster för att skapa en digital persona så trogen konstnären som möjligt.

Denna förståelse kombineras med ElevenLabs’ låglatens ljudbearbetning, vilket möjliggör omedelbara, realistiska röstrespons. AI-modellerna fortsätter att lära och förfina interaktioner över tid, vilket förbättrar engagemanget.

Martin Pagh Ludvigsen beskrev hur idén kom till: “Två av våra kreativa teammedlemmar stötte på en demo av ElevenLabs’ röstmodell i ett kundtjänstsamtal. Det väckte en idé — varför inte skapa en konversationsutställning där folk kunde prata med Dalí?”

Övervinna Språkbarriärer

En utmaning var att Dalís första språk var katalanska, spanska och franska. Men ElevenLabs’ flerspråkiga kapacitet gjorde det möjligt för teamet att träna modellen på engelska samtidigt som Dalís distinkta talmönster bevarades.

Intressant nog, när Dalís AI talar spanska, gör den det med en katalansk accent, vilket speglar hans autentiska talstil. Hittills har besökare reagerat positivt på denna uppmärksamhet på detaljer. Teamet fann att de kunde komma närmare den katalanska accenten när de tränade röstmodellen på exempel av Dalí som talar engelska ,  över spanska.

Träna den Digitala Dalí

Att träna Dalís röst krävde en iterativ process. Teamet körde flera versioner av modellen och förfinade resultatet tills de uppnådde den närmaste möjliga matchningen.

En annan utmaning var att säkerställa att Dalís personlighet återskapades troget. Som Beth Harrison från Dalí-museet förklarade: “Vårt mål var att väcka Dalí till liv i hans museum. Vi behövde att hans digitala persona skulle kännas så verklig som möjligt.”

För att uppnå detta skapade teamet en detaljerad prompt för GPT-4 baserad på Dalís inspelade tal och skrifter, vilket säkerställde att rösten inte bara lät som Dalí utan också svarade som han.

AI:s första riktiga test kom på South by Southwest (SXSW) i Austin, Texas, där en förlanseringsdemo presenterades. Även om systemet fortfarande var under utveckling, imponerade röstnoggrannheten och Dalís surrealistiska svar på publiken.

Oväntad Surrealism

Ett av de mest överraskande resultaten av projektet har varit spontaniteten i Dalís svar.

Beth Harrison delade: “Vissa svar är så surrealistiska att bara Dalí kunde ha kommit på dem. Vi har till och med sett honom svara på en fråga med en annan fråga — nästan som om han medvetet engagerar sig i samtal.”

Detta var inte programmerat i AI:n utan uppstod naturligt från dess design.

Integritet och Användarupplevelse

Utställningen är designad med integritet i åtanke. Besökare ställer frågor via telefonen en i taget, och medan svaren spelas in, lagras inte offentliga frågor.

Dessutom finns det ingen registreringsprocess, vilket gör upplevelsen smidig och intim. Den taktila känslan av telefonluren förstärker engagemanget och förstärker illusionen av att tala direkt med Dalí.

Vad är Nästa?

Teamet utforskar redan framtida installationer, och tänjer på gränserna för teknologi och kreativitet för att levandegöra Dalís visionära värld på nya och oväntade sätt.

Ask Dalí  har visat att AI kan göra mer än att replikera tal — det kan återskapa essensen av en konstnär. Genom denna installation kan besökare uppleva surrealistens kvickhet, charm och mystik på ett djupt personligt sätt.