Dalí’s Voice: hoe AI de surrealist weer tot leven brengt

Het Dalí Museum in St. Petersburg, Florida, opende in 1982 om het leven en werk van de legendarische surrealist Salvador Dalí te vieren. De collectie omvat meer dan 2.400 werken, waaronder schilderijen, illustraties, sculpturen, boeken en foto’s. 

Het museum werd opgericht met werken die waren verzameld door A. Reynolds en Eleanor Morse, toegewijde beschermheren en vrienden van Dalí. In 40 jaar groeide hun privécollectie uit tot de grootste verzameling van zijn werk in de VS. Vandaag blijven de curatoren van het museum de tentoonstellingen uitbreiden. 

Dankzij een AI-gestuurde installatie met de naam Vraag het Dalí, is de aanwezigheid van de kunstenaar nu digitaal gereconstrueerd. Het project — ontwikkeld in samenwerking met het museum en creatief  bureau Goodby Silverstein & Partners (GS&P) — gebruikt ElevenLabs AI Voice en Voice Cloning-technologie, zodat bezoekers via een replica van zijn beroemde kreeftentelefoon met Dalí kunnen praten.  

Bezoekers kunnen vragen stellen en antwoorden ontvangen in de stem en stijl van de kunstenaar. 

AI ontmoet surrealisme 

De tentoonstelling combineert geavanceerde stemtechnologie met een interactieve, surrealistische interface. Sinds de lancering heeft Vraag het Dalí meer dan 75.000 gesprekken geregistreerd, over onderwerpen uiteenlopend van kunst en geschiedenis tot actuele gebeurtenissen en persoonlijke bespiegelingen. 

Martin Pagh Ludvigsen, projectleider bij GS&P, vertelde over de inspiratie achter Dalí’s Voice: “Het oorspronkelijke idee was om een gids te maken die mensen konden gebruiken terwijl ze door het museum liepen. Dat bleek iets te ingewikkeld, dus richtten we ons op een vraag-en-antwoordchat met Dalí op één locatie.” 

De kreeftentelefoon als medium gebruiken weerspiegelt Dalí’s fascinatie voor — en haat-liefdeverhouding met — telefoons. Hij maakte vier gekleurde versies en zes gebroken witte modellen van het beroemde surrealistische object, waarvan er één trots in het museum wordt tentoongesteld. 

De inzet van het museum voor innovatie 

Het non-profit Dalí Museum heeft een sterke geschiedenis van het omarmen van technologie. Naast reguliere VR-ervaringen biedt het Dalí Lives, een permanente tentoonstelling met een door AI gegenereerde videorecreatie van de kunstenaar op ware grootte. Sinds de lancering in 2018 is deze bekroonde tentoonstelling een van de populairste digitale ervaringen van het museum gebleven. 

Hoe Dalí’s Voice werkt 

Dalí’s Voice wordt aangestuurd door het Eleven Multilingual V2 text-to-speech model van ElevenLabs, naast GPT-4 van OpenAI, dat de antwoorden in gesprekken verzorgt. De AI-stem is getraind met fragmenten uit Dalí’s interviews, geschriften en spraakpatronen om een digitale persona te creëren die zo trouw mogelijk is aan de kunstenaar. 

Dit wordt gecombineerd met de audioverwerking met lage latentie van ElevenLabs, waardoor directe, realistische stemreacties mogelijk zijn. De AI-modellen blijven interacties in de loop der tijd leren en verfijnen, wat de betrokkenheid vergroot. 

Martin Pagh Ludvigsen beschreef hoe het idee ontstond: “Twee leden van ons creatieve team zagen een demo van het stemmodel van ElevenLabs tijdens een klantenservicegesprek. Dat bracht ons op een idee — waarom geen gesprekstentoonstelling maken waarin mensen met Dalí kunnen praten?” 

Taalbarrières overwinnen 

Een uitdaging was dat Dalí’s moedertalen Catalaans, Spaans en Frans waren. Dankzij de meertalige mogelijkheden van ElevenLabs kon het team het model echter in het Engels trainen, terwijl Dalí’s kenmerkende spraakpatronen behouden bleven. 

Interessant is dat Dalí’s AI, wanneer die Spaans spreekt, dat met een Catalaans accent doet, wat zijn authentieke spreekstijl weerspiegelt. Bezoekers hebben tot nu toe positief gereageerd op deze aandacht voor detail. Het team ontdekte dat ze het Catalaanse accent beter konden benaderen door het stemmodel te trainen met voorbeelden van Dalí die Engels sprak ,  in plaats van Spaans. 

De digitale Dalí trainen 

Het trainen van Dalí’s stem vereiste een iteratief proces. Het team testte meerdere versies van het model en verfijnde de output totdat ze de best mogelijke overeenkomst bereikten. 

Een andere uitdaging was ervoor te zorgen dat Dalí’s persoonlijkheid getrouw werd gereconstrueerd. Zoals Beth Harrison van The Dalí Museum uitlegde: “Ons doel was om Dalí in zijn museum tot leven te brengen. Zijn digitale persona moest zo echt mogelijk aanvoelen.” 

Om dit te bereiken, stelde het team een gedetailleerde prompt voor GPT-4 op, gebaseerd op Dalí’s opgenomen spraak en geschriften. Zo klonk de stem niet alleen als Dalí, maar reageerde die ook zoals hij. 

De eerste echte test voor de AI vond plaats op South by Southwest (SXSW) in Austin, Texas, waar een demo vóór de lancering werd gepresenteerd. Hoewel het systeem nog in ontwikkeling was, maakten de nauwkeurigheid van de stem en Dalí’s surrealistische reacties indruk op het publiek. 

Onverwacht surrealisme 

Een van de meest verrassende resultaten van het project is de spontaniteit in Dalí’s reacties. 

Beth Harrison vertelde: “Sommige antwoorden zijn zo surrealistisch dat alleen Dalí ze had kunnen bedenken. We hebben hem zelfs een vraag zien beantwoorden met een andere vraag — bijna alsof hij bewust een gesprek aangaat.” 

Dit was niet in de AI geprogrammeerd, maar kwam op natuurlijke wijze voort uit het ontwerp. 

Privacy en gebruikerservaring 

De tentoonstelling is ontworpen met oog voor privacy. Bezoekers stellen één voor één vragen via de telefoon. De antwoorden worden opgenomen, maar openbare vragen worden niet opgeslagen. 

Daarnaast is er geen registratieproces, waardoor de ervaring naadloos en intiem is. Het voelbare karakter van de telefoonhoorn vergroot de betrokkenheid en versterkt de illusie dat je rechtstreeks met Dalí praat. 

Wat volgt er? 

Het team onderzoekt al toekomstige installaties en verlegt de grenzen van technologie en creativiteit om Dalí’s visionaire wereld op nieuwe en onverwachte manieren tot leven te brengen.

Vraag het Dalí  heeft bewezen dat AI meer kan dan spraak nabootsen — het kan de essentie van een kunstenaar reconstrueren. Via deze installatie kunnen bezoekers de humor, charme en het mysterie van de surrealist op een heel persoonlijke manier ervaren.