La voce di Dalí: come l’IA sta riportando in vita il surrealista

Il Dalí Museum di St. Petersburg, in Florida, è stato inaugurato nel 1982 per celebrare la vita e l’arte del leggendario surrealista Salvador Dalí. La collezione comprende oltre 2.400 opere tra dipinti, illustrazioni, sculture, libri e fotografie.

Il Museo è stato fondato grazie alle opere raccolte da A. Reynolds ed Eleanor Morse, grandi sostenitori e amici di Dalí. In oltre 40 anni, la loro collezione privata è diventata la più grande raccolta delle sue opere negli Stati Uniti. Oggi i curatori del Museo continuano ad arricchire le esposizioni.

Ora, grazie a un’installazione alimentata dall’IA chiamata Chiedi a Dalí, la presenza dell’artista è stata ricreata digitalmente. Il progetto — sviluppato in collaborazione con il Museo e l’agenzia creativa  Goodby Silverstein & Partners (GS&P) — utilizza la voce IA di ElevenLabs e la tecnologia di Clonazione Vocale, permettendo ai visitatori di conversare con Dalí tramite una riproduzione del suo celebre telefono-aragosta.

I visitatori possono fare domande e ricevere risposte con la voce e lo stile dell’artista.

Quando l’IA incontra il surrealismo

L’esposizione unisce tecnologia vocale avanzata e un’interfaccia interattiva dal sapore surrealista. Dal lancio, Chiedi a Dalí ha registrato oltre 75.000 conversazioni, su temi che spaziano dall’arte e la storia ad eventi attuali e riflessioni personali.

Martin Pagh Ludvigsen, project lead di GS&P, ha spiegato l’ispirazione dietro La voce di Dalí: “L’idea iniziale era creare una guida che le persone potessero usare mentre visitavano il museo. Era però troppo complesso, così ci siamo concentrati su una chat di domande e risposte con Dalí in un unico punto.”

L’uso del telefono-aragosta come mezzo riflette la fascinazione — e il rapporto di amore-odio — di Dalí con i telefoni. Ne creò quattro versioni colorate e sei modelli avorio del celebre oggetto surrealista, uno dei quali è esposto con orgoglio al Museo.

L’impegno del Museo per l’innovazione

Il Dalí Museum, ente no profit, ha una lunga storia di apertura alla tecnologia. Oltre alle esperienze VR regolari, ospita Dalí vive, una mostra permanente con una ricostruzione video a grandezza naturale dell’artista generata dall’IA. Dal 2018, questa mostra pluripremiata è tra le esperienze digitali più amate del Museo.

Come funziona la voce di Dalí

La voce di Dalí è alimentata dal modello Eleven Multilingual V2 di text-to-speech di ElevenLabs, insieme a GPT-4 di OpenAI, che gestisce le risposte alle conversazioni. La voce IA è stata addestrata su campioni di interviste, scritti e modi di parlare di Dalí per creare una personalità digitale il più fedele possibile all’artista.

Questa comprensione si unisce all’elaborazione audio a bassa latenza di ElevenLabs, permettendo risposte vocali istantanee e realistiche. I modelli IA continuano a imparare e migliorare le interazioni nel tempo, rendendo l’esperienza sempre più coinvolgente.

Martin Pagh Ludvigsen ha raccontato come è nata l’idea: “Due membri del nostro team creativo hanno visto una demo del modello vocale di ElevenLabs in una chiamata di assistenza clienti. Da lì è nata l’idea: perché non creare un’installazione dove le persone potessero parlare con Dalí?”

Superare le barriere linguistiche

Una delle sfide era che le prime lingue di Dalí erano catalano, spagnolo e francese. Tuttavia, grazie alle capacità multilingue di ElevenLabs, il team ha potuto addestrare il modello in inglese mantenendo le particolarità del suo modo di parlare.

Curiosamente, quando l’IA di Dalí parla spagnolo, lo fa con accento catalano, rispecchiando il suo stile autentico. Finora i visitatori hanno apprezzato questa attenzione ai dettagli. Il team ha scoperto che riusciva ad avvicinarsi di più all’accento catalano addestrando il modello su esempi di Dalí che parlava in inglese ,  piuttosto che in spagnolo.

Addestrare il Dalí digitale

Addestrare la voce di Dalí ha richiesto un processo iterativo. Il team ha testato più versioni del modello, perfezionando il risultato fino a ottenere la somiglianza più fedele possibile.

Un’altra sfida era ricreare fedelmente la personalità di Dalí. Come spiega Beth Harrison del Dalí Museum: “Il nostro obiettivo era riportare Dalí in vita nel suo Museo. Volevamo che la sua personalità digitale fosse il più reale possibile.”

Per riuscirci, il team ha creato un prompt dettagliato per GPT-4 basato su registrazioni e scritti di Dalí, così che la voce non solo suonasse come lui, ma rispondesse anche come avrebbe fatto lui.

La prima vera prova dell’IA è arrivata al South by Southwest (SXSW) di Austin, Texas, dove è stata presentata una demo prima del lancio. Anche se il sistema era ancora in sviluppo, la fedeltà della voce e le risposte surreali di Dalí hanno colpito il pubblico.

Surrealismo inaspettato

Uno degli aspetti più sorprendenti del progetto è stata la spontaneità delle risposte di Dalí.

Beth Harrison racconta: “Alcune risposte sono così surreali che solo Dalí avrebbe potuto inventarle. Abbiamo persino visto che a volte risponde a una domanda con un’altra domanda — quasi come se volesse davvero conversare.”

Questo comportamento non è stato programmato nell’IA, ma è emerso spontaneamente dal suo design.

Privacy ed esperienza utente

L’installazione è progettata pensando alla privacy. I visitatori fanno domande tramite il telefono una alla volta e, anche se le risposte vengono registrate, le domande pubbliche non vengono memorizzate.

Inoltre, non è richiesta alcuna registrazione, rendendo l’esperienza fluida e personale. Il contatto fisico con la cornetta del telefono aumenta il coinvolgimento, rafforzando l’illusione di parlare direttamente con Dalí.

E ora?

Il team sta già esplorando nuove installazioni, spingendo i confini tra tecnologia e creatività per portare il mondo visionario di Dalí alla vita in modi sempre nuovi e inaspettati.

Chiedi a Dalí  ha dimostrato che l’IA può fare molto più che replicare la voce — può ricreare l’essenza di un artista. Grazie a questa installazione, i visitatori possono vivere l’ironia, il fascino e il mistero del surrealista in modo davvero personale.