La Voix de Dalí : Comment l'IA Redonne Vie au Surréaliste

Le Musée Dalí à St. Petersburg, Floride, a ouvert en 1982 pour célébrer la vie et l'art du légendaire surréaliste Salvador Dalí. La collection comprend plus de 2 400 pièces, dont des peintures, illustrations, sculptures, livres et photographies.

Le Musée a été fondé avec des œuvres collectées par A. Reynolds et Eleanor Morse, mécènes dévoués et amis de Dalí. En 40 ans, leur collection privée est devenue la plus grande de ses œuvres aux États-Unis. Aujourd'hui, les conservateurs du Musée continuent d'élargir ses expositions.

Désormais, grâce à une installation alimentée par l'IA appelée Ask Dalí, la présence de l'artiste a été recréée numériquement. Le projet — développé en collaboration avec le Musée et l'agence créative  Goodby Silverstein & Partners (GS&P) — utilise ElevenLabs AI Voice et la technologie Voice Cloning, permettant aux visiteurs de converser avec Dalí via une reproduction de son célèbre téléphone homard.

Les visiteurs peuvent poser des questions et recevoir des réponses dans la voix et le style de l'artiste.

L'IA rencontre le surréalisme

L'exposition mélange une technologie vocale avancée avec une interface interactive et surréaliste. Depuis son lancement, Ask Dalí a enregistré plus de 75 000 conversations, abordant des sujets allant de l'art et l'histoire aux événements contemporains et réflexions personnelles.

Martin Pagh Ludvigsen, chef de projet chez GS&P, a expliqué l'inspiration derrière la Voix de Dalí : « L'idée originale était de créer un guide que les gens pourraient utiliser en se promenant dans le musée. Cela s'est avéré un peu trop compliqué, alors nous nous sommes concentrés sur un chat Q&R avec Dalí à un seul endroit. »

Utiliser le téléphone homard comme médium reflète la fascination — et la relation amour-haine — de Dalí avec les téléphones. Il a créé quatre versions colorées et six modèles blanc cassé de l'objet surréaliste célèbre, dont un est fièrement exposé au Musée.

L'engagement du Musée envers l'innovation

Le Musée Dalí à but non lucratif a une longue histoire d'adoption de la technologie. En plus des expériences VR régulières, il propose Dalí Lives, une exposition permanente présentant une recréation vidéo grandeur nature de l'artiste générée par l'IA. Depuis son lancement en 2018, cette exposition primée reste l'une des expériences numériques les plus populaires du Musée.

Comment fonctionne la Voix de Dalí

La Voix de Dalí est alimentée par le modèle Eleven Multilingual V2 text-to-speech d'ElevenLabs, ainsi que par le GPT-4 d'OpenAI, qui gère les réponses conversationnelles. La voix IA a été entraînée sur des échantillons d'interviews, écrits et modèles de discours de Dalí pour créer une personnalité numérique aussi fidèle que possible à l'artiste.

Cette compréhension est associée au traitement audio à faible latence d'ElevenLabs, permettant des réponses vocales instantanées et réalistes. Les modèles IA continuent d'apprendre et d'affiner les interactions au fil du temps, améliorant l'engagement.

Martin Pagh Ludvigsen a décrit comment l'idée a pris forme : « Deux membres de notre équipe créative ont découvert une démo du modèle vocal d'ElevenLabs lors d'un appel de service client. Cela a déclenché une idée — pourquoi ne pas créer une exposition conversationnelle où les gens pourraient parler à Dalí ? »

Surmonter les barrières linguistiques

Un défi était que les premières langues de Dalí étaient le catalan, l'espagnol et le français. Cependant, les capacités multilingues d'ElevenLabs ont permis à l'équipe d'entraîner le modèle en anglais tout en préservant les modèles de discours distinctifs de Dalí.

Fait intéressant, lorsque l'IA de Dalí parle espagnol, elle le fait avec un accent catalan, reflétant son style de discours authentique. Jusqu'à présent, les visiteurs ont réagi positivement à cette attention aux détails. L'équipe a constaté qu'ils pouvaient se rapprocher de l'accent catalan en entraînant le modèle vocal sur des exemples de Dalí parlant en anglais ,  plutôt qu'en espagnol.

Entraîner le Dalí numérique

Entraîner la voix de Dalí a nécessité un processus itératif. L'équipe a exécuté plusieurs versions du modèle, affinant le résultat jusqu'à obtenir la correspondance la plus proche possible.

Un autre défi était de s'assurer que la personnalité de Dalí était fidèlement recréée. Comme l'a expliqué Beth Harrison du Musée Dalí : « Notre objectif était de donner vie à Dalí dans son Musée. Nous avions besoin que sa personnalité numérique soit aussi réelle que possible. »

Pour y parvenir, l'équipe a élaboré une invite détaillée pour GPT-4 basée sur les discours et écrits enregistrés de Dalí, garantissant que la voix non seulement ressemblait à Dalí mais répondait aussi comme lui.

Le premier véritable test de l'IA a eu lieu au South by Southwest (SXSW) à Austin, Texas, où une démo pré-lancement a été présentée. Bien que le système était encore en développement, la précision de la voix et les réponses surréalistes de Dalí ont impressionné le public.

Surréalisme inattendu

L'un des résultats les plus surprenants du projet a été la spontanéité des réponses de Dalí.

Beth Harrison a partagé : « Certaines réponses sont si surréalistes que seul Dalí aurait pu les imaginer. Nous l'avons même vu répondre à une question par une autre question — presque comme s'il engageait délibérément la conversation. »

Cela n'a pas été programmé dans l'IA mais a émergé naturellement de sa conception.

Confidentialité et expérience utilisateur

L'exposition est conçue en tenant compte de la confidentialité. Les visiteurs posent des questions via le téléphone une à la fois, et bien que les réponses soient enregistrées, les questions publiques ne sont pas stockées.

De plus, il n'y a pas de processus d'inscription, rendant l'expérience fluide et intime. La sensation tactile du combiné téléphonique renforce l'engagement, renforçant l'illusion de parler directement avec Dalí.

Et après ?

L'équipe explore déjà de futures installations, repoussant les limites de la technologie et de la créativité pour donner vie au monde visionnaire de Dalí de manière nouvelle et inattendue.

Ask Dalí  a prouvé que l'IA peut faire plus que reproduire la parole — elle peut recréer l'essence d'un artiste. Grâce à cette installation, les visiteurs peuvent découvrir l'esprit, le charme et le mystère du surréaliste de manière profondément personnelle.