Pickford skapar interaktiva filmupplevelser i realtid med ElevenLabs

Pickford bygger interaktiva medieupplevelser där publiken inte bara tittar på berättelser - de formar dem. Deras senaste projekt, Whispers, hade premiär på Busan International Film Festival och markerade en milstolpe inom publikdriven film.

I Whispers spelar publiken kollektivt rollen som en osynlig rådgivare och viskar förslag till filmens huvuddetektiv under en mordutredning. Varje publikinput påverkar berättelsen i realtid - driver dialog, formar förhör och bestämmer slutresultatet.

Upplevelsen kan ses både live och online i gruppinställningar, vilket gör det möjligt för publik världen över att delta tillsammans. Denna nivå av interaktivitet kräver röstgenerering som känns känslomässigt äkta och anpassar sig sömlöst till livepublikens input. För Pickford innebar det ett samarbete med ElevenLabs.

Realtidsdialog driven av ElevenLabs

För att göra Whispers möjlig, integrerade Pickford ElevenLabs Text to Speech med Eleven v3 för att generera dynamisk dialog som svarar på publikens val. Varje replik måste levereras omedelbart, med konsekvent känslomässigt djup för att bibehålla inlevelsen över hundratals förgrenade möjligheter.

“Med Pickford måste vi svara på publikens förslag i realtid - det finns inga omtagningar. Rösterna måste genereras snabbt och vara känslomässigt resonanta varje gång. ElevenLabs gör detta möjligt.” – Stephen Piron, VD, Pickford AI

Pickfords vision förenar banbrytande teknik med djupt mänskligt berättande, där publiken blir en del av berättelsen. Varje föreställning drivs av ElevenLabs uttrycksfulla röstmodeller, vilket möjliggör livfull känslomässig leverans utan fördröjning - avgörande för att bibehålla rytmen och äktheten i livefilm.

I samarbete med SAG-AFTRA

Till skillnad från de flesta AI-drivna produktioner skapades Whispers under SAG-AFTRA:s nyligen etablerade ramverk för AI-samarbete, vilket säkerställer att varje skådespelare deltog med fullständigt samtycke och rättvis ersättning.

Pickford AI:s VD Stephen Piron noterade att arbete under SAG:s riktlinjer var avgörande för att förena innovation med rättvisa: “Vi vill arbeta med världens bästa talanger, och vi vill att dessa talanger ska få rättvis och generös betalning […] vi hoppas att detta projekt sätter en ny standard för hur mänsklig talang kan ersättas etiskt när underhållningsindustrin alltmer omfamnar AI.”

Genom att anta fackförbundets ramverk har Pickford hjälpt till att etablera ett prejudikat för hur AI och mänsklig talang kan samexistera ansvarsfullt.

Bygger nästa medium

Pickford ser detta som början på ett nytt medium, där publikens engagemang omformar hur berättelser berättas och upplevs. Med ElevenLabs kan skapare som Pickford bygga upplevelser som svarar, utvecklas och känns levande i stunden.

Vill du bygga realtidsupplevelser med röst? Kontakta oss här.