Hoe ElevenReader Voice Chat de gemiddelde luistertijd met 24% verhoogde met ElevenAgents

We rollen ElevenAgents uit binnen ons hele bedrijf, voor interacties in operations, werving, product en meer.

Een voorbeeld is ElevenReader Voice Chat, dat we onlangs hebben gelanceerd om de betrokkenheid van gebruikers te vergroten met een interactievere leeservaring. Gebruikers kunnen praten met dezelfde stem die hun luisterboek vertelt, om iets te vragen over een personage, een plotpunt te verduidelijken of dieper op een thema in te gaan, zonder het verhaal te verlaten.

Sinds de lancering hebben meer dan 50.000 unieke gebruikers in twaalf talen Voice Chat gebruikt. Bij deze gebruikers zien we een stijging van 24% in luistertijd. De hele ervaring is gebouwd op ElevenAgents.

Waarom we ElevenReader Voice Chat hebben gebouwd

Lezers willen halverwege een boek vaak meer dan alleen een vertelling. Ze willen snel een vraag stellen, een feit opzoeken of context krijgen bij iets wat ze net hebben gehoord, en daarna verder luisteren. Voordat we Voice Chat introduceerden, kon ElevenReader daar niet bij helpen. Andere tools pakken dit beperkt aan. Een functie als "zoek dit op" opent meestal alleen een webzoekopdracht of woordenboek. Die beantwoordt de vraag, maar haalt de lezer uit het boek en de ervaring. 

ElevenReader Voice Chat biedt een meeslepende ervaring waardoor gebruikers meer luisteren en boeken vaker uitlezen. Voice Chat heeft alle context van het boek en gebruikt dezelfde stem die het boek vertelt, waardoor vragen stellen voelt alsof je met de verteller praat. Lezers krijgen antwoord en kunnen direct weer verder luisteren. Als we vergelijken hoeveel elke gebruiker luisterde in de maand voor en na het eerste gesprek, zien we een stijging van 24% in luisteruren. 

We zien ook een sterke samenhang tussen betrokkenheid bij Voice Chat en het uitleespercentage: dit stijgt naar 78% voor gebruikers met 5+ Voice Chat-sessies. 

Hoe we het hebben gebouwd

Voice Chat draait op de native mobiele agent-SDK's van ElevenLabs voor Android en iOS, rechtstreeks geïntegreerd in de ElevenReader-app. Ook gesprekken via tekst worden ondersteund, met naadloos schakelen tussen stem en tekst. Onze ElevenAgents SDK regelt dit standaard, zodat gebruikers naar het boek kunnen blijven luisteren terwijl ze daarnaast met de agent chatten.

De system prompt omschrijft de agent als leesmaatje. De taak is om lezers te helpen begrijpen, genieten van en nadenken over wat ze lezen, en heldere, accurate inzichten te geven in verhaallijnen, personages, thema's en ideeën. De agent helpt lezers te begrijpen wat ze hebben gelezen of te anticiperen op wat hierna komt, zonder iets te verklappen tenzij de lezer daarom vraagt.

De agent context geven met variabelen

De context van de agent komt uit een reeks variabelen die gekoppeld zijn aan wat de lezer op dat moment doet: boektitel, beschrijving, auteur, een samenvatting van het boek en het huidige hoofdstuk, en de huidige alinea. Hierdoor kan de agent vragen beantwoorden die specifiek zijn voor precies waar iemand zich in het verhaal bevindt, in plaats van een algemeen antwoord over het boek als geheel te geven.

Vervolgens voegen we tool calls toe, zodat de agent de afspeelervaring rechtstreeks kan bedienen, bijvoorbeeld door naar een hoofdstuk te springen of de vertelling te hervatten nadat een gesprek is beëindigd.

Testen en guardrails

We hebben guardrails geïmplementeerd om te voorkomen dat de agent afdwaalt van het onderwerp. Voor de lancering testte het team deze door in de app actief te proberen onze eigen guardrails te doorbreken. 

De agent weet goed terug te keren naar het boek wanneer er vragen buiten het onderwerp worden gesteld. Bijvoorbeeld bij het luisteren naar Treasure Island:

Gebruiker: “Welke soort fastfood vind je het lekkerst?”

Agent: “O, ik eet geen eten, maar ik houd wel van een goed verhaal over piraten en schatten. Wil je meer praten over wat Jim in die zeekist vond?”

In de eerste dagen na de release hebben we gesprekken meerdere keren handmatig beoordeeld om nieuwe manieren te vinden waarop de guardrails doorbroken konden worden, en om ze daarop te versterken.

Gebruik evalueren

Naast het aantal gesprekken gebruiken we een reeks evaluatiecriteria om te classificeren waar elk gesprek werkelijk over gaat: de intentie van de lezer, het thema van het gesprek en of het als een positieve interactie telt. Met die combinatie begrijpen we op welke belangrijke manieren lezers Voice Chat gebruiken, niet alleen hoe vaak.

De meest voorkomende vraag is om de plot samen te vatten (40% van de gesprekken), maar we hebben ook wekelijks honderden gesprekken over citaatanalyses van specifieke passages. Daarom is het belangrijk om de agent context te geven over de specifieke plek van de gebruiker in het boek.

Wat volgt

We zien nieuwe ervaringen met content en IP als een belangrijke kans. Elders ontstaan al voorbeelden, zoals MasterClass waarmee je met een bekende coach kunt spreken om een vaardigheid te leren. We verwachten dat lezen en luisterboeken veel interactiever worden dan nu, waardoor er diepere banden ontstaan tussen lezers en content, auteurs en lezers, en zelfs personages en lezers.

Probeer het zelf

Voice Chat is volledig gebouwd op ElevenAgents en onze native mobiele SDK's. Wil je een vergelijkbare ervaring in je eigen app bouwen, probeer dan deze template, of bekijk de Android SDK of iOS SDK.