Så ökade ElevenReader Voice Chat den genomsnittliga lyssningstiden med 24 % med ElevenAgents

Vi rullar ut ElevenAgents i hela verksamheten för interaktioner inom drift, rekrytering, produkt och mycket mer.

Ett exempel är ElevenReader Voice Chat, som vi nyligen lanserade för att öka engagemanget genom en mer interaktiv läsupplevelse. Användare kan prata med samma röst som läser upp deras ljudbok och fråga om en karaktär, få en del av handlingen förklarad eller fördjupa sig i ett tema – utan att lämna berättelsen.

Sedan lanseringen har fler än 50 000 unika användare använt Voice Chat på ett dussintal språk, och deras lyssningstid har ökat med 24 %. Hela upplevelsen bygger på ElevenAgents.

Därför byggde vi ElevenReader Voice Chat

Läsare vill ofta ha mer än uppläsning mitt i en bok. De vill ställa en snabb fråga, slå upp ett faktum eller få sammanhang kring något de just hört, och sedan fortsätta lyssna. Innan vi introducerade Voice Chat hade ElevenReader inget sätt att stödja det. Andra verktyg hanterar detta mer begränsat. En funktion som ”slå upp detta” öppnar vanligtvis bara en webbsökning eller ordbok. Den besvarar frågan men tar läsaren bort från boken och upplevelsen. 

ElevenReader Voice Chat ger en uppslukande upplevelse som får användare att lyssna mer och avsluta böcker oftare. Voice Chat har hela bokens sammanhang och använder samma röst som läser upp boken, så att ställa frågor känns som att prata med uppläsaren. Läsaren får sitt svar och kan direkt fortsätta lyssna. När vi jämför varje användares lyssning under månaden före och efter deras första konversation ser vi en ökning på 24 % i lyssningstimmar. 

Vi ser också en stark koppling mellan engagemang i Voice Chat och andelen slutförda böcker. För användare med fem eller fler Voice Chat-sessioner stiger andelen till 78 %. 

Så byggde vi det

Voice Chat körs på ElevenLabs egna SDK:er för mobila agenter för Android och iOS, direkt integrerade i ElevenReader-appen. Textbaserade konversationer stöds också, med sömlös växling mellan röst och text. Vårt ElevenAgents SDK hanterar detta direkt, så att användarna kan fortsätta lyssna på boken medan de chattar med agenten vid sidan av.

Systemprompten definierar agenten som en läskompanjon. Dess uppgift är att hjälpa läsare att förstå, uppskatta och reflektera över det de läser samt att ge tydliga, korrekta insikter om handling, karaktärer, teman och idéer. Den hjälper läsare att förstå det de har läst eller förutse vad som kommer härnäst, utan att avslöja något om inte läsaren ber om det.

Ge agenten sammanhang med variabler

Agentens sammanhang kommer från en uppsättning variabler kopplade till vad läsaren gör just då: bokens titel, beskrivning, författare, en sammanfattning av boken och det aktuella kapitlet samt det aktuella stycket. Det gör att den kan besvara frågor utifrån exakt var någon befinner sig i berättelsen, i stället för att ge ett generellt svar om boken som helhet.

Härnäst lägger vi till verktygsanrop så att agenten kan styra uppspelningsupplevelsen direkt, till exempel hoppa till ett kapitel eller återuppta uppläsningen när en konversation avslutas.

Testning och skyddsräcken

Vi implementerade skyddsräcken för att hindra agenten från att hamna utanför ämnet. Före lanseringen testade teamet dem genom att aktivt försöka bryta igenom våra egna skyddsräcken i appen. 

Agenten är bra på att återgå till boken när den får frågor utanför ämnet. Till exempel vid lyssning på Skattkammarön:

Användare: ”Vilken typ av snabbmat gillar du bäst?”

Agent: ”Åh, jag äter inte mat, men jag älskar en bra berättelse om pirater och skatter. Vill du prata mer om vad Jim hittade i den där sjömanskistan?”

Under de första dagarna efter lanseringen granskade vi konversationer manuellt flera gånger för att hitta nya sätt som skyddsräckena kunde kringgås på och stärka dem därefter.

Utvärdera användningen

Utöver antalet konversationer använder vi en uppsättning utvärderingskriterier för att klassificera vad varje konversation faktiskt handlar om: läsarens avsikt, konversationens tema och om den räknas som en positiv interaktion. Den kombinationen gör att vi kan förstå de främsta sätten som läsare använder Voice Chat på, inte bara hur ofta.

Den vanligaste frågan handlar om att sammanfatta handlingen (40 % av konversationerna), men varje vecka får vi också hundratals konversationer om citatanalys från specifika avsnitt. Därför är det viktigt att ge agenten sammanhang om användarens exakta plats i boken.

Vad händer härnäst?

Vi ser nya upplevelser med innehåll och immateriella rättigheter som en betydande möjlighet. Exempel syns redan på andra håll, som när MasterClass låter dig prata med en välkänd coach för att lära dig en färdighet. Vi förväntar oss att läsning och ljudböcker blir betydligt mer interaktiva än i dag och skapar djupare band mellan läsare och innehåll, författare och läsare, och till och med karaktärer och läsare.

Prova själv

Voice Chat är helt byggt på ElevenAgents och våra egna SDK:er för mobilenheter. Om du vill bygga en liknande upplevelse i din egen app kan du prova den här mallen eller ta en titt på Android SDK eller iOS SDK.