Hoppa till navigering

Utvärdering av resultat

Definiera egna kriterier för att bedöma konversationskvalitet, måluppfyllelse och kundnöjdhet.

Med framgångsutvärdering kan du definiera egna mål och mått på framgång för dina konversationer. Varje kriterium utvärderas mot konversationstranskriptionen och returnerar resultatet success, failure eller unknown, tillsammans med en detaljerad motivering.

Översikt

Framgångsutvärdering använder LLM-baserad analys för att bedöma konversationskvaliteten utifrån dina specifika affärsmål. Det möjliggör systematisk prestationsmätning och kvalitetssäkring i alla kundinteraktioner.

Så fungerar det

Varje utvärderingskriterium analyserar konversationstranskriptionen med hjälp av en anpassad prompt och returnerar:

  • Resultat: success, failure eller unknown
  • Motivering: Detaljerad förklaring till varför resultatet valdes

Typer av utvärderingskriterier

Kriterier för målprompt skickar konversationstranskriptionen tillsammans med en anpassad prompt till en LLM för att kontrollera om ett specifikt mål uppnåddes. Detta är den mest flexibla typen av utvärdering och kan användas för komplex affärslogik.

Exempel:

  • Bedömning av kundnöjdhet
  • Verifiering av problemhantering
  • Efterlevnadskontroll
  • Validering av anpassade affärsregler

Konfiguration

1

Öppna agentinställningar

Gå till agentens kontrollpanel och välj fliken Analys för att konfigurera utvärderingskriterier.

Analysinställningar

2

Lägg till utvärderingskriterier

Klicka på Lägg till utvärdering för att skapa ett nytt utvärderingskriterium eller bifoga ett från arbetsytans analysbibliotek.

Definiera ditt kriterium med:

  • Namn: Ett namn för kriteriet (t.ex. Användaren var inte upprörd)
  • Beskrivning: Detaljerad prompt som beskriver vad som ska utvärderas

Konfigurera utvärderingskriterier

Antalet utvärderingskriterier är begränsat till 30 per agent.

3

Visa resultat

När konversationerna är klara visas utvärderingsresultaten i kontrollpanelen för konversationshistorik. Varje konversation visar utvärderingsutfallet och motiveringen för varje konfigurerat kriterium.

Utvärderingsresultat i konversationshistoriken

Bästa praxis

  • Var specifik med vad som räknas som framgång respektive misslyckande
  • Inkludera gränsfall och exempel i din prompt
  • Använd tydliga, mätbara kriterier när det är möjligt
  • Testa dina prompter med olika konversationsscenarier
  • Kundnöjdhet: “Markera som lyckad om kunden uttrycker nöjdhet eller om deras problem löstes” - Måluppfyllelse: “Markera som lyckad om kunden slutförde den begärda åtgärden (bokning, köp osv.)” - Efterlevnad: “Markera som lyckad om agenten följde alla obligatoriska efterlevnadsrutiner” - Problemhantering: “Markera som lyckad om kundens tekniska problem löstes under samtalet”

Resultatet unknown returneras när LLM:en inte kan avgöra om konversationen lyckades eller misslyckades utifrån transkriptionen. Det händer ofta vid:

  • Ofullständiga konversationer
  • Tvetydiga kundsvar
  • Saknad information i transkriptionen

Övervaka resultat av typen unknown för att identifiera områden där kriterieprompterna kan behöva förfinas.

Användningsområden

Kvalitet i kundsupport

Mät andelen lösta problem, kundnöjdhet och supportkvalitet för att förbättra tjänsteleveransen.

Säljresultat

Följ måluppfyllelse, invändningshantering och konverteringsgrad i säljsamtal.

Övervakning av efterlevnad

Säkerställ att agenter följer obligatoriska rutiner och samlar in nödvändiga bekräftelser på samtycke eller information.

Utbildning och utveckling

Identifiera möjligheter till handledning och mät förbättringar i agenternas resultat över tid.

Felsökning

  • Kontrollera att din prompt är tydlig och specifik
  • Testa med exempelkonversationer för att validera logiken
  • Ta hänsyn till gränsfall i dina utvärderingskriterier
  • Kontrollera om transkriptionen innehåller tillräckligt med information för utvärdering
  • Säkerställ att dina prompter är specifika med vilken information de ska leta efter - Överväg om konversationerna innehåller tillräckligt med sammanhang för utvärdering - Granska transkriptionens kvalitet och fullständighet - Anpassa kriterierna för att hantera vanliga gränsfall
  • Varje utvärderingskriterium ökar bearbetningstiden för konversationsanalysen
  • Komplexa prompter kan ta längre tid att utvärdera
  • Överväg avvägningen mellan omfattande analys och svarstid
  • Övervaka din användning för att optimera utifrån dina specifika behov

Resultat från framgångsutvärdering är tillgängliga via webhooks efter samtal för integrering med externa system och analysplattformar.