Analys
Följ agenternas prestanda, jämför experiment och hitta möjligheter till optimering i hela din arbetsyta
Översikt
Analyspanelen ger detaljerade realtidsmått för dina konversationsagenter. Du kan dela upp prestandan över flera dimensioner — per agent, gren, tidsperiod, språk, samtalstyp, modell med mera — för att förstå exakt hur dina agenter presterar i produktion.
Analysdata drivs av en högpresterande kolumndatabas, vilket möjliggör snabba frågor över stora mängder konversationsdata med flexibel filtrering och gruppering.
För teman på konversationsnivå kan du använda Spotlight för att granska realtidsinsikter, sentimentanalys, ämnesupptäckt och konversationerna bakom varje ämne.
Öppna analys
Gå till fliken Analys i din agentpanel. Du kan se mått för hela din arbetsyta eller filtrera på en specifik agent.
När du kör experiment kan du gå direkt till grenfiltrerad analys från agentens konfigurationssida med knappen Visa analys. Agent- och grenfiltren tillämpas då i förväg så att du kan jämföra varianternas prestanda direkt.
Tidsintervall och detaljeringsgrad
Välj tidsintervall för din analys med datumväljaren högst upp på panelen. Du kan välja bland förinställda intervall eller ange ett eget tidsfönster.
Panelen justerar automatiskt detaljeringsgraden för tidsseriediagram utifrån det valda intervallet — timvisa intervall för korta tidsperioder och dagliga eller veckovisa för längre perioder.
Tillgängliga mått
Konversationer
- Antal samtal — totalt antal konversationer under den valda perioden
- Total längd — sammanlagd konversationstid
- Genomsnittlig längd — genomsnittlig konversationslängd
- Total kostnad — totala utgifter för alla konversationer
- Genomsnittlig kostnad — genomsnittlig kostnad per konversation
Prestanda
- Agentens svarslatens — tid för agenten att svara (median och percentiler)
- Felfrekvens — andel konversationer med fel
- Feluppdelning — fel kategoriserade efter typ (verktygsfel, LLM-fel, anslutningsproblem)
Framgångsutvärdering
Om du har konfigurerat utvärderingskriterier visar panelen frekvenser för lyckat, misslyckat och okänt för varje kriterium. Detta är det främsta sättet att mäta affärsresultat mellan experiment.
Datainsamling
Om du har konfigurerat datainsamling finns insamlade värden tillgängliga som filtrerbara dimensioner i panelen.
Språkfördelning
Se fördelningen av konversationer mellan språk. Det är användbart för att förstå flerspråkig användning och jämföra agenters prestanda mellan olika språk.
Aktiva samtal
Panelen visar det aktuella antalet aktiva samtal i realtid. Detta återspeglar pågående sessioner i din arbetsyta och är också tillgängligt via API:et.
Filtrering
Begränsa analysvyn genom att tillämpa filter på valfria kombinationer av dimensioner:
Gruppering
Gruppera mått efter valfria filtrerbara dimensioner för att dela upp sammanlagda siffror.
Till exempel:
- Gruppera efter gren för att jämföra experimentvarianter sida vid sida
- Gruppera efter språk för att se hur agenter presterar mellan språk
- Gruppera efter LLM-modell för att jämföra modellernas prestanda och kostnad
- Gruppera efter samtalstyp för att förstå skillnader mellan inkommande och utgående samtal
Du kan kombinera flera grupperingsdimensioner för en djupare analys.
Workflow-analys
För agenter med ett workflow lägger fliken Workflow i analyspanelen användningsmått direkt på workflow-diagrammet. Välj en agent som använder ett workflow för att aktivera diagramvyn — sedan kan du visualisera konversationsflöde och trafikvolym direkt på workflow-ytan, med detaljerat in- och utflöde för varje nod.
Nodmått
Klicka på en nod i workflow-diagrammet för att öppna inspektören och se:
- Poster — hur många konversationer som gick in i noden under det valda tidsintervallet
- Genomsnittlig tid — hur länge noden i genomsnitt var aktiv för dessa poster
- Avslut — hur många konversationer som avslutades medan noden var aktiv
- Inkommande och utgående flöde — fördelningen av konversationer som kommer in från varje uppströmskant och lämnar via varje nedströmskant
Gå ner på konversationsnivå
Klicka på Se konversationer i nodinspektören för att gå till sidan med konversationshistorik filtrerad till den noden. Detta tillämpar filtret Nod angiven — ett historikfilter avgränsat till en specifik agent som visar varje konversation vars transkript gick in i den valda workflow-noden minst en gång.
Filtret Nod angiven är också tillgängligt direkt från sidan med konversationshistorik.
Använd analys med experiment
Analys är det främsta verktyget för att mäta resultat från experiment. Rekommenderat arbetssätt:
Du kan gå direkt till den här vyn från agentens konfigurationssida genom att klicka på knappen Visa analys bredvid inställningarna för trafikdistribution. Detta tillämpar rätt agent- och grenfilter i förväg.