ForsideDokumentation

Improvement Agent

Improvement Agent er et AI-drevet værktøj, der hjælper Dem med systematisk at forbedre Deres chatbot's svar baseret på reel kundefeedback.

Oversigt

Når en chat markeres som "needs improvement", analyserer Improvement Agent:

  • Den oprindelige samtale
  • Hvor chatbotten ikke svarede optimalt
  • Hvordan svarene kan forbedres

Adgang til Improvement Agent

Der er tre måder at starte en forbedringssamtale på:

Fra Chat-detaljevisningen

  1. Gå til Chats i dashboardet og åbn en chat
  2. I sektionen "AI Improvement Agent" vil De se feedbackstatus
  3. Hvis chatten er markeret som "Needs Improvement", klik på Improve with AI

Fra Chats-listen

Chats med en negativ bedømmelse, som endnu ikke er blevet forbedret, viser en inline Improve with AI-knap direkte i Chats-listen — klik på den for at gå direkte ind i agenten uden først at åbne chatten.

Fra en Chat Review-e-mail

Hvis De modtager en chat review-e-mail og klikker Needs improvement, føres De direkte ind i en Improvement Agent-session for den pågældende chat. Se Rating chats from email nedenfor.

Forbedringsprocessen

1. Analysér den oprindelige samtale

Venstre panel viser den oprindelige chatconversation:

  • Hver besked er nummereret for nem reference
  • Brugerbeskeder (lilla) og bot-respons (grå) er farvekodede
  • Bot-beskeder har en "Improve"-knap for at vælge dem til forbedring

Smart beskedvalg:

  • Hvis chatten indeholder kun én botbesked, vælges den automatisk på forhånd — agenten ved straks, hvilket svar De ønsker at forbedre.
  • Hvis der er flere botbeskeder, vil agentens introduktion vejlede Dem til at klikke "Improve" ved siden af den specifikke besked, De vil rette. Den valgte besked fremhæves i blåt og en indikatorbjælke vises nær chat-inputfeltet.

2. Chat med Improvement Agent

Centerpanelet er en interaktiv chat med AI Improvement Agenten:

  • Beskriv hvad der ikke var optimalt ved chatten
  • Bed om forbedringsforslag
  • Diskutér alternative svarstrategier
  • Referér til specifikke beskeder fra den oprindelige chat

Eksempel-promptes:

  • "Svaret på spørgsmål 3 var for vagt. Hvordan kunne botten svare bedre?"
  • "Botten forstod ikke produktforespørgslen. Hvad kan vi forbedre?"
  • "Foreslå et bedre fallback-svar, når botten er usikker."

3. Gennemgå og anvend forslag

Højre panel viser de genererede forbedringsforslag:

Suggestion TypeDescription
New FAQ / Update FAQ / Delete FAQOpretter, redigerer eller fjerner en FAQ for at lukke vidensgabet
New / Update / Delete Core InstructionJusterer chatbotens kerneinstruktioner
Update PersonaForfiner chatbotens persona-beskrivelse

For hvert forslag kan De:

  • Simulate: Teste hvordan botten ville svare med forbedringen (brug Simulate All for at køre simuleringen for alle foreliggende forslag på én gang)
  • Apply: Anvende forbedringen
  • Reject: Forkaste forslaget

Test-simulering

Før De anvender et forslag, kan De simulere det:

  1. Klik på Simulate på et forslag (eller Simulate All for at teste alle foreliggende forslag)
  2. Simuleringen viser:
    • Det oprindelige bruger-spørgsmål
    • Det simulerede svar med ændringen anvendt
    • Det oprindelige bot-svar forbliver synligt i venstre panel til sammenligning
  3. Bedøm det simulerede svar:
    • Perfect!: Agenten bekræfter, at forslaget er klar — anvend det med Apply-knappen
    • Almost good: Agenten forfiner forslaget baseret på, hvad der stadig mangler
    • Not good: Agenten spørger, hvad der var galt med det simulerede svar, så det kan omarbejdes

At bedømme en simulering anvender eller forkaster aldrig forslaget af sig selv. Brug Apply- og Reject-knapperne på forslaget for at træffe den endelige beslutning.

Afslutte en session

Når De har behandlet hvert forslag, klik på Complete Improvement i forslagspanelet:

  • Knappen forbliver deaktiveret, indtil hvert forslag er blevet anvendt eller forkastet
  • Ved afslutning returneres De til Chats-listen
  • Chatten forsynes derefter med et mærke som Improved, og dens detaljevisning viser et View Improvement-link tilbage til sessionen

Feedback-workflow

Bedømmelse af chats

Før Improvement Agent kan bruges, skal en chat være bedømt:

  1. Åbn en chat
  2. I sektionen "AI Improvement Agent":
    • Good (Thumbs up): Marker som positivt eksempel
    • Needs Work (Thumbs down): Marker chatten som værende behov for forbedring og genberegner confidence-scoren — en Improve with AI-knap vises herefter for at starte agenten
    • Reviewed (Check): Marker chatten som gennemgået/afvist uden at bedømme den god eller dårlig (påvirker ikke confidence-scoren og udløser ikke e-mails eller forbedringssessions)

Når De markerer en chat som Needs Work, klassificerer AI automatisk, hvor alvorligt problemet var — dette bestemmer, hvor meget bedømmelsen påvirker Deres confidence-score (se Confidence score nedenfor).

Bedømmelser er ikke endelige: chats markeret som Good eller Reviewed kan genåbnes senere med knappen Mark as needs improvement på chat-detaljesiden. Confidence-scoren genberegnes og Improvement Agent bliver tilgængelig igen.

Bedømmelse af chats fra e-mail

De kan også bedømme chats direkte fra de chat review-e-mails, De modtager, uden at åbne dashboardet. Hver e-mail viser samtalen og spørger "Was this a good response?" med to knapper:

  • Yes, good answer: Marker chatten som positiv og fører Dem til en succes-side, der viser Deres opdaterede confidence-score — inklusive hvordan scoren for den berørte svarkategori ændrede sig
  • Needs improvement: Marker chatten som negativ og fører Dem direkte ind i en Improvement Agent-session for den pågældende chat

Bedømmelseslinkene i review-e-mails udløber efter 7 dage. De kan altid bedømme chatten senere fra dashboardet.

Brug af læringsfasen

I løbet af læringsfasen vil De automatisk blive bedt om at bedømme chats — bedømmelsesanmodninger ankommer som chat review-e-mails. Dette accelererer væsentligt forbedringen af Deres chatbot.

Confidence Score

Confidence-scoren måler, hvor pålideligt Deres chatbot svarer, baseret på Deres bedømmelser. De finder den i fanen Confidence i Deres chatbots indstillinger.

Scoring pr. kategori

Samtaler grupperes i svarkategorier, og hver kategori får sin egen confidence-score ved siden af den globale score:

  • Kategorier oprettes automatisk, efterhånden som chats sker
  • De kan tilføje, omdøbe eller slette kategorier i Confidence-fanen (chats fra en slettet kategori flyttes til en automatisk fallback-kategori)

Alvorligheden af negative bedømmelser

Hver thumbs-down klassificeres automatisk af AI i ét af fire alvorlighedsniveauer, som afgør, hvor meget bedømmelsen sænker confidence-scoren:

  • Minor issue
  • Moderate issue
  • Major issue
  • Critical issue

Chat-detaljesiden viser den tildelte alvorlighed, den anvendte scorejustering og årsagen. Hvis De er uenig i klassificeringen, brug dropdown-menuen Override severity for at ændre den — confidence-scoren genberegnes med det samme.

Chat review-e-mails

I Confidence-fanen styrer De, hvor ofte De modtager chat review-e-mails:

  • Toggleknappen Chat Review Emails aktiverer eller deaktiverer review-e-mails fuldstændigt
  • For hver kategori kan De indstille dens egen e-mail-frekvens: After every chat, Every X hours, Daily, Weekly, eller Never

Dette lader Dem holde nøje øje med svage kategorier, mens De dæmper kategorier, der allerede klarer sig godt.

Nulstil session

Hvis De vil starte en ny forbedringssamtale:

  1. Klik på Restart i headeren
  2. Bekræft nulstillingen
  3. Alle beskeder og foreliggende forslag slettes — ændringer, De allerede har anvendt, bevares

Tilgængelighed

Improvement Agent er tilgængelig på Professional-planen og derover, og er også inkluderet under den 14-dages Starter Pro-prøveperiode.

Bedste praksis

  1. Vær specifik: Jo mere præcist De beskriver problemet, desto bedre bliver forslagene
  2. Giv kontekst: Nævn hvilket svar De ville have forventet
  3. Simulér før anvendelse: Test altid forslagene først
  4. Brug regelmæssigt: Ugentlige forbedringssessions holder Deres bot opdateret

Næste skridt