HomeDocumentatie

Improvement Agent

De Improvement Agent is een door AI aangedreven hulpmiddel dat u helpt de antwoorden van uw chatbot systematisch te verbeteren op basis van echte klantfeedback.

Overzicht

Wanneer een chat wordt gemarkeerd als "needs improvement", analyseert de Improvement Agent:

  • Het oorspronkelijke gesprek
  • Waar de chatbot niet optimaal heeft geantwoord
  • Hoe de antwoorden verbeterd kunnen worden

Toegang tot de Improvement Agent

Er zijn drie manieren om een verbeteringssessie te starten:

Vanuit de Chat Detailweergave

  1. Ga naar Chats in het dashboard en open een chat
  2. In de sectie "AI Improvement Agent" ziet u de feedbackstatus
  3. Als de chat is gemarkeerd als "Needs Improvement", klik op Improve with AI

Vanuit de Chats-lijst

Chats met een negatieve beoordeling die nog niet zijn verbeterd, tonen een inline Improve with AI-knop direct in de Chats-lijst — klik erop om rechtstreeks in de agent te springen zonder de chat eerst te openen.

Vanuit een Chat Review-e-mail

Als u een chat review-e-mail ontvangt en op Needs improvement klikt, wordt u direct naar een Improvement Agent-sessie voor die chat geleid. Zie Rating chats from email hieronder.

Het Verbeteringsproces

1. Analyseer het Oorspronkelijke Gesprek

Het linker paneel toont het oorspronkelijke chatgesprek:

  • Elk bericht is genummerd voor eenvoudige referentie
  • Gebruikersberichten (paars) en botantwoorden (grijs) zijn van kleur voorzien
  • Botberichten hebben een "Improve"-knop om ze te selecteren voor verbetering

Slimme Berichtselectie:

  • Als de chat maar één botbericht bevat, wordt dit automatisch vooraf geselecteerd — de agent weet meteen welk antwoord u wilt verbeteren.
  • Als er meerdere botberichten zijn, zal de begroeting van de agent u begeleiden om naast het specifieke bericht dat u wilt corrigeren op "Improve" te klikken. Het geselecteerde bericht wordt blauw gemarkeerd en er verschijnt een indicatorbalk bij de chatinvoer.

2. Chat met de Improvement Agent

Het middelste paneel is een interactieve chat met de AI Improvement Agent:

  • Beschrijf wat niet optimaal was aan de chat
  • Vraag om verbetersuggesties
  • Bespreek alternatieve responsstrategieën
  • Verwijs naar specifieke berichten uit het oorspronkelijke gesprek

Voorbeeldprompts:

  • "The answer to question 3 was too vague. How could the bot respond better?"
  • "The bot didn't understand the product inquiry. What can we improve?"
  • "Suggest a better fallback response when the bot is uncertain."

3. Bekijk en Pas Suggesties Toe

Het rechter paneel toont de gegenereerde verbetersuggesties:

SuggestietypeBeschrijving
New FAQ / Update FAQ / Delete FAQMaakt een FAQ aan, bewerkt of verwijdert er een om de kenniskloof te dichten
New / Update / Delete Core InstructionPast de kerninstructies van uw chatbot aan
Update PersonaVerfijnt de beschrijving van de persona van de chatbot

Voor elke suggestie kunt u:

  • Simulate: Testen hoe de bot zou reageren met de verbetering (gebruik Simulate All om de simulatie voor alle openstaande suggesties tegelijk uit te voeren)
  • Apply: De verbetering toepassen
  • Reject: De suggestie verwerpen

Testsimulatie

Voordat u een suggestie toepast, kunt u deze simuleren:

  1. Klik op Simulate bij een suggestie (of Simulate All om alle openstaande suggesties te testen)
  2. De simulatie toont:
    • De oorspronkelijke gebruikersvraag
    • De gesimuleerde reactie met de wijziging toegepast
    • Het oorspronkelijke botantwoord blijft zichtbaar in het linker paneel ter vergelijking
  3. Beoordeel het gesimuleerde antwoord:
    • Perfect!: De agent bevestigt dat de suggestie klaar is — pas deze toe met de Apply-knop
    • Almost good: De agent verfijnt de suggestie op basis van wat nog ontbreekt
    • Not good: De agent vraagt wat er verkeerd was aan het gesimuleerde antwoord zodat hij de suggestie kan herwerken

Het beoordelen van een simulatie past de suggestie zelf nooit toe of verwirft deze. Gebruik de Apply- en Reject-knoppen op de suggestie om de definitieve beslissing te nemen.

Een Sessie Voltooien

Zodra u met elke suggestie hebt afgerekend, klikt u op Complete Improvement in het suggestiepaneel:

  • De knop blijft uitgeschakeld totdat elke suggestie is toegepast of verworpen
  • Na voltooiing wordt u teruggeleid naar de Chats-lijst
  • De chat krijgt vervolgens het label Improved, en de detailweergave toont een View Improvement-link terug naar de sessie

Feedbackworkflow

Chats Beoordelen

Voordat de Improvement Agent kan worden gebruikt, moet een chat worden beoordeeld:

  1. Open een chat
  2. In de sectie "AI Improvement Agent":
    • Good (duim omhoog): Markeert als positief voorbeeld
    • Needs Work (duim omlaag): Markeert de chat als verbeteringswaardig en herberekent de confidentiescore — er verschijnt dan een Improve with AI-knop om de agent te starten
    • Reviewed (vinkje): Markeert de chat als beoordeeld/g dismissed zonder het als goed of slecht te bestempelen (heeft geen effect op de confidentiescore en activeert geen e-mails of verbeteringssessies)

Wanneer u een chat markeert als Needs Work, classificeert de AI automatisch hoe ernstig het probleem was — dit bepaalt hoeveel de beoordeling uw confidentiescore beïnvloedt (zie Confidence score hieronder).

Beoordelingen zijn niet definitief: chats gemarkeerd als Good of Reviewed kunnen later opnieuw worden geopend met de knop Mark as needs improvement op de chatdetailpagina. De confidentiescore wordt onmiddellijk herberekend en de Improvement Agent wordt weer beschikbaar.

Chats Beoordelen vanuit E-mail

U kunt chats ook rechtstreeks beoordelen vanuit de chat review-e-mails die u ontvangt, zonder het dashboard te openen. Elke e-mail toont het gesprek en vraagt "Was this a good response?" met twee knoppen:

  • Yes, good answer: Markeert de chat als positief en brengt u naar een succespagina met uw bijgewerkte confidentiescore — inclusief hoe de score van de getroffen antwoordcategorie is veranderd
  • Needs improvement: Markeert de chat als negatief en brengt u rechtstreeks in een Improvement Agent-sessie voor die chat

De beoordelingslinks in review-e-mails verlopen na 7 dagen. U kunt de chat altijd later vanuit het dashboard beoordelen.

Gebruik van de Learning Phase

Tijdens de learning phase wordt u automatisch gevraagd chats te beoordelen — beoordelingsverzoeken komen binnen als chat review-e-mails. Dit versnelt het verbeteringsproces van uw chatbot aanzienlijk.

Confidence Score

De confidentiescore meet hoe betrouwbaar uw chatbot antwoorden geeft, op basis van uw beoordelingen. U vindt deze in het Confidence-tabblad van de instellingen van uw chatbot.

Per-categorie scoring

Gesprekken worden gegroepeerd in antwoordcategorieën en elke categorie krijgt een eigen confidentiescore naast de globale score:

  • Categorieën worden automatisch aangemaakt naarmate chats plaatsvinden
  • U kunt categorieën toevoegen, hernoemen of verwijderen in het Confidence-tabblad (chats uit een verwijderde categorie worden verplaatst naar een automatische fallbackcategorie)

Ernst van negatieve beoordelingen

Elke duim omlaag wordt automatisch door AI geclassificeerd in een van vier ernstniveaus die bepalen hoeveel de beoordeling de confidentiescore verlaagt:

  • Minor issue
  • Moderate issue
  • Major issue
  • Critical issue

De chatdetailpagina toont de toegewezen ernst, de toegepaste scoreaanpassing en de reden. Als u het niet eens bent met de classificatie, gebruik dan het dropdownmenu Override severity om deze te wijzigen — de confidentiescore wordt onmiddellijk herberekend.

Chat Review-e-mails

In het Confidence-tabblad regelt u hoe vaak u chat review-e-mails ontvangt:

  • De schakelaar Chat Review Emails schakelt review-e-mails volledig in of uit
  • Voor elke categorie kunt u de eigen e-mailfrequentie instellen: After every chat, Every X hours, Daily, Weekly, of Never

Dit stelt u in staat zwakke categorieën goed in de gaten te houden terwijl u categorieën die al goed presteren dempt.

Sessie Resetten

Als u een nieuwe verbeteringssessie wilt starten:

  1. Klik op Restart in de header
  2. Bevestig de reset
  3. Alle berichten en openstaande suggesties worden verwijderd — wijzigingen die u al hebt toegepast, blijven bewaard

Beschikbaarheid

De Improvement Agent is beschikbaar op het Professional-plan en hoger, en is ook inbegrepen tijdens de 14-daagse Starter Pro-trial.

Best Practices

  1. Wees specifiek: Hoe preciezer u het probleem beschrijft, hoe beter de suggesties
  2. Geef context: Vermeld welk antwoord u had verwacht
  3. Simuleer voordat u toepast: Test suggesties altijd eerst
  4. Gebruik regelmatig: Wekelijkse verbetersessies houden uw bot up-to-date

Volgende stappen