Improvement Agent
Improvement Agent je nástroj využívající AI, který vám pomůže systematicky zlepšovat odpovědi vašeho chatbota na základě skutečné zpětné vazby od zákazníků.
Přehled
Když je chat označen jako „needs improvement“, Improvement Agent analyzuje:
- Původní konverzaci
- Místa, kde chatbot neodpověděl optimálně
- Jak lze odpovědi vylepšit
Přístup k Improvement Agent
Existují tři způsoby, jak zahájit relaci zlepšování:
Z detailu chatu
- Přejděte do Konverzace v dashboardu a otevřete chat
- V sekci "AI Improvement Agent" uvidíte stav zpětné vazby
- Pokud je chat označen jako "Needs Improvement", klikněte na Vylepšit pomocí AI
Ze seznamu chatů
Chaty s negativním hodnocením, které ještě nebyly vylepšeny, zobrazují přímo v seznamu Chats inline tlačítko Vylepšit pomocí AI — kliknutím se dostanete rovnou do agenta, aniž byste nejprve otevírali chat.
Z e-mailu pro revizi chatu
Pokud obdržíte e-mail s revizí chatu a kliknete na Vyžaduje vylepšení, dostanete se přímo do relace Improvement Agent pro tento chat. Viz Rating chats from email níže.
Proces zlepšování
1. Analyzovat původní konverzaci
V levém panelu se zobrazuje původní chatová konverzace:
- Každá zpráva je očíslovaná pro snadné odkazy
- Uživatelské zprávy (fialové) a odpovědi bota (šedé) jsou barevně odlišeny
- U zpráv bota je tlačítko "Improve" pro jejich vybrání k vylepšení
Chytrý výběr zpráv:
- Pokud chat obsahuje pouze jednu botovou zprávu, je automaticky předvybrána — agent hned ví, kterou odpověď chcete vylepšit.
- Pokud je v chatu více botových zpráv, úvodní zpráva agenta vás navede, abyste klikli na "Improve" vedle konkrétní zprávy, kterou chcete opravit. Vybraná zpráva je zvýrazněna modře a vedle vstupu do chatu se objeví indikační lišta.
2. Chat s Improvement Agent
Střední panel je interaktivní chat s AI Improvement Agentem:
- Popište, co v chatu nebylo optimální
- Požádejte o návrhy na vylepšení
- Diskutujte alternativní strategie odpovědí
- Odkazujte se na konkrétní zprávy z původního chatu
Příkladové výzvy:
- "Odpověď na otázku 3 byla příliš vágní. Jak by mohl bot lépe odpovědět?"
- "Bot nepochopil dotaz ohledně produktu. Co můžeme zlepšit?"
- "Navrhněte lepší fallback odpověď, když si bot není jistý."
3. Přezkoumat a použít návrhy
V pravém panelu se zobrazují vygenerované návrhy vylepšení:
| Suggestion Type | Description |
|---|---|
| New FAQ / Update FAQ / Delete FAQ | Vytvoří, upraví nebo odstraní FAQ, aby vyplnilo mezeru v know-how |
| New / Update / Delete Core Instruction | Upraví základní instrukce vašeho chatbota |
| Aktualizovat personu | Upřesní popis persony chatbota |
U každého návrhu můžete:
- Simulovat: Otestovat, jak by bot reagoval s navrhovanou změnou (použijte Simulovat vše pro spuštění simulace pro všechny čekající návrhy najednou)
- Použít: Aplikovat vylepšení
- Reject: Návrh zamítnout
Testovací simulace
Před aplikací návrhu jej můžete simulovat:
- Klikněte na Simulovat u návrhu (nebo Simulovat vše pro otestování všech čekajících návrhů)
- Simulace ukáže:
- Původní uživatelskou otázku
- Simulovanou odpověď se změnou aplikovanou
- Původní botova odpověď zůstává v levém panelu viditelná pro srovnání
- Ohodnoťte simulovanou odpověď:
- Perfektní!: Agent potvrzuje, že návrh je připraven — aplikujte jej tlačítkem Použít
- Skoro dobré: Agent upraví návrh na základě toho, co stále chybí
- Není dobré: Agent se zeptá, co bylo se simulovanou odpovědí špatně, aby mohl návrh přepracovat
Hodnocení simulace samo o sobě návrh neaplikuje ani nezamítá. Použijte tlačítka Použít a Reject u návrhu pro konečné rozhodnutí.
Dokončení relace
Jakmile vyřešíte každý návrh, klikněte v panelu návrhů na Dokončit zlepšení:
- Tlačítko zůstane zakázané, dokud není každý návrh aplikován nebo zamítnut
- Po dokončení budete vráceni do seznamu Chats
- Chat bude poté označen jako Vylepšeno a jeho detailní zobrazení ukáže odkaz Zobrazit vylepšení zpět na relaci
Workflow zpětné vazby
Hodnocení chatů
Než bude možné použít Improvement Agent, musí být chat ohodnocen:
- Otevřete chat
- V sekci "AI Improvement Agent":
- Dobré (Palec nahoru): Označí jako pozitivní příklad
- Vyžaduje vylepšení (Palec dolů): Označí chat jako needing improvement a přepočítá skóre důvěry — poté se objeví tlačítko Vylepšit pomocí AI pro spuštění agenta
- Zkontrolováno (Zaškrtnutí): Označí chat jako přezkoumaný/odmítnutý bez hodnocení jako dobrý nebo špatný (neovlivní skóre důvěry a nespustí e-maily ani relace zlepšování)
Když označíte chat jako Vyžaduje vylepšení, AI automaticky klasifikuje, jak vážný problém byl — to určuje, jak moc hodnocení ovlivní vaše skóre důvěry (viz Confidence score níže).
Hodnocení nejsou konečná: chaty označené jako Good nebo Reviewed mohou být později znovu otevřeny tlačítkem Označit jako vyžadující zlepšení na stránce detailu chatu. Skóre důvěry se znovu přepočítá a Improvement Agent bude opět dostupný.
Hodnocení chatů z e-mailu
Chaty můžete hodnotit také přímo z e-mailů s revizí chatu, které obdržíte, bez otevírání dashboardu. Každý e-mail ukazuje konverzaci a ptá se "Was this a good response?" se dvěma tlačítky:
- Ano, dobrá odpověď: Označí chat jako pozitivní a přesměruje vás na stránku úspěchu zobrazující vaše aktualizované skóre důvěry — včetně toho, jak se změnilo skóre příslušné kategorie odpovědí
- Vyžaduje vylepšení: Označí chat jako negativní a vezme vás přímo do relace Improvement Agent pro daný chat
Odkazy pro hodnocení v e-mailech s revizí vyprší po 7 dnech. Chat můžete vždy později ohodnotit z dashboardu.
Použití fáze učení
Během fáze učení budete automaticky vyzýváni k hodnocení chatů — žádosti o hodnocení přicházejí jako e-maily s revizí chatu. To výrazně urychlí zlepšování vašeho chatbota.
Skóre důvěry (Confidence Score)
Skóre důvěry shrnuje vaše recenze konverzací na škále 0–100. Najdete jej v záložce Důvěra v nastavení vašeho chatbota. Slouží jako pomůcka pro kontrolu kvality, nikoli jako záruka faktické správnosti nebo hvězdičkové hodnocení pro zákazníky.
Skórování podle kategorií
Konverzace jsou seskupeny do kategorií odpovědí a každá kategorie získá své vlastní skóre důvěry spolu s globálním skóre:
Každá kategorie využívá až 20 nedávných ohodnocených recenzí a jejich úprav, včetně závažnosti negativních recenzí. Globální skóre je průměr kategorií, které mají recenzované konverzace. Zkontrolováno potvrzení bez pozitivního nebo negativního hodnocení nepřispívají jako ohodnocená recenze.
- Kategorie se vytvářejí automaticky, jak se objevují chaty
- Kategorie můžete přidávat, přejmenovávat nebo mazat v Confidence záložce (chaty z odstraněné kategorie jsou přesunuty do automatické výchozí kategorie)
- Jednotlivý chat můžete také ručně přesunout do jiné kategorie z detailu toho chatu, nezávisle na automatickém zařazení
Závažnost negativních hodnocení
Každé thumbs-down je AI automaticky zařazeno do jedné ze čtyř úrovní závažnosti, které určují, o kolik hodnocení sníží skóre důvěry:
- Minor issue
- Moderate issue
- Major issue
- Critical issue
Stránka detailu chatu ukazuje přiřazenou závažnost, aplikovanou úpravu skóre a důvod. Pokud s klasifikací nesouhlasíte, použijte rozbalovací seznam Override severity pro její změnu — skóre důvěry se ihned přepočítá.
Notifikace
Dosažení nakonfigurovaného prahu za dostatečného počtu recenzí může spustit návrh na dokončení učení. To fázi učení automaticky neukončí. Zkontrolujte odpovědi bota a sami zvolte Ukončit fázi učení, až budete připraveni.
Chatbots → Obecné → Oznámení
Získejte celé konverzace e-mailem. Spravujte příjemce, typ e-mailu a frekvenci zde.
- Přidat příjemce: E-mailová adresa.
- Typ e-mailu: Pouze přepis / S revizí.
- Frekvence: Každý chat, Hodinově, Denně, Týdně.
- Aktivní → Uložit změny.
Chatové přepisy jsou zahrnuty ve všech plánech. Tlačítka pro revizi vyžadují plán s chat reviewy.
Nové chaty pouze po aktivaci. Denně v 09:00 UTC; týdenně v pondělí v 09:00 UTC.
Reset relace
Pokud chcete zahájit novou relaci zlepšování:
- Klikněte na Restartovat v záhlaví
- Potvrďte reset
- Všechny zprávy a čekající návrhy jsou smazány — změny, které jste již aplikovali, zůstanou zachovány
Dostupnost
Improvement Agent je dostupný v Professional plánu a výše a je také zahrnut v 14denní zkušební verzi Starter Pro.
Best Practices
- Buďte konkrétní: Čím přesněji popíšete problém, tím lepší budou návrhy
- Poskytněte kontext: Uveďte, jakou odpověď byste očekávali
- Simulujte před aplikací: Vždy nejprve otestujte návrhy
- Používejte pravidelně: Týdenní relace zlepšování udržují vašeho bota aktuálního