Improvement Agent
Improvement Agent je nástroj poháňaný AI, ktorý vám pomáha systematicky zlepšovať odpovede vášho chatbota na základe skutočnej spätnej väzby od zákazníkov.
Prehľad
Keď je chat označený ako „needs improvement“ (potrebuje zlepšenie), Improvement Agent analyzuje:
- Pôvodnú konverzáciu
- Miesta, kde chatbot neodpovedal optimálne
- Ako je možné odpovede zlepšiť
Prístup k Improvement Agent
Sú tri spôsoby, ako začať reláciu zlepšovania:
Zobrazenie detailu chatu
- Prejdite do Chats v dashboarde a otvorte chat
- V sekcii "AI Improvement Agent" uvidíte stav spätnej väzby
- Ak je chat označený ako "Needs Improvement", kliknite na Improve with AI
Zoznam chatov
Chaty s negatívnym hodnotením, ktoré ešte neboli zlepšené, zobrazujú priamo v zozname chatov inline tlačidlo Improve with AI — kliknite naň a prejdete priamo do agenta bez potreby otvárania detailu chatu.
Z recenzného e-mailu chatu
Ak obdržíte e-mail s recenziou chatu a kliknete na Needs improvement, budete presunutí priamo do relácie Improvement Agent pre daný chat. Viac v časti Rating chats from email nižšie.
Proces zlepšovania
1. Analyzujte pôvodnú konverzáciu
V ľavom paneli vidíte pôvodnú konverzáciu chatu:
- Každá správa je očíslovaná pre jednoduchú orientáciu
- Správy používateľa (fialové) a odpovede bota (šedé) sú farebne odlíšené
- Botové správy majú tlačidlo "Improve" na ich výber na zlepšenie
Inteligentný výber správ:
- Ak chat obsahuje len jednu botovú správu, tá je automaticky predvybraná — agent takmer okamžite pozná, ktorú odpoveď chcete vylepšiť.
- Ak je v chate viac botových správ, úvodné privítanie agenta vás navrhne kliknúť na "Improve" vedľa konkrétnej správy, ktorú chcete upraviť. Vybraná správa je zvýraznená modrou farbou a pri vstupe do chatu sa zobrazí indikátor pri poli na zadanie správy.
2. Chatujte s Improvement Agent
Stredný panel predstavuje interaktívny chat s AI Improvement Agent:
- Opíšte, čo nebolo na konverzácii optimálne
- Požiadajte o návrhy na zlepšenie
- Prediskutujte alternatívne stratégie odpovedí
- Odkazujte sa na konkrétne správy z pôvodného chatu
Príkladové výzvy:
- „Odpoveď na otázku 3 bola príliš nepresná. Ako by mohol bot odpovedať lepšie?"
- „Bot nepochopil dopyt týkajúci sa produktu. Čo môžeme vylepšiť?"
- „Navrhnite lepšiu fallback odpoveď, keď je bot neistý."
3. Prejdite a použite návrhy
Pravý panel zobrazuje vygenerované návrhy na zlepšenie:
| Typ návrhu | Popis |
|---|---|
| New FAQ / Update FAQ / Delete FAQ | Vytvorí, upraví alebo odstráni FAQ na zacelenie medzery v znalostiach |
| New / Update / Delete Core Instruction | Upraví základné inštrukcie pre váš chatbot |
| Update Persona | Zlepšuje popis persony chatbota |
Pre každý návrh môžete:
- Simulate: Otestovať, ako by bot odpovedal s aplikovanou zmenou (použite Simulate All na spustenie simulácie pre všetky čakajúce návrhy naraz)
- Apply: Aplikovať návrh
- Reject: Odmietnuť návrh
Testovací simulátor
Pred aplikovaním návrhu ho môžete simulovať:
- Kliknite na Simulate pri návrhu (alebo Simulate All, aby ste otestovali všetky čakajúce návrhy)
- Simulácia zobrazuje:
- Pôvodnú používateľskú otázku
- Simulovanú odpoveď s aplikovanou zmenou
- Pôvodná botová odpoveď zostáva viditeľná v ľavom paneli na porovnanie
- Ohodnoťte simulovanú odpoveď:
- Perfect!: Agent potvrdí, že návrh je pripravený — aplikujte ho tlačidlom Apply
- Almost good: Agent upraví návrh podľa toho, čo ešte chýba
- Not good: Agent sa spýta, čo bolo so simulovanou odpoveďou zlé, aby mohol návrh prerobiť
Ohodnotenie simulácie samo o sebe nikdy návrh neaplikuje ani neodmietne. Na konečné rozhodnutie použite tlačidlá Apply a Reject na návrhu.
Dokončenie relácie
Keď ste vyriešili všetky návrhy, kliknite v paneli s návrhmi na Complete Improvement:
- Tlačidlo zostane neaktívne, kým nie sú všetky návrhy aplikované alebo odmietnuté
- Po dokončení sa vrátite do zoznamu Chats
- Chat potom dostane označenie Improved a v detaile chatu sa zobrazí odkaz View Improvement späť na reláciu
Workflow spätnej väzby
Hodnotenie chatov
Pred použitím Improvement Agent musí byť chat ohodnotený:
- Otvorte chat
- V sekcii "AI Improvement Agent":
- Good (palec hore): Označí ako pozitívny príklad
- Needs Work (palec dole): Označí chat ako vyžadujúci zlepšenie a prepočíta confidence score — následne sa zobrazí tlačidlo Improve with AI na spustenie agenta
- Reviewed (začiarknutie): Označí chat ako preskúmaný/odmietnutý bez zaradiť ho medzi dobré alebo zlé (neovplyvňuje confidence score a nespúšťa e-maily ani relácie zlepšovania)
Keď označíte chat ako Needs Work, AI automaticky klasifikuje závažnosť problému — to určuje, ako veľmi hodnotenie ovplyvní váš confidence score (pozri Confidence score nižšie).
Hodnotenia nie sú konečné: chaty označené ako Good alebo Reviewed je možné neskôr znovu otvoriť pomocou tlačidla Mark as needs improvement na stránke detailu chatu. Confidence score sa okamžite prepočíta a Improvement Agent bude opäť dostupný.
Hodnotenie chatov z e-mailu
Chat môžete ohodnotiť aj priamo z e-mailov s recenziami chatu, ktoré dostávate, bez otvárania dashboardu. Každý e-mail zobrazuje konverzáciu a pýta sa "Was this a good response?" s dvoma tlačidlami:
- Yes, good answer: Označí chat ako pozitívny a presmeruje vás na úspešnú stránku zobrazujúcu váš aktualizovaný confidence score — vrátane toho, ako sa zmenil skóre v príslušnej kategórii odpovedí
- Needs improvement: Označí chat ako negatívny a zoberie vás priamo do relácie Improvement Agent pre daný chat
Odkazy na hodnotenie v recenzných e-mailoch expirova po 7 dňoch. Chat môžete vždy ohodnotiť neskôr z dashboardu.
Používanie learning phase
Počas learning phase budete automaticky vyzývaní na hodnotenie chatov — požiadavky na hodnotenie prichádzajú vo forme e-mailov s recenziou chatu. To výrazne urýchľuje zlepšovanie vášho chatbota.
Confidence Score
Confidence score meria, ako spoľahlivo váš chatbot odpovedá, na základe vašich hodnotení. Nájdete ho v karte Confidence v nastaveniach vášho chatbota.
Skórovanie podľa kategórie
Konverzácie sú zoskupené do kategórií odpovedí a každá kategória má vlastné confidence skóre spolu s globálnym skóre:
- Kategórie sa vytvárajú automaticky počas priebehu chatov
- Môžete pridávať, premenovávať alebo mazať kategórie v karte Confidence (chaty z vymazanej kategórie sa presunú do automatickej fallback kategórie)
Závažnosť negatívnych hodnotení
Každý palec dole AI automaticky klasifikuje do jednej zo štyroch úrovní závažnosti, ktoré určujú, o koľko hodnotenie zníži confidence score:
- Minor issue
- Moderate issue
- Major issue
- Critical issue
Stránka detailu chatu zobrazuje priradenú závažnosť, použitú úpravu skóre a dôvod. Ak s klasifikáciou nesúhlasíte, použite rozbaľovací zoznam Override severity na zmenu — confidence score sa prepočíta okamžite.
Recenzné e-maily o chatoch
V karte Confidence môžete ovládať, ako často dostávate recenzné e-maily o chatoch:
- Prepínač Chat Review Emails povoľuje alebo zakazuje recenzné e-maily úplne
- Pre každú kategóriu môžete nastaviť vlastnú frekvenciu e-mailov: After every chat, Every X hours, Daily, Weekly, alebo Never
To vám umožní dôkladne sledovať slabé kategórie a zároveň utlmiť kategórie, ktoré už fungujú dobre.
Reset relácie
Ak chcete začať novú reláciu zlepšovania:
- Kliknite na Restart v hlavičke
- Potvrďte reset
- Všetky správy a čakajúce návrhy sa vymažú — zmeny, ktoré ste už aplikovali, sa zachovajú
Dostupnosť
Improvement Agent je dostupný na Professional pláne a vyššie a je tiež zahrnutý počas 14-dňovej Starter Pro skúšobnej verzie.
Najlepšie postupy
- Buďte konkrétny: Čím presnejšie opíšete problém, tým lepšie budú návrhy
- Poskytnite kontext: Uveďte, akú odpoveď by ste očakávali
- Simulujte pred aplikovaním: Vždy najprv otestujte návrhy
- Používajte pravidelne: Týždenné relácie zlepšovania udržia vášho bota aktuálneho