Improvement Agent

Improvement Agent je nástroj řízený umělou inteligencí, který vám pomáhá systematicky vylepšovat odpovědi vašeho chatbota na základě skutečné zpětné vazby od zákazníků.

Přehled

Když je chat označen jako „needs improvement“ (potřebuje zlepšení), Improvement Agent analyzuje:

• Původní konverzaci
• Kde chatbot neodpověděl optimálně
• Jak lze odpovědi vylepšit

Přístup k Improvement Agent

Existují tři způsoby, jak zahájit zlepšovací relaci:

Z detailu chatu

1. Přejděte na Chats v řídicím panelu a otevřete chat
2. V sekci "AI Improvement Agent" uvidíte stav hodnocení
3. Pokud je chat označen jako "Needs Improvement", klikněte na Improve with AI

Ze seznamu chatů

Chaty s negativním hodnocením, které dosud nebyly vylepšeny, zobrazují přímo v seznamu Chats inline tlačítko Improve with AI — klikněte na něj a skočíte přímo do agenta, aniž byste nejprve otevírali chat.

Z e-mailu pro kontrolu chatu

Pokud obdržíte e-mail s kontrolou chatu a kliknete na Needs improvement, budete přesměrováni přímo do relace Improvement Agent pro daný chat. Viz Rating chats from email níže.

Proces zlepšování

1. Analyzujte původní konverzaci

V levém panelu je zobrazena původní konverzace:

• Každá zpráva je očíslovaná pro snadnou orientaci
• Uživatelské zprávy (fialové) a odpovědi bota (šedé) jsou odlišené barvami
• U zpráv bota je tlačítko "Improve" pro jejich vybrání k vylepšení

Chytrý výběr zpráv:

• Pokud chat obsahuje pouze jednu zprávu bota, je automaticky předvybrána — agent okamžitě ví, kterou odpověď chcete vylepšit.
• Pokud je ve chatu více zpráv bota, agent vás v úvodu navede, abyste klikli na "Improve" vedle konkrétní zprávy, kterou chcete upravit. Vybraná zpráva je zvýrazněna modře a u vstupu do chatu se objeví indikátor.

2. Konverzace s Improvement Agent

Střední panel je interaktivní chat s AI Improvement Agent:

• Popište, co v konverzaci nebylo optimální
• Požádejte o návrhy na zlepšení
• Diskutujte alternativní strategie odpovědí
• Odkazujte se na konkrétní zprávy z původní konverzace

Příklad promptů:

• "Odpověď na otázku 3 byla příliš vágní. Jak by mohl bot lépe odpovědět?"
• "Bot nepochopil dotaz na produkt. Co můžeme zlepšit?"
• "Navrhněte lepší fallback odpověď, když si bot není jistý."

3. Zkontrolujte a použijte návrhy

V pravém panelu jsou zobrazeny vygenerované návrhy na zlepšení:

U každého návrhu můžete:

• Simulate: Otestovat, jak by bot odpověděl s aplikovaným vylepšením (použijte Simulate All pro spuštění simulace u všech čekajících návrhů najednou)
• Apply: Aplikovat návrh
• Reject: Návrh odmítnout

Testovací simulace

Před aplikací návrhu jej můžete simulovat:

1. Klikněte na Simulate u návrhu (nebo Simulate All pro otestování všech čekajících návrhů)
2. Simulace ukáže:
   • Původní uživatelskou otázku
   • Simulovanou odpověď s aplikovanou změnou
   • Původní odpověď bota zůstává v levém panelu viditelná pro porovnání
3. Ohodnoťte simulovanou odpověď:
   • Perfect!: Agent potvrdí, že návrh je připraven — použijte tlačítko Apply k jeho aplikaci
   • Almost good: Agent upraví návrh na základě toho, co stále chybí
   • Not good: Agent se zeptá, co bylo na simulované odpovědi špatně, aby návrh přepracoval

Ukončení relace

Jakmile jste vyřešili všechny návrhy, klikněte v panelu návrhů na Complete Improvement:

• Tlačítko zůstane deaktivované, dokud nebude každý návrh aplikován nebo odmítnut
• Po dokončení budete vráceni do seznamu Chats
• Chat dostane označení Improved a v detailu chatu se zobrazí odkaz View Improvement zpět na relaci

Pracovní postup se zpětnou vazbou

Hodnocení chatů

Než bude možné použít Improvement Agent, musí být chat ohodnocen:

1. Otevřete chat
2. V sekci "AI Improvement Agent":
   • Good (palec nahoru): Označí jako pozitivní příklad
   • Needs Work (palec dolů): Označí chat jako vyžadující vylepšení a přepočítá skóre důvěry — poté se zobrazí tlačítko Improve with AI pro spuštění agenta
   • Reviewed (škrt): Označí chat jako zkontrolovaný/odmítnutý bez hodnocení jako dobrý nebo špatný (neovlivní skóre důvěry a nespustí e-maily ani relace zlepšování)

Když označíte chat jako Needs Work, AI automaticky klasifikuje závažnost problému — to určí, jak moc hodnocení ovlivní vaše skóre důvěry (viz Confidence score níže).

Hodnocení nejsou konečná: chaty označené jako Good nebo Reviewed lze později znovu otevřít tlačítkem Mark as needs improvement na stránce s detailem chatu. Skóre důvěry se přepočítá a Improvement Agent bude opět dostupný.

Hodnocení chatů z e-mailu

Chaty můžete hodnotit také přímo z e-mailů s kontrolou chatu, které obdržíte, bez otevírání řídicího panelu. Každý e-mail ukazuje konverzaci a ptá se "Was this a good response?" se dvěma tlačítky:

• Yes, good answer: Označí chat jako pozitivní a přesměruje vás na stránku úspěchu s aktualizovaným skóre důvěry — včetně toho, jak se změnilo skóre ovlivněné kategorie odpovědí
• Needs improvement: Označí chat jako negativní a vezme vás přímo do relace Improvement Agent pro daný chat

Použití fáze učení

Během fáze učení budete automaticky vyzýváni k hodnocení chatů — žádosti o hodnocení přicházejí formou e-mailů s kontrolou chatu. To významně urychluje zlepšování vašeho chatbota.

Confidence Score

Skóre důvěry měří, jak spolehlivě váš chatbot odpovídá, na základě vašich hodnocení. Najdete ho na kartě Confidence v nastavení chatbota.

Skórování podle kategorií

Konverzace jsou seskupeny do kategorií odpovědí a každá kategorie má vlastní skóre důvěry vedle globálního skóre:

• Kategorie se vytvářejí automaticky, jak se chatuje
• V kartě Confidence můžete přidávat, přejmenovávat nebo mazat kategorie (chaty z odstraněné kategorie jsou přesunuty do automatické fallback kategorie)

Závažnost negativních hodnocení

Každý palec dolů je automaticky klasifikován AI do jedné ze čtyř úrovní závažnosti, které určují, o kolik hodnocení sníží skóre důvěry:

• Minor issue
• Moderate issue
• Major issue
• Critical issue

Stránka s detailem chatu ukazuje přiřazenou závažnost, aplikovanou úpravu skóre a důvod. Pokud s klasifikací nesouhlasíte, použijte rozbalovací nabídku Override severity k jejímu změnění — skóre důvěry se přepočítá okamžitě.

E-maily s kontrolou chatu

V kartě Confidence ovládáte, jak často dostáváte e-maily s kontrolou chatu:

• Přepínač Chat Review Emails zapíná nebo vypíná review e-maily úplně
• Pro každou kategorii můžete nastavit vlastní frekvenci e-mailů: After every chat, Every X hours, Daily, Weekly, nebo Never

To vám umožní bedlivě sledovat slabé kategorie a zároveň ztlumit kategorie, které již fungují dobře.

Reset relace

Pokud chcete zahájit novou zlepšovací relaci:

1. Klikněte v záhlaví na Restart
2. Potvrďte reset
3. Všechny zprávy a čekající návrhy jsou smazány — změny, které jste již aplikovali, zůstávají zachovány

Dostupnost

Nejlepší postupy

1. Buďte konkrétní: Čím přesněji popíšete problém, tím lepší budou návrhy
2. Dodejte kontext: Uveďte, jakou odpověď byste očekávali
3. Simulujte před aplikací: Vždy nejprve otestujte návrhy
4. Pravidelně používejte: Týdenní zlepšovací relace udrží vašeho bota aktuálního

Další kroky

• FAQ Management →
• Knowledge Base →
• Chatbot Settings →