Improvement Agent
Improvement Agent е инструмент, подпомогнат от AI, който ви помага систематично да подобрявате отговорите на вашия чатбот въз основа на реална обратна връзка от клиенти.
Преглед
Когато един чат е маркиран като "needs improvement", Improvement Agent анализира:
- Оригиналния разговор
- Къде чатботът не е отговорил оптимално
- Как могат да бъдат подобрени отговорите
Достъп до Improvement Agent
Има три начина да стартирате сесия за подобрение:
От изгледа на детайла на чата
- Отидете на Чатове в таблото и отворете чат
- В секцията "AI Improvement Agent" ще видите статуса на обратната връзка
- Ако чатът е маркиран като "Needs Improvement", кликнете Подобрете с AI
От списъка с чатове
Чатовете с отрицателна оценка, които все още не са подобрени, показват бутон Подобрете с AI в реда в списъка с Chats — кликнете го, за да отидете директно в агента без да отваряте чата първо.
От имейл за преглед на чат
Ако получите имейл за преглед на чат и кликнете Нуждае се от подобрение, ще бъдете отведени директно в сесия на Improvement Agent за този чат. Вижте Rating chats from email по-долу.
Процес на подобряване
1. Анализ на оригиналния разговор
Лявата колона показва оригиналния чат разговор:
- Всеки съобщение е номерирано за лесна справка
- Потребителските съобщения (лилаво) и отговорите на бота (сиво) са кодирани с цветове
- Съобщенията на бота имат бутон "Improve", за да ги изберете за подобрение
Интелигентен избор на съобщение:
- Ако чатът съдържа само едно съобщение от бота, то се избира автоматично — агентът веднага разбира кой отговор искате да подобрите.
- Ако има няколко съобщения от бота, поздравът на агента ще ви насочи да кликнете "Improve" до конкретното съобщение, което искате да коригирате. Избраното съобщение се маркира в синьо и се появява индикаторна лента близо до входа за чат.
2. Чат с Improvement Agent
Централната колона е интерактивен чат с AI Improvement Agent:
- Описвайте какво не е било оптимално в чата
- Поискайте предложения за подобрение
- Обсъждайте алтернативни стратегии за отговор
- Посочвайте конкретни съобщения от оригиналния чат
Примерни подсказки:
- "Отговорът на въпрос 3 беше твърде общ. Как ботът може да отговори по-добре?"
- "Ботът не разбра запитване за продукт. Какво можем да подобрим?"
- "Предложете по-добър резервен отговор, когато ботът не е сигурен."
3. Преглед и прилагане на предложенията
Дясната колона показва генерираните предложения за подобрение:
| Suggestion Type | Description |
|---|---|
| New FAQ / Update FAQ / Delete FAQ | Създава, редактира или премахва FAQ за затваряне на пробела в знанията |
| New / Update / Delete Core Instruction | Коригира основните инструкции на вашия чатбот |
| Актуализиране на перона | Уточнява описанието на персонажа на чатбота |
За всяко предложение можете да:
- Симулирай: Тествайте как ботът би отговорил с предложението (използвайте Симулирай всичко, за да стартирате симулация за всички чакащи предложения наведнъж)
- Приложи: Приложете подобрението
- Reject: Отхвърлите предложението
Тестова симулация
Преди да приложите предложение, можете да го симулирате:
- Кликнете Симулирай върху предложение (или Симулирай всичко, за да тествате всички чакащи предложения)
- Симулацията показва:
- Оригиналния въпрос на потребителя
- Симулирания отговор с приложената промяна
- Оригиналният отговор на бота остава видим в лявата колона за сравнение
- Оценете симулирания отговор:
- Отлично!: Агентът потвърждава, че предложението е готово — приложете го с бутона Приложи
- Почти добро: Агентът доусъвършенства предложението въз основа на това, което все още липсва
- Не е добре: Агентът пита какво не е наред със симулирания отговор, за да може да преработи предложението
Оценяването на симулация никога само по себе си не прилага или отхвърля предложението. Използвайте бутоните Приложи и Reject върху предложението, за да вземете окончателно решение.
Завършване на сесия
След като сте взели решение за всяко предложение, кликнете Завърши подобрението в панела със предложения:
- Бутонът остава деактивиран, докато всяко предложение не бъде приложено или отхвърлено
- След завършване ще бъдете върнати в списъка с Chats
- Чатът след това получава етикет Подобрено и в изгледа на детайла на чата се показва връзка Вижте подобрението обратно към сесията
Работен поток за обратна връзка
Оценяване на чатове
Преди да може да се използва Improvement Agent, един чат трябва да бъде оценен:
- Отворете чат
- В секцията "AI Improvement Agent":
- Добри (Thumbs up): Маркира като положителен пример
- Нуждае се от подобрение (Thumbs down): Маркира чата като изискващ подобрение и прекалкулира степента на увереност — тогава се появява бутон Подобрете с AI за стартиране на агента
- Прегледано (Check): Маркира чата като прегледан/отхвърлен без да се оценява като добър или лош (не влияе на степента на увереност и не задейства имейли или сесии за подобрение)
Когато маркирате чат като Нуждае се от подобрение, AI автоматично класифицира колко сериозен е проблемът — това определя колко силно оценката влияе върху вашия confidence score (вижте Confidence score по-долу).
Оценките не са окончателни: чатове маркирани като Good или Reviewed могат да бъдат повторно отворени по-късно с бутона Маркирай като изисква подобрение на страницата с детайли на чата. Степента на увереност се прекалкулира и Improvement Agent става отново наличен.
Оценяване на чатове от имейл
Можете също да оценявате чатове директно от имейлите за преглед на чат, които получавате, без да отваряте таблото. Всеки имейл показва разговора и пита "Was this a good response?" с два бутона:
- Да, добър отговор: Маркира чата като положителен и ви отвежда до страница със успех, показваща актуализирания ви confidence score — включително как е променен резултатът за засегнатата категория отговори
- Нуждае се от подобрение: Маркира чата като отрицателен и ви отвежда директно в сесия на Improvement Agent за този чат
Линковете за оценка в имейлите за преглед изтичат след 7 дни. Винаги можете да оцените чата по-късно от таблото.
Използване на фазата на учене
По време на learning phase, вие автоматично ще бъдете подканяни да оценявате чатове — заявките за оценка пристигат като имейли за преглед на чат. Това значително ускорява подобряването на вашия чатбот.
Confidence Score
Confidence score обобщава вашите прегледи на разговори в мащаб 0–100. Ще го намерите в таба Увереност от настройките на вашия чатбот. Той е помощно средство за преглед на качество, а не гаранция за фактическа точност или рейтинг с звезди от клиенти.
Оценяване по категории
Разговорите са групирани в категории отговори и всяка категория получава собствен confidence score заедно с глобалния резултат:
Всяка категория използва до 20 скорошни оценени прегледа и техните корекции, включително сериозността на отрицателните оценки. Глобалният резултат е средната стойност на категориите, които имат прегледани разговори. Прегледано признания без положителна или отрицателна оценка не допринасят за оценен преглед.
- Категориите се създават автоматично при възникване на чатове
- Можете да добавяте, преименувате или изтривате категории в таба Confidence (чатовете от изтрита категория се преместват в автоматична резервна категория)
- Можете също ръчно да преназначите отделен чат към различна категория от страницата с детайли на този чат, независимо от автоматичната категоризация
Сериозност на отрицателните оценки
Всяко натискане на thumbs-down се класифицира автоматично от AI в една от четири степени на сериозност, които определят колко силно оценката понижава confidence score:
- Minor issue
- Moderate issue
- Major issue
- Critical issue
Страницата с детайли на чата показва присвоената сериозност, приложената корекция на резултата и причината. Ако не сте съгласни с класификацията, използвайте падащото меню Override severity, за да я промените — confidence score се прекалкулира веднага.
Известия
Достигането на конфигурирания праг с достатъчно прегледи може да задейства предложение за завършване на learning phase. Това не прекратява автоматично learning phase. Прегледайте отговорите на бота и изберете Прекратете фазата на обучение сами, когато сте готови.
Chatbots → Общи → Известия
Получавайте пълни разговори по имейл. Управлявайте получателите, типа имейл и честотата тук.
- Добавяне на получател: Имейл адрес.
- Вид имейл: Само транскрипт / С преглед.
- Честота: Всеки чат, На час, Всеки ден, Седмично.
- Активна → Запазете промените.
Транскриптите на чатове са включени във всички планове. Бутоните за преглед изискват план с chat reviews.
Нови чатове след активиране само. Ежедневно в 09:00 UTC; седмично в понеделник в 09:00 UTC.
Рестартиране на сесия
Ако искате да стартирате нова сесия за подобрение:
- Кликнете Рестартирай в хедера
- Потвърдете рестарта
- Всички съобщения и чакащи предложения се изтриват — промените, които вече сте приложили, се запазват
Наличност
Improvement Agent е наличен в Professional плана и нагоре, и е включен също така по време на 14-дневния Starter Pro trial.
Препоръки
- Бъдете конкретни: Колкото по-точно опишете проблема, толкова по-добри ще бъдат предложенията
- Дайте контекст: Посочете какъв отговор бихте очаквали
- Симулация преди прилагане: Винаги тествайте предложенията първо
- Използвайте редовно: Седмични сесии за подобрение поддържат бота ви актуален