Improvement Agent
Improvement Agent ir AI-piedziņas rīks, kas palīdz sistemātiski uzlabot jūsu čatbota atbildes, balstoties uz reālām klientu atsauksmēm.
Pārskats
Kad čats ir atzīmēts kā "needs improvement", Improvement Agent analizē:
- Oriģinālo sarunu
- Vietas, kur čatbots nesniedza optimālu atbildi
- Veidus, kā atbildes var uzlabot
Piekļuve Improvement Agent
Ir trīs veidi, kā sākt uzlabošanas sesiju:
No čata detaļu skata
- Dodieties uz Tērzēšanas informācijas panelī un atveriet čatu
- Sadaļā "AI Improvement Agent" redzēsiet atsauksmes statusu
- Ja čats ir atzīmēts kā "Needs Improvement", noklikšķiniet Uzlabot ar AI
No čatu saraksta
Čati ar negatīvu vērtējumu, kas vēl nav uzlaboti, sarakstā tieši parāda inline Uzlabot ar AI pogu — noklikšķiniet to, lai uzreiz pārietu uz agentu, neatverot čatu vispirms.
No čata pārskatīšanas e-pasta
Ja saņemat čata pārskatīšanas e-pastu un noklikšķināt Prasa uzlabojumus, jūs tiekat tieši novirzīts uz Improvement Agent sesiju konkrētajam čatam. Skatīt Rating chats from email zemāk.
Uzlabošanas process
1. Analizēt oriģinālo sarunu
Kreisajā panelī redzama oriģinālā čata saruna:
- Katram ziņojumam ir piešķirts numurs ērtākai atsaucei
- Lietotāja ziņojumi (violeti) un bota atbildes (pelēki) ir krāsoti
- Botu ziņojumiem ir "Improve" poga, lai atlasītu tos uzlabošanai
Gudra ziņojumu atlase:
- Ja čatā ir tikai viena bota ziņa, tā tiek automātiski iepriekš atlasīta — agents uzreiz zina, kuru atbildi vēlaties uzlabot.
- Ja ir vairākas bota ziņas, aicinājums no aģenta norādīs jums noklikšķināt "Improve" blakus konkrētajai ziņai, kuru vēlaties labot. Atlasītā ziņa tiek izcelta zilā krāsā, un pie čata ievades parādās indikatora josla.
2. Saruna ar Improvement Agent
Centrālais panelis ir interaktīvs čats ar AI Improvement Agent:
- Aprakstiet, kas čatā nebija optimāli
- Prasiet uzlabošanas ieteikumus
- Apspriediet alternatīvas atbildes stratēģijas
- Atsaucieties uz konkrētām ziņām no oriģinālā čata
Piemēru uzvednes:
- "Atbilde uz jautājumu 3 bija pārāk vispārīga. Kā čatbots varētu atbildēt labāk?"
- "Čatbots nesaprata produkta pieprasījumu. Ko mēs varam uzlabot?"
- "Ieteikt labāku noklusējuma atbildi, ja čatbots nav pārliecināts."
3. Pārskatīt un piemērot ieteikumus
Labajā panelī redzami ģenerētie uzlabošanas ieteikumi:
| Suggestion Type | Description |
|---|---|
| New FAQ / Update FAQ / Delete FAQ | Izveido, rediģē vai dzēš FAQ, lai aizpildītu zināšanu robu |
| New / Update / Delete Core Instruction | Pielāgo jūsu čatbota galvenās instrukcijas |
| Atjaunināt personību | Precizē čatbota personības aprakstu |
Katra ieteikuma gadījumā jūs varat:
- Simulēt: Testēt, kā bots reaģētu ar šo uzlabojumu (izmantojiet Simulēt visu, lai vienlaikus palaistu simulāciju visiem gaidošajiem ieteikumiem)
- Piemērot: Piemērot uzlabojumu
- Reject: Atmest ieteikumu
Testa simulācija
Pirms ieteikuma piemērošanas, to var simulēt:
- Noklikšķiniet Simulēt uz ieteikuma (vai Simulēt visu, lai pārbaudītu visus gaidošos ieteikumus)
- Simulācija parāda:
- Oriģinālo lietotāja jautājumu
- Simulēto atbildi ar pielietoto izmaiņu
- Oriģinālā bota atbilde paliek redzama kreisajā panelī salīdzināšanai
- Novērtējiet simulēto atbildi:
- Ideāli!: Agents apstiprina, ka ieteikums ir gatavs — piemērojiet to ar Piemērot pogu
- Gandrīz labi: Agents precizē ieteikumu, ņemot vērā vēl trūkstošo
- Nav labi: Agents prasa, kas bija nepareizi ar simulēto atbildi, lai varētu pārstrādāt ieteikumu
Simulācijas vērtēšana pati par sevi nepiemēro un neatmet ieteikumu. Izmantojiet pogas Piemērot un Reject uz ieteikuma, lai pieņemtu galīgo lēmumu.
Sesijas pabeigšana
Kad esat izskatījis visus ieteikumus, noklikšķiniet Pabeigt uzlabojumu ieteikumu panelī:
- Poga paliek atspējota, līdz katrs ieteikums ir piemērots vai noraidīts
- Pabeidzot, jūs atgriežaties Čatu sarakstā
- Čats saņem nozīmīti Uzlabots, un tā detaļu skatā parādās Skatīt uzlabojumu saite atpakaļ uz sesiju
Atsauksmju darbplūsma
Čatu vērtēšana
Pirms Improvement Agent var tikt izmantots, čats ir jānovērtē:
- Atveriet čatu
- Sadaļā "AI Improvement Agent":
- Labi (Thumbs up): Atzīmē kā pozitīvu piemēru
- Prasa uzlabojumus (Thumbs down): Atzīmē čatu kā nepieciešamu uzlabošanu un pārrēķina pārliecības (confidence) vērtējumu — tad parādās poga Uzlabot ar AI, lai sāktu agentu
- Pārskatīts (Check): Atzīmē čatu kā pārskatītu/atsviestu bez to laipni novērtēšanas kā labu vai sliktu (neietekmē confidence vērtējumu un neaktivizē e-pastus vai uzlabošanas sesijas)
Kad jūs atzīmējat čatu kā Prasa uzlabojumus, AI automātiski klasificē, cik nopietna problēma bija — tas nosaka, cik ļoti vērtējums ietekmē jūsu confidence punktu skaitu (skatīt Confidence score zemāk).
Vērtējumi nav galīgi: čati, kas atzīmēti kā Good vai Reviewed, var tikt atvērti vēlāk ar Atzīmēt kā nepieciešams uzlabojums pogu čata detaļu lapā. Confidence score tiek pārrēķināts un Improvement Agent kļūst pieejams atkal.
Čatu vērtēšana no e-pasta
Jūs varat arī vērtēt čatus tieši no saņemtajiem čata pārskatīšanas e-pastiem, neatverot informācijas paneli. Katrs e-pasts parāda sarunu un jautā "Was this a good response?" ar divām pogām:
- Jā, laba atbilde: Atzīmē čatu kā pozitīvu un novirza uz veiksmīgas pabeigšanas lapu, kurā redzams jūsu atjauninātais confidence score — ieskaitot, kā mainījās skartās atbilžu kategorijas vērtējums
- Prasa uzlabojumus: Atzīmē čatu kā negatīvu un novirza jūs tieši uz Improvement Agent sesiju konkrētajam čatam
Vērtēšanas saites pārskatīšanas e-pastos beidz derīgumu pēc 7 dienām. Jūs vienmēr varat novērtēt čatu vēlāk no paneļa.
Mācību fāzes izmantošana
Mācību fāzes laikā jums automātiski tiks nosūtīti aicinājumi vērtēt čatus — vērtēšanas pieprasījumi pienāk kā čata pārskatīšanas e-pasti. Tas būtiski paātrina jūsu čatbota uzlabošanu.
Confidence score
Confidence score apkopo jūsu sarunu pārskatījumus skalā 0–100. Jūs to atradīsiet Pārliecība cilnē jūsu čatbota iestatījumos. Tas ir kvalitātes pārskatīšanas rīks, nevis garantija par faktu pareizību vai klientu zvaigžņu vērtējums.
Pēc kategorijām vērtēšana
Sarunas tiek grupētas pēc atbilžu kategorijām, un katrai kategorijai tiek piešķirts savs confidence score paralēli globālajam vērtējumam:
Katra kategorija izmanto līdz 20 nesenajiem vērtētajiem pārskatiem un to korekcijām, tostarp negatīvo vērtējumu nopietnības līmeni. Globālais rādītājs ir to kategoriju vidējais, kurās ir pārskatītas sarunas. Pārskatīts atzīmes bez pozitīva vai negatīva vērtējuma neveido vērtētu pārskatu.
- Kategorijas tiek izveidotas automātiski, kad notiek čati
- Jūs varat pievienot, pārdēvēt vai dzēst kategorijas Confidence cilnē (čati no dzēstās kategorijas tiek pārvietoti uz automātisku rezervējošu kategoriju)
- Jūs arī varat manuāli pārdalīt atsevišķu čatu uz citu kategoriju no šī čata detaļu lapas, neatkarīgi no automātiskās kategorizācijas
Negatīvo vērtējumu nopietnība
Katrs thumbs-down automātiski tiek AI klasificēts vienā no četrām nopietnības pakāpēm, kas nosaka, cik ļoti vērtējums pazemina confidence score:
- Minor issue
- Moderate issue
- Major issue
- Critical issue
Čata detaļu lapā redzams piešķirtais nopietnības līmenis, piemērotā korekcija un iemesls. Ja nepiekrītat klasifikācijai, izmantojiet Override severity nolaižamo izvēlni, lai to mainītu — confidence score tiek pārrēķināts uzreiz.
Paziņojumi
Sasniedzot konfigurēto slieksni ar pietiekamu pārskatu skaitu, var tikt ierosināts ieteikums par mācību pabeigšanu. Tas automātiski nepārtrauc mācību fāzi. Pārskatiet bota atbildes un izvēlieties Pārtraukt mācību posmu pats, kad esat gatavs.
Chatbots → Vispārīgi → Paziņojumi
Saņemiet pilnas sarunas pa e-pastu. Pārvaldiet saņēmējus, e-pasta tipu un biežumu šeit.
- Pievienot saņēmēju: E-pasta adrese.
- Vēstules veids: Tikai transkripts / Ar pārskatu.
- Biežums: Katrs čats, Katru stundu, Diennakts, Nedēļas.
- Aktīva → Saglabāt izmaiņas.
Čata transkripti ir iekļauti visos plānos. Pārskatīšanas pogas prasa plānu ar čata pārskatīšanām.
Jauni čati pēc aktivizācijas tikai. Dienasgrāmatā katru dienu plkst. 09:00 UTC; nedēļas skatā pirmdienās plkst. 09:00 UTC.
Sesijas atiestatīšana
Ja vēlaties sākt jaunu uzlabošanas sesiju:
- Noklikšķiniet Restartēt galvenē
- Apstipriniet atiestatīšanu
- Visas ziņas un gaidošie ieteikumi tiek dzēsti — izmaiņas, kuras jau esat piemērojis, tiek saglabātas
Pieejamība
Improvement Agent ir pieejams Professional plan un augstāk, un tas arī ir iekļauts 14 dienu Starter Pro izmēģinājumā.
Labākās prakses
- Esiet konkrēts: Jo precīzāk aprakstīsiet problēmu, jo labāki būs ieteikumi
- Sniedziet kontekstu: Norādiet, kādu atbildi jūs būtu gaidījis
- Simulējiet pirms piemērošanas: Vienmēr vispirms pārbaudiet ieteikumus
- Izmantojiet regulāri: Nedēļas uzlabošanas sesijas uztur jūsu botu aktuālu