Improvement Agent
Improvement Agent je orodje na osnovi umetne inteligence, ki vam pomaga sistematično izboljšati odgovore vašega klepetalnega bota na podlagi resničnih povratnih informacij strank.
Pregled
Ko je klepet označen kot "needs improvement" (potrebuje izboljšavo), Improvement Agent analizira:
- Izvirno pogovor
- Kje chatbot ni odgovoril optimalno
- Kako je mogoče izboljšati odgovore
Dostop do Improvement Agenta
Obstajajo trije načini za začetek seje izboljšav:
Iz pogleda s podrobnostmi klepeta
- Pojdite na Chats v nadzorni plošči in odprite klepet
- V razdelku "AI Improvement Agent" boste videli status povratnih informacij
- Če je klepet označen kot "Needs Improvement", kliknite Improve with AI
Iz seznama klepetov
Klepeti z negativno oceno, ki še niso bili izboljšani, prikazujejo vmesni gumb Improve with AI neposredno v seznamu Chats — kliknite ga, da skočite neposredno v agenta, brez odpiranja klepeta.
Iz e-pošte za pregled klepeta
Če prejmete e-pošto za pregled klepeta in kliknete Needs improvement, boste neposredno preusmerjeni v sejo Improvement Agenta za ta klepet. Glejte Rating chats from email spodaj.
Proces izboljšave
1. Analiza izvirnega pogovora
Levi panel prikazuje izvirni klepet:
- Vsako sporočilo je oštevilčeno za lažjo referenco
- Uporabniška sporočila (vijolična) in odzivi bota (sivi) so barvno ločeni
- Botova sporočila imajo gumb "Improve", s katerim jih izberete za izboljšavo
Pametna izbira sporočila:
- Če klepet vsebuje samo eno botovo sporočilo, je to samodejno vnaprej izbrano — agent takoj ve, kateri odziv želite izboljšati.
- Če je več botovih sporočil, vas agent v pozdravu usmeri, da kliknete "Improve" poleg specifičnega sporočila, ki ga želite popraviti. Izbrano sporočilo je označeno z modro barvo in ob vnosnem polju klepeta se prikaže indikatorna vrstica.
2. Klepet z Improvement Agentom
Sredinski panel je interaktiven klepet z AI Improvement Agentom:
- Opišite, kaj ni bilo optimalno glede klepeta
- Prosite za predloge za izboljšave
- Razpravljajte o alternativnih strategijah odgovora
- Sklicujte se na določena sporočila iz izvirnega klepeta
Primer pozivov:
- "Odgovor na vprašanje 3 je bil preveč nejasen. Kako bi se bot lahko bolje odzval?"
- "Bot ni razumel poizvedbe o izdelku. Kaj lahko izboljšamo?"
- "Predlagajte boljši fallback odgovor, ko je bot negotov."
3. Pregled in uporaba predlogov
Desni panel prikazuje ustvarjene predloge za izboljšave:
| Suggestion Type | Description |
|---|---|
| New FAQ / Update FAQ / Delete FAQ | Ustvari, uredi ali odstrani FAQ, da zapre manko znanja |
| New / Update / Delete Core Instruction | Prilagodi osnovna navodila vašega klepetalnega bota |
| Update Persona | Izpopolni opis osebnosti klepetalnega bota |
Za vsak predlog lahko:
- Simulate: Preizkusite, kako bi se bot odzval z izvedeno izboljšavo (uporabite Simulate All, da zaženete simulacijo za vse čakajoče predloge naenkrat)
- Apply: Uporabite izboljšavo
- Reject: Zavrnete predlog
Simulacija za preizkus
Preden uporabite predlog, ga lahko simulirate:
- Kliknite Simulate na predlogu (ali Simulate All, da preizkusite vse čakajoče predloge)
- Simulacija prikaže:
- Izvirno uporabniško vprašanje
- Simuliran odgovor z uporabo spremembe
- Izvirni botov odgovor ostane v levem panelu za primerjavo
- Ocenite simuliran odgovor:
- Perfect!: Agent potrdi, da je predlog pripravljen — uporabite ga z gumbom Apply
- Almost good: Agent izpopolni predlog glede na to, česar še manjka
- Not good: Agent vpraša, kaj je bilo narobe s simuliranim odgovorom, da lahko predlog prerazdeli
Ocena simulacije sama po sebi ne uporabi ali zavrne predloga. Za končno odločitev uporabite gumbe Apply in Reject na predlogu.
Zaključek seje
Ko obdelate vse predloge, v panelu s predlogi kliknite Complete Improvement:
- Gumb ostane onemogočen, dokler ni vsak predlog uporabljen ali zavrnjen
- Po zaključku ste preusmerjeni nazaj na seznam Chats
- Klepet dobi oznako Improved, v njegovem pogledu s podrobnostmi pa se prikaže povezava View Improvement nazaj na sejo
Potek povratnih informacij
Ocena klepetov
Preden je mogoče uporabiti Improvement Agenta, mora biti klepet ocenjen:
- Odprite klepet
- V razdelku "AI Improvement Agent":
- Good (palec gor): Oznaka kot pozitiven primer
- Needs Work (palec dol): Označi klepet kot potreben izboljšave in ponovno izračuna oceno zaupnosti — prikaže se gumb Improve with AI, da začnete agenta
- Reviewed (križec): Označi klepet kot pregledan/odpravljen brez ocenjevanja kot dober ali slab (ne vpliva na oceno zaupnosti in ne sproži e-poštnih sporočil ali sej izboljšav)
Ko označite klepet kot Needs Work, AI samodejno klasificira, kako resen je bil problem — to določi, koliko bo ocena vplivala na vaš score confidence (glejte Confidence score spodaj).
Ocene niso dokončne: klepeti označeni kot Good ali Reviewed se lahko kasneje znova odprejo z gumbom Mark as needs improvement na strani s podrobnostmi klepeta. Ocena zaupnosti se takoj ponovno izračuna in Improvement Agent je ponovno na voljo.
Ocenjevanje klepetov iz e-pošte
Klepet lahko ocenite tudi neposredno iz e-pošt, ki jih prejmete za pregled klepeta, brez odpiranja nadzorne plošče. Vsaka e-pošta prikaže pogovor in vpraša "Was this a good response?" z dvema gumboma:
- Yes, good answer: Označi klepet kot pozitiven in vas preusmeri na stran s potrditvijo, ki prikaže vaš posodobljeni confidence score — vključno s tem, kako se je spremenila ocena za prizadeto kategorijo odgovorov
- Needs improvement: Označi klepet kot negativen in vas neposredno pelje v sejo Improvement Agenta za ta klepet
Povezave za ocenjevanje v e-poštah za pregled potečejo po 7 dneh. Klepet lahko vedno ocenite pozneje iz nadzorne plošče.
Uporaba učne faze
Med učnim obdobjem boste samodejno pozvani k ocenjevanju klepetov — prošnje za ocenjevanje prihajajo kot e-poštna sporočila za pregled klepeta. To znatno pospeši izboljševanje vašega klepetalnega bota.
Confidence Score
Confidence score meri, kako zanesljivo vaš chatbot odgovarja, na podlagi vaših ocen. Najdete ga v zavihku Confidence v nastavitvah vašega klepetalnega bota.
Ocena po kategorijah
Pogovori so razvrščeni v kategorije odgovorov in vsaka kategorija dobi svojo confidence score poleg globalne ocene:
- Kategorije se ustvarjajo samodejno med potekom klepetov
- V zavihku Confidence lahko dodate, preimenujete ali izbrišete kategorije (klepeti iz izbrisane kategorije so premaknjeni v samodejno fallback kategorijo)
Resnost negativnih ocen
Vsak palec navzdol AI samodejno razvrsti v eno od štirih stopenj resnosti, ki določajo, koliko bo ocena znižala confidence score:
- Minor issue
- Moderate issue
- Major issue
- Critical issue
Stran s podrobnostmi klepeta prikaže dodeljeno resnost, uporabljeno prilagoditev ocene in razlog. Če se ne strinjate s klasifikacijo, uporabite spustni meni Override severity, da jo spremenite — confidence score se takoj ponovno izračuna.
E-poštna sporočila za pregled klepeta
V zavihku Confidence nadzirate, kako pogosto prejemate e-pošto za pregled klepeta:
- Stikalo Chat Review Emails omogoči ali onemogoči recenzijska e-poštna sporočila v celoti
- Za vsako kategorijo lahko nastavite svojo frekvenco e-pošte: After every chat, Every X hours, Daily, Weekly, ali Never
To vam omogoča, da tesno spremljate šibke kategorije, medtem ko utišate kategorije, ki že dobro delujejo.
Ponastavitev seje
Če želite začeti novo sejo izboljšav:
- Kliknite Restart v glavi
- Potrdite ponastavitev
- Vsa sporočila in čakajoči predlogi so izbrisani — spremembe, ki ste jih že uporabili, so ohranjene
Razpoložljivost
Improvement Agent je na voljo v Professional planu in zgoraj, ter je vključen tudi med 14-dnevnim Starter Pro preizkusom.
Najboljše prakse
- Bodite specifični: Bolj natančno kot opišete problem, boljši so predlogi
- Navedite kontekst: Omenite, kakšen odgovor bi pričakovali
- Simulirajte pred uporabo: Predloge vedno najprej preizkusite
- Uporabljajte redno: Tedenske seje izboljšav ohranjajo vašega bota ažurnega