Improvement Agent
Improvement Agent je alat pokretan umjetnom inteligencijom koji vam pomaže sustavno poboljšati odgovore vašeg chatbota na temelju stvarnih povratnih informacija korisnika.
Pregled
Kad je razgovor označen kao "needs improvement", Improvement Agent analizira:
- Izvorni razgovor
- Gdje chatbot nije odgovorio optimalno
- Kako se odgovori mogu poboljšati
Pristupanje Improvement Agentu
Postoje tri načina za započeti sesiju poboljšanja:
Iz prikaza detalja chata
- Idite na Chats u kontrolnoj ploči i otvorite chat
- U odjeljku "AI Improvement Agent" vidjet ćete status povratne informacije
- Ako je chat označen kao "Needs Improvement", kliknite Improve with AI
Iz popisa Chats
Chatovi s negativnom ocjenom koji još nisu poboljšani prikazuju ugrađeni gumb Improve with AI izravno na popisu Chats — kliknite ga da odmah prijeđete u agenta bez otvaranja chata.
Iz e-pošte za pregled chata
Ako primite e-poruku za pregled chata i kliknete Needs improvement, bit ćete izravno preusmjereni u sesiju Improvement Agenta za taj chat. Pogledajte Rating chats from email dolje.
Proces poboljšanja
1. Analiza izvornog razgovora
Lijevi panel prikazuje izvorni chat razgovor:
- Svaka poruka je numerirana radi lakšeg upućivanja
- Korisničke poruke (ljubičaste) i bot odgovori (sive) su obojani
- Bot poruke imaju gumb "Improve" za odabir za poboljšanje
Pametni odabir poruka:
- Ako razgovor sadrži samo jednu bot poruku, ona je automatski unaprijed odabrana — agent odmah zna koji odgovor želite poboljšati.
- Ako postoji više bot poruka, pozdrav agenta uputit će vas da kliknete "Improve" uz određenu poruku koju želite popraviti. Odabrana poruka je označena plavom bojom i pojavit će se indikatorska traka blizu unosa chata.
2. Razgovor s Improvement Agentom
Središnji panel je interaktivni chat s AI Improvement Agentom:
- Opišite što nije bilo optimalno u chatu
- Zatražite prijedloge za poboljšanje
- Raspravite alternativne strategije odgovora
- Referirajte se na određene poruke iz izvornog chata
Primjeri upita:
- "Odgovor na pitanje 3 bio je previše neodređen. Kako bi bot mogao bolje odgovoriti?"
- "Bot nije razumio upit o proizvodu. Što možemo poboljšati?"
- "Predložite bolji fallback odgovor kada bot nije siguran."
3. Pregled i primjena prijedloga
Desni panel prikazuje generirane prijedloge poboljšanja:
| Tip prijedloga | Opis |
|---|---|
| New FAQ / Update FAQ / Delete FAQ | Stvara, uređuje ili uklanja FAQ kako bi se zatvorio jaz u znanju |
| New / Update / Delete Core Instruction | Prilagođava osnovna uputstva vašeg chatbota |
| Update Persona | Pročišćava opis persone chatbota |
Za svaki prijedlog možete:
- Simulate: Isprobati kako bi bot odgovorio s poboljšanjem (upotrijebite Simulate All da pokrenete simulaciju za sve čekajuće prijedloge odjednom)
- Apply: Primijeniti poboljšanje
- Reject: Odbaciti prijedlog
Testna simulacija
Prije primjene prijedloga možete ga simulirati:
- Kliknite Simulate na prijedlog (ili Simulate All da isprobate sve čekajuće prijedloge)
- Simulacija prikazuje:
- Izvorno korisničko pitanje
- Simulirani odgovor s primijenjenom promjenom
- Izvorni bot odgovor ostaje vidljiv u lijevom panelu radi usporedbe
- Ocijenite simulirani odgovor:
- Perfect!: Agent potvrđuje da je prijedlog spreman — primijenite ga gumbom Apply
- Almost good: Agent usavršava prijedlog na temelju onoga što još nedostaje
- Not good: Agent pita što je bilo loše u simuliranom odgovoru kako bi mogao preraditi prijedlog
Ocjenjivanje simulacije samo po sebi nikada ne primjenjuje niti odbacuje prijedlog. Koristite gumbe Apply i Reject na prijedlogu da donesete konačnu odluku.
Završetak sesije
Kada obradite svaki prijedlog, kliknite Complete Improvement u panelu prijedloga:
- Gumb ostaje onemogućen dok svaki prijedlog nije primijenjen ili odbijen
- Po završetku, vraćate se na popis Chats
- Chat tada dobiva oznaku Improved, a njegov prikaz detalja prikazuje poveznicu View Improvement natrag na sesiju
Radni tijek povratnih informacija
Ocjenjivanje chatova
Prije nego što se Improvement Agent može koristiti, chat mora biti ocijenjen:
- Otvorite chat
- U odjeljku "AI Improvement Agent":
- Good (palac gore): Označava kao pozitivan primjer
- Needs Work (palac dolje): Označava chat kao potreban poboljšanja i ponovno izračunava score povjerenja — zatim se pojavljuje gumb Improve with AI za pokretanje agenta
- Reviewed (značka): Označava chat kao pregledan/odbijen bez ocjenjivanja dobrog ili lošeg (ne utječe na score povjerenja i ne pokreće e-poruke ili sesije poboljšanja)
Kada označite chat kao Needs Work, AI automatski klasificira koliko je problem bio ozbiljan — to određuje koliko ocjena utječe na vaš confidence score (pogledajte Confidence score dolje).
Ocjene nisu konačne: chatovi označeni kao Good ili Reviewed mogu se kasnije ponovno otvoriti pomoću gumba Mark as needs improvement na stranici s detaljima chata. Confidence score se ponovno izračunava i Improvement Agent postaje ponovno dostupan.
Ocjenjivanje chatova iz e-pošte
Možete također ocijeniti chatove izravno iz e-poruka za pregled chata koje primate, bez otvaranja kontrolne ploče. Svaka e-poruka prikazuje razgovor i pita "Was this a good response?" s dva gumba:
- Yes, good answer: Označava chat kao pozitivan i vodi vas na stranicu uspjeha koja prikazuje vaš ažurirani confidence score — uključujući kako se promijenio score pogođene kategorije odgovora
- Needs improvement: Označava chat kao negativan i vodi vas izravno u sesiju Improvement Agenta za taj chat
Poveznice za ocjenjivanje u e-porukama za pregled istječu nakon 7 dana. Uvijek možete ocijeniti chat kasnije iz kontrolne ploče.
Korištenje faze učenja
Tijekom faze učenja automatski ćete dobivati upite za ocjenjivanje chatova — zahtjevi za ocjenjivanje dolaze kao e-poruke za pregled chata. To značajno ubrzava poboljšanje vašeg chatbota.
Confidence score
Confidence score mjeri koliko pouzdano vaš chatbot odgovara, na temelju vaših ocjena. Pronaći ćete ga na kartici Confidence u postavkama vašeg chatbota.
Ocjenjivanje po kategorijama
Razgovori su grupirani u kategorije odgovora, i svaka kategorija dobiva vlastiti confidence score uz globalni score:
- Kategorije se stvaraju automatski kako razgovori nastaju
- Možete dodavati, preimenovati ili brisati kategorije u kartici Confidence (chats iz izbrisane kategorije premještaju se u automatsku fallback kategoriju)
Ozbiljnost negativnih ocjena
Svaki palac dolje AI automatski klasificira u jednu od četiri razine ozbiljnosti koje određuju koliko ocjena smanjuje confidence score:
- Minor issue
- Moderate issue
- Major issue
- Critical issue
Stranica s detaljima chata prikazuje dodijeljenu ozbiljnost, primijenjeno prilagođavanje ocjene i razlog. Ako se ne slažete s klasifikacijom, upotrijebite padajući izbornik Override severity da je promijenite — confidence score se odmah ponovno izračunava.
E-poruke za pregled chata
U kartici Confidence kontrolirate koliko često primate e-poruke za pregled chata:
- Prekidač Chat Review Emails omogućuje ili onemogućuje pregledne e-poruke u potpunosti
- Za svaku kategoriju možete postaviti vlastitu učestalost slanja: After every chat, Every X hours, Daily, Weekly, ili Never
Ovo vam omogućuje da pratite slabije kategorije dok utišavate kategorije koje već dobro rade.
Resetiranje sesije
Ako želite započeti novu sesiju poboljšanja:
- Kliknite Restart u zaglavlju
- Potvrdite reset
- Sve poruke i čekajući prijedlozi se brišu — promjene koje ste već primijenili ostaju
Dostupnost
Improvement Agent dostupan je na Professional planu i iznad, a također je uključen tijekom 14-dnevne Starter Pro probne verzije.
Najbolje prakse
- Budite konkretni: Što preciznije opišete problem, to su prijedlozi bolji
- Dajte kontekst: Navedite koji odgovor biste očekivali
- Simulirajte prije primjene: Uvijek prvo testirajte prijedloge
- Koristite redovito: Tjedne sesije poboljšanja održavaju vaš bot ažurnim