Improvement Agent
Improvement Agent on tekoälypohjainen työkalu, joka auttaa teitä järjestelmällisesti parantamaan chatbotinne vastauksia todellisen asiakaspalautteen perusteella.
Yleiskatsaus
Kun chat merkitään "needs improvement" -tilaan, Improvement Agent analysoi:
- Alkuperäisen keskustelun
- Missä chatbot ei vastannut optimaalisesti
- Miten vastauksia voidaan parantaa
Pääsy Improvement Agentiin
On kolme tapaa aloittaa parannussessio:
Chatin yksityiskohtanäkymästä
- Siirtykää kojelaudan Chats-osioon ja avaatte chatin
- "AI Improvement Agent" -osiosta näette palautteen tilan
- Jos chat on merkitty "Needs Improvement", klikatkaa Improve with AI
Chats-listasta
Negatiivisen arvion saaneet chateja, joita ei ole vielä parannettu, näytetään inline-muotoisella Improve with AI -painikkeella suoraan Chats-listassa — klikatkaa sitä siirtyäksenne suoraan agenttiin ilman, että avaatte ensin chatin.
Chat-arvion sähköpostista
Jos saatte chat-arviointisähköpostin ja klikkaatte Needs improvement, teidät viedään suoraan Improvement Agent -sessioon kyseiselle chatille. Katso Rating chats from email alla.
Parannusprosessi
1. Analysoi alkuperäinen keskustelu
Vasen paneeli näyttää alkuperäisen chat-keskustelun:
- Jokainen viesti on numeroitu helppoa viittaamista varten
- Käyttäjän viestit (violetti) ja botin vastaukset (harmaa) on väritetty
- Botin viesteissä on "Improve"-painike, jolla valitsette ne parannettaviksi
Älykäs viestin valinta:
- Jos chat sisältää vain yhden botin viestin, se valitaan automaattisesti — agentti tietää heti, mitä vastausta haluatte parantaa.
- Jos chatissa on useita botin viestejä, agentin tervehdys ohjaa teitä klikkaamaan "Improve" sen tietyn viestin vieressä, jonka haluatte korjata. Valittu viesti korostetaan sinisellä ja indikaattoripalkki ilmestyy lähelle chatin syöttökenttää.
2. Keskustele Improvement Agentin kanssa
Keskimmäinen paneeli on interaktiivinen chat AI Improvement Agentin kanssa:
- Kuvaile, mikä keskustelussa ei ollut optimaalista
- Pyydä parannusehdotuksia
- Keskustele vaihtoehtoisista vastausstrategioista
- Viittaa alkuperäisen chatin tiettyihin viesteihin
Esimerkkikehotteet:
- "Vastaus kysymykseen 3 oli liian epämääräinen. Miten botti voisi vastata paremmin?"
- "Botti ei ymmärtänyt tuotetta koskevaa kyselyä. Mitä voimme parantaa?"
- "Ehdota parempaa fallback-vastausta, kun botti on epävarma."
3. Tarkastele ja ota ehdotukset käyttöön
Oikeanpuoleinen paneeli näyttää generoidut parannusehdotukset:
| Suggestion Type | Description |
|---|---|
| New FAQ / Update FAQ / Delete FAQ | Luo, muokkaa tai poistaa FAQ:n tietämyksen aukon paikkaamiseksi |
| New / Update / Delete Core Instruction | Säätää chatbotin ydinohjeistusta |
| Update Persona | Hienosäätää chatbotin persoonakuvausta |
Jokaiselle ehdotukselle voitte:
- Simulate: Testata, miten botti vastaisi parannuksen kanssa (käyttäkää Simulate All suorittaaksenne simuloinnin kaikille odottaville ehdotuksille kerralla)
- Apply: Käyttää parannusta
- Reject: Hylätä ehdotus
Testisimulointi
Ennen ehdotuksen käyttöönottoa voitte simuloida sen:
- Klikatkaa ehdotuksen Simulate-painiketta (tai Simulate All testataksenne kaikki odottavat ehdotukset)
- Simulointi näyttää:
- Alkuperäisen käyttäjän kysymyksen
- Simuloidun vastauksen muutoksen kanssa
- Alkuperäinen botin vastaus pysyy näkyvissä vasemmassa paneelissa vertailua varten
- Arvioikaa simuloitu vastaus:
- Perfect!: Agentti vahvistaa, että ehdotus on valmis — ottakaa se käyttöön Apply-painikkeella
- Almost good: Agentti tarkentaa ehdotusta sen perusteella, mitä vielä puuttuu
- Not good: Agentti kysyy, mikä oli vialla simuloidussa vastauksessa, jotta se voi muokata ehdotusta
Simuloinnin arviointi ei itsessään käytä tai hylkää ehdotusta. Käyttäkää ehdotuksen Apply- ja Reject-painikkeita tehdäksenne lopullisen päätöksen.
Sessionin päättäminen
Kun olette käsitelleet kaikki ehdotukset, klikatkaa ehdotus-paneelissa Complete Improvement:
- Painike pysyy pois käytöstä, kunnes kaikki ehdotukset on joko otettu käyttöön tai hylätty
- Valmiin jälkeen palaatte Chats-listaan
- Chattiin lisätään Improved-merkintä ja sen yksityiskohtanäkymässä näkyy View Improvement -linkki takaisin sessioon
Palautetyönkulku
Chattien arviointi
Ennen kuin Improvement Agentia voi käyttää, chat on arvioitava:
- Avaa chat
- "AI Improvement Agent" -osiosta:
- Good (peukku ylös): Merkitsee positiiviseksi esimerkiksi
- Needs Work (peukku alas): Merkitsee chatin parannusta vaativaksi ja laskee uudelleen luottamusarviota — tämän jälkeen ilmestyy Improve with AI -painike agentin käynnistämiseksi
- Reviewed (valintamerkki): Merkitsee chatin tarkastelluksi/hylätyksi ilman, että sitä arvioidaan hyväksi tai huonoksi (ei vaikuta luottamusarvioon eikä laukaise sähköposteja tai parannussessioita)
Kun merkitsette chatin Needs Work, tekoäly luokittelee automaattisesti ongelman vakavuuden — tämä määrää, kuinka paljon arvio vaikuttaa luottamusarvioonne (katso Confidence score alla).
Arviot eivät ole lopullisia: chateja, jotka on merkitty Good- tai Reviewed-tilaan, voidaan avata uudelleen klikkaamalla chatin yksityiskohtasivulla Mark as needs improvement -painiketta. Luottamusarvio lasketaan uudelleen ja Improvement Agent muuttuu jälleen saataville.
Chattien arviointi sähköpostista
Voitte myös arvioida chateja suoraan saamistanne chat-arviointisähköposteista ilman kojelaudan avaamista. Jokainen sähköposti näyttää keskustelun ja kysyy "Was this a good response?" kahden painikkeen kera:
- Yes, good answer: Merkitsee chatin positiiviseksi ja johtaa teidät onnistumissivulle, joka näyttää päivitetyn luottamusarvionne — mukaan lukien miten kosketetun vastauskategorian piste muuttui
- Needs improvement: Merkitsee chatin negatiiviseksi ja vie teidät suoraan Improvement Agent -sessioon kyseiselle chatille
Arviointilinkit arviointisähköposteissa vanhenevat 7 päivän kuluttua. Voitte aina arvioida chatin myöhemmin kojelaudasta.
Oppimisvaiheen käyttäminen
Oppimisvaiheen aikana teitä pyydetään automaattisesti arvioimaan chatteja — arviointipyynnöt saapuvat chat-arviointisähköposteina. Tämä nopeuttaa merkittävästi chatbotinne parantumista.
Confidence Score
Luottamusarvio mittaa, kuinka luotettavasti chatbotinne vastaa, perustuen antamiinne arvioihin. Löydätte sen chatbotinne asetusten Confidence-välilehdestä.
Kategoriakohtainen pisteytys
Keskustelut ryhmitellään vastauskategorioihin, ja jokaiselle kategorialle annetaan oma luottamusarvio globaalin pisteen lisäksi:
- Kategoriat luodaan automaattisesti chattien kertyessä
- Voitte lisätä, nimetä uudelleen tai poistaa kategorioita Confidence-välilehdellä (poistetun kategorian chatit siirretään automaattiseen fallback-kategoriaan)
Negatiivisten arvioiden vakavuus
Jokainen peukku alas luokitellaan automaattisesti tekoälyn toimesta yhteen neljästä vakavuustasosta, jotka määrittävät kuinka paljon arvio alentaa luottamusarviota:
- Minor issue
- Moderate issue
- Major issue
- Critical issue
Chatin yksityiskohtasivu näyttää määritetyn vakavuuden, sovelletun pistemuutoksen ja syyn. Jos ette ole samaa mieltä luokituksen kanssa, käyttäkää Override severity -alasvetovalikkoa muuttaaksenne sitä — luottamusarvio lasketaan välittömästi uudelleen.
Chat-arviointisähköpostit
Confidence-välilehdellä hallitsette, kuinka usein vastaanotatte chat-arviointisähköposteja:
- Chat Review Emails -kytkin ottaa arviointisähköpostit käyttöön tai pois käytöstä kokonaan
- Jokaiselle kategorialle voitte asettaa oman sähköpostitiheyden: After every chat, Every X hours, Daily, Weekly, tai Never
Näin voitte pitää tarkkaa silmällä heikkoja kategorioita samalla, kun vaimentatte hyvin toimivia kategorioita.
Reset Session
Jos haluatte aloittaa uuden parannussession:
- Klikatkaa otsikossa Restart
- Vahvistakaa nollaus
- Kaikki viestit ja odottavat ehdotukset poistetaan — jo käytössä olevat muutokset säilyvät
Saatavuus
Improvement Agent on saatavilla Professional-planilla ja sitä ylemmillä sekä sisältyy 14 päivän Starter Pro -kokeiluun.
Hyvät käytännöt
- Olkaa tarkkoja: Mitä täsmällisemmin kuvailette ongelman, sitä parempia ehdotuksia saatte
- Tarjotkaa kontekstia: Mainitkaa, mitä vastausta olisitte odottaneet
- Simuloikaa ennen käyttöönottoa: Testatkaa ehdotuksia aina ensin
- Käyttäkää säännöllisesti: Viikoittaiset parannussessiot pitävät botin ajan tasalla