Improvement Agent
Improvement Agent on tekoälyavusteinen työkalu, joka auttaa teitä järjestelmällisesti parantamaan chatbotinne vastauksia todellisen asiakaspalautteen perusteella.
Yleiskatsaus
Kun keskustelu merkitään "needs improvement", Improvement Agent analysoi:
- Alkuperäisen keskustelun
- Kohdat, joissa chatbot ei vastannut optimaalisesti
- Miten vastauksia voidaan parantaa
Pääsy Improvement Agentiin
On kolme tapaa aloittaa parannussessio:
Chatin tarkastelunäkymästä
- Siirtykää kohti Keskustelut hallintapaneelissa ja avaatte keskustelun
- "AI Improvement Agent" -osiossa näette palautteen tilan
- Jos chat on merkitty "Needs Improvement", klikatkaa Paranna tekoälyn avulla
Chats-listalta
Negatiivisen arvion saaneet keskustelut, joita ei ole vielä parannettu, näyttävät inline-Paranna tekoälyn avulla-painiketta suoraan Chats-listassa — klikatkaa sitä siirtyäksenne suoraan agenttiin ilman, että avaatte ensin keskustelua.
Chat-arvion sähköpostista
Jos saatte chat-arviosta sähköpostin ja klikkaatte Parannettavaa, teidät viedään suoraan Improvement Agent -sessioon kyseiselle keskustelulle. Katso kohta Rating chats from email alla.
Parannusprosessi
1. Analysoi alkuperäinen keskustelu
Vasen paneeli näyttää alkuperäisen chat-keskustelun:
- Jokainen viesti on numeroitu helppoa viittausta varten
- Käyttäjän viestit (violetti) ja botin vastaukset (harmaa) on värikoodattu
- Botin viesteissä on "Improve"-painike, jolla ne voi valita parannettaviksi
Älykäs viestinvalinta:
- Jos keskustelussa on vain yksi botin viesti, se valitaan automaattisesti — agentti tunnistaa välittömästi, mitä vastausta haluatte parantaa.
- Jos botin viestejä on useampia, agentin tervehdys ohjeistaa teitä klikkaamaan "Improve" sen viestin vieressä, jota haluatte korjata. Valittu viesti korostuu sinisellä ja chatin syöttökentän läheisyyteen ilmestyy indikaattoripalkki.
2. Keskustele Improvement Agentin kanssa
Keskimmäinen paneeli on interaktiivinen chat AI Improvement Agentin kanssa:
- Kuvaile, mikä keskustelussa ei ollut optimaalista
- Pyydä parannusehdotuksia
- Keskustele vaihtoehtoisista vastausstrategioista
- Viittaa tarkkoihin viesteihin alkuperäisestä keskustelusta
Esimerkkikehotteet:
- "Vastaus kysymykseen 3 oli liian epämääräinen. Miten botti voisi vastata paremmin?"
- "Botti ei ymmärtänyt tuotepyyntöä. Mitä voimme parantaa?"
- "Ehdota parempaa fallback-vastausta, kun botti on epävarma."
3. Tarkastele ja ota ehdotukset käyttöön
Oikea paneeli näyttää luodut parannusehdotukset:
| Suggestion Type | Description |
|---|---|
| New FAQ / Update FAQ / Delete FAQ | Luo, muokkaa tai poistaa UKK:n tietämykseen liittyvän aukon paikkaamiseksi |
| New / Update / Delete Core Instruction | Säätelee chatbotinne ydinohjeistusta |
| Päivitä persoona | Hienosäätää chatbotin persoonakuvausta |
Jokaisen ehdotuksen kohdalla voitte:
- Simuloi: Testata, miten botti vastaisi parannuksen kanssa (käyttäkää Simuloi kaikki suorittaaksenne simulaation kaikille odottaville ehdotuksille kerralla)
- Käytä: Ota parannus käyttöön
- Reject: Hylkää ehdotus
Testisimulaatio
Ennen ehdotuksen käyttöönottoa voitte simuloida sen:
- Klikatkaa Simuloi ehdotuksessa (tai Simuloi kaikki testataksenne kaikki odottavat ehdotukset)
- Simulaatio näyttää:
- Alkuperäisen käyttäjän kysymyksen
- Simuloidun vastauksen muutoksen kanssa
- Alkuperäinen botin vastaus pysyy näkyvissä vasemmassa paneelissa vertailua varten
- Arvioikaa simuloitu vastaus:
- Täydellinen!: Agentti vahvistaa, että ehdotus on valmis — ottakaa se käyttöön Käytä-painikkeella
- Melkein hyvä: Agentti tarkentaa ehdotusta sen perusteella, mitä vielä puuttuu
- Ei hyvä: Agentti kysyy, mikä simuloidussa vastauksessa oli vialla, jotta se voi työstää ehdotusta uudelleen
Simulaation arviointi ei koskaan ota ehdotusta käyttöön tai hylkää sitä automaattisesti. Käyttäkää ehdotuksen Käytä- ja Reject-painikkeita tehdäksenne lopullisen päätöksen.
Sessioiden päättäminen
Kun olette käsitelleet kaikki ehdotukset, klikatkaa Viimeistele parannus ehdotuspaneelissa:
- Painike pysyy poissa käytöstä, kunnes jokainen ehdotus on otettu käyttöön tai hylätty
- Valmiin session jälkeen palaatte Chats-listaan
- Keskusteluun lisätään sitten tunniste Parannettu, ja sen tarkastelunäkymässä näkyy Näytä parannus-linkki takaisin sessioon
Palautetyönkulku
Keskustelujen arvostelu
Ennen kuin Improvement Agentia voi käyttää, keskustelu täytyy arvostella:
- Avaa keskustelu
- "AI Improvement Agent" -osiossa:
- Hyvät (Peukku ylös): Merkitsee positiiviseksi esimerkiksi
- Parannettavaa (Peukku alas): Merkitsee keskustelun parannusta tarvitsevaksi ja laskee luottamuspistettä uudelleen — Paranna tekoälyn avulla-painike ilmestyy sitten agentin käynnistämistä varten
- Tarkistettu (Rasti): Merkitsee keskustelun tarkastetuksi/hylätyksi ilman, että sitä arvioidaan hyväksi tai huonoksi (ei vaikuta luottamuspisteeseen eikä laukaise sähköposteja tai parannussessioita)
Kun merkitsette keskustelun Parannettavaa:ksi, tekoäly luokittelee automaattisesti, kuinka vakava ongelma oli — tämä määrää, kuinka paljon arvio vaikuttaa luottamuspisteeseenne (katso kohta Confidence score alla).
Arviot eivät ole lopullisia: Good- tai Reviewed-merkittyjä keskusteluja voi avata uudelleen Merkitse parannettavaksi-painikkeella keskustelun tarkastelusivulla. Luottamuspiste lasketaan uudelleen ja Improvement Agent tulee uudelleen saataville.
Keskustelujen arvostelu sähköpostista
Voitte myös arvostella keskusteluja suoraan saamistanne chat-arviointisähköposteista avaamatta hallintapaneelia. Jokaisessa sähköpostissa näytetään keskustelu ja kysytään "Was this a good response?" kahden painikkeen kera:
- Kyllä, hyvä vastaus: Merkitsee keskustelun positiiviseksi ja vie teidät onnistumissivulle, jossa näytetään päivitetty luottamuspisteenne — mukaan lukien miten vaikuttaneen vastauskategorian pistemäärä muuttui
- Parannettavaa: Merkitsee keskustelun negatiiviseksi ja vie teidät suoraan Improvement Agent -sessioon kyseiselle keskustelulle
Arviointilinkit arviointisähköposteissa vanhenevat 7 päivän kuluttua. Voitte aina arvostella keskustelun myöhemmin hallintapaneelista.
Oppimisvaiheen käyttäminen
Oppimisvaiheen aikana teitä kehotetaan automaattisesti arvioimaan keskusteluja — arviointipyynnöt saapuvat chat-arviointisähköposteina. Tämä nopeuttaa merkittävästi chatbotinne parantamista.
Luottamuspiste (Confidence Score)
Luottamuspiste tiivistää keskusteluarvioinnit asteikolla 0–100. Löydätte sen chatbotinne asetusten Luottamus-välilehdeltä. Se on laatuarviointityökalu, ei takee faktuaalisesta oikeellisuudesta tai asiakastähtiarvostelusta.
Kategoriakohtainen pisteytys
Keskustelut ryhmitellään vastauskategorioihin, ja kukin kategoria saa oman luottamuspisteensä globaalin pisteen rinnalle:
Jokainen kategoria käyttää enintään 20 viimeisintä pisteytettyä arviota ja niiden korjauksia, mukaan lukien negatiivisten arvioiden vakavuus. Globaali piste on niiden kategorioiden keskiarvo, joilla on arvioituja keskusteluja. Tarkistettu-hyväksymiset ilman positiivista tai negatiivista arviota eivät tuota pisteytettyä arviota.
- Kategoriat luodaan automaattisesti keskustelujen myötä
- Voitte lisätä, nimetä uudelleen tai poistaa kategorioita Confidence-välilehdellä (poistetun kategorian keskustelut siirretään automaattisesti varakategoriaan)
- Voitte myös manuaalisesti siirtää yksittäisen keskustelun toiseen kategoriaan kyseisen keskustelun tarkastelusivulla, riippumatta automaattisesta luokittelusta
Negatiivisten arvioiden vakavuus
Jokainen peukku alas luokitellaan automaattisesti tekoälyn toimesta yhteen neljästä vakavuustasosta, jotka määräävät, kuinka paljon arvio alentaa luottamuspistettä:
- Minor issue
- Moderate issue
- Major issue
- Critical issue
Keskustelun tarkastelusivu näyttää määritetyn vakavuuden, sovelletun pistemääräisen korjauksen ja syyn. Jos olette eri mieltä luokituksesta, käyttäkää Override severity-valikkoa muuttaaksenne sitä — luottamuspiste lasketaan heti uudelleen.
Ilmoitukset
Kun määritetty kynnys saavutetaan riittavien arvioiden myötä, se voi laukaista ehdotuksen oppimisen lopettamiseksi. Se ei kuitenkaan lopeta oppimisvaihetta automaattisesti. Tarkastelkaa botin vastauksia ja valitkaa Lopeta oppimisvaihe itse, kun olette valmiit.
Chatbots → Yleiset → Ilmoitukset
Saakaa täydet keskustelut sähköpostitse. Hallinnoikaa vastaanottajia, sähköpostityyppiä ja lähetystiheyttä täällä.
- Lisää vastaanottaja: Sähköpostiosoite.
- Viestityyppi: Vain transkriptio / Arvioinnin kanssa.
- Tiheys: Jokainen chat, Tunnittain, Päivittäin, Viikoittain.
- Aktiivinen → Tallenna muutokset.
Chat-tallenteet sisältyvät kaikissa plan:eissa. Review-painikkeet vaativat planin, jossa on chat-arvioinnit.
Uudet keskustelut aktivoinnin jälkeen. Päivittäin klo 09:00 UTC; viikoittain maanantaisin klo 09:00 UTC.
Aloita uusi sessio (Reset Session)
Jos haluatte aloittaa uuden parannussession:
- Klikatkaa Käynnistä uudelleen otsikkopalkissa
- Vahvistakaa palautus
- Kaikki viestit ja odottavat ehdotukset poistetaan — muutokset, jotka olette jo ottaneet käyttöön, säilyvät
Saatavuus
Improvement Agent on saatavilla Professional-planissa ja sitä ylemmissä tasoissa, ja se sisältyy myös 14 päivän Starter Pro -kokeiluun.
Parhaat käytännöt
- Olkaa täsmällisiä: Mitä tarkemmin kuvaatte ongelman, sitä parempia ehdotuksista tulee
- Anna konteksti: Mainitkaa, mitä vastausta olisitte odottaneet
- Simuloikaa ennen käyttöönottoa: Testatkaa ehdotuksia aina ensin
- Käyttäkää säännöllisesti: Viikoittaiset parannussessiot pitävät botin ajan tasalla