Improvement Agent
Improvement Agent yra dirbtiniu intelektu paremta priemonė, padedanti sistemingai tobulinti jūsų pokalbių roboto atsakymus remiantis tikrais klientų atsiliepimais.
Apžvalga
Kai pokalbis pažymimas kaip „reikia patobulinti“, Improvement Agent analizuoja:
- Pradinį pokalbį
- Vietas, kuriose pokalbių robotas neatsakė optimaliai
- Kaip atsakymus būtų galima patobulinti
Kaip pasiekti Improvement Agent
Yra trys būdai pradėti tobulinimo sesiją:
Iš pokalbio detalės rodinio
- Eikite į Pokalbiai informacijos suvestinėje ir atidarykite pokalbį
- Skyriuje "AI Improvement Agent" matysite atsiliepimo būseną
- Jei pokalbis pažymėtas kaip "Needs Improvement", spustelėkite Patobulinti su AI
Iš pokalbių sąrašo
Pokalbiai su neigiamu įvertinimu, kurių dar nebuvo tobulinta, rodo inline Patobulinti su AI mygtuką tiesiog Pokalbių sąraše — spustelėkite jį, kad pereitumėte tiesiai į agentą, neatsidarydami pokalbio.
Iš pokalbio peržiūros el. laiško
Jei gaunate pokalbio peržiūros el. laišką ir spustelėjate Reikia patobulinti, būsite nukreipti tiesiai į Improvement Agent sesiją tam pokalbiui. Žr. Rating chats from email žemiau.
Tobulinimo procesas
1. Išanalizuokite pradinį pokalbį
Kairėje panelėje matomas pradinio pokalbio turinys:
- Kiekvienas pranešimas numeruojamas patogiam nuorodų darymui
- Vartotojo pranešimai (violetiniai) ir roboto atsakymai (pilki) yra spalviškai atskirti
- Roboto žinutėse yra "Improve" mygtukas, kad pasirinktumėte jas tobulinimui
Išmanus žinučių pasirinkimas:
- Jei pokalbyje yra tik viena roboto žinutė, ji automatiškai yra išankstinio pasirinkimo būsenoje — agentas iškart žino, kurį atsakymą norite tobulinti.
- Jei yra keletas roboto žinučių, agento sveikinimas nurodys spustelėti "Improve" šalia konkrečios žinutės, kurią norite pataisyti. Pasirinkta žinutė yra paryškinta mėlynai ir šalia pokalbio įvesties atsiranda indikatorius.
2. Pokalbis su Improvement Agent
Centrinė panelė yra interaktyvus pokalbis su AI Improvement Agent:
- Apibūdinkite, kas pokalbyje nebuvo optimalu
- Paprašykite patobulinimų pasiūlymų
- Aptarkite alternatyvias atsakymų strategijas
- Nurodykite konkrečias žinutes iš pradinio pokalbio
Pavyzdinės užklausos:
- "Atsakymas į 3 klausimą buvo per miglotas. Kaip robotas galėtų atsakyti geriau?"
- "Robotui nepavyko suprasti klausimo apie produktą. Ką galime patobulinti?"
- "Pasiūlykite geresnį atsarginį atsakymą, kai robotas nėra tikras."
3. Peržiūrėkite ir pritaikykite pasiūlymus
Dešinėje panelėje rodomi sugeneruoti tobulinimo pasiūlymai:
| Suggestion Type | Description |
|---|---|
| New FAQ / Update FAQ / Delete FAQ | Sukuria, redaguoja arba pašalina DUK, užpildant žinių spragą |
| New / Update / Delete Core Instruction | Koreguoja jūsų pokalbių roboto pagrindines instrukcijas |
| Atnaujinti personą | Patobulina pokalbių roboto asmenybės aprašymą |
Kiekvienam pasiūlymui galite:
- Simuliuoti: Išbandyti, kaip robotas atsakytų su pasiūlymu (naudokite Simuliuoti visus, kad paleistumėte simuliaciją visiems laukiantiems pasiūlymams vienu metu)
- Taikyti: Pritaikyti pasiūlymą
- Reject: Atmesti pasiūlymą
Simuliacijos testavimas
Prieš pritaikydami pasiūlymą, galite jį simuliuoti:
- Spustelėkite Simuliuoti ant pasiūlymo (arba Simuliuoti visus, kad išbandytumėte visus laukiancius pasiūlymus)
- Simuliacijoje matysite:
- Pirminį vartotojo klausimą
- Simuliuotą atsakymą su taikomu pakeitimu
- Pirminis roboto atsakymas lieka matomas kairėje panelėje palyginimui
- Įvertinkite simuliuotą atsakymą:
- Puiku!: Agentas patvirtina, kad pasiūlymas paruoštas — pritaikykite jį su mygtuku Taikyti
- Beveik gerai: Agentas patobulina pasiūlymą pagal tai, kas vis dar trūksta
- Neįtinka: Agentas klausia, kas buvo negerai su simuliuotu atsakymu, kad galėtų perdirbti pasiūlymą
Simuliacijos įvertinimas niekada savaime nei pritaiko, nei atmeta pasiūlymo. Naudokite mygtukus Taikyti ir Reject ant pasiūlymo, kad priimtumėte galutinį sprendimą.
Sesijos užbaigimas
Kai susitvarkysite su visais pasiūlymais, spustelėkite Užbaigti tobulinimą pasiūlymų panelėje:
- Mygtukas išlieka neaktyvus tol, kol kiekvienas pasiūlymas nebus pritaikytas arba atmestas
- Užbaigus, būsite grąžinti į Pokalbių sąrašą
- Pokalbis bus pažymėtas kaip Patobulintas, o jo detalės rodinyje bus rodomas Peržiūrėti patobulinimą nuoroda atgal į sesiją
Atsiliepimų srautas
Pokalbių vertinimas
Prieš pradedant naudoti Improvement Agent, pokalbis turi būti įvertintas:
- Atidarykite pokalbį
- Skyriuje "AI Improvement Agent":
- Geri (Patinka): Pažymi kaip teigiamą pavyzdį
- Reikia patobulinti (Nepatinka): Pažymi pokalbį kaip reikalaujantį patobulinimo ir perskaičiuoja pasitikėjimo balą — tada atsiranda Patobulinti su AI mygtukas pradėti agentą
- Peržiūrėta (Patvirtinti): Pažymi pokalbį kaip peržiūrėtą/atmestą be teigiamo ar neigiamo įvertinimo (neveikia pasitikėjimo balui ir neaktyvuoja el. laiškų ar tobulinimo sesijų)
Kai pažymite pokalbį kaip Reikia patobulinti, DI automatiškai klasifikuoja, kiek rimta problema buvo — tai nulemia, kaip vertinimas paveiks jūsų pasitikėjimo balą (žr. Confidence score žemiau).
Vertinimai nėra galutiniai: pokalbiai pažymėti kaip Good arba Reviewed gali būti vėl atidaryti vėliau su Pažymėti kaip reikia patobulinimo mygtuku pokalbio detalės puslapyje. Pasitikėjimo balas perskaičiuojamas ir Improvement Agent vėl tampa prieinamas.
Pokalbių vertinimas iš el. laiško
Taip pat galite vertinti pokalbius tiesiai iš peržiūros el. laiškų, kuriuos gaunate, neatsidarydami informacijos suvestinės. Kiekviename laiške pateikiamas pokalbis ir klausimas „Was this a good response?“ su dviem mygtukais:
- Taip, geras atsakymas: Pažymi pokalbį kaip teigiamą ir nukreipia į sėkmės puslapį, kuriame matomas atnaujintas jūsų pasitikėjimo balas — įskaitant, kaip pasikeitė paveiktos atsakymo kategorijos balas
- Reikia patobulinti: Pažymi pokalbį kaip neigiamą ir nukreipia tiesiai į Improvement Agent sesiją tam pokalbiui
Vertinimo nuorodos peržiūros el. laiškuose pasibaigia po 7 dienų. Visada galite įvertinti pokalbį vėliau iš informacijos suvestinės.
Mokymosi fazės naudojimas
Mokymosi fazės metu jums automatiškai bus pateikiami prašymai įvertinti pokalbius — vertinimo užklausos atkeliauja kaip pokalbio peržiūros el. laiškai. Tai žymiai pagreitina jūsų pokalbių roboto tobulinimą.
Pasitikėjimo balas
Pasitikėjimo balas apibendrina jūsų pokalbių peržiūras skalėje 0–100. Jį rasite Pasitikėjimas skiltyje jūsų pokalbių roboto nustatymuose. Tai yra kokybės priežiūros priemonė, o ne faktinio teisingumo garantija ar klientų žvaigždučių reitingas.
Balų skaičiavimas pagal kategorijas
Pokalbiai grupuojami pagal atsakymų kategorijas, ir kiekviena kategorija gauna savo pasitikėjimo balą kartu su globaliu balu:
Kiekviena kategorija naudoja iki 20 naujausių įvertintų peržiūrų ir jų koregavimų, įskaitant neigiamų įvertinimų sunkumą. Globalus balas yra tų kategorijų vidurkis, kurios turi peržiūrėtų pokalbių. Peržiūrėta patvirtinimai be teigiamo arba neigiamo įvertinimo neprisideda kaip įvertinta peržiūra.
- Kategorijos kuriamos automatiškai, kai vyksta pokalbiai
- Galite pridėti, pervardyti arba ištrinti kategorijas Confidence skiltyje (ištrintos kategorijos pokalbiai perkeliami į automatinę atsarginę kategoriją)
- Taip pat galite rankiniu būdu priskirti atskirą pokalbį kitai kategorijai iš to pokalbio detalės puslapio, nepriklausomai nuo automatinio kategorizavimo
Neigiamų vertinimų sunkumo laipsnis
Kiekvienas „nepatinka“ automatiškai DI priskiriamas vienam iš keturių sunkumo lygių, kurie nulemia, kiek vertinimas sumažins pasitikėjimo balą:
- Minor issue
- Moderate issue
- Major issue
- Critical issue
Pokalbio detalės puslapyje rodoma priskirta sunkumo kategorija, taikomas balo koregavimas ir priežastis. Jei nesutinkate su klasifikacija, naudokite Override severity išskleidžiamąjį meniu ją pakeisti — pasitikėjimo balas perskaičiuojamas iš karto.
Pranešimai
Pasiekus sukonfigūruotą slenkstį su pakankamu peržiūrų skaičiumi gali būti pasiūlyta baigti mokymąsi. Tai automatiškai neužbaigia mokymosi fazės. Peržiūrėkite roboto atsakymus ir patys pasirinkite Užbaigti mokymosi fazę, kai būsite pasiruošę.
Chatbots → Bendra → Pranešimai
Gaukite visus pokalbius el. paštu. Valdykite gavėjus, el. laiško tipą ir dažnį čia.
- Pridėti gavėją: El. pašto adresas.
- Laiško tipas: Tik transkriptas / Su peržiūra.
- Dažnumas: Kiekvienas pokalbis, Kiekvalandinis, Kasdienis, Kasinis.
- Aktyvi → Išsaugoti pakeitimus.
Pokalbių transkripts įtraukti į visus planus. Peržiūros mygtukai reikalauja plano su pokalbių peržiūromis.
Nauji pokalbiai tik po aktyvacijos. Kasdien 09:00 UTC; kas savaitę pirmadieniais 09:00 UTC.
Sesijos atstatymas
Jei norite pradėti naują tobulinimo sesiją:
- Spustelėkite Pradėti iš naujo antraštėje
- Patvirtinkite atstatymą
- Visos žinutės ir laukiantys pasiūlymai bus ištrinti — jau pritaikyti pakeitimai lieka
Prieinamumas
Improvement Agent yra prieinamas Professional plan and above, ir taip pat įtrauktas į 14 dienų Starter Pro trial.
Geriausia praktika
- Būkite konkretūs: kuo tiksliau apibūdinsite problemą, tuo geresni bus pasiūlymai
- Pateikite kontekstą: paminėkite, kokio atsakymo tikėjotės
- Simuliuokite prieš taikydami: visada pirmiausia išbandykite pasiūlymus
- Naudokite reguliariai: kas savaitines tobulinimo sesijas palaiko jūsų robotą atnaujintą