Muistiinpano
Tämän sivun käyttö edellyttää valtuutusta. Voit yrittää kirjautua sisään tai vaihtaa hakemistoa.
Tämän sivun käyttö edellyttää valtuutusta. Voit yrittää vaihtaa hakemistoa.
[Tämä artikkeli sisältää julkaisua edeltävää materiaalia ja voi muuttua.]
Suorita arviointeja ja analysoi tuloksia optimoidaksesi agenttisi käyttäytymisen ja varmistataksesi agentin täyttävän liiketoimintasi ja laatuvaatimukset. Voit myös ajaa testisarjan useita kertoja nähdäksesi muutoksia ajan myötä, kun parannat agenttiasi.
Testitulokset ovat käytettävissä Copilot Studiossa 89 päivän ajan. Jos haluat tallentaa testituloksesi pidemmäksi aikaa, vie tulokset CSV-tiedostoon.
Suorita testi testijoukolla
Kun olet luonut testisarjan, suorita testi käyttämällä kyseistä joukkoa. Tai suorita testit uudelleen käyttämällä samaa joukkoa tulosten vertailuun ajan ja iteraatioiden välillä. Testi voi kestää jopa muutaman minuutin. Voit suorittaa vain yhden testin kerrallaan.
Tärkeää
Agentin arvioinnit, jotka käyttävät käyttäjän todentamista, edellyttävät käyttöoikeutta Microsoft Copilot Studio liittimen kautta. Jos ylläpitäjäsi katkaisee tämän yhteyden, et voi suorittaa testejä arviointityökalulla. Lisätietoja on artikkelissa Copilot Studion liittimet ja tietoryhmät.
- Mene agenttisi arviointisivulle .
Suorita testi tekemällä jokin seuraavista toiminnoista:
- Testisetin luomisen tai muokkauksen lopuksi valitse Arvioi.
-
Viimeisimmät tulokset -osiossa suorita testi uudelleen tekemällä jokin seuraavista vaiheista:
- Vie hiiri arvioitavan testituloksen päälle, valitse kolme pistettä (...) ja valitse sitten uudelleen Arvioi testijoukko.
- Valitse testitulos avataksesi sen, valitse sitten kolme pistettä (...) Arviointi-yhteenvetopaneelista ja valitse uudelleen Arvioi testijoukko.
Jos testijoukon käyttäjäprofiilissa on rikkinäisiä yhteyksiä tai testisarjassa ei ole käyttäjäprofiilia, Hallinnoi yhteyksiä -valinta ilmestyy. Sinun ei tarvitse käyttää käyttäjäprofiilia testaukseen. Jos kuitenkin käytät profiilia, kaikkien yhteyksien täytyy toimia. Lisätietoja yhteyksien korjaamisesta löytyy kohdasta Käyttäjäprofiilien ja yhteyksien hallinta.
Arviointi voi kestää muutaman minuutin. Copilot Studioon tulee ilmoitus, kun testitulokset ovat valmiita tarkasteltavaksi.
Tutustu testituloksiin
Aina, kun suoritat testijoukon sisältävän arvioinnin, Copilot Studio:
Simuloi keskusteluja agentin kanssa käyttämällä yhdistettyä käyttäjätiliä ja lähettää testitapauksen jokaisen kysymyksen agentille.
Kerää agentin vastaukset.
Mittaa ja analysoi jokaisen vastauksen onnistumista. Jokainen testitapaus saa testitapauksen kriteerien perusteella Läpäisy-, hyläty-, virhe- tai virhe-arvon.
Määrittää läpivientinopeuden pistemäärän testijoukon Läpivienti/epäonnistuu -prosenttiosuuden perusteella.
Voit nähdä jokaisen testisarjan läpäisyprosentin agenttisi arviointisivulla , kohdassa Viimeisimmät tulokset. Nähdäksesi lisää testiajoja, valitse Näytä kaikki.
Katso ja arvioi yksityiskohtainen analyysi testitapauksesta
Kun avaat testituloksen, näet testisuorituksen yksityiskohdat, listan testissä käytetyistä kyselyistä, agentin vastauksen sekä Pass or Fail -pisteet.
Valitse testitapaus listasta nähdäksesi yksityiskohtaisen arvion jokaisesta vastauksesta. Valitse Kaikki, Hyväksy tai Epäonnistu suodattaaksesi tapauksia tuloksen mukaan.
Arviointiin sisältyvät odotetut ja todelliset vastaukset, testituloksen taustalla olevat perustelut sekä tiedot, aiheet ja työkalut, joita agentti käytti vastaamiseen.
Arvioinnin tulokset. Tämä esimerkki näyttää laatuarvioinnin tuloksen yksityiskohdat.
Valitse Näytä aktiivisuuskartta nähdäksesi agenttisi syötteet, päätökset ja tulokset testitapauksen sisällä. Lisätietoja on artikkelissa Näytä aktiviteettikeskustelu.
Testikysymyksen transkriptio ja agentin vastaus.
Resurssit, joita agentti käytti testissä. Valitse yksi avataksesi sen.
Voit antaa Microsoftille palautetta siitä, miten hyvin arviointi onnistui kussakin testitapauksessa. Tämä palaute koskee nimenomaan sitä, kuinka tehokkaasti valittu arviointimenetelmä arvioi vastauksen, ei sitä, oliko vastaus oikea. Palautteesi auttaa parantamaan arviointien laatua ja tarkkuutta ajan myötä.
Arvion arvioimiseksi valitse peukku
tai peukku
testitapaustietojen paneelissa. Kun palautelomake avautuu, anna lisätietoja arviostasi ja valitse sitten Lähetä.
Vertaa testituloksia
Haluat testata yhtä agenttiversiota ja nähdä suorituskyvyn muutokset ennen ja jälkeen muutosten tekemisen. Voit verrata kahta suoritusta samasta testisarjasta käyttämällä Comparison with -työkalua.
Vertailun näkemiseksi sinun täytyy ajaa sama testisarja vähintään kahdesti.
Agenttisi arviointisivulla , kohdassa Viimeisimmät testitulokset, avaa testiajo , jota haluat käyttää vertailun pohjana.
Valitse Vertaa-pudotusvalikko ja valitse testiajon aika ja päivämäärä, jonka haluat verrata tällä hetkellä avoimiin testituloksiin.
Testitapauslistassa nuolet näyttävät, mitkä testitapaustulokset paranivat vaihtamalla epäonnistumisesta läpäisemään
, tai hylättyinä siirtymällä läpäisemisestä
epäonnistumiseen.
Valitse testitapaus nähdäksesi lisätietoja. Arviointi-yhteenvetopaneelissa näet suoran vertailun testituloksista, jossa nykyisen kokeen tulos on päällä.
Vientitestitulokset
Voit viedä testitulokset CSV-tiedostoon. Tiedosto listaa kysymyksen, odotetun vastauksen (jos sovellettavissa), testimenetelmän, läpäisypisteet (jos sovellettavissa), agentin vastauksen, testituloksen ja analyysin jokaiselle testitapaukselle.
- Mene agenttisi arviointisivulle .
-
Viimeisimmät tulokset -osiossa voit viedä testituloksen tekemällä jommankumman seuraavista vaiheista:
- Vie kursori vietävän testitapauksen päälle, valitse kolmipistevalikkoa (...) ja sitten valitse Vie testitulokset.
- Valitse testitapaus avataksesi sen, valitse kolme pistettä (...) Arviointi-yhteenvetopaneelista ja valitse sitten Vie testitulokset.
Testitulokset latautuvat testisarjan nimeksi.csv.