Open in
Eksperimendid (A/B-testimine)
Kasuta päriskõnedel kõrvuti kahte agendi konfiguratsiooni ja lase edukuse määradel võitja välja valida.
A/B-testimine vastab andmete, mitte kõhutunde abil küsimusele „kas uus prompt on tegelikult parem?”: sissetulevad kõned jaotatakse agendi variantide vahel, iga kõnet hinnatakse tavapäraselt ning saad võrrelda variantide edukuse määrasid.
On kaks vaadet:
- Agendipõhine — testid seadistatakse ja häälestatakse iga agendi koostamisvaates selle A/B vahekaardil (
/dashboard/agents/<id>?tab=variants). Seal luuakse variandid ja lülitatakse test sisse. - Agentideülene ülevaade — leht Eksperimendid (
/dashboard/experiments, jaotises Kvaliteet ja testimine) koondab kõikide agentide testid ühte tabelisse.
Seadista test
Klõpsa lehel Eksperimendid nuppu Seadista A/B-test ja vali agent — jõuad selle agendi A/B vahekaardile, kus lood variantide konfiguratsioonid (üks on märgitud kontrolliks) ja lubad jaotatud testimise. Koostamisvaate kohta vaata juhendit Loo agent.
Loe ülevaadet
Iga testiga agendi kohta kuvab Eksperimentide tabel järgmist.
- Olek — Aktiivne (jaotatud testimine on sees) või Peatatud.
- Variandid — iga variant sildina, kus kontrollvariant on märgistatud.
- Juhtiv — seni parima edukuse määraga variant koos selle protsendiga. Kuni variantidel pole hinnatud kõnesid, kuvatakse Andmeid pole veel piisavalt — ära kuuluta võitjat käputäie kõnede põhjal.
- Kõned — kõnede koguarv testi variantide lõikes.
Testita agendid kuvatakse allpool ühe klõpsuga võimalustena testi alustamiseks. Mis tahes real klõpsamine viib selle agendi A/B vahekaardile, kus saad testi häälestada või lõpetada.