Experimente (testare A/B)
Rulați două configurații de agenți în paralel pe apeluri reale și lăsați ratele de succes să aleagă câștigătorul.
Testarea A/B răspunde la întrebarea „noul prompt este cu adevărat mai bun?” cu date, nu cu impresii: apelurile primite sunt împărțite între variante de agenți, fiecare apel este evaluat ca de obicei, iar apoi comparați ratele de succes pentru fiecare variantă.
Există două suprafețe:
- Pentru fiecare agent — testele sunt configurate și ajustate în generatorul
fiecărui agent, în fila A/B (
/dashboard/agents/<id>?tab=variants). Acolo sunt create variantele și este activat testul. - Prezentare generală între agenți — pagina Experimente
(
/dashboard/experiments, în secțiunea Calitate și testare) reunește testul fiecărui agent într-un singur tabel.
Configurați un test
Din pagina Experimente, faceți clic pe Configurați un test A/B și alegeți un agent — ajungeți în fila A/B a agentului respectiv, unde creați configurațiile variantelor (una este marcată ca martor) și activați testarea împărțită. Consultați Creați un agent pentru generatorul propriu-zis.
Consultați prezentarea generală
Pentru fiecare agent cu un test, tabelul Experimente afișează:
- Stare — Activ (testarea împărțită este activată) sau Întrerupt.
- Variante — fiecare variantă ca etichetă, cu varianta martor indicată.
- În frunte — varianta cu cea mai bună rată de succes de până acum, împreună cu procentul acesteia. Până când variantele nu au apeluri evaluate, se afișează Încă nu sunt suficiente date — nu declarați un câștigător pe baza câtorva apeluri.
- Apeluri — numărul total de apeluri pentru variantele testului.
Agenții fără test sunt listați dedesubt ca opțiuni rapide, dintr-un singur clic, pentru a începe unul. Dacă faceți clic pe orice rând, ajungeți în fila A/B a agentului respectiv pentru a ajusta sau a încheia testul.