Eksperimenter (A/B-testing)
Kjør to agentkonfigurasjoner side om side på ekte samtaler, og la suksessratene avgjøre vinneren.
A/B-testing besvarer spørsmålet «er den nye prompten faktisk bedre?» med data i stedet for magefølelse: innkommende samtaler fordeles mellom agent- varianter, hver samtale vurderes som vanlig, og du sammenligner suksessrater per variant.
Det finnes to visninger:
- Per agent — tester konfigureres og justeres i hver agents
bygger, på A/B-fanen (
/dashboard/agents/<id>?tab=variants). Der oppretter du varianter og slår på testen. - Oversikt på tvers av agenter — siden Eksperimenter
(
/dashboard/experiments, under Kvalitet og testing) samler alle agenttestene i én tabell.
Sett opp en test
På siden Eksperimenter klikker du Sett opp en A/B-test og velger en agent — du kommer til agentens A/B-fane, der du oppretter variantkonfigurasjonene (én er merket kontroll) og aktiverer delt testing. Se Bygg en agent for selve byggeren.
Les oversikten
For hver agent med en test viser Eksperimenter-tabellen:
- Status — Aktiv (delt testing på) eller Pauset.
- Varianter — hver variant som en etikett, med kontrollvarianten merket.
- Ledende — varianten med best suksessrate så langt, med prosentandelen. Til variantene har vurderte samtaler, står det Ikke nok data ennå — ikke utpek en vinner basert på bare noen få samtaler.
- Samtaler — totalt antall samtaler på tvers av testens varianter.
Agenter uten en test vises under som oppfordringer du kan starte med ett klikk. Ved å klikke på en rad går du til den aktuelle agentens A/B-fane for å justere eller avslutte testen.