ThunderPhone 2.0 вече е тук.Започнете самостоятелно — от 2 цента/мин.Прочетете съобщението

Analyze & improve

Експерименти (A/B тестване)

Изпълнявайте две конфигурации на агента паралелно при реални разговори и оставете степента на успех да определи победителя.

A/B тестването отговаря на въпроса „наистина ли новият промпт е по-добър?“ с данни вместо с впечатления: входящите обаждания се разпределят между варианти на агента, всяко обаждане се оценява както обикновено и сравнявате степента на успех за всеки вариант.

Има два изгледа:

  • За всеки агент — тестовете се конфигурират и настройват в конструктора на всеки агент, в раздела A/B (/dashboard/agents/<id>?tab=variants). Там се създават вариантите и се включва тестът.
  • Общ преглед между агентите — страницата Експерименти (/dashboard/experiments, в „Качество и тестване“) обединява тестовете на всички агенти в една таблица.

Настройте тест

От страницата „Експерименти“ щракнете върху Настройване на A/B тест и изберете агент — ще отворите раздела A/B на този агент, където създавате конфигурациите на вариантите (една е отбелязана като контролна) и активирате разделеното тестване. Вижте Създаване на агент за самия конструктор.

Прегледайте общия преглед

За всеки агент с тест таблицата „Експерименти“ показва:

  • Статус — Активен (разделеното тестване е включено) или На пауза.
  • Варианти — всеки вариант като етикет, с обозначен контролен вариант.
  • Води — вариантът с най-добра степен на успех досега, заедно с неговия процент. Докато вариантите нямат оценени обаждания, тук се показва Все още няма достатъчно данни — не обявявайте победител въз основа на шепа обаждания.
  • Обаждания — общият брой обаждания за вариантите в теста.

Агентите без тест са изброени отдолу като подкани с едно щракване да стартирате такъв. Щракването върху който и да е ред отваря раздела A/B на съответния агент, за да настроите или приключите теста.

Следващи стъпки