Expériences (tests A/B)
Exécutez deux configurations d’agents en parallèle sur des appels réels et laissez les taux de réussite désigner la gagnante.
Les tests A/B répondent à la question « le nouveau prompt est-il vraiment meilleur ? » avec des données plutôt qu'au feeling : les appels entrants sont répartis entre les variantes de l'agent, chaque appel est évalué comme d'habitude, et vous comparez les taux de réussite par variante.
Il existe deux interfaces :
- Par agent — les tests sont configurés et ajustés dans l'éditeur de chaque
agent, dans son onglet A/B (
/dashboard/agents/<id>?tab=variants). C'est là que les variantes sont créées et que le test est activé. - Vue d'ensemble inter-agents — la page Expériences
(
/dashboard/experiments, sous Qualité et tests) regroupe les tests de tous les agents dans un seul tableau.
Configurer un test
Depuis la page Expériences, cliquez sur Configurer un test A/B et sélectionnez un agent — vous accédez à l'onglet A/B de cet agent, où vous créez les configurations de variantes (l'une est marquée contrôle) et activez les tests répartis. Consultez Créer un agent pour l'éditeur lui-même.
Lire la vue d'ensemble
Pour chaque agent disposant d'un test, le tableau Expériences affiche :
- Statut — Actif (test réparti activé) ou En pause.
- Variantes — chaque variante sous forme d'étiquette, avec le contrôle indiqué.
- En tête — la variante ayant actuellement le meilleur taux de réussite, avec son pourcentage. Tant que les variantes n'ont pas d'appels évalués, cette colonne affiche Pas encore assez de données — ne désignez pas un gagnant sur la base de quelques appels.
- Appels — le nombre total d'appels parmi les variantes du test.
Les agents sans test sont répertoriés en dessous pour vous permettre d'en démarrer un en un clic. Cliquez sur une ligne pour accéder à l'onglet A/B de cet agent afin d'ajuster ou de clore le test.