Calculateur gratuit

Combien de temps doit durer votre test A/B ?

Indiquez votre taux de conversion, la plus petite hausse qui vaut la peine d’être détectée et votre trafic quotidien. Vous verrez combien de visiteurs il faut à chaque variante et combien de jours cela prend, pour des résultats consultés chaque jour.

%Visiteurs qui atteignent l’objectif aujourd’hui
%Relative : 10 % font passer de 5 % à 5,5 %
Ceux qui entreraient dans le test
Variantes
Original compris
Confiance
Puissance

Votre test a besoin de

25 jours

visiteurs par variante
61 330
visiteurs au total
122 660

De quoi détecter un passage de 5 % à 5,5 %.

Prévoyez 4 semaines entières (28 jours), pour que chaque jour de la semaine pèse autant.

Lancer ce test dans LiftCanary

Avec une puissance de 80 %, une vraie hausse de cette taille est détectée 8 fois sur 10. Calculé avec le test toujours valide de LiftCanary (mSPRT), corrigé selon le nombre de variantes.

Comment le lire

Ce qui détermine ce chiffre

Consultez-le chaque jour, il reste valide

Les calculateurs classiques supposent que vous ne regardez qu’une fois, à la fin. Consulté chaque jour, un test classique désigne un faux gagnant environ 30 % du temps après 40 consultations. Ce calculateur s’appuie sur les statistiques toujours valides de LiftCanary : vous pouvez regarder chaque jour, et arrêter plus tôt si la vraie hausse dépasse celle que vous aviez prévue. En contrepartie, il demande plus de visiteurs qu’un calculateur classique, dont le chiffre ne tient que si vous ne regardez jamais avant la fin.

La hausse choisie compte le plus

Divisez par deux la plus petite hausse à détecter et il vous faut environ quatre fois plus de visiteurs. Choisissez le plus petit changement que vous mettriez vraiment en production, pas celui que vous espérez.

Chaque variante coûte du trafic

Chaque variante supplémentaire a besoin de ses propres visiteurs, et la confiance est corrigée pour les comparaisons en plus, afin qu’aucune variante ne gagne par chance. Testez vos deux ou trois meilleures idées, pas dix.

Trop long ? Changez le test, pas le calcul

Testez un changement plus marqué, mettez plus de trafic dans le test ou mesurez un objectif plus proche du changement, comme l’ajout au panier plutôt que l’achat. Dans LiftCanary, CUPED utilise ce que les visiteurs récurrents ont fait avant le test pour réduire le bruit, ce qui permet souvent de conclure plus tôt que cette estimation.

Planifiez-le là où vous le lancez

Quand vous créez une expérience dans LiftCanary, cette estimation se fait à partir de votre trafic réel, et les résultats restent valides à chaque consultation.