Confiance et p-value
La confiance affichée correspond à 1 − p-value. Le résultat est significatif quand elle dépasse le niveau choisi : l’écart a alors peu de chances de venir du hasard.
Saisissez les chiffres de chaque variante. Vous saurez si l’écart est significatif, combien de trafic il manque, et ce que la variante rapporterait une fois déployée.
La confiance affichée correspond à 1 − p-value. Le résultat est significatif quand elle dépasse le niveau choisi : l’écart a alors peu de chances de venir du hasard.
Il donne la fourchette plausible de l’uplift réel. S’il contient 0 %, l’écart observé peut encore s’expliquer par le hasard : continuez le test.
Si A et B ne reçoivent pas la part de trafic prévue (Sample Ratio Mismatch), le test est probablement biaisé. Vérifiez la mise en place avant de conclure.
Méthode : test Z de comparaison de deux proportions (variance poolée). Répartition attendue : 50 / 50. L’impact est estimé sur votre trafic actuel, hors saisonnalité.
Besoin d’un regard expert sur vos tests ?
On cadre avec vous les hypothèses, la durée et la lecture des résultats, en 30 minutes.