Calculateur de significativité A/B

Décidez si le résultat de votre test A/B est un vrai signal ou du bruit — avec des statistiques correctes.

Deux types de test.

• Proportion / taux de conversion. Succès + visiteurs du contrôle et du traitement. Calcule les taux, le lift relatif, un Z-test poolé et l'IC 95%/99% de la différence.
• Métrique continue (moyenne et écart-type). Moyenne, écart-type et n de chaque groupe. Lance un t de Welch (sans supposer l'égalité des variances) avec ddl de Welch–Satterthwaite.

Au-delà de la p-value : lift, intervalle de confiance, taille d'échantillon pour 80%/90% de puissance, jours recommandés, correction de Bonferroni pour les comparaisons multiples et avertissement de sequential testing (ne guettez pas la p-value en cours d'expérience).

"Significatif" signifie que les données sont incompatibles avec une différence nulle à α=0,05 — pas que le lift est grand ou important. Combinez significativité et taille d'effet avant de déployer.