Elysia Tools
Navigation mobile
Workflow Playbook
Planifiez une expérience A/B, dimensionnez les preuves, choisissez le test adapté et examinez l'effet avant de décider.
Dossiers
Ce parcours s'adresse aux équipes produit, croissance, marketing, recherche et opérations qui veulent une lecture A/B défendable. Il aide à fixer la métrique, dimensionner les preuves, sélectionner un test et relire le résultat. Il n'alloue pas le trafic, ne valide pas les événements, ne surveille pas les garde-fous et ne décide pas du déploiement.
Avant le bilan final, notez référence, effet minimal utile, alpha ou confiance, puissance, trafic et règle d'arrêt. Deux taux indépendants demandent un Z à deux proportions ; des données appariées demandent un test apparié ; des groupes continus indépendants aux variances différentes demandent Welch.
Lisez ensemble effet absolu, lift relatif, intervalle, valeur p, échantillon et alertes. Comparez l'intervalle au seuil pratique et contrôlez qualité et garde-fous. La significativité décrit la compatibilité avec un modèle nul ; elle ne prouve ni taille, ni sécurité, ni rentabilité, ni succès commercial.
Guide de workflow
Utilisez effect-size-calculator pour la différence attendue, sample-size-calculator ou margin-of-error-calculator pour la précision et statistical-power-calculator comme sensibilité à un échantillon. Pour deux bras, utilisez ab-test-significance-calculator avec référence, lift, alpha, puissance, trafic et répartition afin d'estimer utilisateurs et jours.
Utilisez two-proportion-z-test-calculator pour deux taux indépendants et one-proportion-z-test-calculator pour un taux face à une référence. Utilisez z-test-calculator si l'écart-type de population est connu ou pour une proportion, one-sample-t-test-calculator pour un groupe, paired-t-test-calculator pour des données appariées, two-sample-t-test-calculator seulement si la variance commune est défendable et welch-t-test-calculator si les variances diffèrent.
Saisissez les comptes ou résumés figés. Utilisez ab-test-significance-calculator pour écarts, lift, intervalles, valeurs p, estimations et alertes ; utilisez confidence-interval-calculator et p-value-calculator pour vérifier. Ne changez ni métrique ni règle d'arrêt après le résultat.
Comparez effet absolu et relatif et intervalle au seuil pratique. Revérifiez qualité, exposition, comparaisons multiples, consultation séquentielle et garde-fous externes, puis notez la décision et sa justification. Significatif peut rester insuffisant, et inconclusif ne prouve pas l'absence d'effet.
Pour deux résultats binaires indépendants, choisissez two-proportion-z-test-calculator. Pour deux mesures continues indépendantes aux variances potentiellement différentes, choisissez welch-t-test-calculator ; utilisez paired-t-test-calculator seulement pour des observations réellement appariées avant et après.
Ne passez au lancement que si l'intervalle et la taille d'effet soutiennent le seuil pratique fixé à l'avance et si les garde-fous passent. Une petite valeur p ne prouve ni la valeur ni la sécurité de la modification.