1. Оценка результатов A/B-теста конверсии
Продуктовый аналитикКонтекст
Команда запустила новый дизайн кнопки оформления заказа. В контрольной группе (старый дизайн) из 100 посетителей покупку совершили 45. В тестовой группе (новый дизайн) из 100 посетителей купили 60.
Проблема
Необходимо выяснить, является ли увеличение конверсии статистически значимым или это случайное колебание.
Как использовать
Ввести 60 успехов и 100 испытаний для Группы 1, 45 успехов и 100 испытаний для Группы 2. Оставить гипотетическую разницу 0, выбрать двустороннюю гипотезу и альфу 0.05.
{"group1Successes": 60, "group1Trials": 100, "group2Successes": 45, "group2Trials": 100, "hypothesizedDifference": 0, "alternative": "two-sided", "alpha": 0.05, "decimalPlaces": 4}Результат
Калькулятор показывает p-значение 0.0337. Так как это меньше 0.05, нулевая гипотеза отклоняется (rejectNull: true) — новый дизайн действительно работает лучше.