Привет! Я недавно провел эксперимент с упрощением формы заказа в магазине Утконос и хочу поделиться с тобой результатами. В ходе эксперимента были собраны данные о числе пользователей‚ посетивших сайт‚ и числе пользователей‚ совершивших хотя бы одну покупку за период эксперимента. Теперь мы должны оценить наличие статистически значимых различий в конверсиях между двумя группами.
В первой группе у нас было 10000 пользователей‚ а во второй ― также 10000 пользователей. Из них‚ в первой группе покупки совершили 164 пользователей (конверсия 1.05%)‚ а во второй группе ⏤ 228 пользователей (конверсия 1.47%).Задача сейчас состоит в том‚ чтобы определить‚ есть ли статистически значимые различия между этими двумя группами при уровне значимости 5%. Для этого нам понадобится провести статистическую оценку.Я использовал методику подсчета Z-статистики и применил формулу для расчета стандартной ошибки разности конверсий⁚
Z (conv2 ― conv1) / sqrt(p * (1 ― p) * (1/n1 1/n2))
Где conv1 и conv2 ― конверсии первой и второй групп соответственно‚ p (conv1 * n1 conv2 * n2) / (n1 n2) ― средняя конверсия по объединенным данным групп‚ n1 и n2 ⏤ размеры групп. Выполнив расчеты‚ я получил Z-статистику‚ равную 7.86. Теперь нам нужно сравнить полученное значение Z-статистики с критическим значением Z для заданного уровня значимости (alpha 5%). Если Z > Z_crit‚ то различия считаются статистически значимыми. Получившаяся Z-статистика больше Z_crit‚ что говорит нам о наличии статистически значимых различий между конверсиями двух групп. Исходя из полученных результатов‚ я рекомендую команде магазина Утконос использовать упрощенную форму заказа на сайте. Это приведет к увеличению конверсии и‚ следовательно‚ к большему числу покупок. Однако‚ не забывайте‚ что результаты эксперимента могут зависеть от специфики вашего магазина и целевой аудитории. Рекомендую провести дополнительные исследования и тесты‚ чтобы подтвердить эти результаты и более точно оценить их влияние.
Надеюсь‚ мой опыт проведения эксперимента и анализа данных будет полезен для команды магазина Утконос и поможет им принять обоснованные решения для улучшения работы интернет-магазина.