anokhinde / ab_new_mechanics Goto Github PK

В ходе тестирования одной гипотезы целевой группе была предложена новая механика оплаты услуг на сайте, у контрольной группы оставалась базовая механика. В качестве задания необходимо проанализировать итоги эксперимента и сделать вывод, стоит ли запускать новую механику оплаты на всех пользователей.

• groups.csv - файл с информацией о принадлежности пользователя к контрольной или экспериментальной группе (А – контроль, B – целевая группа)

• groups_add.csv - дополнительный файл с пользователями, который вам прислали спустя 2 дня после передачи данных

• active_stats- файл с информацией о пользователях, которые зашли на платформу в дни проведения эксперимента.

• checks.csv- файл с информацией об оплатах пользователей в дни проведения эксперимента.

На основе проведенных статистических тестов можем сделать следующие выводы:

1. С новой механикой конверсия не увеличивается
2. Arppu c новой механикой увеличилось.

Не смотря на приятные результаты по ARPPU, мы не можем сделать выбор в пользу новой механики оплаты, т.к. основной метрикой является конверсия в оплату, а мы определили, что она не отличается от тестовой выборки.

pandas,numpy,seaborn, matplotlib,scipy,requests