Ускорение А/В
Способ 2. Выбрать другую метрику 😅
Да-да, вы не ослышались. Можно и иногда даже нужно выбирать другие метрики в А/В, чтобы ждать результатов не 2 года, а 2-3 недели
Прибыль = кол-во заказов * средняя прибыль с одного заказа
Невероятно, но факт (ну, почти всегда факт 😜): дисперсия этих множителей сильно меньше дисперсии прибыли
А значит, А/В успешен, если
хотя бы одна из метрик растёт, а другая - не падает
P.S. Но не забывайте про поправки (например, Бонферонни) для множественного тестирования гипотез
Post #38
651