Как сравнить результаты конверсий?

Даже зная кол-во просмотров каждого варианта и кол-во переходов нельзя просто так взять и сравнить их отношения.
Чтоб понять какой из вариантов лучше конвесит нужно оценить статзначимость!

Можно воспользоваться формулой расчета интервала для разницы двух конверсий с картинки, где:
С1, С2 - конверсии
N1, N2 - величины выборок
1,96 - коэффициент для уровня доверия 95%

😎 Пример:
Продолжаем следить за Губернатором, который повышает уровень образования.
Он нарисовал два постера с QR-кодами на курс по повышению грамотности.
Прошло время и теперь он знает, какое кол-во людей их увидело и какое кол-во перешло по ним.
Первый пост собрал 1000 просмотров и 35 переходов, коэфф конверсии 35/1000=0,035
Второй пост собрал 1250 просмотров и 21 переход, коэфф конверсии 21/1250=0,0168
Тогда, подставляя значения в формулу в таблице
Получим доверительный интервал [0,0043;0,032]

Как оценить доверительный интервал:
Если полученный интервал не включает 0, можно считать, что изменение конверсии статистически значимое.
Если бы содержал, это бы значило, что по имеющимся данным конверсии неразличимы.

Итого:
Значение больше нуля, значит изменение показателя конверсии одного варианта относительно другого можно считать статистически значимым с уровнем доверия 95%( в нашем случае, так как брали коэффициент 1,96) и лежит в полученном интервале.
Значит первый пост имеет лучшую конверсию.

@product_lev

#analyst #Confidence #product #pm #менеджер #продукта #аналитика #pmm #маркетинг #ctr #конверсия