TGViewer
Conversion And Analytics Conversion And Analytics @conversion_and_analytics · 421 subscribers
Post #71 131
Зачем считать #samplesize для проведения #splittest
и что если сделать наоборот?

Объём выборки зависит от текущей конверсии и на сколько мы хотим её изменить (увеличить). Фокус в том, что практически всегда мы НЕ знаем на сколько изменится конверсия. Это просто догадки и домыслы.

Что мы действительно знаем, так это объем трафика, который у нас уже есть и который мы планируем отправить в тест. На основании этого можно посчитать минимальный рост конверсии, который мы сможем определить (#MinimumDetectableEffect).

Часто это оказывается крайне полезно. За 5 минут можно посчитать, что в некоторых тестах вы сможете определить только рост в 100% и более. Действительно ли наша гипотеза на столько прям хороша? #nobodyknows
Если не на столько она хорошо, то можно сэкономить время и ресурсы на другие, более перспективные, гипотезы.
More from @conversion_and_analytics
  1. Jan 20, 2022Почему я не люблю следить за конкурентами 1. Мы не знаем, что работает (приносит пользу),…
  2. Oct 18, 2021Дизайн экспериментов За первые семь месяцев этого года мы с командой запустили 74 продукто…
  3. Sep 20, 2021С вашей гипотезой точно что-то не так Вспомните последний а/б тест, который вы запускали.…
  4. Aug 9, 2021Лучший инструмент для А/Б тестов и знание математики У меня есть два тезиса, за которые ме…
  5. Jul 7, 2021«Продакт придумывает гипотезы» Можно заменить продакт на CRO или на маркетолога, это всё н…
  6. Jun 7, 2021Идея vs Гипотеза Самая частая проблема, которую приходится встречать среди junior/middle с…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →