TGViewer
Conversion And Analytics Conversion And Analytics @conversion_and_analytics · 421 subscribers
Post #189 596
Сколько надо трафика для А/Б теста?

Начинающий уровень. Скорее всего у вас очень мало трафика. Сейчас лучше не обращать внимание на предварительный расчет трафика:
- никто не знает на сколько может выиграть тот или иной эксперимент
- у вас даже нет истории экспериментов, чтобы сказать на сколько в среднем у вас эксперименты выигрывают
- вы только начинаете А/Б тесты и это значит, что до этого момента всё делалось на основе чьего-то субъективного мнения, что в свою очередь значит, что конверсию можно увеличивать в разы, так как никто понятия не имеет что работает, а что нет.

Просто начните тестировать и проведите 20, 30, 50 тестов.

Средний/Продвинутый уровень. Этот вопрос не имеет смысла, так как объём трафика зависит от базовой конверсии и роста конверсии. Какой будет рост никто не знает. Потому посчитать сколько нужно трафика никто не может.

Если вы считаете, что можете угадать, то А/Б тесты вам не надо в принципе. Если же вы решили проводить А/Б тесты, то значит вы априори признаете, что не знаете какая гипотеза победит и тем более на сколько.

Более правильный вопрос: какой MDE у нас получается на текущем трафике и текущих метриках за неделю, две недели, четыре недели, шесть и восемь недель? После посмотрите на гипотезу и подумайте, а реально ли эта гипотеза может дать такой рост?

Я понимаю, что никто не знает, но если MDE получится 100% в конечных продажах, то действительно ли вы верите, что данное изменение может удвоить бизнес? Звучит как что-то очень мало вероятное.

Забудьте про трафик, считайте MDE и выбирайте гипотезы для теста с умом.
More from @conversion_and_analytics
  1. Jan 20, 2022Почему я не люблю следить за конкурентами 1. Мы не знаем, что работает (приносит пользу),…
  2. Oct 18, 2021Дизайн экспериментов За первые семь месяцев этого года мы с командой запустили 74 продукто…
  3. Sep 20, 2021С вашей гипотезой точно что-то не так Вспомните последний а/б тест, который вы запускали.…
  4. Aug 9, 2021Лучший инструмент для А/Б тестов и знание математики У меня есть два тезиса, за которые ме…
  5. Jul 7, 2021«Продакт придумывает гипотезы» Можно заменить продакт на CRO или на маркетолога, это всё н…
  6. Jun 7, 2021Идея vs Гипотеза Самая частая проблема, которую приходится встречать среди junior/middle с…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →