TGViewer
Conversion And Analytics Conversion And Analytics @conversion_and_analytics · 421 subscribers
Post #196 570
А/Б тестирование на малом трафике

1. Математика не особо различает мало у вас трафика или много. Если стат. значимость достигнута, то для данного эффекта трафика достаточно.

2. Это приводит нас к утверждению, что тестировать можно на любом трафике, но гипотезы должны быть разные. Чем меньше трафика, тем более значимые изменения можно измерить, тем более "крутые" гипотезы должны быть.

Что реально делать, если трафика мало?

Ситуация А. Вы никогда ранее не занимались улучшением сайта

1. Имеет смысл заказать какой-то стандартный аудит на основе "лучших практик", а потом протестировать рекомендации крупными кусками. Если сайт не оптимизировали до этого, то должно помочь.

2. Второй вариант. Заняться этим самому или поручить продакту / маркетологу. 100% времени это не займёт, но станет хорошим начинанием, которое вырастет во что-то значимое.

Ситуация Б. Вы уже занимались улучшениями сайта

1. Нет смысла нанимать подрядчика или специалиста. Основные ошибки уже исправлены. Нетривиальные вещи подрядчики скорее не найдут, а на 100% заниматься проектом кроме вас никто не будет.

2. Есть смысл тестировать новые направления продукта / предложения, что-то кардинально нового. Это может дать хороший рост, который можно будет увидеть в А/Б тесте. Всем остальным заниматься смысла нет, т.к. просто не будет значимости в А/Б тестах.
More from @conversion_and_analytics
  1. Jan 20, 2022Почему я не люблю следить за конкурентами 1. Мы не знаем, что работает (приносит пользу),…
  2. Oct 18, 2021Дизайн экспериментов За первые семь месяцев этого года мы с командой запустили 74 продукто…
  3. Sep 20, 2021С вашей гипотезой точно что-то не так Вспомните последний а/б тест, который вы запускали.…
  4. Aug 9, 2021Лучший инструмент для А/Б тестов и знание математики У меня есть два тезиса, за которые ме…
  5. Jul 7, 2021«Продакт придумывает гипотезы» Можно заменить продакт на CRO или на маркетолога, это всё н…
  6. Jun 7, 2021Идея vs Гипотеза Самая частая проблема, которую приходится встречать среди junior/middle с…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →