Проверка гипотез

В "Миллионе" полным ходом идет работа. Этот пост - в большей степени для участников 5-го потока, но будет полезным и для остальных, поэтому публикую его здесь.

Итак, зачем нужны гипотезы? Чтобы вносить изменения в существующее положение вещей не "как придется", а осознанно.

Гипотеза формулируется в виде "если ...., то ....".

Для фиксации гипотез удобно использовать шаблон:
- сформулированная гипотеза;
- дата старта и окончания теста;
- механика теста;
- ключевые метрики;
- результат.

Удобно делать это в виде таблицы, где все перечисленное - это столбцы, а сами гипотезы - в строках.

Теперь подробнее.

Гипотеза

Пишем максимально понятную формулировку гипотезы.

Дата старта и окончания теста

Как у любого процесса, у теста должны быть начало и конец.

Для разных гипотез требуется разное время. Вы можете не знать его точно, когда приступаете к тесту. Тогда мы говорим о предположительном времени.

Иногда время на тест диктуется внешними факторами (сезонным спросом, например), а иногда - внутренними (мы не можем ждать результатов больше двух недель).

Механика теста

Механика - это набор конкретных действий (поменять фотографию на сайте, перестать материться во время замера при заказчике), в результате которых гипотеза фиксируется как рабочая или нерабочая.

Чем шире и обтекаемее сформулирована гипотеза, тем сложнее подобрать механику для теста. Идеальная формулировка предполагает механику из одного действия.

Ключевые метрики

Нам надо понять, что изменилось, когда мы запустили механику. Как мы поймем?

Примеры метрик: стоимость лида, конверсия в замер, длительность цикла продажи.

Результат

Мы генерируем гипотезы, чтобы понять, что работает, а что - нет. Что повлияло на результат, а что прошло мимо.

Результат каждого теста (независимо от того, сработало или нет) должен быть зафиксирован. Кроме того, результатом теста может быть гипотеза о том, почему изначальная гипотеза сработала или нет.

Этот результат нам понадобится для следующей волны гипотез.

На этом все. Если есть вопросы, задайте в комментариях.

#наподумать #миллион