Впервые мне удалось выстроить полноценно работающий конвейер для проверки гипотез. И я уже вижу, что это работает на планомерный и предсказуемый рост продукта.
Как выглядит конвейер на практике:
1. Команда закидывает свои гипотезы через google форму. Там бывают и внезапные озарения, и "я тут у соседа подсмотрел", и "мы тут на брейншторме подумали"
2. Я забираю эти гипотезы, определяю цевелую метрику, оцениваю потенциальный эффект в деньгах, веру в гипотезу (по шкале от 1 до 5) и эффорт (по шкале от 1 до 5). Чтобы оценить гипотезу я использую много подручных средств. Юнит-экономику (историческую и прогнозную), когорты и прогноз по их умиранию, данные из качественных и количественных исследований, бэнчмарки по рынку, данные от проверки предыдущих гипотез и т.п.
3. Дальше мы с командой берём топовые по скору гипотезы, продакты детализируют их до конкретной реализации (самой простой из имеющих смысл обычно). Дизайнеры отрисовывают макеты, вся команда их обсуждает. Разработка декомпозирует до подзадач и реализует.
4. Запускаем эксперимент. По-разному бывает - иногда AB, иногда сразу на всех и смотрим, что на графиках поменялось, иногда на определённую группу пользователей и смотрим, как её поведение изменилось.
5. Смотрим на результаты, принимаем решение. Откатить изменения, доработать и попробовать ещё раз, просто оставить все изменения и больше ничего здесь не делать.
6. На основе проверенных гипотез генерим и оцениваем новые (цикл замкнулся).

Следующий мой шаг - придумать, как держать в одном месте цельную и актуальную картинку текущего и целевого состояния продукта. Пока держу в Miro, но она очень быстро разбегается и устаревает. Раз в неделю обновлять сложно