​​Презентация по вовлечению с мероприятия KDD 2020 и хорошая краткая выжимка от Павла Левчука:

1/ Существует 3 уровня вовлечения:
-- involvement (Presence of a user);
-- interaction (Action of a user);
-- contribution (Input of a user).

Ретеншн является производной от вовлечения. Поэтому наращивать ретеншн можно разными способами влияя на цепочку involvement → interaction → contribution.

2/ На 3 вышеописанных уровня вовлечения можно смотреть по-разному:
-- intra-sessions (измерять активность пользователя в продукте во время сессии);
-- inter-sessions (измерять привычку пользователя и лояльность за длительный период времени);

3/ Оценивать результаты А/Б-тестов только по intra-session метрикам опасно. Поэтому выработать и смотреть на долгие метрики (inter-sessions) - необходимость.

4/ Возможно, одна из самых недооцененных метрик в inter-sessions это метрика absence time.

Хотя, если вернуться к Reforge Retention Framework, то формирование привычки там определяется по схеме N действий за M дней, что неявно включает в себя absence time.

5/ Метрика Number of Days (а по-сути) гистограмма пользования (power user smile curve), о которой писал еще Andrew Chen, становится одним из стандартных способов качественной оценки вовлеченности. Правда, нужно понимать цикл повторного использования продукта, чтобы делать правильные выводы.

via @ProductAnalytics