​​А знаете ли вы, чем отличается корреляция от причинно-следственной связи?

Привет, Константин на связи. Я часто вижу как коллеги путают эти два понятия, а для продакт менеджера, между прочим, эта ошибка будет означать, что мы пытаемся повлиять на одну метрику через другую – а эта связь не работает. На английском это даже красивее звучит: “correlation is not causation”.

Если мы наблюдаем, как две метрики вместе растут или вместе падают, не всегда между ними есть взаимосвязь. Вы слышали про “Хоторнский эффект”? В 1924–1932 годах в серии экспериментов исследовали производительность труда. На фабрике в Иллинойсе замеряли влияние окружающей среды на работников: экспериментировали с уровнем освещенности, уборкой помещения и изменением рабочих мест. Как только ученые что-то нащупали, они заметили проблему: наблюдаемый рост производительности снизился почти сразу после того, как исследователи покинули завод 😃. Оказалось, что показатели росли из-за осведомленности рабочих об эксперименте, а не изменения окружающей среды. Они просто работали лучше, пока за ними наблюдают. Исследователи до сих пор называют это явление эффектом Хоторна. Крайне важно найти не только корреляцию между какими-то показателями, но и выяснить причинно-следственную связь.

На одном старом проекте мы (очень неловко) проводили эксперименты по подбору цены за услугу. Все шло как-то крайне неудачно. Изменение цен отрицательно коррелировало с итоговыми продажами: понижаем цену - выручка падает, поднимаем цену - всё равно падает. Поговорив с клиентами, обнаружили косяк: пользователи не всегда хотели покупать подписку сразу на онбординге, а возвращаясь в приложение с намерением купить, они не находили недавней скидки. Все дело было в проблемном дизайне экспериментов и самого приложения. Показав пользователям явным образом, что цена только что была ниже, мы их отпугнули, а себе испортили результаты для анализа. Вывод о неправильной цене и плохом эксперименте был ошибочным. Поправив маршрут пользователя при повторном заходе в приложение, мы исправили ситуацию.

И напоследок красивая картинка: корреляция между потреблением сыра на человека и количеством людей, которые запутались в простыне и погибли. Как вы думаете, действительно ли сыр является причиной этих трагедий? Пиши свою версию в комментариях! 🙂