Diff-in-Diff: когда A/B-тест невозможен

Difference-in-Differences помогает оценить эффект изменений без рандомизации.
Метод сравнивает изменение метрики относительно изменения от начального показателя похожей контрольной группы.

Например, изменение воронки сначала запустили только в одном регионе. Продажи выросли на 10%.
Это успех или просто сезонность?
DiD сравнит изменение с регионом, где ничего не запускали, и попробует отделить эффект релиза от всего остального.

Метод давно используют в экономике, медицине и государственной политике, где эксперименты часто невозможны или неэтичны.

Важное ограничение: метод предполагает, что без изменений обе группы продолжили бы двигаться примерно одинаково. Если это не так, выводам доверять уже нельзя.

Если нельзя провести A/B, DiD становится наилучшей альтернативой оценить эффект.

❤️ да, было
😈 сравнивал до/после

#pm #product #словарикпродакта