Experimentation Library for intermediates 🥽

Всем привет !

Небольшая предыстория, какое то время назад у меня появилась привычка складывать в saved messages в телеграмм всё что нахожу интересное на просторах интернета 🤓

И тут я на днях решил подразобрать эту самую вкладку и чуть систематизировать ссылки на полезные ресурсы связанные с экспериментами , которые я ещё либо совсем не читал , но собираюсь, либо ресурсы которые я не хочу потерять.

Конечно я разобрал не всё, а где то последние месяца три, что натаскал, но в итоге у меня получился небольшой документ Notion , в котором собралось разных ссылок на материалы (видео + статьи, пока что всего 33) , как на русском , так и на английском языке. Которые включают в себя следующие разделы :

Platforms - тут ссылки на различные статьи по платформам экспериментов, начиная со старой статьи от Авито , заканчивая новой платформой Uber

Proxies - тут про выявления прокси метрик

Long term effects estimation - название говорит само за себя 😊

Experiment design & analysis - тут всякие статьи про свитчбеки , оценки дисперсии для дельта метода и так далее.

Holdouts - название говорит само за себя 😊

Bayesian awareness - проблемы bayesian подхода

AA tests - пока что тут всего одна статья про АА тесты , но буду пополнять.

Other - тут всякая сборная солянка , по типа что и когда использовать : Бандиты или эксперименты ? В общем всё что мне показалось интересным , но не понял куда всунуть.

Хочу сразу сказать, что среди ссылок вы не найдёте статьи по типа : как сравнить конверсии при помощи Z-test ? Подборка рассчитана на людей с более менее устаканившимися знаниями в области экспериментов

В дальнейшем , я планирую добавлять туда новые ссылки , о чём буду анонсировать в канале.
Ставьте 🔥 , если считаете , что этот ресурс может быть полезным для вас

P.S. , приглашаю вас оставлять комментарии со ссылками в документ Notion , к разделам, если знаете ещё какие либо полезные ресурсы и хотели бы поделиться.