Стас Гафаров из Сбербанка про план проверки статистических гипотез

1️⃣ Определить основную (нулевую) гипотезу;

2️⃣ Задать статистический критерий, т.е. задать статистику критерия (читай тип), задать критическую область (тоже тип). Основные типы критериев: параметрические, непараметрические. Вопрос о том, какую статистику надо взять для проверки той или иной гипотезы, часто не имеет однозначного ответа;

3️⃣ Определить уровень значимости;

4️⃣ Выбрать группы для теста. Проверить несколько раз что эти группы не пересекаются;

5️⃣ Сам тест, по сути проверка условия что «данные не противоречат нулевой гипотезе при уровне значимости \alpha». Если да, то гипотеза принимается.

Ссылки на математику по теме проверки гипотез:
🐈 лайтовая: http://statistica.ru/theory/proverka-gipotez/
🦁 хардкорная: http://www.machinelearning.ru/wiki/index.php?title=Проверка_статистических_гипотез