U-критерий Манна-Уитни — это непараметрический статистический тест, который помогает сравнить две независимые выборки и понять, есть ли между ними статистически значимые различия.
Слово «непараметрический» здесь самое главное. Это значит, что тесту неважно, как распределены ваши данные. Ему не нужна идеальная колоколообразная кривая, и не страшны безумные выбросы вроде покупки на миллион среди чеков по тысяче.
Тест работает по простому принципу: он сравнивает не сами значения, а их ранги, места в общем рейтинге. Тут как в гонке: важно не то, с каким временем пришёл каждый спортсмен, а то, кто финишировал первым, вторым, третьим. Манна-Уитни делает то же самое с данными.
→ Для чего нужен U-критерий Манна-Уитни
Главная задача теста — математически подтвердить или опровергнуть гипотезу, что две группы данных взяты из одной совокупности. Грубо говоря, мы хотим ответить на вопрос, отличаются ли две группы реально или разница между ними — это воля случая.
Типичные задачи U-теста — сравнивать:
• Бизнес-метрики в A/B-тестах, когда данные сильно скошены: время на сайте, сумма покупок;
• Медицинские данные — сравнить состояния пациентов до и после применения разных лекарств в двух независимых группах;
• Результаты опросов — сравнить уровень тревожности у двух разных групп респондентов.
В общем, если у вас есть две независимые группы с целевым показателем, U-тест поможет.
→ Зачем критерий Манна-Уитни, если есть t-критерий Стьюдента
Так уж повелось, что когда говорим о сравнении двух групп, сразу думаем о t-критерии Стьюдента. Это неспроста: t-тест мощный и классный. Но есть минус: он весьма капризный. Чтобы «тэшка» сработала правильно, нужно нормально распределить данные без сильных выбросов.
Если эти условия нарушаются, t-критерий начинает врать. Выбросы сильно смещают среднее арифметическое значение, и результаты теста становятся неадекватными.
Критерий Манна-Уитни — это ваша палочка-выручалочка. Мы применяем его вместо t-критерия Стьюдента, когда:
• Наши данные распределены ненормально — например, имеют длинный «хвост» в одну сторону;
• В данных есть очевидные аномалии и выбросы, которые мы не можем или не хотим удалять;
• Мы работаем с порядковыми данными по типу оценок, где нельзя сказать, что 4 ровно в два раза лучше 2;
• Выборки очень маленькие.
Не стоит думать, что критерий Манна-Уитни универсален — и у него есть свои требования.
→ Критерий Манна-Уитни и Вилкоксона: в чем разница
Новички часто путают эти два теста, потому что они оба непараметрические и оба работают с рангами. Разница фундаментальная — в типе данных:
•Критерий Манна-Уитни используется для двух независимых выборок (разные люди в разных группах).
•Т-критерий Вилкоксона (Wilcoxon signed-rank test) используется для зависимых выборок (одни и те же люди до и после какого-то события).
Если вы перепутаете тесты, вы получите совершенно неправильную оценку статистической значимости. Запомнить просто:
• Манн-Уитни — это про соревнование двух разных команд.
• Вилкоксон — это про прогресс одной команды во времени.
Журнал «Код» | Промокод Практикума | Новости мира IT и технологий