Настало магическое «в другой раз», когда я обещала рассказать про релевантность малых групп в исследованиях

Тема горячая, я бы даже по дискутировала о ней.

Как известно, благодаря Якобу Нильсену на одну группу нужно взять минимум 5 респондентов для выявления 80% частотных ошибок. Дальше есть много умных статей про то, что чем сложнее интерфейс тем больше нужно людей, но в среднем в исследовательских кругах принято брать 6 респондентов, если 2 сегмента, и дальше, чем больше сегментов, тем меньше группа, потому что часто они пересекаются по опыту. Самое большое исследование в котором я участвовала, составляло 52 респондента (деление было по 2 респондента на группу)

Тут начинается самое интересное. Исследования собирают маленькие группы, если совсем усреднить, то около 10 респондентов в каждом исследовании, в год в среднем таких исследований будет около 24, итого 240 человек, а это уже вполне себе статистически значимая цифра. Если продукту больше года, то респондентов будет больше и перекосы тоже увеличиваются.

Что же придумывают умные исследователи и рекрутеры. Они начинают корректировать группы. Что я имею ввиду: в одной из компаний где я работала, начали обращать внимание на людей с ограниченными возможностями и предложили на каждое исследование звать одного респондента с отклонением по здоровью, так мы приблизимся к реальной картине мира и у нас будет 10% знаний об инклюзивности в наших продуктах.

В другой, ребята обратили внимание на то что в интервью почти не участвуют подростки и люди старшего возраста, если это не специальное исследование для них. Так что в последующих исследованиях намеренно добавляли больше молодых и возрастных респондентов, чтобы уравновесить общую статистику.

Учитывая, что изначально группы собираются по сегментам, в которые целится продукт исходя из больших количественных исследований, я пока не вижу для себя необходимости как-то дополнительно корректировать текущие выборки. Но мне жутко интересно, как рассматривается этот вопрос в компаниях с развитой исследовательской культурой ❤️