На прошлой неделе несколько раз пришлось разъяснять коллегам и журналистам, как интерпретировать результаты опросов общественного мнения в современной России. Про это уже много сказано специалистами, но выскажу еще несколько своих тезисов.

Большинство людей смотрят в первую очередь на графики и диаграммы, немногие читают отчеты полностью и почти никто не копается в методиках. В результате я наблюдаю сильно искаженное восприятие результатов опросов, особенно в наиболее чувствительных тематиках, связанных с оценками текущей ситуации и отношением граждан к боевым действиям.

Первое и самое главное — огромное количество отказов от интервью или прерванных интервью. Стоит в этом отношении похвалить, например, Russian Field, которые не стесняются указывать что в разных волнах их опросов доля успешных интервью составляет менее 10% (в последней волне — 5,5% успешных). Полагаю, что у остальных дела обстоят не лучше. Что это значит? Что все представленные графики и диаграммы показывают ответы лишь малой части респондентов из тех, к кому обращались интервьюеры.

Многих вводит в заблуждение тот факт, что исследования сопровождаются утверждением о репрезентативности выборки. Да, они могут быть репрезентативными по социально-демографическим параметрам, но при такой доле отказов их репрезентативность относительно реальных позиций внутри генеральной совокупности всё равно стремится к нулю.

Вообще-то в социологии есть методические приемы, которые позволяют обходить эти препятствия в исследовательских дизайнах. Например, можно использовать списочные эксперименты или комбинационные эксперименты (conjoint experiments). Это требует более высокой квалификации исследователей и больших ресурсов, но совершенно точно такие подходы будут давать более релевантную картину.

Подчеркну, что я ни в коем случае не хочу обесценивать работу тех, кто проводит эти опросы. Они нужны, и это очень важная работа. Но всё-таки хочется, чтобы люди умели читать результаты, а сами исследователи думали над тем, как сделать свою работу лучше. И добавлю, что стоит в этом отношении больше внимания уделять качественным (в смысле — не только количественным) исследованиям. Например, меня без преувеличения восхищает работа, которую выполняют коллеги из Лаборатории публичной социологии @publicsociologylaboratory. Обратите внимание на их отчет, опубликованный по результатам качественных интервью с россиянами в феврале-июне 2022г.