286. NPS и CSI: на опросы отвечает 10–30% клиентов — почему важна статистическая значимость

На вопросы NPS и CSI после покупки или взаимодействия отвечает малая часть базы. По разным исследованиям, большинство компаний получает 5–15% ответов на рассылки по электронной почте, а эффективные программы достигают 30–40% отклика. В B2B средний коэффициент ответа (по данным CustomerGauge) — 12,4%, а общий диапазон — от 4,5% до 39,3%. Через электронную почту обычно отвечают 15–25%, через in-app — 20–30%. То есть типичный диапазон для опросов среди покупателей (post-purchased) — примерно 10–30%.

При низком проценте ответов результат легко искажается. Отвечают чаще всего те, кто уже доволен или, наоборот, очень недоволен. Нейтральные и «тепло-прохладные» клиенты реже открывают опросы. Получается смещение выборки: NPS или CSI могут выглядеть лучше или хуже, чем реальная картина по всей базе.

Не менее важно — проверка статистической значимости. NPS строится на трёх группах (промоутеры, пассивные пользователи, детракторы), и это триномиальная метрика.

Если сравнивать два NPS между собой или во времени, нельзя считать доли групп независимыми — иначе занижается стандартное отклонение и разницы могут казаться значимыми, когда ими не являются. Нужен расчет доверительных интервалов и методы, учитывающие структуру NPS. Для надёжных выводов важны и объём выборки, и доля ответивших: при коэффициенте ответов 10% и 1000 отправленных опросов — 100 ответов; при 100 отправленных — всего 10, что явно недостаточно для устойчивых выводов.

В сухом остатке: на опросы NPS и CSI после покупки отвечает 10–30% клиентов; при таком проценте ответов важно проверять статистическую значимость и учитывать смещение выборки

#nps@custdevlab #csi@custdevlab #метрики@custdevlab