Мы начинаем системное описание источников информации.
Этот "проект в проекте" будет устроен так: здесь, в канале мы публикуем сокращенную версию, а полную - в пространстве telegra.ph (пример).

Сегодня наша тема:
РЕЙТИНГИ

Одна из наиболее часто встречаемых задач – составление списка участников рынка. Один из лучших форматов ее решения – это рейтинги. Их составляют по самым разным параметрам: обороту компаний, силе бренда, уровню креативности или репутации и т. п. Чаще всего, рейтингующая компания по специальный методике формирует комплексный показатель из нескольких первичных.

Качество рейтинга определяется не только и не столько методикой, сколько точностью измерения исходных данных. Имеет значение и степень релевантности применения конкретного рейтинга для конкретной задачи бизнеса.

Проверить качество любого рейтинга нетрудно. Надо «прогнать его» всего по трем параметрам:
🔸Метод сбора исходных данных создателями рейтинга.
🔸Прозрачность методики рейтингования, включая процедуру формирования перечня номинантов. .
🔸Степень независимости (аффилированности) рейтингующей организации от участников рынка.

Рассмотрим как это работает на примере проекта «Рейтинг Рунета» (РР). Его организаторы составляют 22 рейтинга диджитал-агентств, покрывающих все основные виды активности диджитал-агентств: разработка, SEO, брендинг и ряд других, так что процессы сбора и обработки информации должны быть отработаны.
Конечно, по мере необходимости мы будем рассматривать и некоторые проекты. Ну а теперь – по пунктам.

Как собирают данные. В Рейтинге Рунета в качестве первичной информации используют исключительно данные, полученные непосредственно от рейтингуемых компаний. Для этого используют облачные технологии: участники заполняют анкеты в своих личных кабинетах. Внешняя статистическая информация в РР носит подчиненный характер и используется для проверки данных и уточнения деталей.

В других рейтингующих компаниях могут быть использованы иные методы сбора, например, рассылка анкет для самозаполнения.

Часто рейтинги строят вообще без прямого контакта с компаниями на данных государственной статистики. Примеры здесь.

Помимо собственных данных компаний и госстатистики для построения рейтингов могут быть использованы любые метрики. Ограничения есть только по степени полезности конечного информационного продукта.

Проверка данных
Рейтингующая компания должна проверять данные внешних источников. Во всяком случае, так должно быть. В Рейтинге Рунета модераторы вручную просматривают полностью весь массив, обращая особенное внимание на обороты компаний. Кроме того, есть выборочная документальная проверка. Организаторы РР случайным образом отбирают 10% компаний и просят представить документы, подтверждающие предоставленные компаниями сведения.

Прозрачность рейтинга
Методика составления рейтинга обычно прозрачна и находится на сайте в открытом доступе. В Рейтинге Рунета она подробно описана с указанием даже небольших деталей. Такой подход исключает споры между участниками и организаторами рейтинга.

Впрочем, иногда методика описана лишь в общих чертах, детали являются коммерческой тайной, как например, в рейтинге «Best Global Brands» от компании Interbrand. В этом случае приходится полагаться на репутацию рейтингующей компании.

Принцип независимости
Рейтингующая компания не должна быть участником рынка, рейтинг участников которого она составляет. Причины понятны – в противном случае соблазн «подкрутить результаты» будет слишком велик. Именно поэтому чаще всего организаторами выступают медиа, консалтинговые или исследовательские компании.
Интересна в этом контексте ситуация с Рейтингом Рунета. Их составитель – компания Proactivity – начинала свою деятельность как диджитал-агентство. Но реализуя несколько инфраструктурных для отрасли проектов (Рейтинг Рунета, CMS Magazine и Workspace), уже давно изменила бизнес-модель и перестала быть игроком рынка диджитал-услуг.

#источники_информации, #рейтинг