Как отличить честный рейтинг от заказного: 5 признаков, которые выдают платный топ

Каждый месяц в рунете выходят сотни рейтингов. «Топ-10 лучших клиник», «лучшие подрядчики по разработке», «рейтинг лучших школ». Большинство из них — платные. Не все, но большинство.

Проблема не в том, что они существуют. Проблема в том, что внешне честный рейтинг и заказной выглядят одинаково. У обоих есть методология на сайте, таблицы с баллами, солидные логотипы компаний.

Вот пять признаков, по которым можно отличить одно от другого — до того как вы потратили деньги на подрядчика из «топа».

1. Методология есть, но она не воспроизводима

Честный рейтинг публикует не просто список критериев, а полную методологию: что именно измерялось, по какой шкале, с какими весами, на основе каких данных.

Заказной рейтинг пишет что-то вроде: «Мы оцениваем компании по 47 параметрам, включая репутацию, опыт и клиентоориентированность». Звучит серьёзно. Но повторить расчёт невозможно — нет ни весов, ни источников, ни матриц.

Простой тест: попробуйте самостоятельно пересчитать итоговый балл любой компании из рейтинга. Если это невозможно — методология декоративная.

2. Все «партнёры» оказываются в топе

Откройте список компаний в рейтинге. Найдите раздел «партнёры», «спонсоры» или «верифицированные участники». Если большинство из них стоят в верхней части рейтинга — вы знаете ответ.

Иногда это замаскировано: компании называются «официальными участниками исследования» или получают значок «проверено». Суть та же — они заплатили.

Норма для независимого рейтинга: платное участие не влияет на позицию. Если рейтинг это утверждает, проверьте: есть ли в топе компании без какого-либо платного статуса? Если нет — утверждение декларативное.

3. Компании в топе не совпадают ни с одним другим независимым источником

Хороший подрядчик оставляет следы — в отзывах, в профессиональных сообществах, в публикациях, в кейсах. Если компания занимает первое место в рейтинге, но практически не упоминается нигде за его пределами — это странно.

Сделайте быструю проверку: введите название компании в поиск и посмотрите, что выходит помимо рейтинга. Есть ли реальные упоминания от клиентов? Присутствие на профессиональных площадках? Публикации, которые написаны не самой компанией?

Компании, которые занимают первые места благодаря маркетинговому бюджету, а не реальной работе, как правило, имеют очень куцый независимый след.

4. Нет отрицательных наблюдений

Любой честный анализ находит слабые стороны. Если рейтинг описывает все компании в топе исключительно в положительном ключе — без единого «однако», «но», «стоит учесть» — это не анализ. Это пресс-релизы, собранные в одном месте.

Показательный момент: попробуйте найти в рейтинге хотя бы один минус у компании на первом месте. Если их нет — автор либо не искал, либо не мог написать.

5. Данные не датированы или не обновляются

Рынок меняется. Компании растут, стагнируют, меняют команду, теряют клиентов. Честный рейтинг указывает дату данных и обновляется по расписанию.

Если рейтинг висит без изменений третий год, а дата последнего обновления либо не указана, либо отстаёт на год-полтора — его актуальность под вопросом. Платные участники не исчезают из топа просто потому, что оплатили год вперёд.

Что считать честным рейтингом

Честный рейтинг — не тот, где нет денег. Деньги есть везде: кто-то финансирует исследование. Честный рейтинг — тот, где финансирование не влияет на результат.

Признаки, которые говорят, что этому рейтингу можно доверять:

  • Методология опубликована полностью и позволяет воспроизвести расчёт
  • Критерии и их веса обоснованы, а не просто перечислены
  • Есть проверка согласованности оценок
  • Среди лидеров есть компании без платного статуса
  • Указана дата данных и периодичность обновления.

Такие рейтинги существуют. Просто их меньше, чем кажется.

Мы в AHP Decision Lab строим рейтинги именно по этим принципам: публикуем матрицы попарных сравнений, веса критериев и индекс согласованности CR по каждому расчёту. Любой может проверить. Это и есть разница между рейтингом и маркетинговым материалом.

AHP Decision Lab — независимая лаборатория многокритериального анализа: ahpdecisionlab.ru

1
Начать дискуссию