Как отличить честный рейтинг от заказного: 5 признаков, которые выдают платный топ
Каждый месяц в рунете выходят сотни рейтингов. «Топ-10 лучших клиник», «лучшие подрядчики по разработке», «рейтинг лучших школ». Большинство из них — платные. Не все, но большинство.
Проблема не в том, что они существуют. Проблема в том, что внешне честный рейтинг и заказной выглядят одинаково. У обоих есть методология на сайте, таблицы с баллами, солидные логотипы компаний.
Вот пять признаков, по которым можно отличить одно от другого — до того как вы потратили деньги на подрядчика из «топа».
1. Методология есть, но она не воспроизводима
Честный рейтинг публикует не просто список критериев, а полную методологию: что именно измерялось, по какой шкале, с какими весами, на основе каких данных.
Заказной рейтинг пишет что-то вроде: «Мы оцениваем компании по 47 параметрам, включая репутацию, опыт и клиентоориентированность». Звучит серьёзно. Но повторить расчёт невозможно — нет ни весов, ни источников, ни матриц.
Простой тест: попробуйте самостоятельно пересчитать итоговый балл любой компании из рейтинга. Если это невозможно — методология декоративная.
2. Все «партнёры» оказываются в топе
Откройте список компаний в рейтинге. Найдите раздел «партнёры», «спонсоры» или «верифицированные участники». Если большинство из них стоят в верхней части рейтинга — вы знаете ответ.
Иногда это замаскировано: компании называются «официальными участниками исследования» или получают значок «проверено». Суть та же — они заплатили.
Норма для независимого рейтинга: платное участие не влияет на позицию. Если рейтинг это утверждает, проверьте: есть ли в топе компании без какого-либо платного статуса? Если нет — утверждение декларативное.
3. Компании в топе не совпадают ни с одним другим независимым источником
Хороший подрядчик оставляет следы — в отзывах, в профессиональных сообществах, в публикациях, в кейсах. Если компания занимает первое место в рейтинге, но практически не упоминается нигде за его пределами — это странно.
Сделайте быструю проверку: введите название компании в поиск и посмотрите, что выходит помимо рейтинга. Есть ли реальные упоминания от клиентов? Присутствие на профессиональных площадках? Публикации, которые написаны не самой компанией?
Компании, которые занимают первые места благодаря маркетинговому бюджету, а не реальной работе, как правило, имеют очень куцый независимый след.
4. Нет отрицательных наблюдений
Любой честный анализ находит слабые стороны. Если рейтинг описывает все компании в топе исключительно в положительном ключе — без единого «однако», «но», «стоит учесть» — это не анализ. Это пресс-релизы, собранные в одном месте.
Показательный момент: попробуйте найти в рейтинге хотя бы один минус у компании на первом месте. Если их нет — автор либо не искал, либо не мог написать.
5. Данные не датированы или не обновляются
Рынок меняется. Компании растут, стагнируют, меняют команду, теряют клиентов. Честный рейтинг указывает дату данных и обновляется по расписанию.
Если рейтинг висит без изменений третий год, а дата последнего обновления либо не указана, либо отстаёт на год-полтора — его актуальность под вопросом. Платные участники не исчезают из топа просто потому, что оплатили год вперёд.
Что считать честным рейтингом
Честный рейтинг — не тот, где нет денег. Деньги есть везде: кто-то финансирует исследование. Честный рейтинг — тот, где финансирование не влияет на результат.
Признаки, которые говорят, что этому рейтингу можно доверять:
- Методология опубликована полностью и позволяет воспроизвести расчёт
- Критерии и их веса обоснованы, а не просто перечислены
- Есть проверка согласованности оценок
- Среди лидеров есть компании без платного статуса
- Указана дата данных и периодичность обновления.
Такие рейтинги существуют. Просто их меньше, чем кажется.
Мы в AHP Decision Lab строим рейтинги именно по этим принципам: публикуем матрицы попарных сравнений, веса критериев и индекс согласованности CR по каждому расчёту. Любой может проверить. Это и есть разница между рейтингом и маркетинговым материалом.
AHP Decision Lab — независимая лаборатория многокритериального анализа: ahpdecisionlab.ru