Театр метрик

На днях попалась статья (англ.) с интересной метафорой «театр метрик». В контексте бизнеса это выглядит так: сотрудники и менеджеры начинают "ставить спектакль" для отчетности, где главные зрители — это высшее руководство или акционеры. Цель — показать красивые цифры в дашбордах, часто в ущерб истинным целям компании.

Характерные признаки "театра метрик":

1. Подмена цели. Метрика из инструмента для оценки прогресса становится самой целью. Пример: не "сделать клиентов счастливыми", а "повысить NPS до 50 баллов" любыми способами (включая навязчивые просьбы поставить оценку).
2. Оптимизация ради отчета. Работа ведется так, чтобы улучшить показатель в отчете, а не решить проблему пользователя.
3. Игра с формулами. Постоянные споры о том, как именно считать метрику, чтобы цифра выглядела лучше, вместо улучшения самого процесса.
4. Локальная оптимизация. Одна команда улучшает свой KPI за счет других команд или общего результата компании (например, отдел продаж обещает все, чтобы выполнить план, перегружая отдел разработки и ухудшая качество продукта).
5. "Потолок" метрик. Достигнув целевого значения, команда теряет мотивацию развиваться дальше или начинает искусственно сдерживать рост, чтобы не повышали планку на следующий квартал.
6. Культура страха. Плохие цифры ведут к наказаниям, поэтому данные начинают скрывать, приукрашивать или искажать.

Почему результаты оценки могут оказаться бесполезными

На прошлом заседании клуба PROОЦЕНКУ мы обсуждали эту тему. Хочу поделиться несколькими возможными причинами на основании нашего опыта. Естественно, список не исчерпывающий. 

1. 
   Задачу на проведение оценки ставят одни, а использовать результаты должны другие. Такая ситуация складывается, например, в больших бюрократических структурах, где за организацию проведения оценки может отвечать специальное подразделение, а использование результатов остается за руководителями программ, которые оцениваются.
2. Оценка проводится так, что к ее результатам нет доверия со стороны предполагаемых пользователей. Такая ситуация может сложиться, если, например, методология проведения оценки не согласована с будущими пользователями результатов: используются методы и/или источники информации, которые не вызывают доверия у пользователей. Само собой, такое может случиться и в силу недостаточной компетентности тех, кто проводит оценку.
3. Результаты оценки появляются не ко времени. Если, к примеру, предполагается принятие каких-то решений с использованием результатов оценки, то последние должны быть готовы к моменту принятия решения. Если они появляются позже, то их использование проблематично.
4. Оценка ориентирована на «символическое использование», то есть изначально имеет значение сам факт проведения оценки, но не её результаты. В этом случае имеет место использование процесса оценки.