Закон Гудхарта, OKR и KPI
В продолжение воскресной #цитатадня вспомнил интересный закон Гудхарта: «когда мера становится целью, она перестает быть хорошей мерой». Потому что становится объектом манипулирования как прямого [фальсификация чисел], так и косвенного [работа исключительно для улучшения этой меры].
В более простом варианте закон Гудхарта можно сформулировать так: «как только показатель становится целью, то он перестает отражать реальность».
Почему так?
Когда целью является достижение определенного показателя, то мы стараемся выбрать наименее затратный метод достижения этой метрики [в физике это называется минимумом потенциальной энергии]. Как следствие, показатель перестает мерить то, что мы хотели бы им мерить.
Хотим повысить конверсию на сайте - уменьшим трафик.
Хотим повысить конверсию в продажи - уменьшим средний чек.
Набор метрик принципиально не решает эту проблему, люди все равно будут искать менее затратные способы достижения метрики.
Data-driven подход не работает в чистом виде.…