Метрики определяют поведение: выбирай релевантное, а не измеримое
Главная идея: система измерения влияет на поведение и результаты организации. Нужно выбирать метрики осознанно, избегая измерения лёгкого вместо релевантного, и помнить, что оценка людей — сложная задача, где относительные суждения часто лучше числовых.
Главная идея: система измерения влияет на поведение и результаты организации. Нужно выбирать метрики осознанно, избегая измерения лёгкого вместо релевантного, и помнить, что оценка людей — сложная задача, где относительные суждения часто лучше числовых.
Прямой связи с моей работой нет, но принципы измерения и оценки применимы при создании метрик для AI-систем: выбирай метрики, отражающие реальные цели, а не лёгкие для подсчёта; используй ранжирование для сравнения моделей; учитывай, что метрики влияют на поведение агентов.