Рейтинговый кризис 2008 как пример манипуляции метриками
Рейтинговый кризис 2008 как пример манипуляции метриками
Рейтинговые агентства раскрыли свои модели оценки рисков инвестиционным банкам, полагаясь на прозрачность. Банки изучили эти модели и научились их обманывать, меняя небольшие входные параметры для получения высоких рейтингов на низкокачественные активы. Прозрачность критериев без защиты от манипуляций создаёт уязвимость системы.
Связи
- Анализ данных важнее сбора метрик — Оба о том, как фокус на системе метрик отвлекает от реальной цели
- Ложное понимание итерационного подхода — Манипуляция формальными критериями без понимания сути создаёт иллюзию правильности
- Репутация как решение проблемы информационной асимметрии при найме — Оба про информационную асимметрию и попытки её решить через метрики/репутацию
- Ручное тестирование гипотез для расчёта конверсии — Показывает альтернативу формальным метрикам через прямую проверку реальности
Источник: Telegram, 2019-04-03
Связанные заметки
Закон Гудхарта и разрушение метрик
#analytics#theory-of-constraints#systems-thinking
Закон Кэмпбелла о сопротивлении метрикам
#systems-thinking#analytics#productivity
Каузальная модель позволяет использовать наблюдения для предсказания интервенций
#causality#systems-thinking#decision-making
Метод Zoom in/Zoom out в анализе поведения пользователей
#analytics#product-management#data
Качество сервиса имеет минимальное влияние на вознаграждение
#psychology#analytics#systems-thinking
Исследуйте больше связей
Эта заметка — часть сети из 2,369 взаимосвязанных идей. Откройте для себя неожиданные связи в интерактивном графе знаний.
Открыть граф знаний