AI не даёт рекомендаций из-за отсутствия верификации в обучении
AI не даёт рекомендаций из-за отсутствия верификации в обучении
Языковые модели хорошо решают задачи, где правильность легко проверить (например, анализ данных), но плохо справляются с задачами, где верификация дорога или невозможна. Для проверки продуктовых решений типа «передвинуть paywall» нужны эксперименты и контрфактический анализ. В процессе обучения модели нет петли обратной связи для такого типа информации, поэтому она не знает, что значит «правильная рекомендация». Из-за этого AI избегает давать прямые советы о будущих действиях.
Источник: Workshop transcript, 2026-07-31
Связанные заметки
Переключение AI с рекомендаций на дизайн экспериментов
#ai#experiments#product-management
Суперперсонализация vs недетерминированность — главный трейдофф LLM
#ai#product-management#decision-making
Проблема верификации AI-решений в неформализованных областях
#ai#product-management#testing
Практический подход к AI против хайпа
#ai#experiments#product-management
Лучшее решение часто отсутствует в первоначальных рекомендациях
#ai#decision-making#product-management
Подробный разбор
Туннелирование внимания - подробный гайд с примерами →Хотите глубже изучить ai и автоматизация?
AI Product Engineer
Постройте своего AI коллегу. 5 сессий
Узнать о курсеИсследуйте больше связей
Эта заметка — часть сети из 2,400+ взаимосвязанных идей. Откройте для себя неожиданные связи в интерактивном графе знаний.
Открыть граф знаний