Сравниваются событие и ожидание
В исследованиях награды изучают не только сам результат, но и то, насколько он был предсказуем. Неожиданная награда, полностью ожидаемая награда и отсутствие ожидаемой награды могут сопровождаться разными кратковременными реакциями дофаминовых нейронов. Это помогает связать их активность с обновлением предсказаний при обучении. Такой подход не означает, что вся дофаминовая система выполняет единственную операцию. Дофаминовые нейроны и их связи неоднородны, а функции дофамина не ограничены одной схемой. Ошибка предсказания — полезная исследовательская идея, но не полное описание мотивации, движения и переживаний человека.
Одинаковый итог может иметь разную неожиданность
Возьмём вымышленную учебную игру с условными жетонами. Участник ожидает один жетон и получает два: результат лучше ожидания. В другой ситуации он ожидает три, а получает те же два: результат хуже ожидания. Количество полученного одинаково, а направление расхождения противоположно. Для простого бумажного примера можно вычитать ожидаемое количество из полученного. Получатся плюс один и минус один. Это арифметическая иллюстрация, а не формула измерения дофамина в организме. Она показывает, почему нельзя судить о неожиданности результата только по его абсолютной величине. Также она не сообщает, какие чувства должен испытывать реальный участник.
Не превращайте модель обучения в бытовой диагноз
Если награда полностью ожидаема, отсутствие дополнительной кратковременной реакции в исследуемой ситуации не означает, что удовольствие исчезло или дофамин закончился. Это разные утверждения. По усталости после рабочего дня нельзя определить активность конкретных нейронов, а по интересу к задаче — количество вещества в мозге. Практическая польза такого разбора состоит в точности вопросов. Вместо общей фразы о сильной награде можно отдельно спросить, что ожидалось, что произошло и какая информация изменилась. Для объяснения сложного поведения дополнительно важны условия задачи и другие процессы. Учебная схема не даёт основания самостоятельно назначать препараты, добавки или ограничения ради управления дофамином.
Попробуйте на практике
Проверьте понятие ошибки предсказания на вымышленных жетонах. Это задача на сравнение чисел, а не психологический тест.
- Создайте три строки: ожидалось два жетона, получено три; ожидалось два, получено два; ожидалось два, получен один.
- В каждой строке вычтите ожидаемое количество из полученного и обозначьте направление расхождения словами.
- Добавьте четвёртую строку: ожидались четыре жетона, получены три. Сравните её с первой, где итог тоже равен трём.
- Подпишите ограничение схемы: числа отражают условный результат игры и не показывают концентрацию дофамина или степень удовольствия.
Как проверить результат. Должны получиться значения плюс один, ноль, минус один и минус один. Первая и четвёртая строки имеют одинаковую награду, но противоположное расхождение с ожиданием. Ни один ответ не должен превращаться в вывод о здоровье участника.
Частые вопросы
Нулевая ошибка означает отсутствие награды?
Нет. Во второй строке награда есть, но она совпадает с ожиданием. Нулевое расхождение и нулевое количество полученного — разные вещи.
Можно ли объяснить любую мотивацию этим примером?
Нет. Модель помогает разобрать один механизм обучения. Она не учитывает все особенности задачи, прошлый опыт, состояние организма и разнообразие нейронных систем.
Самостоятельный разбор темы. Содержание конкретной обучающей программы здесь не представлено.