Нейробиологи предложили объяснение давней загадке: почему уровень дофамина в мозге постепенно нарастает по мере приближения животного к ожидаемой награде. Согласно новой вычислительной модели, дело в совместной работе двух систем обучения — быстрой и медленной. Работа опубликована в журнале eLife.
Модель объединяет две системы. Медленная, связанная с базальными ганглиями, постепенно «запоминает» ценность ситуаций. Быстрая и гибкая, расположенная в лобной коре, строит мысленные карты и умеет быстро делать выводы. Когда мозг вычисляет ошибку предсказания, быстрая система уже «знает», что награда близко, тогда как медленная ещё не успевает подстроиться. Именно этот растущий разрыв между двумя системами и порождает постепенное усиление дофаминового сигнала.
Такая асимметричная модель училась оценивать ценность среды быстрее стандартных и точно воспроизводила «нарастающий» дофамин, который прежние модели воспроизвести не могли. Модель также объяснила, почему после длительной тренировки нарастание дофамина сглаживается: со временем «запомненные» ценности догоняют вычисленные, и разрыв между системами сокращается. Кроме того, она верно предсказала, что изменение награды мгновенно перестраивает дофаминовые сигналы сразу на всех путях к цели.
Это открытие важно для понимания того, как мозг сочетает привычки и гибкое мышление. Быстрая система позволяет нам адаптироваться к новым условиям, а медленная — закреплять полезные паттерны поведения. Именно их взаимодействие создаёт тот самый дофаминовый подъём, который мы ощущаем, когда цель становится ближе.
По мнению авторов, это шаг к пониманию того, как мозг совмещает привычки и гибкое мышление. В конечном счёте, исследование может помочь в лечении расстройств, связанных с дофаминовой системой, — от депрессии до зависимости. А пока оно даёт ответ на вопрос, который долгое время оставался открытым: почему предвкушение награды так приятно и почему оно усиливается с каждым шагом к цели. Ответ — в двух системах обучения, работающих в нашем мозге одновременно.
