Допамин, время и импульсивность у людей (2010)

J Neurosci . 2010 Jun 30 ; 30 ( 26 ): 8888-96 . doi: 10.1523/JNEUROSCI.6028-09. 2010.

Пайн А 1 , Шайнер Т , Сеймур Б , Долан Р.Дж.

Информация об авторе

Резюме

Нарушение нейротрансмиссии дофамина вовлечено в опосредование импульсивности в целом ряде типов поведения и расстройств, включая зависимость, компульсивную азартную игру, синдром дефицита внимания / гиперактивности и синдром дисрегуляции дофамина. Принимая во внимание, что существующие теории функции допамина выдвигают на первый план механизмы, основанные на аберрантном обучении за вознаграждение или поведенческую расторможенность, они не предлагают адекватного учета патологической гиперчувствительности к временной задержке, которая формирует важный поведенческий фенотип, наблюдаемый при этих расстройствах. Здесь мы приводим доказательства того, что роль дофамина в контроле взаимосвязи между временем будущих вознаграждений и их субъективной ценностью может восполнить этот объяснительный пробел. Используя задачу межвременного выбора, мы демонстрируем, что фармакологически усиливающая активность допамина увеличивает импульсивность, усиливая минимизирующее влияние увеличения задержки на величину вознаграждения (временное дисконтирование) и соответствующего нейронного представления в стриатуме. Это приводит к состоянию чрезмерного дисконтирования временно отдаленных, относительно более ранних, вознаграждений. Таким образом, наши результаты показывают новый механизм, посредством которого допамин влияет на принятие решений человеком, который может объяснить поведенческие отклонения, связанные с гиперфункцией дофаминовой системы.

Введение

Характерная потеря самоконтроля и импульсивность, связанные с аномальной функцией дофамина, иллюстрируются такими расстройствами, как зависимость, синдром дефицита внимания и гиперактивности (СДВГ) и синдром дисрегуляции дофамина ( Winstanley et al., 2006 ; Dagher and Robbins, 2009 ; O'Sullivan et al., 2009 ). В последнем случае заместительная терапия дофамином при лечении болезни Паркинсона (БП) делает некоторых пациентов склонными к компульсивному поведению, которое проявляется в чрезмерной азартной игре, шопинге, переедании и других недальновидных действиях. Однако широкий фенотип импульсивности, характеризующий такое поведение, включает в себя множество различных процессов принятия решений, которые можно разделить нейробиологически и фармакологически ( Evenden, 1999 ; Ho et al., 1999 ; Winstanley et al., 2004a , 2006 ; Dalley et al., 2008 ). К ним относятся отсутствие подавления преобладающих двигательных реакций, переоценка вознаграждений по сравнению с потерями, неспособность замедлиться в условиях конфликтного принятия решений и склонность выбирать меньшие – более ранние – вознаграждения вместо больших – более поздних.

В принципе, некоторые из вышеупомянутых дефицитов могут быть связаны с дофаминергическими эффектами через установленную роль дофамина в обучении на основе вознаграждения ( Redish, 2004 ; Frank et al., 2007 ; Dagher and Robbins, 2009 ). Однако временная (или выборочная) импульсивность — предпочтение меньших и более ранних вознаграждений большим и более поздним, обусловленное чрезмерным дисконтированием будущих вознаграждений ( Ainslie, 1975 ; Evenden, 1999 ; Ho et al., 1999 ; Cardinal et al., 2004 ) — гораздо сложнее объяснить с точки зрения обучения, хотя она остается важной особенностью предполагаемой дофаминергической импульсивности. Действительно, лабораторные исследования межвременного выбора показывают, что у наркозависимых и подгруппы пациентов с СДВГ наблюдаются аномально высокие показатели дисконтирования времени, при этом они отдают явное предпочтение меньшим и более быстрым вознаграждениям ( Sagvolden and Sergeant, 1998 ; Bickel and Marsch, 2001 ; Solanto et al., 2001 ; Winstanley et al., 2006 ; Bickel et al., 2007 ). Это поднимает вопрос о том, играет ли дофамин специфическую роль в вычислении того, как временная близость вознаграждения связана с его субъективной ценностью (т.е., скоростью дисконтирования времени), независимо от его установленного вклада в обучение на основе вознаграждения.

Чтобы исследовать, модулирует ли дофамин кодирование ценности во времени, мы вводили предшественник дофамина L-допа, антагонист дофамина галоперидол и плацебо здоровым добровольцам, выполнявшим задачу межвременного выбора. Задача требовала от испытуемых делать реальный выбор между различными суммами денег, предлагаемыми в течение различных периодов времени, в основном выбирая между меньшим — более ранним и большим — более поздним денежным вознаграждением. Такой выбор хорошо описывается моделями, которые учитывают как дисконтирующие эффекты времени, так и дисконтирующие эффекты увеличения величины вознаграждения (убывающая предельная полезность) ( Pine et al., 2009 ). Соответственно, дисконтированная полезность или субъективная ценность отложенного вознаграждения определяется произведением коэффициента дисконтирования (число от нуля до единицы) и полезности вознаграждения. Если дофамин модулирует выбор человека в этой задаче, это может отражать изменение либо коэффициента дисконтирования, либо вогнутости/выпуклости полезности (см. Материалы и методы) — различие, которое мы смогли исследовать здесь как на поведенческом, так и на нейрофизиологическом уровнях, используя функциональную магнитно-резонансную томографию (фМРТ). Кроме того, мы оценили, оказывает ли дофамин какое-либо влияние на скорость замедления, вызванную конфликтом решений ( Frank et al., 2007 ; Pochon et al., 2008 ), чтобы отличить глобальные факторы от дискретных влияний на импульсивность.

Материалы и методы

Мы использовали функциональную МРТ, пока испытуемые выбирали между двумя последовательно предъявляемыми вариантами различной величины (от 1 до 150 фунтов стерлингов) и задержки (от 1 недели до 1 года) ( рис. 1 ). Каждый испытуемый выполнял задание трижды (в соответствии с тремя условиями приема препарата). Эти выборы часто представляли собой варианты с меньшей суммой – раньше, и с большей суммой – позже. Один из вариантов выбора испытуемых выбирался случайным образом в конце эксперимента (в каждой экспериментальной сессии) и оплачивался реальными деньгами (т.е., в указанную будущую дату) банковским переводом. Мы использовали выбор испытуемых для оценки степени дисконтирования как по величине, так и по времени. Мы оценивали модель, которая объединяла функцию полезности (преобразование величины в полезность) со стандартной гиперболической функцией дисконтирования. Проще говоря, функция дисконтированной полезности (субъективной ценности) отложенного вознаграждения ( V ) равна D × U , где D — коэффициент дисконтирования от 0 до 1, а U — недисконтированная полезность. D обычно представляет собой гиперболическую функцию задержки получения вознаграждения и включает параметр дисконтирования ( K ), который определяет, насколько быстро происходит обесценивание будущих вознаграждений. U (как правило) является вогнутой функцией величины вознаграждения и зависит от индивидуального параметра ( r ), который определяет вогнутость/выпуклость функции, или скорость убывающей предельной полезности выигрыша и, следовательно, мгновенную ценность большего вознаграждения по сравнению с меньшим. Чем больше K или r , тем больше вероятность того, что индивид выберет более быстрый вариант, и, следовательно, тем более импульсивным он является ( Ho et al., 1999 ; Pine et al., 2009 ). В соответствии с теорией полезности, выбор определяется принципом максимизации полезности, согласно которому выбирается вариант с наибольшей дисконтированной полезностью.

Рисунок 1 

Задача дизайн. Субъектам был предоставлен набор межвременных бинарных выборов 220, в основном между меньшими - более ранними и более крупными - более поздними наградами, которые варьировались в размерах от £ 1-£ 150 с соответствующими задержками 1-52 недель. Заметка ...

Участниками

В эксперимент были включены четырнадцать здоровых добровольцев-правшей (мужчины 6; женщины 8; средний возраст, 21; диапазон, 18 – 30). Субъекты были подвергнуты предварительному анализу, чтобы исключить лиц с предшествующим анамнезом неврологических или психических заболеваний. Все предметы дали информированное согласие, и исследование было одобрено Лондонским комитетом по этике Университетского колледжа. Один субъект выбыл из исследования после первого сеанса и не был включен в результаты. Другой не завершил последний (плацебо) сеанс в сканере, но его поведенческие данные всех сеансов и данные изображений двух сеансов были включены в результаты.

Описание процедуры и задачи

Каждый испытуемый проходил тестирование трижды. По прибытии на каждое тестирование испытуемым выдавали инструкцию, объясняющую, как будет осуществляться ослепление в отношении лекарственных препаратов. Затем они заполняли визуальную аналоговую шкалу ( Бонд и Ладер, 1974 ), измеряющую субъективные состояния, такие как уровень бодрствования, и получали конверт с двумя таблетками, содержащими либо 1.5 мг галоперидола, либо плацебо. Через полтора часа после приема первой партии таблеток испытуемым выдавали еще один конверт с двумя таблетками, содержащими либо Мадопар (содержащий 150 мг L-допы), либо плацебо. Таблетки плацебо (витамин С или поливитамины) были неотличимы от лекарственных препаратов. В общей сложности каждый испытуемый получал одну дозу Мадопара на одном сеансе, одну дозу галоперидола на другом, и на одном сеансе обе партии таблеток были плацебо. Порядок приема каждого лекарственного препарата относительно сеанса тестирования был сбалансирован между испытуемыми и не был известен экспериментатору для обеспечения двойного слепого дизайна. Тестирование начиналось через 30 минут после приема второй партии таблеток. Время тестирования было выбрано таким образом, чтобы пиковая концентрация препарата в плазме крови была достигнута примерно в середине теста. После тестирования испытуемые заполняли еще одну (идентичную) визуальную аналоговую шкалу. Две сессии тестирования не проводились с интервалом в одну неделю.

Поведенческое задание в основном соответствовало описанию Пайна и др. (2009) . Каждое испытание состояло из выбора между меньшим – более ранним – и большим – более поздним вознаграждением. Выбор предъявлялся последовательно, в три этапа ( рис. 1 ). Первые два этапа включали предъявление подробной информации о каждом варианте, а именно: величину вознаграждения в фунтах и ​​задержку в его получении в месяцах и неделях. После предъявления вариантов на третьем экране испытуемому предлагалось выбрать между вариантом 1 (первым предъявленным вариантом) или вариантом 2 с помощью панели кнопок, используя правую руку. После каждого из трех этапов следовала задержка в 3 секунды. Выбор можно было сделать только в течение 3 секунд после предъявления экрана выбора. После того, как выбор был сделан, выбранный вариант выделялся синим цветом. При наличии достаточного времени испытуемый мог передумать. После этапа выбора следовала задержка от 1 до 4 секунд, за которой следовало предъявление фиксационного креста на 1 секунду.

Эксперимент состоял из полных испытаний 200. Вариант 1 был меньшим - скорее вознаграждение в 50% испытаний. Кроме того, мы включили дополнительные испытания 20 «catch», в которых один из вариантов был более ценным и доступным раньше, чем другой. Эти испытания по улову проводились примерно в каждом десятом испытании и позволили нам выяснить, насколько хорошо субъекты концентрировались на задании, исходя из предположения, что норма заключалась в том, чтобы предпочесть большее - скорее вознаграждение в этом выборе. Каждому субъекту был предоставлен один и тот же набор вариантов на каждом сеансе тестирования (т.е. каждое лекарственное состояние), за исключением первых двух субъектов, которым был предоставлен различный набор вариантов на их первом сеансе тестирования. Значения опций были созданы с использованием случайно сгенерированных величин, варьирующихся от £ 1 до £ 150 в единицах £ 1 и задержек в диапазоне от недели 1 до года 1 в единицах одиночных недель (но представленных в виде количества месяцев и недель), опять же с случайное распределение. Этот случайный характер значений помог в ортогонализации величины и задержки. Чтобы создать выбор между вознаграждениями меньшего - более раннего и более крупного - более позднего периодов, мы ввели ограничение на то, что вариант с большей величиной следует откладывать больше, чем меньший, и наоборот для испытаний на вылов. Субъекты были назначены на один из двух выборочных массивов в зависимости от их ответов в ходе практических испытаний на первом сеансе. Это было сделано, чтобы сопоставить представленные варианты с уровнем импульсивности субъекта.

Оплата была проведена с помощью лотереи, чтобы выбрать одну пробную версию из каждого сеанса тестирования. Чтобы навязать экологическую обоснованность, мы использовали платежную систему, которая обеспечивала реалистичный выбор всех вариантов с реалистичными последствиями. Решающим для этого дизайна был случайный выбор одного из вариантов, сделанных в ходе эксперимента, с реальной оплатой варианта, выбранного для этого выбора. Это было достигнуто путем банковского перевода, сделанного во время, связанного с выбранной опцией, и состоящего из суммы. Выбор оплаты был осуществлен с использованием ручной лотереи после завершения всех испытаний. В лотерее были пронумерованы шарики 220, каждый из которых представлял собой одно испытание из задания. Мяч, который был выбран, соответствовал награде за испытание. Величина и задержка варианта, выбранного субъектом в выбранном испытании, были определены и награждены с помощью банковского перевода. Таким образом, оплата, которую получил каждый субъект, определялась комбинацией лотереи и сделанного ими выбора - манипуляцией, которая гарантировала, что субъекты рассматривали все варианты как реальные. Платежная система была разработана таким образом, чтобы в среднем каждый субъект получал £ 75 за сеанс. Никакой другой оплаты за участие в эксперименте не было.

Перед тем как предметы были взяты в сканер, им показали лотерейный автомат и объяснили, как будет осуществляться банковский перевод, чтобы заверить их в подлинности системы оплаты и выбора. После непродолжительной практики шести испытаний они были перенесены в сканер, где они выполнили два сеанса испытаний 110 каждый, продолжительностью всего ~ 50 мин.

Процедура визуализации

Функциональная визуализация проводилась с использованием 3-теслового МРТ-сканера Siemens Allegra, предназначенного только для исследования головы, для получения градиентных эхо-изображений с T2*-взвешиванием и контрастом, зависящим от уровня оксигенации крови (BOLD). Мы использовали последовательность, разработанную для оптимизации функциональной чувствительности в орбитофронтальной коре ( Deichmann et al., 2003 ). Она включала наклонное сканирование под углом 30° к линии передней поясной извилины – задней поясной извилины (AC–PC), а также применение подготовительного импульса длительностью 1 мс и амплитудой −2 мТ/м в направлении выбора среза. Последовательность позволила получить 36 аксиальных срезов толщиной 3 мм и разрешением в плоскости 3 мм с временем повторения (TR) 2.34 с. Испытуемые находились в легком фиксаторе головы внутри сканера, чтобы ограничить движения головы во время сканирования. Данные функциональной визуализации были получены в двух отдельных сеансах по 610 объемов. После проведения тестирования для каждого испытуемого также были получены структурные изображения с Т1-взвешиванием и карты магнитного поля.

Поведенческий анализ

Чтобы получить общую меру импульсивного выбора, мы подсчитали количество более ранних вариантов, выбранных из испытаний 220, для каждого состояния препарата, для каждого субъекта. Испытания, в которых ответ не был сделан, были исключены из этой суммы при всех трех состояниях препарата. Например, если один субъект не ответил вовремя на исследование с номером 35 в состоянии плацебо, это исследование было исключено из подсчета в двух других условиях для этого субъекта. Это гарантировало, что сравнения были сделаны на пробной основе (так как один и тот же набор испытаний был дан на каждом сеансе тестирования), и любое влияние препарата на эту меру не было связано с количеством вариантов, сделанных в каждом условии. ANOVA с повторными измерениями использовали для поиска каких-либо различий в этом общем измерении в зависимости от состояния лекарства.

Оценка параметров

Мы реализовали правило принятия решений softmax для присвоения вероятности ( P O1 для варианта 1) каждому варианту выбора в зависимости от значения варианта ( V O1 для варианта 1), при этом

POi=e(VOi/β)e(VO1/β)+e(VO2/β).
(1)

Параметр V O i представляет собой ценность опции (т. е. отложенного вознаграждения) в соответствии с конкретной моделью оценки опций (см. ниже). Параметр β отражает степень стохастичности поведения субъекта (т. е. чувствительность к ценности каждой опции).

Мы использовали модель дисконтированной полезности для оценки вариантов, о которой мы ранее сообщали ( Pine et al., 2009 ) как о модели, точно соответствующей выбору испытуемых в этом задании. Эта модель утверждает, что дисконтированная полезность ( V ) вознаграждения величиной ( M ) и с задержкой ( d ) может быть выражена следующим образом:

V=D(d)⋅U(M)=1-e(-r⋅M)r(1+K⋅d),
(2)

в котором

D=11+K⋅d

и

U=1-e(-r⋅M)r.

D можно рассматривать как коэффициент дисконтирования — зависящий от задержки фактор (от 0 до 1), с помощью которого полезность дисконтируется стандартным гиперболическим образом ( Мазур, 1987 ). Параметр ставки дисконтирования K количественно определяет склонность индивида дисконтировать будущее таким образом, что человек с высоким K быстро обесценивает вознаграждения по мере их отдаления. U — это недисконтированная полезность, которая определяется величиной каждого варианта и r , свободным параметром, определяющим кривизну зависимости. Чем больше значение r , тем более вогнутой является функция полезности, а если r отрицательно, то функция полезности выпуклая. Чем больше r (выше нуля), тем выше скорость убывающей предельной полезности и тем более импульсивным является выбор индивида. Следует отметить, что согласно традиционным моделям оценки межвременного выбора, которые не учитывают дисконтирование величины ( Мазур, 1987 ), импульсивность, определяемая склонностью выбирать меньший и более ранний вариант, является исключительно функцией K , и поэтому можно было бы ожидать идеальной корреляции между ними. Следовательно, K часто рассматривается как мера этой черты. Однако, поскольку было показано, что дисконтирование величины также определяет результат выбора у животных и людей ( Хо и др., 1999 ; Пайн и др., 2009 ), мы предпочитаем приравнивать импульсивность к поведению при выборе, поскольку временная ставка дисконтирования не идеально коррелирует с этой ключевой мерой.

Для расчета параметров максимального правдоподобия для каждой модели, а также для оценки соответствия, использовалась оценка максимального правдоподобия. Каждому из параметров (включая β ) разрешалось свободно изменяться. Для каждого испытуемого вероятность рассчитывалась для каждого из 220 вариантов, выбранных из 220 возможных (включая контрольные испытания), с использованием формулы softmax, реализованной с помощью функций оптимизации в Matlab (MathWorks). Логарифмическая функция правдоподобия рассчитывалась с использованием вероятности варианта, выбранного в испытании t ( P O( t ) ) из уравнения 1 таким образом, что

lnL=ΣtlnPO(t).
(3)

Для проверки различий в ставке дисконтирования ( K ) и вогнутости полезности ( r ) в зависимости от условий приема препарата использовался дисперсионный анализ с повторными измерениями .

Для целей визуализации и анализа времени реакции была проведена дополнительная оценка, в результате которой все варианты выбора для каждого субъекта в каждом состоянии были сгруппированы (как если бы они были сделаны одним субъектом) и смоделированы как канонический субъект для оценки значений канонических параметров (с использованием описанная выше процедура подбора, оценка параметров). Это было сделано для уменьшения шума, связанного с процедурой подгонки на уровне одного субъекта. Кроме того, мы не хотели встраивать поведенческие различия в наши регрессионные модели при анализе данных МРТ, поскольку мы искали независимые доказательства наших поведенческих результатов.

Анализ изображений

Анализ изображений проводился с использованием SPM5 ( www.fil.ion.ucl.ac.uk/spm ). Для каждой сессии первые пять изображений отбрасывались, чтобы учесть эффекты уравновешивания T1. Оставшиеся изображения выравнивались относительно шестого тома (для коррекции движений головы), корректировались с помощью карт поля, пространственно нормализовались по стандартному шаблону мозга Монреальского неврологического института (MNI) и пространственно сглаживались с помощью трехмерного гауссова ядра с шириной на половине максимума (FWHM) 8 мм (и передискретизировались, в результате чего получались воксели размером 3 × 3 × 3 мм). Низкочастотные артефакты удалялись с помощью фильтра верхних частот 1/128 Гц, а временная автокорреляция, присущая временным рядам фМРТ, корректировалась путем предварительного отбеливания с использованием процесса AR(1).

Карты контраста для отдельных субъектов были сгенерированы с использованием параметрической модуляции в контексте общей линейной модели. Мы провели анализ, изучая вариативность регионального BOLD-ответа, обусловленную различными интересующими нас регрессорами: U , D и V для всех вариантов при всех условиях приема препарата. Это позволило нам идентифицировать области, участвующие в оценке и интеграции различных компонентов ценности (в условиях плацебо), и выявить любые различия в этих активациях в зависимости от условий приема препарата.

Значения U , D и V для каждого варианта (два на испытание) рассчитывались с использованием канонических оценок параметров ( K и r ) в контексте нашей модели дисконтированной полезности и свертывались с канонической функцией гемодинамического ответа (HRF) в начале каждого варианта. Все начала моделировались как функции-стержни, и все регрессоры в одной и той же модели ортогонализировались (в порядке, указанном выше) перед анализом с помощью SPM5. Для коррекции артефактов движения шесть параметров выравнивания моделировались как регрессоры, не представляющие интереса, в каждом анализе. В дополнительном анализе мы устранили любые потенциальные искажения, связанные с ортогонализацией регрессоров в нашем анализе фМРТ, путем реализации другой регрессионной модели, но теперь без этапа ортогонализации. Здесь регрессорам было разрешено конкурировать за дисперсию, так что в этой более консервативной модели любые общие компоненты дисперсии были удалены, выявив только уникальные компоненты U , D и V. В рамках этой модели мы снова наблюдали те же различия в D и V в зависимости от условий приема препарата и отсутствие различий в U , хотя величина различий уменьшилась.

На втором уровне (групповой анализ) области, демонстрирующие значительную модуляцию каждым из регрессоров, указанных на первом уровне, были идентифицированы с помощью анализа случайных эффектов изображений β из карт контраста отдельных субъектов. Мы включили изменение показателя импульсивности (разница в количестве выбранных раньше) в качестве ковариаты при проведении контраста, связанного с различиями в испытаниях с L-допой и плацебо. Мы представляем результаты для областей, где пиковое значение t на уровне вокселя соответствовало p < 0.005 (без коррекции), с минимальным размером кластера в пять. Координаты были преобразованы из массива MNI в стереотаксический массив Талайраха и Турну (1988) ( http://imaging.mrc-cbu.cam.ac.uk/imaging/MniTalairach ).

Структурные изображения T1 были совмещены со средними функциональными изображениями EPI для каждого субъекта и нормализованы с использованием параметров, полученных из изображений EPI. Анатомическая локализация была выполнена путем наложения карт t на нормализованное структурное изображение, усредненное по всем субъектам, с учетом анатомического атласа Mai et al. (2003).

Данные о задержке решения

Для изучения влияния конфликтности решений (сложности выбора) на время принятия решения мы рассчитали показатель сложности для каждого из 220 вариантов, вычислив разницу в дисконтированной полезности (ΔV ) двух вариантов. Этот показатель был рассчитан с использованием модели дисконтированной полезности и канонических оценок параметров (по той же причине, по которой они использовались в анализе фМРТ). Затем была выполнена линейная регрессия для моделирования зависимости между временем принятия решения для каждого варианта и показателем сложности. Оценки параметров ( βs ) затем использовались в качестве сводной статистики, и был проведен анализ второго уровня с помощью одновыборочного t- критерия, сравнивающего βs с нулем. Это было выполнено отдельно для группы в каждом условии приема препарата. Для проверки любых различий во взаимосвязи между конфликтностью и временем принятия решения в зависимости от условий приема препарата мы использовали парные t- критерии.

Результаты

Сначала мы проанализировали влияние манипуляций с препаратом на поведение, рассмотрев долю меньших по времени вариантов выбора по сравнению с большими по времени вариантами выбора из 220 вариантов, сделанных в каждом условии. Эти данные показали заметное увеличение числа более ранних вариантов выбора в условии с L-допой по сравнению с условием с плацебо (в среднем 136 против 110, p = 0.013) ( Таблица 1 , Рис. 2 ). Примечательно, что эта закономерность наблюдалась у всех испытуемых, у которых можно было провести это сравнение. Между условиями с галоперидолом и плацебо не было существенной разницы в этом отношении. Следует отметить, что задание состояло из одного и того же набора вариантов выбора в каждом условии.

Рисунок 2 

Поведенческие сравнения и оценки параметров в условиях плацебо и l-допа. aСубъекты выполнили один и тот же набор (220) при всех трех условиях лечения, но чаще выбирали меньшее - раньше, чем большее - позже ...
Таблица 1 

Резюме поведенческих выводов

Далее мы использовали метод максимального правдоподобия для определения наиболее подходящих параметров ( K и r ) для модели дисконтированной полезности для каждого испытуемого в каждом условии, чтобы определить, опосредует ли наблюдаемое увеличение поведенческой импульсивности специфический эффект на любой из этих параметров. Сравнивая оцененные параметры, контролирующие ставку дисконтирования и вогнутость полезности в разных условиях, был обнаружен специфический эффект L-допы на ставку дисконтирования, при этом не было обнаружено эффекта на вогнутость полезности ( таблица 1 , рис. 2 и дополнительная таблица 1 , доступная на сайте www.jneurosci.org в качестве дополнительных материалов ). Таким образом, при приеме L-допы наблюдалась более высокая ставка дисконтирования по сравнению с плацебо ( p = 0.01), что приводило к большей девальвации будущих вознаграждений. В качестве иллюстрации, используя оценку канонического параметра группы для построения функции дисконтирования для каждого состояния приема препарата, можно увидеть, что при приеме плацебо требовалась задержка примерно в 35 недель, чтобы вознаграждение в 150 фунтов стерлингов приобрело текущую (субъективную) стоимость в 100 фунтов стерлингов, однако при приеме L-допы такое же обесценивание произошло с задержкой всего в 15 недель ( рис. 2 ). Оценки канонических параметров, использованные для анализа изображений, составили 0.0293 для K и 0.0019 для r (все приведенные значения K рассчитаны в единицах времени, выраженных в неделях).

В соответствии с работой Пайна и др. (2009) , оценки параметров для каждого испытуемого (во всех условиях) были больше нуля, что указывает как на значительный эффект временного дисконтирования ( p < 0.001), так и на нелинейность (вогнутость) мгновенной полезности ( p < 0.05). Следует отметить, что в отличие от традиционных моделей межвременного выбора ( Мазур, 1987 ), где результат выбора является исключительно функцией K , используемая здесь модель предполагает, что количество более ранних выбранных вариантов также зависит от параметра r (см. Материалы и методы) ( Пайн и др., 2009 ), и, следовательно, K само по себе не является чистой мерой импульсивности выбора. Кроме того, точность оценок параметров зависит как от стохастичности, так и от согласованности ответов испытуемых. Например, расчетные параметры в плацебо-испытании испытуемого № 13 были аномальными по отношению к остальным данным ( дополнительная таблица 1 , доступная на сайте www.jneurosci.org в качестве дополнительного материала ), что указывает на то, что этот испытуемый мог сделать непоследовательный выбор в этой сессии. При сравнении между испытуемыми следует отметить, что количество сделанных более ранних выборов также зависит от набора вариантов выбора, который получил испытуемый (один из двух).

Кроме того, мы исследовали, наблюдается ли замедление времени принятия решения по мере усложнения выбора — вследствие увеличения близости значений вариантов — и есть ли какие-либо различия между группами по этому показателю. Мы провели регрессионный анализ для оценки взаимосвязи между временем принятия решения и сложностью каждого выбора, измеряемой разницей в дисконтированной полезности (ΔV ) между двумя вариантами выбора, рассчитанной с использованием оценочных значений параметров. В условиях плацебо ( p < 0.001), L-допы ( p < 0.001) и галоперидола ( p < 0.001) время принятия решения у испытуемых увеличивалось по мере уменьшения ΔV , то есть по мере уменьшения разницы в субъективной ценности между вариантами. Однако в целом различий по этому показателю в зависимости от принимаемых препаратов не наблюдалось. Это указывает на то, что, в отличие от результата выбора, манипуляции с дофамином не влияли на время, отведенное на взвешивание решения, или на способность «держать себя в руках», и подтверждают предположение о том, что импульсивность не является единым конструктом ( Evenden, 1999 ; Ho et al., 1999 ; Winstanley et al., 2004a ; Dalley et al., 2008 ). Это наблюдение согласуется с предыдущим выводом о том, что прием дофаминовых препаратов при болезни Паркинсона не был связан с изменением времени принятия решения в другой задаче выбора ( Frank et al., 2007 ).

Субъективные эффекты анализировались путем сравнения изменений трех факторов, выделенных Бондом и Ладером (1974) , а именно, бдительности, удовлетворенности и спокойствия, относительно изменения показателей, наблюдавшегося в условиях приема плацебо. Были обнаружены различия между условиями приема галоперидола и плацебо, где испытуемые были менее бдительны при приеме галоперидола ( p < 0.05).

Чтобы установить, как повышенная импульсивность под действием L-допы представлена ​​на нейронном уровне, мы применили к данным нейровизуализации три (ортогонализированных) параметрических регрессора, U , D и V , связанных с предъявлением каждого варианта, как это диктуется нашей моделью. Регрессоры были созданы для каждого испытуемого в каждом условии с использованием канонических значений параметров, оцененных на основе выбора всех испытуемых за все сессии, в рамках проверки нулевой гипотезы о том, что активность мозга не различается между условиями.

В предварительном анализе мы изучили корреляции для этих трех регрессоров в условиях плацебо, чтобы воспроизвести предыдущие результаты ( Pine et al., 2009 ). Наши результаты ( дополнительные результаты , доступные на сайте www.jneurosci.org в качестве дополнительных материалов ) согласуются с ранее показанными, поскольку D , U и V независимо коррелируют с активностью в хвостатом ядре (среди других областей). Это подтверждает иерархическую, интегрированную модель оценки вариантов, где субкомпоненты ценности кодируются по-разному, а затем объединяются для получения общей ценности, используемой для принятия решения.

Критический анализ МРТ был сфокусирован на ключевой поведенческой разнице в оценке опционов при l-допе по сравнению с плацебо. При сравнении нейронной активности для U, D и Vсущественные различия были найдены для обоих D и V, вывод, который соответствует поведенческому результату. В частности, мы наблюдали усиление активности в регионах, связанных с фактором дисконтирования D в условиях l-допа относительно условий плацебо (Рис 3a и дополнительные результаты, доступны на www.jneurosci.org as дополнительный материал) и отсутствие эффекта от галоперидола (то есть коэффициенты регрессии в условиях плацебо и галоперидола существенно не различались). Эти области включали стриатум, инсула, субгенуальный поясной извилины и боковые орбитофронтальные кортикальные слои. Эти результаты показывают, что характерное снижение активности этих регионов в качестве вознаграждений становится более отсроченным (или увеличивается, когда они становятся ближе во времени) (McClure et al., 2004; Танака и др., 2004; Kable и Glimcher, 2007; Pine et al., 2009) (смотрите также дополнительные результаты для плацебо, доступно на www.jneurosci.org as дополнительный материал) более выражена у l-допы по сравнению с условиями плацебо, что аналогично поведенческому обнаружению, где l-допа увеличивает предпочтение более быстрым вознаграждениям за счет увеличения ставки дисконта, тем самым делая более быстрые вознаграждения более привлекательными по сравнению с более поздними вознаграждениями. Более того, так как не было существенной разницы в r Параметр через эти испытания, мы не наблюдали существенной разницы в U активность между испытаниями l-допы и плацебо, что указывает на то, что l-допа не влияла на кодирование полезности вознаграждения.

Рисунок 3 

Различия в нейронной активности между состояниями l-допа и плацебо в ответ на субъективное значение и коэффициент дисконтирования (статистические параметрические карты и оценки параметров). a, Регионы, которые коррелировали с коэффициентом дисконтирования (D) (то есть, награда близость) ...

Предыдущие исследования ( Kable and Glimcher, 2007 ; Pine et al., 2009 ), а также анализ только группы плацебо, указывают на участие стриатальных областей, среди прочих, в кодировании дисконтированной полезности ( V ). При сравнении областей, коррелирующих с V , наблюдалось снижение активности в хвостатом ядре, островковой коре и латеральных нижних лобных областях в условиях приема L-допы по сравнению с плацебо ( рис. 3b и дополнительные результаты , доступные на сайте www.jneurosci.org в качестве дополнительных материалов ). Этот результат указывает на то, что при вознаграждении определенной величины и задержки L-допа вызывала снижение активности в областях, кодирующих субъективную ценность (дисконтированную полезность). Это снижение было связано с усилением временного дисконтирования и привело к увеличению выбора меньших и более быстрых (импульсивных) вариантов в этих условиях по сравнению с плацебо.

Поскольку в данных фМРТ использовался один и тот же набор канонических параметров (во всех условиях, проверяя нулевую гипотезу о том, что они все одинаковы), эти результаты согласуются с поведенческими результатами, согласно которым увеличение ставки дисконтирования при приеме L-допы приводит к снижению D , что, в свою очередь, вызывает соответствующее снижение V и, следовательно, увеличение относительного предпочтения более быстрого вознаграждения. Следует отметить, что если бы дофамин кодировал только дисконтированную полезность, можно было бы предсказать противоположный результат, с большей активностью в условиях приема L-допы.

Анализ результатов поведенческих исследований ( таблица 1 , рис. 2 ) показал, что увеличение импульсивности после приема L-допы было более выражено у одних испытуемых, чем у других. На этом основании мы провели ковариантный анализ предыдущих сравнений, рассчитав разностный показатель количества более ранних вариантов, выбранных в экспериментах с плацебо и L-допой. Чем больше этот показатель, тем больше увеличение импульсивности (дисконтная ставка), вызванное L-допой. Путем регрессионного анализа этой величины в качестве ковариаты в сравнении D в условиях L-допы и плацебо ( рис. 3а ) мы обнаружили значимую корреляцию с активностью в миндалевидном теле (двусторонне) ( рис. 4 ). Поскольку разница в показателях выбора между испытуемыми могла быть частично обусловлена ​​тем, что испытуемые были распределены в один из двух возможных наборов вариантов выбора, и для повышения статистической мощности (возможности включить больше испытуемых), мы повторили этот анализ, на этот раз используя разницу в оценочных значениях K от экспериментов с плацебо до экспериментов с L-допой. Результаты этого анализа (см. дополнительные результаты , доступные на сайте www.jneurosci.org в качестве дополнительных материалов ) вновь продемонстрировали сильную положительную корреляцию между активностью миндалевидного тела и степенью увеличения K от плацебо до L-допы. Эти результаты предполагают, что индивидуальная восприимчивость испытуемых к импульсивности под воздействием L-допы модулируется степенью реакции миндалевидного тела на временную близость вознаграждения.

Рисунок 4 

Межпредметная изменчивость в увеличении импульсивности после l-допы. a, Статистическая параметрическая карта, показывающая области, выражающие общую чувствительность к коэффициенту дисконтирования (в условиях l-допа за вычетом плацебо), и которая изменяется в зависимости от степени, в которой ...

Обсуждение

Существующие теории дофамина сосредоточены на его роли в обучении на основе вознаграждения, где дофамин, как считается, опосредует сигнал ошибки прогнозирования, используемый для обновления значений состояний и действий, которые позволяют, соответственно, прогнозировать и контролировать процесс принятия решений. Эти модели использовались для иллюстрации того, как аномальная обработка дофамина может приводить к импульсивному и аддиктивному поведению на основе опыта (т.е. посредством обучения) ( Redish, 2004 ; Frank et al., 2007 ; Dagher and Robbins, 2009 ). Здесь был явно исследован отдельный аспект импульсивности, основанный на взаимосвязи времени получения вознаграждения и его полезности, независимо от обратной связи и обучения. При межвременном выборе лица, принимающие решения, должны выбирать между вознаграждениями различной величины и задержки. Это достигается путем дисконтирования стоимости будущих значений полезности (в соответствии с их задержкой) для сравнения их текущей стоимости. В рамках этой концепции дофамин потенциально может усиливать импульсивный выбор двумя различными способами ( Pine et al., 2009 ): в результате увеличения скорости уменьшения предельной полезности выигрыша (что снизит субъективную мгновенную ценность вознаграждений большей величины по сравнению с вознаграждениями меньшей величины) или за счет усиленного временного дисконтирования будущих вознаграждений. Наши результаты показывают, что дофамин избирательно влияет на скорость дисконтирования, не оказывая существенного влияния на функцию полезности. Более того, эти поведенческие результаты были независимо подтверждены данными фМРТ, поскольку ключевое различие, вызванное L-допой, заключалось в модуляции нейронных ответов в областях, связанных с дисконтированием вознаграждений и, следовательно, их общей субъективной ценностью, без видимых эффектов на фактическую полезность вознаграждений. В заключение, это исследование предоставляет доказательства того, что дофамин контролирует то, как время получения вознаграждения включается в построение его конечной ценности. Это предполагает новый механизм, посредством которого дофамин контролирует выбор человека и, соответственно, такие черты, как импульсивность.

Наши результаты подтверждают предположение о том, что импульсивность не является единым конструктом, и, более того, что различные подтипы импульсивности могут быть разделены фармакологически и нейробиологически ( Evenden, 1999 ; Ho et al., 1999 ; Winstanley et al., 2004a ; Dalley et al., 2008 ). Эффекты дофамина наблюдались только при импульсивном выборе, измеряемом по результату/предпочтению выбора, но не влияли на обдуманность — «придерживание коней» ( Frank et al., 2007 ), — которая возникает, когда варианты тщательно оцениваются, порождая конфликт при принятии решений ( Botvinick, 2007 ; Pochon et al., 2008 ), также связанный с импульсивностью, проявляющейся в размышлении или подготовке ( Evenden, 1999 ; Clark et al., 2006 ).

Ни одно исследование на людях еще не продемонстрировало склонность дофамина к усилению временной импульсивности. Предыдущие манипуляции с допамином у грызунов показали противоречивые эффекты в межвременном выборе, при этом некоторые из них показали, что повышение дофамина приводит к снижению импульсивного выбора или что ослабление дофамина приводит к увеличению (Ричардс и др., 1999; Cardinal et al., 2000; Wade et al., 2000; Isles et al., 2003; Winstanley и др., 2003; Ван Гаален и др., 2006; Бизо и др., 2007; Floresco и др., 2008), тогда как другие демонстрируют обратное, дозозависимый эффект или отсутствие эффекта (Logue et al., 1992; Чарриер и Тьебо, 1996; Эвенден и Райан, 1996; Ричардс и др., 1999; Cardinal et al., 2000; Isles et al., 2003; Хелмс и др., 2006; Бизо и др., 2007; Floresco и др., 2008). Этим расхождениям может способствовать ряд факторов, а именно: происходит ли манипуляция перед обучением или после обучения, присутствует ли сигнал во время задержки, пресинаптические или постсинаптические эффекты препарата, используемая парадигма, используемый препарат / нацеленность на рецептор, участие серотонина и, в частности, дозировка препарата. Человеческие исследования межвременного выбора наблюдали увеличение самоконтроля (de Wit et al., 2002) или нет эффекта (Ачесон и де Вит, 2008; Hamidovic et al., 2008) при усилении дофаминовой функции. Большинство из этих исследований осложняются использованием ими моноаминергических стимуляторов, таких как амфетамин или метилфенидат, которые, как часто полагают, уменьшают импульсивность. Эти исследования могут быть спутаны с сопутствующим выбросом серотонина (Кученски и Сегал, 1997), что также связано с модуляцией межвременного выбора. В частности, было показано, что усиление функции серотонина может уменьшить импульсивность при межвременном выборе или наоборот (Вогар и др., 1993; Ричардс и Сейден, 1995; Пулос и др., 1996; Хо и др., 1999; Мобини и др., 2000) и что разрушение серотонинергических нейронов может блокировать действие амфетамина (Winstanley и др., 2003). Кроме того, считается, что на основании многочисленных данных умеренные дозы амфетамина снижают нейротрансмиссию дофамина через пресинаптические эффекты, что может объяснить его дозозависимый эффект во многих предыдущих исследованиях, а также его терапевтическую эффективность (в умеренных дозах) в предположительно гипердопаминергическая СДВГ (Симан и Мадрас, 1998, 2002; Соланто, 1998, 2002; Соланто и др., 2001; de Wit et al., 2002). l-допа ранее не использовался для воздействия на импульсивный выбор и, возможно, предлагает более убедительные и прямые доказательства роли дофамина. Хотя l-допа может приводить к повышению уровня норадреналина, и точный механизм его действия не совсем понятен, считается, что норадреналин не играет важную роль в регуляции межвременного выбора (Ван Гаален и др., 2006). Кроме того, возможно, что l-допа могла вызвать субъективные эффекты, которые не были уловлены субъективными шкалами, используемыми здесь.

Наше отсутствие соответствующего снижения импульсивности по сравнению с плацебо при применении предполагаемого антагониста дофамина галоперидола, вероятно, отражает ряд факторов. К ним относятся неспецифические и широко распространенные фармакологические эффекты галоперидола или дозировка — некоторые исследования показывают, что галоперидол может парадоксальным образом повышать уровень дофамина в малых дозах из-за пресинаптического воздействия на ауторецептор D2 ( Франк и О'Рейли, 2006 ). Кроме того, субъективные эффекты, вызванные препаратом, включая снижение бдительности, могли сделать данные более неточными. Дальнейшие исследования должны использовать более специфические антагонисты дофамина, чтобы оценить, может ли снижение функции дофамина уменьшить импульсивность у людей.

Известно, что дофамин оказывает доминирующее влияние на примитивные поведенческие реакции, связанные с вознаграждением, такие как приближение и завершение ( Parkinson et al., 2002 ). Такие эффекты согласуются с широкой ролью дофамина в формировании мотивационной значимости ( Berridge, 2007 ; Robinson and Berridge, 2008 ) и их сложнее объяснить с точки зрения обучения как такового. Посредничество дофамина в безусловных и условных реакциях связано с концепцией павловской импульсивности, где реакции, связанные с первичными, врожденными ценностями, формируют простой, эволюционно обусловленный набор действий, функционирующий наряду с другими механизмами контроля, такими как действия, основанные на привычках и целенаправленные действия, а иногда и конкурируя с ними ( Dayan et al., 2006 ; Seymour et al., 2009 ). Важно отметить, что эти «павловские ценности и действия» характерно зависят от пространственной и временной близости к вознаграждению и, таким образом, представляют собой один из возможных механизмов, посредством которого дофамин может контролировать кажущуюся скорость временного дисконтирования. Если такой процесс лежит в основе импульсивности, вызванной дофамином, в этой задаче, то это предполагает, что эта врожденная (павловская) система реагирования работает в гораздо более широком контексте, чем считается в настоящее время, поскольку вознаграждения в этой задаче являются вторичными вознаграждениями, возникающими как минимум через 1 неделю. Это объяснение противоречит идее избирательного дофаминергического усиления системы (основанной на лимбических областях), которая ценит только краткосрочные вознаграждения ( McClure et al., 2004 ). Такое объяснение двойной системы было бы трудно согласовать с предыдущими исследованиями ( Kable and Glimcher, 2007 ; Pine et al., 2009 ), которые предполагают, что лимбические области ценят вознаграждения при любой задержке.

Такое объяснение поднимает важные вопросы о зависимой от миндалевидного тела восприимчивости к импульсивности, вызванной дофамином, которую мы наблюдали в наших данных. В данном случае активность миндалевидного тела в ответ на D коррелировала со степенью импульсивности поведения после приема L-допы. В павловско-инструментальном переносе (ПИТ), феномене, зависящем от связи между миндалевидным телом и стриатумом ( Cardinal et al., 2002 ; Seymour and Dolan, 2008 ), и проявление которого, как известно, модулируется дофамином ( Dickinson et al., 2000 ; Lex and Hauber, 2008 ), привлекательные павловские ценности усиливают реакцию на вознаграждение. Примечательно, что индивидуальная восприимчивость к этому влиянию коррелирует с активностью миндалевидного тела ( Talmi et al., 2008 ), что предполагает, что миндалевидное тело может модулировать степень влияния первичных условных и безусловных значений вознаграждения на инструментальный (основанный на привычках и целенаправленный) выбор. Если это действительно так, то это предсказывает, что одновременное и независимое предъявление сигналов вознаграждения во время межвременного выбора может вызывать усиление временной импульсивности посредством механизма, зависящего от миндалевидного тела. Мы отмечаем данные о том, что поражения базолатеральной миндалевидной железы увеличивают импульсивность выбора у грызунов ( Winstanley et al., 2004b ), что противоречит нашим ожиданиям, основанным на имеющихся данных. Напротив, ранее сообщалось о корреляции активности миндалевидного тела с величиной временного дисконтирования в исследовании fMRI ( Hoffman et al., 2008 ). Эти вопросы создают основу для будущих исследований, которые позволят систематически проверять эти противоречивые прогнозы на людях.

Наконец, эти результаты указывают на более широкий клинический контекст и предлагают объяснение того, почему увеличение импульсивного и рискованного поведения наблюдается при синдроме дофаминовой дисрегуляции, зависимости и СДВГ, которые связаны с гипердофаминергическими состояниями, вызванными переизбытком дофамина в полосатом теле или сенсибилизацией ( Solanto, 1998 , 2002 ; Seeman and Madras, 2002 ; Berridge, 2007 ; Robinson and Berridge, 2008 ; Dagher and Robbins, 2009 ; O'Sullivan et al., 2009 ). В подтверждение этого тезиса, Voon et al. (2009) обнаружили, что прием дофаминовых препаратов у пациентов с болезнью Паркинсона и расстройствами контроля импульсов был связан с повышенными показателями временного дисконтирования. В заключение, представленные здесь результаты демонстрируют способность дофамина усиливать импульсивность у людей и предлагают новый взгляд на его роль в модулировании импульсивного выбора в контексте временного дисконтирования. Эти данные позволяют предположить, что люди могут быть подвержены временным периодам повышенной импульсивности, когда во время принятия решений присутствуют факторы, повышающие активность дофамина, такие как сенсорные качества вознаграждения.

Дополнительный материал

дополнительная информация

Благодарности

Эта работа финансировалась грантом программы Wellcome Trust RJD, а AP была поддержана студенческим медицинским советом по исследованиям. Мы благодарим К. Фристона, Дж. Ройзера и В. Керрана за помощь в планировании и анализе, а также за глубокие обсуждения.

Референсы

  1. Acheson A, de Wit H. Bupropion улучшает внимание, но не влияет на импульсивное поведение у здоровых молодых людей. Exp Clin Psychopharmacol. 2008; 16: 113-123. [PubMed]
  2. Эйнсли Г. Видовая награда: поведенческая теория импульсивности и импульсного контроля. Психол Булл. 1975; 82: 463-496. [PubMed]
  3. Berridge KC. Споры о роли дофамина в вознаграждении: аргументы в пользу важности стимулов. Психофармакология. 2007; 191: 391–431. [PubMed]
  4. Bickel WK, Marsch LA. На пути к поведенческому экономическому пониманию наркотической зависимости: процессы дисконтирования отсрочек. Зависимость. 2001; 96: 73-86. [PubMed]
  5. Бикель В. К., Миллер М. Л., Йи Р., Коваль Б. П., Линдквист Д. М., Питкок Дж. А. Поведенческая и нейроэкономика наркомании: конкурирующие нейронные системы и процессы временного дисконтирования. Наркотик Алкоголь Зависит. 2007; 90 (Доп. 1): S85 – S91. [Бесплатная статья PMC] [PubMed]
  6. Bizot JC, Chenault N, Houzé B, Herpin A, David S, Pothion S, Trovero F. Метилфенидат снижает импульсивное поведение у юных крыс Wistar, но не у взрослых крыс Wistar, SHR и WKY. Психофармакология (Берл) 2007; 193: 215 – 223. [PubMed]
  7. Бонд А.Дж., Ладер М.Х. Использование аналоговых шкал в оценке субъективных ощущений. Br J Med. Psychol. 1974; 47: 211-218.
  8. Ботвиник М.М. Мониторинг конфликта и принятие решений: согласование двух точек зрения на функцию передней поясной извилины. Cogn Affect Behav Neurosci. 2007; 7: 356-366. [PubMed]
  9. Кардинал Р.Н., Роббинс Т.В., Эверитт Б.Дж. Влияние d-амфетамина, хлордиазепоксида, альфа-флупентиксола и поведенческих манипуляций на выбор сигнального и несигнального замедленного подкрепления у крыс. Психофармакологии. 2000; 152: 362-375. [PubMed]
  10. Кардинал Р.Н., Паркинсон Ю.А., Зал J, Эверитт Б.Ю. Эмоция и мотивация: роль миндалины, вентральной полосатой и префронтальной коры. Neurosci Biobehav Rev. 2002; 26: 321-352. [PubMed]
  11. Кардинал Р.Н., Уинстанли К.А., Роббинс Т.В., Эверитт Б.Дж. Лимбическая кортикостриатальная система и отсроченная арматура. Ann NY Acad Sci. 2004; 1021: 33-50. [PubMed]
  12. Charrier D, Thiébot MH. Влияние психотропных препаратов на реакцию крыс в оперантной парадигме, включающей выбор между задержанными усилителями. Pharmacol Biochem Behav. 1996; 54: 149-157. [PubMed]
  13. Кларк Л., Роббинс Т.В., Эрше К.Д., Саакян Б.Ю. Отражающая импульсивность у современных и бывших потребителей веществ. Biol Psychiatry. 2006; 60: 515-522. [PubMed]
  14. Дагер А., Роббинс Т.В. Личность, зависимость, дофамин: выводы из болезни Паркинсона. Нейрон. 2009. 61: 502–510. [PubMed]
  15. Dalley JW, Mar AC, Economidou D, Robbins TW. Нейроповеденческие механизмы импульсивности: лобно-полосатые системы и функциональная нейрохимия. Pharmacol Biochem Behav. 2008; 90: 250-260. [PubMed]
  16. Даян П, Нив Й, Сеймур Б, Доу Н.Д. Злоупотребление ценностью и дисциплиной воли. Нейронные сети. 2006; 19: 1153-1160. [PubMed]
  17. Deichmann R, Gottfried JA, Hutton C., Turner R. Оптимизированный EPI для исследований МРТ орбитофронтальной коры. Neuroimage. 2003; 19: 430-441. [PubMed]
  18. de Wit H, Enggasser JL, Richards JB. Острое введение d-амфетамина снижает импульсивность у здоровых добровольцев. Neuropsychopharmacology. 2002; 27: 813-825. [PubMed]
  19. Дикинсон А., Смит Дж., Миренович Дж. Диссоциация павловского и инструментального обучения под агонистами допамина. Behav Neurosci. 2000; 114: 468-483. [PubMed]
  20. Evenden JL. Разновидности импульсивности. Психофармакологии. 1999; 146: 348-361. [PubMed]
  21. Evenden JL, Ryan CN. Фармакология импульсивного поведения у крыс: влияние лекарств на выбор ответа с различными задержками подкрепления. Психофармакологии. 1996; 128: 161-170. [PubMed]
  22. Floresco SB, Tse MT, Ghods-Sharifi S. Допаминергическая и глутаматергическая регуляция принятия решений на основе усилий и задержек. Neuropsychopharmacology. 2008; 33: 1966-1979. [PubMed]
  23. Фрэнк MJ, O'Reilly RC. Механистическое объяснение функции дофамина полосатого тела в познании человека: психофармакологические исследования с каберголином и галоперидолом. Behav Neurosci. 2006; 120: 497–517. [PubMed]
  24. Франк MJ, Саманта J, Мустафа А.А., Шерман SJ. Удерживайте лошадей: импульсивность, глубокая стимуляция мозга и лекарства при паркинсонизме. Наука. 2007; 318: 1309-1312. [PubMed]
  25. Hamidovic A, Kang UJ, de Wit H. Воздействие низких до умеренных острых доз прамипексола на импульсивность и познание у здоровых добровольцев. J Clin Psychopharmacol. 2008; 28: 45-51. [PubMed]
  26. Хелмс С.М., Ривз Дж.М., Митчелл С.Х. Влияние штамма и D-амфетамина на импульсивность (задержка дисконтирования) у инбредных мышей. Психофармакология (Берл) 2006; 188: 144 – 151. [PubMed]
  27. Ho MY, Mobini S, Chiang TJ, Bradshaw CM, Szabadi E. Теория и метод количественного анализа поведения «импульсивного выбора»: значение для психофармакологии. Психофармакологии. 1999; 146: 362-372. [PubMed]
  28. Hoffman WF, Schwartz DL, Huckans MS, McFarland BH, Meiri G, Stevens AA, Mitchell SH. Активация коры во время задержки дисконтирования у абстинентно-зависимых от метамфетамина лиц. Психофармакологии. 2008; 201: 183-193. [Бесплатная статья PMC] [PubMed]
  29. Айлз А.Р., Хамби Т, Уилкинсон Л.С. Измерение импульсивности у мышей с использованием новой оперантной задачи с отсроченным подкреплением: эффекты поведенческих манипуляций и d-амфетамина. Психофармакология (Берл) 2003; 170: 376 – 382. [PubMed]
  30. Kable JW, Glimcher PW. Нейронные корреляты субъективной ценности при межвременном выборе. Nat Neurosci. 2007; 10: 1625-1633. [Бесплатная статья PMC] [PubMed]
  31. Кученски Р, Сегал Д.С. Влияние метилфенидата на внеклеточный дофамин, серотонин и норэпинефрин: сравнение с амфетамином. J Neurochem. 1997; 68: 2032-2037. [PubMed]
  32. Lex A, Hauber W. Дофамин D1 и D2 рецепторы в ядре и прилежащем ядре и оболочке опосредуют павловский инструментальный перенос. Изучите Mem. 2008; 15: 483-491. [Бесплатная статья PMC] [PubMed]
  33. Logue AW, Тобин H, Челонис JJ, Ван Р.Ю., Гири Н., Шахтер С. Кокаин снижает самоконтроль у крыс: предварительный отчет. Психофармакологии. 1992; 109: 245-247. [PubMed]
  34. Май JK, Assheuer J, Paxinos G. Атлас человеческого мозга. Ed 2 Academic; Сан-Диего: 2003.
  35. Мазур Ю.Е. Корректирующая процедура для изучения отложенного подкрепления. В: Commons ML, Мазур JE, Невин JA, Рахлин H., редакторы. Количественный анализ поведения. V. Влияние задержки и промежуточных событий на стоимость подкрепления. Лоуренс Эрлбаум; Хиллсдейл, Нью-Джерси: 1987. С. 55 – 73.
  36. McClure SM, Laibson DI, Loewenstein G, Cohen JD. Отдельные нейронные системы ценят немедленное и отсроченное денежное вознаграждение. Наука. 2004; 306: 503-507. [PubMed]
  37. Мобини С., Чианг Т.Дж., Аль-Рувайтея А.С., Хо М.Ю., Брэдшоу С.М., Сабади Э. Влияние центрального истощения 5-гидрокситриптамина на межвременный выбор: количественный анализ. Психофармакология (Берл) 2000; 149: 313 – 318. [PubMed]
  38. О'Салливан СС, Эванс А.Х., Лис А.Дж. Синдром дисрегуляции допамина: обзор его эпидемиологии, механизмов и лечения. Наркотики ЦНС. 2009; 23: 157–170. [PubMed]
  39. Паркинсон Дж. А., Далли Дж. В., Кардинал Р. Н., Бамфорд А., Фехнер Б., Лакеналь Г., Рудараканчана Н., Халкерон К. М., Роббинс Т. В., Эверитт Б. Дж. Снижение допамина в нуклеусах упадки ухудшает как приобретение, так и эффективность аппетитного подхода к павловскому подходу: последствия для функции допамина мезоакбенса. Behav Brain Res. 2002; 137: 149-163. [PubMed]
  40. Сосна А, Сеймур Б, Ройзер Дж.П., Боссэртс П, Фристон К.Дж., Курран Х.В., Долан Р.Дж. Кодирование предельной полезности во времени в человеческом мозге. J Neurosci. 2009; 29: 9575-9581. [Бесплатная статья PMC] [PubMed]
  41. Почон JB, Riis J, Sanfey AG, Nystrom LE, Коэн JD. Функциональная визуализация решения конфликта. J Neurosci. 2008; 28: 3468-3473. [PubMed]
  42. Poulos CX, Parker JL, Le AD. Дексфенфлурамин и 8-OHDPAT модулируют импульсивность в парадигме задержки вознаграждения: значение для соответствия потреблению алкоголя. Behav Pharmacol. 1996; 7: 395-399. [PubMed]
  43. Красноватый AD. Зависимость как вычислительный процесс пошла наперекосяк. Наука. 2004; 306: 1944-1947. [PubMed]
  44. Ричардс Дж. Б., Сейден Л.С. Истощение серотонина увеличивает импульсивное поведение у крыс. Soc Neurosci Abstr. 1995; 21: 1693.
  45. Ричардс Дж. Б., Сабол К. Э., де Вит Х. Влияние метамфетамина на процедуру корректировки количества, модель импульсивного поведения у крыс. Психофармакологии. 1999; 146: 432-439. [PubMed]
  46. Робинсон Т.Э., Берридж К. К.. Теория стимулирующей сенсибилизации наркомании: некоторые текущие проблемы. Philos Trans R Soc Lond B Biol Sci. 2008; 363: 3137-3146. [Бесплатная статья PMC] [PubMed]
  47. Сагволден Т, сержант Я.А. Дефицит внимания / гиперактивность - от дисфункций мозга до поведения. Behav Brain Res. 1998; 94: 1-10. [PubMed]
  48. Seeman P, Мадрас Б.К. Препарат против гиперактивности: метилфенидат и амфетамин. Мол Психиатрия. 1998; 3: 386-396. [PubMed]
  49. Seeman P, Мадрас Б. Метилфенидат повышает уровень дофамина в покое, что снижает импульсное высвобождение дофамина: гипотеза. Behav Brain Res. 2002; 130: 79-83. [PubMed]
  50. Сеймур Б, Долан Р. Эмоции, принятие решений и миндалина. Neuron. 2008; 58: 662-671. [PubMed]
  51. Сеймур Б., Йошида В., Долан Р. Альтруистическое обучение. Front Behav Neurosci. 2009; 3: 23. [Бесплатная статья PMC] [PubMed]
  52. Соланто М.В. Нейропсихофармакологические механизмы действия стимулирующих препаратов при синдроме дефицита внимания и гиперактивности: обзор и интеграция. Behav Brain Res. 1998; 94: 127-152. [PubMed]
  53. Соланто М.В. Дисфункция дофамина при AD / HD: интеграция клинических и фундаментальных нейробиологических исследований. Behav Brain Res. 2002; 130: 65-71. [PubMed]
  54. Соланто М.В., Абикофф Х., Сонуга-Барке Э., Шахар Р., Логан Г.Д., Вигал Т., Хехтман Л., Хиншоу С., Туркель Е. Экологическая обоснованность неприятия задержки и торможения реакции как меры импульсивности в AD / HD: дополнение к исследование мультимодального лечения NIMH AD / HD. J Abnorm Child Psychol. 2001; 29: 215-228. [PubMed]
  55. Talairach J, Tournoux P. Копланарный стереотаксический атлас мозга человека. Издательская группа Thieme; Штутгарт: 1988.
  56. Талми Д, Сеймур Б, Даян П, Долан Р.Дж. Человек Павловско-инструментальный перевод. J Neurosci. 2008; 28: 360-368. [Бесплатная статья PMC] [PubMed]
  57. Танака С.К., Дойя К., Окада Г., Уэда К., Окамото Й., Ямаваки С. Прогнозирование немедленного и будущего вознаграждения дифференциально рекрутирует петли кортико-базальных ганглиев. Nat Neurosci. 2004; 7: 887-893. [PubMed]
  58. Ван Гаален М.М., Ван Котен Р., Шоффельмер А.Н., Вандершурен Л.Ж. Критическое участие дофаминергической нейротрансмиссии в принятии импульсивных решений. Биол Психиатрия. 2006; 60: 66-73. [PubMed]
  59. Воон В., Рейнольдс Б., Брезинг С., Галеа С., Скалич М., Эканаяке В., Фернандес Х., Потенца М.Н., Долан Р.Дж., Халлетт М. Импульсивный выбор и ответ в поведении, связанном с допаминовым агонистом Психофармакология (Берл) 2009; 207: 645 – 659. [Бесплатная статья PMC] [PubMed]
  60. Уэйд Т.Р., де Вит Х., Ричардс Дж.Б. Влияние дофаминергических препаратов на отсроченное вознаграждение как меру импульсивного поведения у крыс. Психофармакологии. 2000; 150: 90-101. [PubMed]
  61. Winstanley CA, Dalley JW, Theobald DE, Robbins TW. Глобальное истощение 5-HT ослабляет способность амфетамина уменьшать импульсивный выбор в задаче дисконтирования задержки у крыс. Психофармакологии. 2003; 170: 320-331. [PubMed]
  62. Winstanley CA, Dalley JW, Theobald DE, Robbins TW. Фракционирующая импульсивность: контрастирующие эффекты центрального истощения 5-HT на различные меры импульсивного поведения. Neuropsychopharmacology. 2004a; 29: 1331-1343. [PubMed]
  63. Winstanley CA, Теобальд Д.Е., Кардинал Р.Н., Роббинс Т.В. Контрастные роли базолатеральной миндалины и орбитофронтальной коры в импульсивном выборе. J Neurosci. 2004b; 24: 4718-4722. [PubMed]
  64. Winstanley CA, Eagle DM, Robbins TW. Поведенческие модели импульсивности в отношении СДВГ: перевод между клиническими и доклиническими исследованиями. Clin Psychol Rev. 2006; 26: 379 – 395. [Бесплатная статья PMC] [PubMed]
  65. Вогар М.А., Брэдшоу С.М., Сабади Э. Влияние поражений восходящих 5-гидрокситриптаминэргических путей на выбор между задержанными усилителями. Психофармакологии. 1993; 113: 239-243. [PubMed]