奖励:评论–该小组有许多研究和评论,研究了缺乏与喜欢的神经基础。 当前的理论表明,多巴胺机制是喜欢的,而阿片样物质机制是想要的。 上瘾是如此之多,即使面对负面后果,您仍会继续使用。
Curr Opin Pharmacol。 2009二月; 9(1):65-73。
在线发布2009 January 21。 doi:10.1016 / j.coph.2008.12.014。
Kent C Berridge,Terry E Robinson和J Wayne Aldridge
地址美国密歇根大学安娜堡分校心理学系,48109-1043
通讯作者:肯特·C·贝里奇(电子邮件:[email protected])
抽象
近年来,在阐明奖赏的心理构成及其潜在的神经机制方面取得了显著进展。本文简要概述了奖赏的三种可分离的心理构成要素:“喜好”(享乐影响)、“渴望”(激励显著性)和学习(预测性联想和认知)。更好地理解奖赏的构成要素及其神经生物学基础,有助于开发更有效的治疗方法,用于治疗包括抑郁症、饮食障碍、药物成瘾以及其他相关的强迫性奖赏追求在内的各种情绪和动机障碍。
介绍
喜欢
对大多数人来说,“奖励”之所以令人渴望,是因为它能带来愉悦的意识体验——因此,“奖励”一词可以用来指代产生主观愉悦感的心理和神经生物学事件。但有证据表明,主观愉悦感只是奖励的一个组成部分,即使在人们没有意识到奖励的情况下,奖励也可能影响行为。事实上,内省有时反而会让人对奖励的喜爱程度产生误解,而即时反应可能更为准确[ 1 ]。
在极端情况下,即使是无意识或隐性的对享乐刺激的“喜爱”反应,也可以在行为或生理层面上被测量出来,而无需有意识的愉悦感(例如,短暂呈现快乐的面部表情或注射极低剂量的可卡因后)[ 2 , 3 ]。因此,尽管这或许令人惊讶,但对奖励“喜爱”反应的客观测量有时可能比主观报告更能直接反映享乐系统。
情感神经科学的一个主要目标是确定哪些大脑基质会引起愉悦感,无论是主观的还是客观的。神经影像学和神经记录研究发现,从甜味到静脉注射可卡因、赢得金钱或一张笑脸等各种奖励都会激活许多大脑结构,包括眶额皮质、前扣带回和岛叶,以及皮质下结构,如伏隔核、腹侧苍白球、腹侧被盖和中脑边缘多巴胺投射、杏仁核等[ 4 • , 5 , 6 , 7•• , 8 , 9• , 10 • , 11-13 ]。
但是,究竟是哪些大脑系统真正导致了奖励带来的愉悦感?而哪些激活仅仅是愉悦感的关联因素(例如,由于网络激活的扩散)或结果(而是调节与奖励相关的其他认知、动机、运动等功能)?我们和其他研究人员通过动物实验,寻找愉悦感的成因,并识别出能够增强享乐影响的大脑操作[ 6 , 14 •• , 15 , 16 , 17 • , 18-22 ]。
为了研究负责奖赏享乐效应的神经系统,我们和其他研究者利用了对甜味奖赏的客观“喜好”反应,例如新生婴儿的情感面部表情以及猩猩、黑猩猩、猴子,甚至大鼠和小鼠的同源面部反应[ 4• , 18 , 23 , 24 ]。甜味会在所有这些动物中引发积极的“喜好”面部表情(舔嘴唇、有节奏地伸出舌头等),而苦味则会引发消极的“厌恶”面部表情(张口等;图1;补充视频1)。这种对味道的“喜好”-“厌恶”反应由前脑和脑干中负责享乐效应的大脑系统层级控制,并受到许多影响愉悦感的因素的影响,例如饥饿/饱腹感以及后天习得的味觉偏好或厌恶。
到目前为止,只发现了一些神经化学系统,以增强对大鼠甜味的“喜欢”反应,并且仅在少数局限的大脑位置内。 阿片类药物,内源性大麻素和GABA-苯并二氮杂卓神经递质系统对产生愉悦反应非常重要[14••,15,16,•17,25,26],特别是在边缘结构的特定位置(图1 和 图2)[15,16,•17,21,27]。 我们把这些网站称为“享乐热点”,因为它们能够通过推理,愉悦来增加“喜欢”反应。 阿片类药物增强感觉愉悦的一个特征性热点位于其内侧壳体的象限内的伏隔核中,体积约为立方毫米[14••,15,28].
也就是说,该热点区域仅占内侧壳体积的30%,不到整个伏隔核的10%。在该享乐热点区域内,微量注射μ阿片受体激动剂DAMGO可使蔗糖味觉引起的“喜好”反应数量增加两到三倍[ 14•• , 28 ]。另一个享乐热点区域位于腹侧苍白球的后半部分,DAMGO同样能显著增强对甜味的“喜好”反应[ 17• , 21 , 28 ]。在这两个热点区域,同样的微量注射还能使对食物的“渴望”(即刺激进食行为和食物摄入量)增加一倍。
在这些热点区域之外,即使在同一结构中,阿片类药物刺激也会产生截然不同的效果。例如,在伏隔核(NAc)的几乎所有其他位置,DAMGO微注射仍然能像在热点区域一样刺激对食物的“渴求”,但不会增强“喜好”(甚至在内侧壳更靠后的冷点区域抑制“喜好”,同时仍然刺激食物摄入;图2)。因此,比较伏隔核内侧壳热点区域内外μ阿片受体活性的影响表明,负责“喜好”的阿片受体位点在解剖学上与影响“渴求”的位点是可分离的[ 14•• , 16 ]。
内源性大麻素增强伏隔核(NAc)热点区域的“喜好”反应,该区域与μ阿片受体位点重叠[ 16 , 27 ]。向内源性大麻素热点区域微量注射花生四烯酸乙醇胺(anandamide),可能通过刺激该区域的CB1受体发挥作用,使对蔗糖味道的“喜好”反应水平增加一倍以上(食物摄入量也增加一倍以上)。这种享乐性的内源性大麻素底物可能与内源性大麻素拮抗剂作为肥胖或成瘾潜在治疗药物时的药物效应有关[ 16 , 29 , 30 ]。
腹侧苍白球是伏隔核输出的主要靶点,其后半部分包含第二个阿片类物质热点区域[ 17• , 21 ]。在苍白球热点区域,微量注射DAMGO可使对蔗糖的“喜好”和对食物的“渴求”(以摄入量衡量)加倍。相反,在热点区域前方微量注射DAMGO则会抑制“喜好”和“渴求”。此外,通过微量注射比库啉阻断GABA<sub> A </sub>受体,可在腹侧苍白球的所有位置分别刺激“渴求”,而不会改变任何位置的“喜好”[ 17• , 31 ]。
腹侧苍白球在“喜欢”和“想要”中的作用使其成为研究奖赏诱发神经激活的特殊对象。在人类中,可卡因、性、食物或金钱奖励都能激活腹侧苍白球,包括与大鼠享乐热点相对应的后部亚区[ 9• , 10• , 11 , 21 ]。在对大鼠后腹侧苍白球神经元如何编码享乐信号进行更详细的电生理学研究中,我们发现,与令人不快的咸味(浓度为海水的三倍)相比,热点神经元对蔗糖的甜味反应更为强烈[ 7•• ]。然而,单凭蔗糖和盐引起的神经元放电差异本身并不能证明神经元编码的是它们相对的享乐影响(“喜欢”与“不喜欢”),而不是刺激的基本感觉特征(甜与咸)。
然而,我们还发现,当通过诱导生理性食盐欲望来选择性地操纵氯化钠(NaCl)味道的愉悦度时,神经元活动会随着这些刺激相对享乐价值的变化而变化。当大鼠体内钠含量降低(通过注射盐皮质激素和利尿剂)时,强烈的咸味在行为上变得与蔗糖一样“受欢迎”,腹侧苍白球的神经元对盐的放电活动也开始像对蔗糖一样活跃[ 7•• ](图3)。我们认为,这些观察结果表明,腹侧苍白球神经元的放电模式确实编码了对愉悦感觉的享乐“喜好”,而不是更简单的感觉特征[ 21 , 32 ]。
分布于大脑各处的享乐热点可能在功能上相互连接,形成一个整合的层级回路,该回路结合了多个前脑和脑干区域,类似于群岛中相互贸易的多个岛屿[ 21 , 24 , 27 ]。在腹侧前脑边缘系统结构的较高层级,伏隔核和腹侧苍白球的热点对“喜好”的增强作用可能作为一个单一的合作异质层级结构共同发挥作用,需要两个热点的一致“投票”[ 28 ]。例如,阿片类药物刺激一个热点引起的享乐放大作用可能会被另一个热点的阿片受体阻断所破坏,尽管伏隔核热点引起的“渴求”放大作用更为显著,并且在腹侧苍白球热点阻断后仍然存在[ 28 ]。
在阿片类药物和苯二氮卓类药物操作后,也观察到了类似的“喜好”相互作用(可能涉及脑干脑桥的臂旁核)[ 27 ]。苯二氮卓类药物引起的“喜好”增强似乎需要内源性阿片类物质的参与,因为纳洛酮可以阻止这种增强作用[ 33 ]。因此,单一的享乐回路可能结合了多种神经解剖学和神经化学机制,从而增强“喜好”反应和愉悦感。
“”婉婷
通常情况下,大脑会“喜欢”它“想要”的奖励。但有时它可能仅仅是“想要”这些奖励。研究表明,“喜欢”和“想要”奖励在心理学和神经生物学上都是可以区分的。这里所说的“想要”,指的是激励显著性,这是一种促使人们接近和消费奖励的激励动机,它具有独特的心理学和神经生物学特征。例如,激励显著性与普通词语“想要”所指的更偏向认知层面的欲望形式有所区别,后者涉及明确的目标或对未来结果的明确预期,并且主要由皮层回路介导[ 34-37 ]。
相比之下,激励显著性是由皮层下神经系统(包括中脑边缘多巴胺投射)介导的,不需要复杂的认知预期,并且更直接地关注与奖励相关的刺激[ 34 , 35 , 38 ]。在诸如成瘾等涉及激励敏感化的案例中,激励显著性与认知欲望之间的差异有时会导致所谓的非理性“需求”:即对认知上并不想要的东西产生“需求”,这是由过度的激励显著性引起的[ 39• , 40• , 41 ]。
“渴望”既可以指与生俱来的激励刺激(无条件刺激,UCS),也可以指最初中性但现在能预测奖励性无条件刺激(巴甫洛夫条件刺激,CS)的习得性刺激[ 38 , 40• ]。也就是说,当条件刺激与通过巴甫洛夫刺激-刺激联结(S-S学习)获得的与生俱来或“自然”奖励配对时,条件刺激便获得了激励动机特性。在产生“渴望”的瞬间,边缘系统机制会利用这些联结,赋予条件刺激以激励显著性,使条件刺激变得具有吸引力,并激发和引导动机行为趋向奖励[ 35 ]。
当条件刺激(CS)被赋予激励显著性时,它通常会获得独特且可测量的“渴求”特性[ 35 , 42 ],这种特性可以在再次实际遇到条件刺激时被触发(尽管对奖励线索的生动想象也可能足够,尤其是在人类中)。由此类奖励线索触发的“渴求”特性包括以下几点:
-
提示引发了美国“想要”的特征。 与奖励CS相遇也会触发“想要”其自身相关联的UCS,可能是通过将激励显着性转移到缺席奖励的关联关联表示[34,47,48]。 在动物实验室测试中,这表现为为缺席奖励而工作的线索触发增加的阶段性峰值(主要在灭绝条件下进行的称为PIT或巴甫洛夫 - 仪器转移的测试中特别评估; 图4)。 线索触发的“缺乏”可能对相关奖励非常具体,或者有时会以更普遍的方式溢出以刺激“想要”获得其他奖励(可能是当敏感成瘾者或多巴胺调节失调患者表现出强迫性赌博,性行为时行为等,以及强迫吸毒行为)[49,50]。 因此,与激励刺激的接触可以动态地增加寻求奖励的动机,并且增加他们被寻求的活力,这种现象在提示引发成瘾复发时可能尤其重要。NAc安非他明扩大了线索引发的'想要'。 在巴甫洛夫 - 仪器转移测试(CS +;右)中,通过30-s出现的巴甫洛夫蔗糖提示触发了“想要”获得蔗糖奖励的瞬态峰值。 ...
-
条件强化剂功能。 激励显着性也使得CS具有吸引力和“通缉”,即使在没有美国奖励的情况下,个人也会努力获得CS本身。 这通常被称为仪器条件强化。 同样地,将CS添加到动物为美国奖励(如可卡因或尼古丁)工作时所获得的收益,会增加他们的工作热情,也许是因为CS增加了额外的“通缉”目标[51]。 然而,我们注意到条件强化比“想要”更广泛,需要额外的关联机制来获取工具性任务。 此外,替代性SR机制可能在某些情况下调节条件强化,而根本没有激励显着性。 这使得激励磁铁和线索触发的“缺乏”属性对于识别过度激励突显性尤为重要。
激励突出的扩展
-
欲望与恐惧有关? 最后,我们注意到,激励显着性也可能与中脑皮质激素机制的可怕显着性共享可能令人惊讶的基础[56,•57,58,59]。 例如,伏隔核电路中的多巴胺和谷氨酸相互作用不仅产生欲望,而且还令人恐惧,在解剖学上组织为情感键盘,其中顺序本地化键的破坏产生食欲与恐惧行为的增量混合[•57]。 此外,伏隔核中的一些本地“钥匙”可以通过心理上改变外部情感氛围(例如从舒适的家庭环境变为压力明亮且充满喧闹的摇滚音乐)而从生成一种动机转变为相反的动机[]56].
这些最新发现表明,上述“喜欢”或“想要”功能的神经化学专长或解剖学定位可能不一定反映永久专用的“标记线”机制,其中“一个底物=一个功能”。 相反,它们可能反映出其特定神经生物学底物的特殊情感能力(例如享乐热点)或动机价偏倚(例如欲望恐惧键盘)。 那些基板中的一些基板可能能够具有多种功能模式,这取决于其他同时发生的因素,因此它们能够在生成功能之间进行切换,与期望与恐惧相对。
“想要”的神经生物学基质
与“喜欢”相比,“想要”的神经生物学机制有所不同,我们注意到,“想要”的脑底物分布更广泛,也更容易被激活[ 38 , 53 , 60 , 61• , 62–65 ]。神经化学层面的“想要”机制在神经化学和神经解剖学领域都更加丰富多样,这或许可以解释为什么人们会“想要”某种奖励,却不一定“喜欢”同样的奖励。除了阿片类系统外,多巴胺及其与皮质边缘谷氨酸和其他神经化学系统的相互作用也会激活激励显著性的“想要”行为。对其中一些系统进行药理学干预可以轻易地改变“想要”的程度,而不会改变“喜欢”的程度。例如,抑制内源性多巴胺神经传递会降低“想要”的程度,但不会降低“喜欢”的程度[ 38 , 64 ]。
相反,通过全身给药或直接微注射到伏隔核的苯丙胺或类似的儿茶酚胺激活药物激活多巴胺系统,或者通过基因突变提高中脑皮层边缘回路中细胞外多巴胺水平(通过敲低突触中的多巴胺转运体),以及通过反复给予高剂量成瘾药物使中脑皮层边缘多巴胺相关系统近乎永久性敏化,可以放大“想要”而没有“喜欢”的欲望(图 3 –图 5)[ 39• , 40• , 61• , 66 ]。我们提出,在易感个体中,滥用药物引起的激励显著性的神经敏感化可能会产生强迫性的“想要”服用更多药物的欲望,无论是否相应地“喜欢”这些药物,从而导致成瘾[ 39• , 40• , 42 ](图5)。
将学习从“缺乏”中解放出来:奖励相关线索的预测性与激励性
一旦习得与奖励相关的线索,这些线索不仅能预测相应的奖励,还能激发获取奖励的动机性“渴望”。预测和“渴望”是同一回事吗?还是涉及不同的机制?我们认为,习得的预测和激励显著性可以像“喜欢”和“渴望”一样区分开来[ 37 , 38 , 39• , 41 , 46 , 61• ]。解析心理功能及其神经生物学基础对于奖励学习和动机的实验模型至关重要,并且对包括成瘾在内的病理学具有重要意义。我们将简要介绍我们实验室的三项证据,这些证据表明与奖励相关的线索的预测性和激励性是可以分离的。
第一个例子来自一些实验,这些实验表明条件刺激(CS)可以引发趋近行为——也就是说,它们就像“动机磁铁”,吸引个体靠近。许多实验已经证实,当一个线索或“信号”(CS),例如将一个杠杆穿过墙壁,与奖励性非条件刺激(US),例如食物,配对出现时,动物倾向于接近并参与到线索的互动中[ 43 , 44• ]。区分预测和动机的关键部分在于个体条件反射(CR)的性质[ 43 ]。
有些大鼠在每次呈现条件刺激时都会越来越快地接近操作杆,并会积极地嗅闻、轻咬甚至撕咬操作杆——似乎想要“吃掉”操作杆(补充视频 1)[ 45 ]。预测可卡因奖励的线索也会以类似的方式被接近和互动,并表现出兴奋的嗅闻行为模式[ 44• ],这或许可以解释为什么与毒品相关的线索会变得不适应,从而吸引成瘾者。这种指向条件刺激本身的条件反应被称为“信号追踪”。
然而,并非所有大鼠都会发展出信号追踪条件反射。即使在相同的实验情境下,一些大鼠也会发展出不同的条件反射——当条件刺激(杠杆)出现时,它们学会接近“目标”(食物托盘),而不是杠杆。这种条件反射被称为“目标追踪”。因此,随着经验的积累,目标追踪者在每次出现杠杆条件刺激时都会越来越快地接近目标,并且开始积极地接近食物托盘,啃咬甚至撕咬[ 43 , 44• , 45 ]。对于所有大鼠而言,条件刺激(杠杆插入)具有相同的预测意义:它既能触发信号追踪条件反射,也能触发目标追踪条件反射。
唯一的区别在于条件反射(CR)指向的方向。这表明,对于信号追踪者而言,杠杆条件刺激(CS)具有激励显著性,因为它对它们来说很有吸引力。这一观点也得到了观察结果的支持,即信号追踪者还会学习执行新的反应来获得条件刺激(即工具性条件强化)[ 46 ]。对于目标追踪者而言,条件刺激预测食物,并导致条件反射的形成,但条件刺激本身似乎并没有以这种方式被赋予激励显著性(相反,如果说有什么意义的话,那就是目标本身是“渴望的”)[ 43 , 46 ]。这些发现与我们的假设一致,即习得的条件刺激的奖励预测价值或联想价值可能与其动机价值相分离,这取决于它是否被主动赋予激励显著性[ 46 ]。
第二条从激励显著性角度解析预测的证据来自对“想要”神经编码的研究,尤其是在多巴胺相关脑激活(通过安非他明或先前的敏化)之后。多巴胺水平升高似乎能特异性地增强边缘系统对编码最大激励显著性的信号的放电(图 6)[ 61• ]。相比之下,多巴胺激活并没有增强编码最大预测的神经信号[ 61• ]。
第三条证据来自动态逆转条件刺激(CS)的“渴望”状态,同时保持其习得的预测不变。例如,一个预测强烈咸味的线索通常是“不被渴望的”,但当诱发生理性的咸味欲望时,它可以逆转为“渴望的”线索。这种动机逆转的发生不需要新的学习,因此也不需要改变已习得的预测。此外,这种异常的食欲状态以前从未经历过,条件刺激也不需要以前与“喜欢的”味道联系起来。然而,先前负面的条件刺激在新状态下突然变得“渴望”,并能够引发典型的激励显著性放电模式。在咸味欲望状态下的最初几次试验中,条件刺激突然引发编码积极“渴望”的神经放电信号,甚至在咸味非条件刺激(UCS)被尝到“喜欢”之前就已如此[ 67 ]。这些观察表明,线索的预测价值与其引发“欲望”的能力不同,因为后者需要调动额外的神经系统来产生激励显著性并将“欲望”归因于动机目标。
将需要更多的研究来确定如何在大脑内解析“想要”与学习和预测。 然而,到目前为止的证据表明,这些成分具有不同的心理身份和可区分的神经基质。
结语
对“喜欢”,“缺乏”和学习奖励成分的情感神经科学研究表明,这些心理过程在很大程度上映射到不同的神经解剖学和神经化学脑奖励系统。 这种洞察力可以更好地理解大脑系统如何产生正常的奖励,以及动机和情绪的临床功能障碍。 这些应用特别包括中脑边缘系统的敏感性如何通过特别扭曲“想要”奖励而在药物成瘾和相关的动机障碍中产生强制性的奖励追求。
参考文献和推荐阅读
在审查期间发表的特别感兴趣的论文已被强调为
•特别感兴趣
••出色的兴趣





