奖励：评论–该小组有许多研究和评论，研究了缺乏与喜欢的神经基础。 当前的理论表明，多巴胺机制是喜欢的，而阿片样物质机制是想要的。 上瘾是如此之多，即使面对负面后果，您仍会继续使用。
Curr Opin Pharmacol。 2009二月; 9（1）：65-73。
在线发布2009 January 21。 doi：10.1016 / j.coph.2008.12.014。
Kent C Berridge，Terry E Robinson和J Wayne Aldridge
地址美国密歇根大学安娜堡分校心理学系，48109-1043
通讯作者：Berridge，Kent C（电子邮件： [电子邮件保护])
抽象
近年来，已经取得了重大进展，描绘了奖励的心理成分及其潜在的神经机制。 在这里，我们简要地重点介绍三种可分离的奖励心理成分：喜欢'（享乐的影响），'希望'（激励突出），和 学习 （预测性联想和认知）。 更好地理解奖励的组成部分及其神经生物学基质，可能有助于设计改善的情绪和动机障碍治疗方法，包括抑郁症，饮食失调症，吸毒成瘾和相关的奖励追求。
介绍
喜欢
对于大多数人来说，“奖励”是需要的东西，因为它产生了一种有意识的愉悦体验 - 因此这个术语可以用来指代产生主观愉悦的心理和神经生物学事件。 但有证据表明，主观快感只是奖励的一个组成部分，即使没有有意识地意识到，这种回报也可能影响行为。 实际上，内省实际上有时会导致对奖励的程度感到困惑，而立即反应可能更准确[1].
在极端情况下，即使没有意识或愉悦的感觉，也可以通过行为或生理测量甚至是对享乐刺激的无意识或内隐的“喜欢”反应（例如，在短暂地短暂地表现出快乐的面部表情或非常低剂量的静脉注射可卡因后）[2,3]。 因此，尽管可能令人惊讶，但是对于奖励的“喜欢”反应的客观衡量标准有时可能比主观报告更直接地获得享乐系统。
情感神经科学的一个主要目标是确定哪些脑底物引起愉悦，无论是主观还是客观。 神经影像学和神经记录研究发现，从甜味到静脉注射可卡因，赢钱或笑脸的奖励激活了许多大脑结构，包括眶额皮质，前扣带和脑岛，以及皮质下结构，如伏隔核，腹侧苍白球，腹侧tegmentum，中脑边缘多巴胺投射，杏仁核等[•4,5,6,7••,8,•9,•10,11–13].
但是，这些大脑系统中的哪一个实际上会带来奖励的乐趣呢？ 而哪些激活仅仅是相关的（例如，由于网络激活的扩展）或愉悦的后果（相反，中介其他与奖励有关的认知，动机，运动等功能）？ 我们和其他人通过确定会放大享乐影响的大脑操作来寻找动物研究中的愉悦原因[6,14••,15,16,•17,18–22].
为了研究负责奖励的享乐影响的神经系统，我们和其他人利用客观的“喜欢”反应来获得甜味奖励，例如新生儿婴儿的情感面部表情以及猩猩，黑猩猩，猴子的同源面部反应，甚至大鼠和小鼠[•4,18,23,24]。 糖果在所有这些中引起积极的面部“喜欢”表达（嘴唇舔，有节奏的舌头突出等），而苦味反而引起消极的“不喜欢”表达（瞪眼等等; 图1; 补充电影1）。 这种“喜欢” - “不喜欢”对味觉的反应受到大脑系统层次的控制，用于前脑和脑干的快感影响，并受到许多改变愉悦的因素的影响，例如饥饿/饱腹感和学习的口味偏好或厌恶。
到目前为止，只发现了一些神经化学系统，以增强对大鼠甜味的“喜欢”反应，并且仅在少数局限的大脑位置内。 阿片类药物，内源性大麻素和GABA-苯并二氮杂卓神经递质系统对产生愉悦反应非常重要[14••,15,16,•17,25,26]，特别是在边缘结构的特定位置（图1 和 图2）[15,16,•17,21,27]。 我们把这些网站称为“享乐热点”，因为它们能够通过推理，愉悦来增加“喜欢”反应。 阿片类药物增强感觉愉悦的一个特征性热点位于其内侧壳体的象限内的伏隔核中，体积约为立方毫米[14••,15,28].
也就是说，热点仅占内侧壳体积的30％，而少于整个伏隔核的10％。 在该享乐主义热点内，μ阿片类激动剂DAMGO的微量注射使蔗糖味引起的“喜欢”反应的数量翻倍或翻倍[14••,28]。 在腹侧苍白球的后半部分发现了另一个特征性热点，DAMGO再次强烈地增加了对甜味的“喜欢”反应[•17,21,28]。 在这两个热点地区，同样的显微注射也会刺激饮食行为和食物摄入量，从而使食物的“想要”增加一倍。
在这些热点之外，即使在相同的结构中，阿片类药物刺激也会产生非常不同的效果。 例如，在几乎所有其他地方的NAc中，DAMGO显微注射仍然像热点一样刺激“想要”食物，但不增强“喜欢”（甚至在内侧壳中更加后方的感冒抑制'喜欢'，同时仍然刺激食物摄入; 图2）。 因此，比较NAc内侧壳中热点内外μ阿片类药物活性的影响表明，负责“喜欢”的阿片类药物位点在解剖学上与那些影响“想要”的药物分离。14••,16].
内源性大麻素增强NAc热点中的“喜欢”反应，该热点与μ阿片类药物位点重叠[16,27]。 在内源性大麻素热点中显微注射anandamide，可能通过刺激那里的CB1受体起作用，使对蔗糖味道的“喜欢”反应的水平增加一倍以上（并且超过食物摄入量的两倍）。 当用作肥胖或成瘾的潜在治疗方法时，这种特征性内源性大麻素底物可能与内源性大麻素拮抗剂的药物作用有关[16,29,30].
腹侧苍白球是伏隔核输出的主要目标，其后半部分含有第二个阿片类药物热点[•17,21]。 在苍白球热点中，DAMGO的微量注射对蔗糖双重“喜欢”并且“想要”用于食物（以摄入量测量）。 相比之下，在热点前面显微注射DAMGO会抑制“喜欢”和“想要”。 相当独立，通过封锁GABA，在腹侧苍白球的所有位置分别刺激“想要”A 受体通过荷包牡丹碱显微注射，不会在任何位置改变“喜欢”[•17,31].
腹侧苍白球在“喜欢”和“缺乏”中的作用使其对由奖励诱导的神经激活的研究特别感兴趣。 在人类中，可卡因，性，食物或金钱奖励都会激活腹侧苍白球，包括对应于大鼠特征性热点的后部亚区[•9,•10,11,21]。 在更详细的电生理学研究中，后腹侧苍白球中的神经元如何编码大鼠的快感信号，我们发现热点神经元对蔗糖的甜味比对令人不快的咸味（海水浓度的三倍）更有力地燃烧[7••]。 然而，蔗糖和盐之间诱发的放电的差异本身并不能证明神经元编码了它们的相对享乐影响（“喜欢”与“不喜欢”），而不是仅仅说出刺激的基本感觉特征（甜和咸）。 ）。
但是，我们还发现，当通过诱导生理食欲来选择性地控制NaCl的愉悦度时，神经元活动会跟踪这些刺激的相对享乐值的变化。 当老鼠的钠被消耗掉（通过盐皮质激素和利尿剂给药）后，强烈的咸味在行为上就变得像蔗糖一样“喜好”，并且腹侧苍白球的神经元开始强烈地向蔗糖和蔗糖发射盐[7••]（图3）。 我们认为这些观察结果表明，实际上，这些腹侧苍白球神经元的射击模式编码享乐的“喜欢”，以获得愉快的感觉，而不是简单的感官特征[21,32].
分布在大脑中的快感热点可以在功能上连接成一个集成的分层电路，结合多个前脑和脑干，类似于一起交易的群岛的多个岛屿[21,24,27]。 在腹侧前脑的相对高水平的边缘结构中，伏隔核和腹侧苍白球的热点“喜欢”的增强可以共同作为单一的合作层次结构，需要两个热点的一致“投票”[28]。 例如，阿片类药物刺激一个热点的快速放大可以被另一个热点的阿片受体阻断所破坏，尽管NAc热点的“想要”扩增更加稳健，并且在VP热点封锁后持续存在[28].
在阿片类药物和苯二氮卓类药物（可能涉及脑干桥旁臂旁核）的操作之后，也发现了类似的“喜欢”相互作用。27]。 苯二氮卓类药物所产生的“喜欢”增强似乎需要强制性补充内源性阿片类药物，因为它可以通过纳洛酮给药来预防[33]。 因此，单个快感回路可以将多个神经解剖学和神经化学机制组合在一起以增强“喜欢”反应和愉悦。
“”婉婷
通常，大脑“喜欢”它“想要”的奖励。 但有时它可能只是“想要”它们。 研究已经确定，“喜欢”和“想要”的奖励在心理学和神经生物学上是分离的。 我们的意思是“想要” 激励突显，一种促进奖励方式和消费方式的激励动机，具有独特的心理和神经生物学特征。 例如，激励显着性可以与普通词所表达的更多认知形式的欲望区分开来，这些形式涉及宣称目标或对未来结果的明确期望，并且主要由皮层回路调节[34–37].
相比之下，激励显着性是由皮质下加权的神经系统介导的，其中包括中脑边缘的多巴胺投射，不需要详尽的认知期望，并且更直接地关注与奖励相关的刺激[34,35,38]。 在诸如成瘾，涉及激励敏感的情况下，激励显着性与更多认知欲望之间的差异有时会导致可能被称为非理性的“缺乏”：也就是说，对于过度引起的非认知需要的“需要”激励突显[•39,•40,41].
“想要”可以应用于先天激励刺激（无条件刺激，UCS）或学习刺激，这些刺激最初是中性的，但现在预测奖励UCS的可用性（巴甫洛夫条件刺激，CSs）[38,•40]。 也就是说，当CS与通过巴甫洛夫刺激刺激关联（S-S学习）接收先天或“自然”奖励配对时，CS获得激励动机属性。 激励显着性归因于那些通过边缘机制的CS，这些机制在“想要”的时刻利用这些关联，使CS具有吸引力，并激励和引导激励行为以获得奖励[35].
当CS被赋予激励显着性时，它通常会获得独特且可测量的“缺乏”属性[35,42]，当物理上重新遇到CS时可以触发（虽然奖励提示的生动图像也可能就足够了，特别是在人类中）。 由此类奖励线索触发的“缺乏”属性包括以下内容：
- 提示引发了美国“想要”的特征。 与奖励CS相遇也会触发“想要”其自身相关联的UCS，可能是通过将激励显着性转移到缺席奖励的关联关联表示[34,47,48]。 在动物实验室测试中，这表现为为缺席奖励而工作的线索触发增加的阶段性峰值（主要在灭绝条件下进行的称为PIT或巴甫洛夫 - 仪器转移的测试中特别评估; 图4）。 线索触发的“缺乏”可能对相关奖励非常具体，或者有时会以更普遍的方式溢出以刺激“想要”获得其他奖励（可能是当敏感成瘾者或多巴胺调节失调患者表现出强迫性赌博，性行为时行为等，以及强迫吸毒行为）[49,50]。 因此，与激励刺激的接触可以动态地增加寻求奖励的动机，并且增加他们被寻求的活力，这种现象在提示引发成瘾复发时可能尤其重要。
NAc安非他明扩大了线索引发的'想要'。 在巴甫洛夫 - 仪器转移测试（CS +;右）中，通过30-s出现的巴甫洛夫蔗糖提示触发了“想要”获得蔗糖奖励的瞬态峰值。 ... - 条件强化剂功能。 激励显着性也使得CS具有吸引力和“通缉”，即使在没有美国奖励的情况下，个人也会努力获得CS本身。 这通常被称为仪器条件强化。 同样地，将CS添加到动物为美国奖励（如可卡因或尼古丁）工作时所获得的收益，会增加他们的工作热情，也许是因为CS增加了额外的“通缉”目标[51]。 然而，我们注意到条件强化比“想要”更广泛，需要额外的关联机制来获取工具性任务。 此外，替代性SR机制可能在某些情况下调节条件强化，而根本没有激励显着性。 这使得激励磁铁和线索触发的“缺乏”属性对于识别过度激励突显性尤为重要。
激励突出的扩展
- 欲望与恐惧有关？ 最后，我们注意到，激励显着性也可能与中脑皮质激素机制的可怕显着性共享可能令人惊讶的基础[56,•57,58,59]。 例如，伏隔核电路中的多巴胺和谷氨酸相互作用不仅产生欲望，而且还令人恐惧，在解剖学上组织为情感键盘，其中顺序本地化键的破坏产生食欲与恐惧行为的增量混合[•57]。 此外，伏隔核中的一些本地“钥匙”可以通过心理上改变外部情感氛围（例如从舒适的家庭环境变为压力明亮且充满喧闹的摇滚音乐）而从生成一种动机转变为相反的动机[]56].
这些最新发现表明，上述“喜欢”或“想要”功能的神经化学专长或解剖学定位可能不一定反映永久专用的“标记线”机制，其中“一个底物=一个功能”。 相反，它们可能反映出其特定神经生物学底物的特殊情感能力（例如享乐热点）或动机价偏倚（例如欲望恐惧键盘）。 那些基板中的一些基板可能能够具有多种功能模式，这取决于其他同时发生的因素，因此它们能够在生成功能之间进行切换，与期望与恐惧相对。
“想要”的神经生物学基质
对比“想要”和“喜欢”的神经生物学，我们注意到“想要”的大脑底物比“喜欢”的底物更广泛地分布并且更容易被激活[38,53,60,•61,62–65]。 神经化学“缺乏”机制在神经化学和神经解剖学领域中更多和更多样化，这可能是“想要”奖励而不同样“喜欢”相同奖励的现象的基础。 除阿片类药物系统外，多巴胺和多巴胺与皮质醇 - 谷氨酸和其他神经化学系统的相互作用激活了“想要”的激励突显。 其中一些系统的药理学操作可以很容易地改变“想要”而不改变“喜欢”。 例如，内源性多巴胺神经传递的抑制减少了“想要”但不“喜欢”[38,64].
相反，苯丙胺或类似的邻苯二酚激活药物直接或直接注射到伏隔核中激活多巴胺系统，或通过提高细胞外多巴胺水平的基因突变，激活了“想要的”而不“喜欢”的扩增。敲除中皮皮质回路中的突触中的多巴胺转运蛋白，以及通过反复服用高剂量的成瘾性药物（中皮皮质多巴胺相关系统近乎永久性致敏）（图3–图5）[•39,•40,•61,66]。 我们已经提出，在易感个体中，滥用药物对激励显着性的神经敏感可能产生强迫性“想要”服用更多药物，无论相同的药物是否相应“喜欢”，从而导致成瘾[•39,•40,42]（图5).
将学习从“缺乏”中解放出来：奖励相关线索的预测性与激励性
一旦获得与奖励相关的线索，这些线索就会预测其相关奖励，并且还会触发动机“想要”获得奖励。 预测和“想要”是一样的吗？ 或者它们涉及不同的机制？ 我们的观点是，学习的预测和激励显着性可以分开，就像“喜欢”和“想要”一样[37,38,•39,41,46,•61]。 解析心理功能及其神经生物学基质对于奖励学习和动机的实验模型是重要的，并且对包括成瘾在内的病理学具有影响。 我们将简要描述来自我们实验室的三行证据，这些证据表明奖励相关线索的预测和激励动机属性是可分离的。
第一个例子来自实验，证明CS可以引出方法 - 也就是说，它们充当了“激励磁铁”，将个人吸引到他们身上。 许多实验已经确定，当一个提示或“标志”（CS），例如通过墙插入一个杠杆，与一个有益的美国，如食物的呈现配对，动物往往接近并参与提示[43,•44]。 区分预测与动机的关键部分在于个体条件反应（CR）的性质[43].
有些老鼠在每次演示时都会越来越快地接近操纵杆，并通过嗅，ni甚至咬住它来疯狂地接合操纵杆-似乎是试图“吃掉”操纵杆（补充电影1）[45]。 预测可卡因奖励的提示同样接近并与其自己的兴奋嗅觉行为模式相关[•44]，这可能解释了药物相关线索变得适应不良的能力，吸引了成瘾者。 这种针对CS本身的CR称为“符号跟踪”。
然而，并非所有大鼠都发展出符号跟踪CR。 即使在相同的实验情况下，一些大鼠也会形成不同的CR - 当杠杆-CS出现时，它们会学会接近“目标”（食物托盘），而不是杠杆。 此CR称为“目标跟踪”。 因此，凭借经验，目标跟踪器在每次呈现杠杆-CS时越来越快地接近目标，并且他们开始狂热地啃食食物托盘，甚至咬它[43,•44,45]。 对于所有大鼠，CS（杠杆插入）具有同等的预测意义：它会触发符号跟踪CR和目标跟踪CR。
唯一的区别是CR指向何处。 这表明在符号跟踪器中，杠杆CS被赋予激励显着性，因为对于他们而言，它具有吸引力，并且得到以下观察结果的支持：符号跟踪器还特别会学会执行新的响应以获得CS（即，有条件的条件加固）[46]。 对于目标跟踪器，CS预测食物，并导致CR的发展，但CS本身似乎并没有以这些方式被激励显着（相反，如果有的话，目标是'通缉'）[43,46]。 这些发现与我们的观点是一致的，即学习型CS的奖励预测或联想价值可能与其动机价值分离，这取决于它是否积极归因于激励显着性[46].
从激励突显中解析预测的第二个证据来自对“缺乏”神经代码的研究，特别是在多巴胺相关的大脑激活（通过安非他明或先前的致敏）之后。 多巴胺升高似乎特异性地增强了边缘神经发射到编码最大激励显着性的信号（图6）[•61]。 相比之下，多巴胺激活并没有增强编码最大预测的神经信号[•61].
第三行证据来自动态逆转“想要”CS，同时保持其学习预测不变。 例如，预测强烈咸味的提示通常是“不想要的”，但可以在诱导生理盐食欲时逆转为“想要的”提示。 没有新的学习，因此学习预测没有变化，需要发生这种动机逆转。 此外，以前从未体验到异常的食欲状态，并且CS之前不需要与“喜欢”的味道相关联。 然而，之前负面的CS在新的状态下突然变得“被通缉”，并且能够引发典型的激励显着性的射击模式。 在盐食欲状态的最初试验中，CS突然唤起编码积极“想要”的神经发射信号，甚至在盐UCS曾被称为“喜欢”之前[67]。 这些观察结果表明，线索的预测价值不同于其引发“缺乏”的能力，因为后者需要引入额外的神经系统以产生激励显着性并将“想要”归因于激励目标。
将需要更多的研究来确定如何在大脑内解析“想要”与学习和预测。 然而，到目前为止的证据表明，这些成分具有不同的心理身份和可区分的神经基质。
结论
对“喜欢”，“缺乏”和学习奖励成分的情感神经科学研究表明，这些心理过程在很大程度上映射到不同的神经解剖学和神经化学脑奖励系统。 这种洞察力可以更好地理解大脑系统如何产生正常的奖励，以及动机和情绪的临床功能障碍。 这些应用特别包括中脑边缘系统的敏感性如何通过特别扭曲“想要”奖励而在药物成瘾和相关的动机障碍中产生强制性的奖励追求。
参考文献和推荐阅读
在审查期间发表的特别感兴趣的论文已被强调为
•特别感兴趣
••出色的兴趣
;