Componentes de disección de la recompensa: gusto, deseo y aprendizaje (2010)

Recompensa: Comentarios: este grupo tiene muchos estudios y revisiones que examinan los sustratos neuronales del deseo frente al agrado. La teoría actual sugiere que los mecanismos de la dopamina son agradables y los mecanismos opioides son deficientes. La adicción es querer tanto que sigues consumiendo a pesar de las consecuencias negativas.


Estudio completo: disección de los componentes de la recompensa: 'gusto', 'querer' y aprendizaje

Curr Opin Pharmacol. 2009 febrero; 9 (1): 65 – 73.

Publicado en línea 2009 Enero 21. doi: 10.1016 / j.coph.2008.12.014.

Kent C Berridge, Terry E Robinson y J Wayne Aldridge

Dirección del Departamento de Psicología de la Universidad de Michigan, Ann Arbor, 48109-1043, EE. UU.

Autor correspondiente: Berridge, Kent C (Correo electrónico: [email protected])

Resumen

En los últimos años se han logrado avances significativos en la definición de los componentes psicológicos de la recompensa y sus mecanismos neuronales subyacentes. Aquí destacamos brevemente los hallazgos sobre tres componentes psicológicos disociables de la recompensa:gusto'(impacto hedónico),'falto'(saliente incentivo), y aprendizaje (asociaciones predictivas y cogniciones). Una mejor comprensión de los componentes de la recompensa y sus sustratos neurobiológicos puede ayudar a idear tratamientos mejorados para los trastornos del estado de ánimo y la motivación, que van desde la depresión hasta los trastornos de la alimentación, la adicción a las drogas y las actividades compulsivas relacionadas con las recompensas.

Introducción

gusto

Para la mayoría de las personas, una "recompensa" es algo deseado porque produce una experiencia consciente de placer y, por lo tanto, el término puede usarse para referirse a los eventos psicológicos y neurobiológicos que producen placer subjetivo. Pero la evidencia sugiere que el placer subjetivo es solo un componente de la recompensa, y que las recompensas pueden influir en el comportamiento incluso en ausencia de ser conscientes de ellas. De hecho, la introspección a veces puede llevar a confusión sobre el grado de aceptación de las recompensas, mientras que las reacciones inmediatas pueden ser más precisas [1].

En el extremo, incluso las reacciones de 'gusto' inconscientes o implícitas a los estímulos hedónicos se pueden medir en comportamiento o fisiología sin sentimientos conscientes de placer (por ejemplo, después de una exhibición subliminalmente breve de una expresión facial feliz o una dosis muy baja de cocaína intravenosa) [2,3]. Por lo tanto, aunque tal vez sea sorprendente, las medidas objetivas de las reacciones de "gusto" a las recompensas a veces pueden proporcionar un acceso más directo a los sistemas hedónicos que los informes subjetivos.

Un objetivo importante para la neurociencia afectiva es identificar qué sustratos cerebrales causan placer, ya sea subjetivo u objetivo. Los estudios de neuroimagen y registro neural han encontrado que las recompensas que van desde sabor dulce a cocaína intravenosa, ganar dinero o una cara sonriente activan muchas estructuras cerebrales, incluida la corteza orbitofrontal, la cánula anterior y la ínsula, y estructuras subcorticales como el núcleo accumbens, el pálido ventral, ventral tegmentum, y proyecciones de dopamina mesolímbicas, amígdala, etc. [• 4,5,6,7 ••,8,• 9,• 10,1113].

Pero, ¿cuál de esos sistemas cerebrales realmente causa el placer de la recompensa? ¿Y qué activaciones son simplemente correlatos (por ejemplo, debido a la propagación de la activación de la red) o las consecuencias del placer (en lugar de otras funciones cognitivas, motivacionales, motoras, etc. relacionadas con la recompensa)? Nosotros y otros hemos buscado la causalidad del placer en estudios con animales mediante la identificación de manipulaciones cerebrales que amplifican el impacto hedónico [6,14 ••,15,16,• 17,1822].

Para estudiar los sistemas neuronales responsables del impacto hedónico de las recompensas, nosotros y otros hemos explotado reacciones de "gusto" objetivas a las recompensas de sabor dulce, como las expresiones faciales afectivas de bebés humanos recién nacidos y las reacciones faciales homólogas de orangutanes, chimpancés, monos e incluso ratas y ratones [• 4,18,23,24]. Los dulces provocan expresiones faciales 'gustadoras' positivas en todos estos (lamer los labios, las protuberancias rítmicas de la lengua, etc.), mientras que los gustos amargos en cambio provocan expresiones negativas 'disgustantes' (gapes, etc .; Figura 1 y XNUMX; Película suplementaria 1). Tales reacciones de "gusto" o "desagrado" al gusto están controladas por una jerarquía de sistemas cerebrales para el impacto hedónico en el cerebro anterior y el tronco cerebral, y están influenciadas por muchos factores que alteran la simpatía, como el hambre / saciedad y las preferencias o aversiones de gusto aprendidas.

Figura 1 y XNUMX

Ejemplo de reacciones de "gusto" conductuales y puntos calientes hedónicos del cerebro para un placer sensorial. Parte superior: las reacciones hedónicas de "simpatía" son provocadas por el sabor de la sacarosa de un bebé humano y una rata adulta (por ejemplo, protrusión rítmica de la lengua). ...

Hasta el momento, solo se han encontrado unos pocos sistemas neuroquímicos para mejorar las reacciones de "gusto" a un sabor dulce en ratas, y solo en unas pocas ubicaciones cerebrales circunscritas. Los sistemas de neurotransmisores opioides, endocannabinoides y GABA-benzodiazepina son importantes para generar reacciones placenteras [14 ••,15,16,• 17,25,26], particularmente en sitios específicos en estructuras límbicas (Figura 1 y XNUMX y Figura 2 y XNUMX) [15,16,• 17,21,27]. Hemos llamado a estos sitios 'hotspots hedónicos' porque son capaces de generar aumentos en las reacciones de 'gusto' y, por inferencia, placer. Un punto caliente hedónico para el aumento de opioides del placer sensorial se encuentra en el núcleo accumbens dentro del cuadrante rostrodorsal de su capa medial, aproximadamente un milímetro cúbico en volumen [14 ••,15,28].

Es decir, el punto de acceso comprende solo el 30% del volumen de la cubierta medial y menos del 10% del núcleo completo accumbens. Dentro de ese punto de acceso hedónico, la microinyección del agonista opioide mu, DAMGO, duplica o triplica el número de reacciones de "me gusta" provocadas por el sabor a sacarosa [14 ••,28]. Otro punto caliente hedónico se encuentra en la mitad posterior del pálido ventral, donde de nuevo DAMGO aumenta potentemente las reacciones de "gusto" a la dulzura [• 17,21,28]. En ambos hotspots, la misma microinyección también duplica el "deseo" de alimentos en el sentido de estimular el comportamiento alimentario y la ingesta de alimentos.

Figura 2 y XNUMX

Expansión de hotspot opioide mu en el núcleo accumbens con la delineación de las zonas de 'gusto' frente a 'querer'. Verde: toda la capa medial media los aumentos estimulados por opioides en el "deseo" de recompensa de alimentos. ...

Fuera de esos puntos calientes, incluso en la misma estructura, las estimulaciones de opioides producen efectos muy diferentes. Por ejemplo, en NAc en prácticamente todos los otros lugares, las microinyecciones DAMGO todavía estimulan el "deseo" de alimentos tanto como en el punto de acceso, pero no mejoran el "gusto" (e incluso suprimen el "gusto" en un coldspot más posterior en la capa medial mientras sigue estimulando la ingesta de alimentos; Figura 2 y XNUMX). Por lo tanto, la comparación de los efectos de la actividad opioide mu dentro o fuera del hotspot en la capa media de NAc indica que los sitios opiáceos responsables del "gusto" son anatómicamente disociables de aquellos que influyen en el "deseo" [14 ••,16].

Los endocannabinoides mejoran las reacciones de "gusto" en un punto de acceso de NAc que se superpone al sitio opioide mu [16,27]. La microinyección de anandamida en el hotspot endocannabinoide, actuando quizás estimulando los receptores CB1 allí, más que duplica el nivel de reacciones de "gusto" al sabor de la sacarosa (y más que duplica la ingesta de alimentos). Este sustrato hedónico de endocannabinoides puede relacionarse con los efectos de los medicamentos de los antagonistas de los endocannabinoides cuando se usan como posibles tratamientos para la obesidad o la adicción [16,29,30].

El pálido ventral es un objetivo principal para las salidas del núcleo accumbens, y su mitad posterior contiene un segundo punto de acceso opioide [• 17,21]. En el hotspot de pallidum, las microinyecciones de DAMGO duplican el "gusto" por la sacarosa y el "deseo" por la comida (medida como ingesta). Por el contrario, la microinyección de DAMGO anterior al punto de acceso suprime el "gusto" y el "deseo". Independientemente, el "deseo" se estimula por separado en todas las ubicaciones del pálido ventral mediante el bloqueo de GABAA receptores a través de microinyección bicuculina, sin alterar el 'gusto' en ninguna ubicación [• 17,31].

El papel del pálido ventral en "gustar" y "querer" lo hace de especial interés para los estudios de activación neuronal inducida por la recompensa. En humanos, la cocaína, el sexo, la comida o las recompensas monetarias activan el pálido ventral, incluida la subregión posterior que corresponde al punto caliente hedónico en ratas [• 9,• 10,11,21]. En estudios electrofisiológicos más detallados sobre cómo las neuronas en el pálido ventral posterior codifican señales hedónicas en ratas, hemos descubierto que las neuronas de punto caliente se activan más vigorosamente en el sabor dulce de la sacarosa que en un sabor salado desagradable (el triple de la concentración de agua de mar) [7 ••] Sin embargo, por sí misma, una diferencia en la activación evocada entre sacarosa y sal no prueba que las neuronas codifiquen su impacto hedónico relativo ('gusto' versus 'disgusto') en lugar de, simplemente, una característica sensorial básica del estímulo (dulce versus salado) )

Sin embargo, también encontramos que la actividad neuronal rastreó un cambio en el valor hedónico relativo de estos estímulos cuando el placer del sabor a NaCl fue manipulado selectivamente induciendo un apetito fisiológico de sal. Cuando las ratas carecían de sodio (por la administración de la hormona mineralocorticoide y la administración de diuréticos), el intenso sabor salado se 'gustó' conductualmente tanto como la sacarosa, y las neuronas en el pálido ventral comenzaron a dispararse tan vigorosamente a la sal como a la sacarosa [7 ••] (Figura 3 y XNUMX). Creemos que tales observaciones indican que, de hecho, los patrones de disparo de estas neuronas pálidas ventrales codifican el "gusto" hedónico por la sensación placentera, en lugar de las características sensoriales más simples [21,32].

Figura 3 y XNUMX

Codificación neuronal del "gusto" por el placer sensorial de sabores dulces y salados. Las respuestas de cocción neuronal se muestran desde un electrodo de registro de pálido ventral hasta sabores de sacarosa y sal intensa infundida en la boca de una rata. Dos ...

Los hotspots hedónicos distribuidos en el cerebro se pueden unir funcionalmente a un circuito jerárquico integrado que combina el cerebro anterior y el tronco encefálico, similar a las múltiples islas de un archipiélago que se intercambian entre sí [21,24,27]. En el nivel relativamente alto de estructuras límbicas en el prosencéfalo ventral, la mejora de la "afición" por puntos de acceso en accumbens y pálido ventral puede actuar como una única heterarquía cooperativa, que necesita "votos" unánimes por parte de ambos puntos de acceso [28]. Por ejemplo, la amplificación hedónica por la estimulación con opioides de un punto de acceso puede ser interrumpida por el bloqueo del receptor de opioides en el otro punto de acceso, aunque la amplificación "deseada" por el punto de acceso de NAc fue más robusta, y persistió después del bloqueo del punto de acceso de VP [28].

Se ha observado una interacción similar subyacente al "gusto" después de las manipulaciones de opioides y benzodiacepinas (probablemente involucrando el núcleo parabraquial de las protuberancias del tronco encefálico) [27]. El aumento de "simpatía" producido por la administración de benzodiazepinas parece requerir el reclutamiento obligatorio de opioides endógenos, porque se evita mediante la administración de naloxona [33]. Por lo tanto, un solo circuito hedónico puede combinar múltiples mecanismos neuroanatómicos y neuroquímicos para potenciar las reacciones de "gusto" y placer.

'Falto'

Por lo general, a un cerebro le "gustan" las recompensas que "quiere". Pero a veces puede simplemente 'quererlos'. La investigación ha establecido que las recompensas "gustar" y "querer" son disociables tanto psicológicamente como neurobiológicamente. Por 'querer', queremos decir saliente incentivo, un tipo de motivación de incentivo que promueve el acercamiento y el consumo de recompensas, y que tiene características psicológicas y neurobiológicas distintas. Por ejemplo, la importancia de los incentivos se distingue de las formas más cognitivas de deseo que significa la palabra ordinaria, querer, que involucra objetivos declarativos o expectativas explícitas de resultados futuros, y que están en gran parte mediadas por circuitos corticales [3437].

En comparación, la prominencia de incentivos está mediada por sistemas neuronales más subcorticamente ponderados que incluyen proyecciones de dopamina mesolímbicas, no requiere expectativas cognitivas elaboradas y se enfoca más directamente en los estímulos relacionados con la recompensa [34,35,38]. En casos como la adicción, que involucra la sensibilización al incentivo, la diferencia entre la prominencia del incentivo y más deseos cognitivos a veces puede llevar a lo que podría llamarse "falta" irracional: es decir, un "deseo" por lo que no se quiere cognitivamente, causado por una excesiva saliente incentivo [• 39,• 40,41].

El "deseo" puede aplicarse a estímulos innatos de estímulo (estímulos no condicionados, UCS) o a estímulos aprendidos que originalmente eran neutrales, pero ahora predicen la disponibilidad de UCS de recompensa (estímulos condicionados pavlovianos, CS) [38,• 40]. Es decir, las CS adquieren propiedades motivacionales de incentivo cuando una CS se combina con la recepción de una recompensa innata o "natural" a través de las asociaciones de estímulo-estímulo pavlovianas (aprendizaje S-S). La importancia de los incentivos se atribuye a esos CS mediante mecanismos límbicos que se basan en esas asociaciones en el momento de "desear", hacer que un CS sea atractivo y energizar y guiar el comportamiento motivado hacia la recompensa [35].

Cuando a un CS se le atribuye prominencia de incentivo, por lo general adquiere propiedades "deseadas" distintas y medibles [35,42], que puede activarse cuando la CS se reencuentra físicamente (aunque las imágenes vívidas de señales de recompensa también pueden ser suficientes, especialmente en humanos). Las propiedades "deseadas" activadas por tales señales de recompensa incluyen lo siguiente:

  1. Característica imán motivacional de la importancia del incentivo.. Un CS atribuido a la importancia de los incentivos se convierte en motivadoramente fascinante, una especie de "imán motivacional", que se aborda e incluso a veces se consume (Película suplementaria 1) [43,• 44,45]. La función de imán motivacional de los incentivos CS puede llegar a ser tan poderosa que una CS puede incluso evocar un enfoque compulsivo [46]. Los adictos a la cocaína crack, por ejemplo, a veces frenéticamente "persiguen fantasmas" o escarban en busca de gránulos blancos que saben que no son cocaína.
  2. Característica de "querer" en los EE.. Un encuentro con una CS por una recompensa también provoca el "deseo" de su propio UCS asociado, presumiblemente a través de la transferencia de incentivo a representaciones vinculadas asociativamente de la recompensa ausente [34,47,48]. En pruebas de laboratorio con animales, esto se manifiesta como un pico fásico de aumentos desencadenados por señales en el trabajo por la recompensa ausente (la mayoría se evalúa específicamente en pruebas llamadas PIT o Transferencia Pavloviana Instrumental realizadas en condiciones de extinción; Figura 4 y XNUMX). El "deseo" desencadenado por el cue puede ser bastante específico para la recompensa asociada, o a veces puede extenderse de una manera más general para estimular el "deseo" por otras recompensas también (como tal vez cuando los adictos sensibilizados o los pacientes con dopamina-desregulación exhiben juego compulsivo, sexual comportamiento, etc., además del comportamiento compulsivo de consumo de drogas) [49,50]. Por lo tanto, los encuentros con estímulos de incentivo pueden aumentar dinámicamente la motivación para buscar recompensas y aumentar el vigor con el que se buscan, un fenómeno que puede ser especialmente importante cuando las señales desencadenan una recaída en la adicción.

    Figura 4 y XNUMX

    NAc amplificación de anfetaminas de "carencia" desencadenada por señales. Los picos transitorios del 'deseo' de la recompensa de sacarosa se activan por las apariencias de 30 de una señal de sucrosa pavloviana en una prueba de transferencia instrumental-pavloviana (CS +; derecha). ...
  3. Característica de refuerzo condicionado.. La importancia de los incentivos también hace que una CS sea atractiva y "deseada" en el sentido de que un individuo trabajará para obtener la CS, incluso en ausencia de la recompensa de los EE. UU. Esto a menudo se llama refuerzo condicionado instrumental. De manera similar, agregar un CS a lo que se gana cuando un animal trabaja por una recompensa de los EE. UU., Como la cocaína o la nicotina, aumenta la avidez de su trabajo, tal vez porque el CS agrega un objetivo adicional "deseado" [51]. Sin embargo, observamos que el refuerzo condicionado es más amplio que el "deseo", ya que se necesitan mecanismos asociativos adicionales para adquirir la tarea instrumental. Además, los mecanismos de RS alternativos pueden mediar el refuerzo condicionado en ciertas situaciones sin la importancia de incentivo en absoluto. Esto hace que el imán motivacional y las propiedades de "deseo" desencadenadas por la señal sean especialmente importantes para la identificación de la prominencia excesiva de incentivos.

Extensiones de saliente incentivo.

  1. Saliencia acción? Antes de dejar las características psicológicas de "querer", nos sentimos tentados a especular que algunos comportamientos Acciones o programas motrices. También puede volverse 'deseado', casi como estímulos de incentivo, a través de una forma de prominencia de incentivo aplicada a representaciones cerebrales de movimientos internos en lugar de representaciones de estímulos externos. Llamamos a esta idea "saliente de acción" o "querer" actuar. La prominencia de acción que sugerimos puede ser un motor equivalente a la prominencia de estímulo del estímulo, y está mediada por sistemas cerebrales superpuestos (por ejemplo, sistemas de dopamina nigrostriatal dorsal que se superponen con los sistemas mesolímbicos ventrales). La generación de impulsos para actuar, tal vez involucrando funciones motoras y motivacionales combinadas dentro del neostriatum (una estructura que también se sabe que participa en el movimiento) parece ser consistente con varias líneas de pensamiento emergentes sobre la función de los ganglios basales [52,53,• 54,55].
  2. El deseo puede estar relacionado con el miedo.? Finalmente, observamos que la importancia de los incentivos también puede compartir fundamentos sorprendentes en los mecanismos mesocorticolímbicos con una atención temible [56,• 57,58,59]. Por ejemplo, las interacciones de la dopamina y el glutamato en los circuitos del núcleo accumbens generan no solo el deseo, sino también el temor, organizados anatómicamente como un teclado afectivo, en el que la interrupción de las teclas localizadas secuencialmente genera mezclas incrementales de comportamientos apetitivos frente a temibles [• 57]. Además, algunas "claves" locales en el núcleo accumbens se pueden cambiar de generar una motivación a la opuesta cambiando psicológicamente el ambiente afectivo externo (por ejemplo, el cambio de un ambiente hogareño cómodo a uno estresante con mucha iluminación y lleno de música rock estridente) [56].
    Dichos hallazgos recientes indican que las especializaciones neuroquímicas o las localizaciones anatómicas de las funciones 'gustar' o 'desear' descritas anteriormente no necesariamente reflejan mecanismos de 'línea marcada' dedicados permanentemente donde 'un sustrato = una función'. Por el contrario, pueden reflejar capacidades afectivas especializadas (por ejemplo, puntos calientes hedónicos) o sesgos de motivación-valencia (por ejemplo, teclado de miedo al deseo) de sus sustratos neurobiológicos particulares. Algunos de esos sustratos pueden ser capaces de múltiples modos funcionales, dependiendo de otros factores simultáneos, de modo que puedan cambiar entre funciones generadoras tan opuestas como deseo versus temor.

Sustratos neurobiológicos para 'querer'

Al contrastar la neurobiología de "querer" a "gustar", observamos que los sustratos cerebrales para "querer" se distribuyen más ampliamente y se activan más fácilmente que los sustratos para "gustar" [38,53,60,• 61,6265]. Los mecanismos neuroquímicos de "querer" son más numerosos y diversos en los dominios neuroquímicos y neuroanatómicos, lo cual es quizás la base del fenómeno de "querer" una recompensa sin "gustar" la misma recompensa. Además de los sistemas opioides, las interacciones de la dopamina y la dopamina con el glutamato corticolímbico y otros sistemas neuroquímicos activan la "carencia" de incentivo. Las manipulaciones farmacológicas de algunos de esos sistemas pueden alterar fácilmente el "deseo" sin cambiar el "gusto". Por ejemplo, la supresión de la neurotransmisión de dopamina endógena reduce el "deseo" pero no el "gusto" [38,64].

Por el contrario, la amplificación de "querer" sin "gustar" se ha producido mediante la activación de los sistemas de dopamina por anfetaminas o fármacos activadores de catecolaminas similares administrados sistémicamente o microinyectados directamente en el núcleo accumbens, o por mutación genética que eleva los niveles extracelulares de dopamina (a través de derribo de los transportadores de dopamina en la sinapsis) en los circuitos mesocorticolimbicos, y por la sensibilización casi permanente de los sistemas relacionados con la dopamina mesocorticolimbic mediante la administración repetida de altas dosis de drogas adictivas (Figura 3 y XNUMXFigura 5 y XNUMX) [• 39,• 40,• 61,66]. Hemos propuesto que en individuos susceptibles, la sensibilización neural de la importancia del incentivo por drogas de abuso puede generar un "deseo" compulsivo de tomar más drogas, ya sea que las mismas drogas sean "gustadas" o no, y así contribuir a la adicción [• 39,• 40,42] (Figura 5 y XNUMX).

Figura 5 y XNUMX

Modelo de incentivo-sensibilización de la adicción. El modelo esquemático de cómo "querer" consumir drogas puede crecer con el tiempo independientemente del "gusto" por el placer de las drogas a medida que un individuo se convierte en un adicto. La transición de la droga casual. ...

Disección del aprendizaje del "deseo": las propiedades predictivas versus incentivos de las claves relacionadas con la recompensa

Una vez que se aprenden las señales relacionadas con la recompensa, esas señales predicen sus recompensas asociadas y además desencadenan el "deseo" motivador de obtener las recompensas. ¿Son la predicción y el 'querer' lo mismo? ¿O implican diferentes mecanismos? Nuestra opinión es que la predicción aprendida y la importancia de los incentivos pueden analizarse, al igual que el "gusto" y el "querer" pueden [37,38,• 39,41,46,• 61]. El análisis de las funciones psicológicas y sus sustratos neurobiológicos es importante para los modelos experimentales de recompensa de aprendizaje y motivación, y tiene implicaciones para patologías, incluida la adicción. Describiremos brevemente tres líneas de evidencia de nuestros laboratorios que sugieren que las propiedades de motivación predictiva e incentiva de las señales relacionadas con la recompensa son disociables.

El primer ejemplo proviene de experimentos que demuestran que los CS pueden obtener un enfoque, es decir, actúan como un "imán motivacional", atrayendo al individuo hacia ellos. Muchos experimentos han establecido que cuando se empareja una señal o "signo" (CS), como la inserción de una palanca a través de la pared, con la presentación de un US gratificante, como comida, los animales tienden a acercarse e involucrarse en la señal [43,• 44]. La clave para distinguir la predicción de la motivación reside en parte en la naturaleza de la respuesta condicionada (RC) de un individuo [43].

Algunas ratas se acercarán a la palanca cada vez más rápidamente en cada presentación y llegarán a engancharla con fuerza olisqueando, mordisqueando e incluso mordiéndola, aparentemente intentando 'comer' la palanca (Película suplementaria 1) [45]. Un indicio que predice la recompensa de la cocaína se aborda de manera similar y se compromete con su propio patrón de comportamiento de inhalación emocionada [• 44], que puede explicar la capacidad de las señales asociadas a las drogas para convertirse en inadaptadas, atrayendo adictos a ellas. Estos CR dirigidos hacia la propia CS se denominan "seguimiento de signos".

Sin embargo, no todas las ratas desarrollan un CR de seguimiento de signos. Incluso en la misma situación experimental, algunas ratas desarrollan una RC diferente: aprenden a acercarse al 'objetivo' (la bandeja de alimentos), no a la palanca, cuando se presenta la palanca-CS. Este CR se llama 'seguimiento de objetivos'. Por lo tanto, con la experiencia, los rastreadores de objetivos se acercan cada vez más rápidamente al objetivo en cada presentación de la palanca-CS, y comienzan a enganchar la bandeja de comida con avidez, mordisqueando e incluso mordiéndola [43,• 44,45] Para todas las ratas, el CS (inserción de palanca) tiene la misma importancia predictiva: activa tanto los CR de seguimiento de signos como los CR de seguimiento de objetivos.

La única diferencia es hacia dónde se dirige el CR. Esto sugiere que en los rastreadores de señales se atribuye la palanca CS a la prominencia de incentivos porque para ellos es atractiva, y eso está respaldado por observaciones de que los rastreadores de señales específicamente también aprenderán a realizar una nueva respuesta para obtener la CS (es decir, condicionado instrumental reforzamiento) [46]. Para los rastreadores de objetivos, el CS predice los alimentos, y conduce al desarrollo de una RC, pero el CS en sí no parece atribuirse la importancia de los incentivos de estas maneras (en lugar de todo, el objetivo es "deseado") [43,46]. Dichos hallazgos son consistentes con nuestra propuesta de que el valor asociativo o de predicción de recompensa de una CS aprendida puede disociarse de su valor motivacional, dependiendo de si se le atribuye de manera activa la importancia de los incentivos [46].

Una segunda línea de evidencia para analizar la predicción de la importancia del incentivo proviene de los estudios de códigos neuronales "deseados", especialmente después de activaciones cerebrales relacionadas con la dopamina (por anfetamina o sensibilización previa). La elevación de dopamina parece mejorar específicamente la activación neural límbica de las señales que codifican la prominencia de incentivo máxima (Figura 6 y XNUMX) [• 61]. Por el contrario, la activación de la dopamina no mejoró las señales neuronales que codifican la predicción máxima [• 61].

Figura 6 y XNUMX

Separación del valor de incentivo de CS (querer) del valor predictivo de CS (aprendizaje) por activación mesolímbica (inducida por sensibilización o administración aguda de anfetamina). Este análisis de perfil de los patrones de activación neuronal en el pálido ventral muestra cambios ...

Una tercera línea de evidencia proviene de revertir dinámicamente el "deseo" de un CS mientras mantiene constante su predicción aprendida. Por ejemplo, una señal que predice una salinidad intensa normalmente no es "deseada", pero se puede invertir en una señal "deseada" cuando se induce un apetito fisiológico de sal. No es necesario que ocurra un nuevo aprendizaje y, por lo tanto, ningún cambio en las predicciones aprendidas, para que ocurra este cambio de motivación. Además, el estado de apetito inusual nunca debió haberse experimentado antes, y el CS no tiene que haberse asociado con un sabor "gustado" antes. Aún así, el CS previamente negativo repentinamente se vuelve "deseado" en el nuevo estado y es capaz de provocar patrones de disparo que son típicos de la importancia de incentivo. En las primeras pruebas en el estado de apetito de sal, la CS evoca repentinamente señales de activación neural que codifican un "deseo" positivo, incluso antes de que la sal UCS se haya probado como "me gusta" [67]. Dichas observaciones indican que el valor predictivo de una señal es distinto de su capacidad para provocar el "deseo", ya que este último requiere la participación de sistemas neuronales adicionales para generar atención de incentivo y atribuir el "deseo" a un objetivo motivacional.

Se requerirá más investigación para determinar cómo se analizan "querer" versus aprendizaje y predicción dentro del cerebro. Sin embargo, la evidencia hasta ahora indica que estos componentes tienen identidades psicológicas distintas y sustratos neurales distinguibles.

Conclusión

Los estudios de neurociencia afectiva de los componentes de "gusto", "deseo" y aprendizaje de las recompensas han revelado que estos procesos psicológicos se asignan a distintos sistemas de recompensa cerebral neuroanatómicos y neuroquímicos en un grado notable. Esta información puede conducir a una mejor comprensión de cómo los sistemas cerebrales generan una recompensa normal, y en disfunciones clínicas de la motivación y el estado de ánimo. Tales aplicaciones incluyen especialmente cómo la sensibilización de los sistemas mesolímbicos puede producir la búsqueda compulsiva de recompensas en la adicción a las drogas y los trastornos de motivación relacionados al distorsionar específicamente el "deseo" de obtener una recompensa.

Material suplementario

Video de 'me gusta' del sabor hedónico

Agradecimientos

La investigación realizada por los autores fue apoyada por becas del Instituto Nacional sobre el Abuso de Drogas y el Instituto Nacional de Salud Mental (EE. UU.).

Anexo A. Datos suplementarios.

Los datos complementarios asociados con este artículo se pueden encontrar, en la versión en línea, en doi: 10.1016 / j.coph. 2008.12.014.

Referencias y lecturas recomendadas.

Los documentos de interés particular, publicados dentro del período de revisión, se han resaltado como

• de especial interés

•• de interés sobresaliente

1. Schooler JW, Mauss IB. Ser feliz y conocerlo: la experiencia y la metaconciencia del placer. En: Kringelbach ML, Berridge KC, editores. Placeres del cerebro. Prensa de la Universidad de Oxford; en prensa.
2. Winkielman P, Berridge KC, Wilbarger JL. Las reacciones afectivas inconscientes a los rostros felices y enojados enmascarados influyen en el comportamiento de consumo y los juicios de valor. Pers Soc Psychol Bull. 2005;31: 121-135. [PubMed]
3. Fischman MW, Foltin RW. Autoadministración de cocaína por humanos: una perspectiva de laboratorio. En: Bock GR, Whelan J, editores. Cocaína: dimensiones científicas y sociales. Simposio de la Fundación CIBA; Wiley 1992. pp. 165–180.
4. Kringelbach ML La corteza orbitofrontal humana: vinculando la recompensa a la experiencia hedónica. Nat Rev Neurosci. 2005;6: 691-702. [PubMed]Describe de forma vívida y concisa el papel del papel de la corteza orbitofrontal en el placer en los seres humanos.
5. Leknes S, Tracey I. Una neurobiología común para el dolor y el placer. Nat Rev Neurosci. 2008;9: 314-320. [PubMed]
6. Wheeler RA, Carelli RM. La neurociencia del placer: concéntrese en los códigos de disparo ventral del pálido recompensa hedónica: cuando un mal sabor se vuelve bueno. J Neurophysiol. 2006;96: 2175-2176. [PubMed]
7. Tindell AJ, Smith KS, Pecina S, Berridge KC, Aldridge JW códigos de cocción del pálido ventral recompensa hedónica: cuando un mal sabor se vuelve bueno. J Neurophysiol. 2006;96: 2399-2409. [PubMed]Este estudio proporciona evidencia de la codificación neuronal del "gusto" como un componente objetivo del placer de recompensa a través de los patrones de activación neuronal en el pálido ventral a los gustos de la sacarosa y la sal.
8. Knutson B, Wimmer GE, Kuhnen CM, Winkielman P. La activación de Nucleus accumbens media la influencia de las señales de recompensa en la toma de riesgos financieros. Neuroreport. 2008;19: 509-513. [PubMed]
9. Beaver JD, Lawrence AD, van Ditzhuijzen J, Davis MH, Woods A, Calder AJ Las diferencias individuales en la unidad de recompensa predicen las respuestas neuronales a las imágenes de los alimentos. J Neurosci. 2006;26: 5160-5166. [PubMed]Demuestra que los circuitos de incentivo se activan mediante señales de recompensa de alimentos en seres humanos en formas vinculadas a un rasgo de personalidad (BAS) que puede estar relacionado con la búsqueda de sensaciones.
10. Pessiglione M, Schmidt L, Draganski B, Kalisch R, Lau H, Dolan R, Frith C Cómo el cerebro traduce el dinero en fuerza: un estudio de neuroimagen de la motivación subliminal. Ciencia. 2007;316: 904-906. [PubMed]Demuestra en los humanos que los circuitos de incentivos cerebrales que involucran el pálido ventral se activan incluso mediante estímulos de recompensa implícitos que permanecen por debajo de la conciencia, y son capaces de amplificar la acción motivada para obtener una recompensa.
11. Childress AR, Ehrman RN, Wang Z, Li Y, Sciortino N, Hakun J, Jens W, Suh J, Listerud J, Marquez K, et al. Preludio a la pasión: activación límbica por drogas 'invisibles' y señales sexuales. PLoS ONE. 2008;3: e1506. [Artículo gratuito de PMC] [PubMed]
12. Pequeño DM, Veldhuizen MG, Felsted J, Mak YE, McGlone F. Sustratos separables para quimiosensibilidad alimentaria anticipatoria y consumatoria. Neuron. 2008;57: 786-797. [Artículo gratuito de PMC] [PubMed]
13. Tobler P, O'Doherty JP, Dolan RJ, Schultz W. Codificación de valor de recompensa distinta de la codificación de incertidumbre relacionada con la actitud de riesgo en los sistemas de recompensa humana. J Neurophysiol. 2007;97: 1621-1632. [Artículo gratuito de PMC] [PubMed]
14. Peciña S, Berridge KC Punto caliente hedónico en la cáscara del núcleo accumbens: ¿Dónde los opioides mu causan un mayor impacto hedónico de la dulzura? J Neurosci. 2005;25: 11777-11786. [PubMed]Identifica un hotspot hedónico cúbico-milimétrico en la cáscara del núcleo, donde las señales de opioides mu causan una mejora en el "gusto" por el placer sensorial del sabor dulce. Este estudio también proporcionó la primera evidencia de la separación anatómica de la causa del "gusto" de los opioides de las zonas de "deseo" puro y zonas de coldspot fuera del hotspot.
15. Peciña S, Smith KS, Berridge KC. Puntos calientes hedónicos en el cerebro. Neurocientífico 2006;12: 500-511. [PubMed]
16. Mahler SV, Smith KS, Berridge KC. Punto de acceso hedónico endocannabinoide para el placer sensorial: la anandamida en el núcleo accumbens shell aumenta el "gusto" de una dulce recompensa. Neuropsicofarmacología. 2007;32: 2267-2278. [PubMed]
17. Smith KS, Berridge KC El pálido ventral y la recompensa hedónica: mapas neuroquímicos de "gustos" de la sacarosa y la ingesta de alimentos. J Neurosci. 2005;25: 8637-8649. [PubMed]Este estudio demostró que el pálido ventral contiene un hotspot hedónico cúbico milimétrico en el pálido ventral para la amplificación de opioides de las reacciones de "gusto" al dulzor, localizadas dentro de su zona posterior.
18. Berridge KC, Kringelbach ML. Neurociencia afectiva del placer: recompensa en humanos y animales. Psicofarmacología (Berl) 2008;199: 457-480. [Artículo gratuito de PMC] [PubMed]
19. Pecina S. Opioide recompensa 'gusto' y 'falta' en el núcleo accumbens. Physiol Behav. 2008;94: 675-680. [PubMed]
20. Kringelbach ML. El cerebro hedónico: una neuroanatomía funcional del placer humano. En: Kringelbach ML, Berridge KC, editores. Placeres del cerebro. Prensa de la Universidad de Oxford; en prensa.
21. Smith KS, Tindell AJ, Aldridge JW, Berridge KC. Los papeles ventral del pálido en la recompensa y la motivación. Behav Brain Res. 2009;196: 155-167. [Artículo gratuito de PMC] [PubMed]
22. Ikemoto S. Circuito de recompensa de dopamina: dos sistemas de proyección desde el mesencéfalo ventral al núcleo accumbens-complejo olfativo tubérculo. Brain Res Rev. 2007;56: 27-78. [Artículo gratuito de PMC] [PubMed]
23. Steiner JE, Glaser D, Hawilo ME, Berridge KC. Expresión comparativa del impacto hedónico: reacciones afectivas al gusto por parte de bebés humanos y otros primates. Neurosci Biobehav Rev. 2001;25: 53-74. [PubMed]
24. Grill HJ, Norgren R. La prueba de reactividad del sabor. II Respuestas miméticas a estímulos gustativos en ratas crónicas de talco y decerebrados crónicos. Brain Res. 1978;143: 281-297. [PubMed]
25. Jarrett MM, Limebeer CL, Parker LA. Efecto del delta9-tetrahidrocannabinol sobre la palatabilidad de la sacarosa medida por la prueba de reactividad del sabor. Physiol Behav. 2005;86: 475-479. [PubMed]
26. Zheng H, Berthoud HR. Comer por placer o calorías. Curr Opin Pharmacol. 2007;7: 607-612. [Artículo gratuito de PMC] [PubMed]
27. Smith KS, Mahler SV, Pecina S, Berridge KC. Puntos calientes hedónicos: generando placer sensorial en el cerebro. En: Kringelbach M, Berridge KC, editores. Placeres del cerebro. Prensa de la Universidad de Oxford; en prensa.
28. Smith KS, Berridge KC. Circuito límbico opioide para recompensa: interacción entre los puntos calientes hedónicos del núcleo accumbens y el pálido ventral. J Neurosci. 2007;27: 1594-1605. [PubMed]
29. Solinas M, Goldberg SR, Piomelli D. El sistema endocannabinoide en los procesos de recompensa cerebral. Br J Pharmacol. 2008;154: 369-383. [Artículo gratuito de PMC] [PubMed]
30. Kirkham T. Endocannabinoides y la neuroquímica de la gula. J Neuroendocrinol. 2008;20: 1099-1100. [PubMed]
31. Shimura T, Imaoka H, ​​Yamamoto T. Modulación neuroquímica del comportamiento ingestivo en el pálido ventral. Eur J Neurosci. 2006;23: 1596-1604. [PubMed]
32. Aldridge JW, Berridge KC. Codificación neural del placer: "Gafas teñidas de rosa" del pálido ventral. En: Kringelbach ML, Berridge KC, editores. Placeres del cerebro. Prensa de la Universidad de Oxford; en prensa.
33. Richardson DK, Reynolds SM, Cooper SJ, Berridge KC. Los opioides endógenos son necesarios para mejorar la palatabilidad de las benzodiacepinas: la naltrexona bloquea el aumento inducido por el diazepam del "gusto" por sacarosa Pharmacol Biochem Behav. 2005;81: 657-663. [PubMed]
34. Dickinson A, Balleine B. Hedonics: la interfaz cognitivo-motivacional. En: Kringelbach ML, Berridge KC, editores. Placeres del cerebro. Prensa de la Universidad de Oxford; en prensa.
35. Berridge KC. Recompensar el aprendizaje: refuerzo, incentivos y expectativas. En: Medin DL, editor. La psicología del aprendizaje y la motivación. vol. 40. Prensa Académica; 2001. pp. 223 – 278.
36. Daw ND, Niv Y, Dayan P. Competencia basada en la incertidumbre entre los sistemas estriatal prefrontal y dorsolateral para el control del comportamiento. Nat Neurosci. 2005;8: 1704-1711. [PubMed]
37. Dayan P, Balleine BW. Recompensa, motivación y aprendizaje de refuerzo. Neuron. 2002;36: 285-298. [PubMed]
38. Berridge KC. El debate sobre el papel de la dopamina en la recompensa: el caso de la prominencia de incentivos. Psicofarmacología (Berl) 2007;191: 391-431. [PubMed]
39. Robinson TE, Berridge KC La teoría de la adicción a la sensibilización de incentivos: algunos problemas actuales. Philos Trans R Soc Lond B Biol Sci. 2008;363: 3137-3146. [PubMed]Última actualización sobre la evidencia con respecto a la teoría de que la adicción es causada en parte por la sensibilización a medicamentos de los sustratos neuronales para "querer".
40. Robinson TE, Berridge KC Adicción. Annu Rev Psychol. 2003;54: 25-53. [PubMed]Compara la idea de que la adicción es causada por la sensibilización de incentivo, con el aprendizaje o la hipótesis del hábito y con las hipótesis de la adicción del retiro o hedonista del oponente.
41. Berridge KC, Aldridge JW. Utilidad de decisión, el cerebro y la búsqueda de objetivos hedónicos. Cognición soc. 2008;26: 621-646.
42. Robinson TE, Berridge KC. La base neural del ansia de drogas: una teoría de la adicción a la sensibilización de incentivos. Brain Res Rev. 1993;18: 247-291. [PubMed]
43. Flagel SB, Akil H, Robinson TE. Diferencias individuales en la atribución de la importancia del incentivo a señales relacionadas con la recompensa: implicaciones para la adicción Neurofarmacología. 2009;56: 139-148. [Artículo gratuito de PMC] [PubMed]
44. Uslaner JM, Acerbo MJ, Jones SA, Robinson TE La atribución de incentivo a la atención a un estímulo que señala una inyección intravenosa de cocaína. Behav Brain Res. 2006;169: 320-324. [PubMed]Demuestra por primera vez en un modelo animal que las señales de drogas como la cocaína adquieren propiedades de "imán motivacional", por lo que las señales provocan una investigación emocionante en un paradigma de autoformación.
45. Mahler S, Berridge K. Amygdala mecanismos de incentivo salience. Society for Neuroscience Abstracts. 2007
46. ​​Robinson TE, Flagel SB. Disociando las propiedades motivadoras predictivas e incentivadoras de las señales relacionadas con la recompensa a través del estudio de las diferencias individuales. Biol. Psychiatry. 2008 doi: 10.1016 / j.biopsych.2008.09.006.
47. Wyvell CL, Berridge KC. La anfetamina intracucumbens aumenta la prominencia condicionada del incentivo de la recompensa de sacarosa: mejora de la recompensa "querer" sin una "simpatía" mejorada o refuerzo de respuesta. J Neurosci. 2000;20: 8122-8130. [PubMed]
48. Holland PC. Relaciones entre la transferencia instrumental pavloviana y la devaluación del reforzador. J Exp Psychol-Anim Behav Process. 2004;30: 104-117. [PubMed]
49. Evans AH, Pavese N, Lawrence AD, Tai YF, Appel S, Doder M, Brooks DJ, Lees AJ, Piccini P. Uso compulsivo de drogas vinculado a la transmisión ventral estriada de dopamina sensibilizada. Ann Neurol. 2006;59: 852-858. [PubMed]
50. Kausch O. Patrones de abuso de sustancias entre los jugadores patológicos que buscan tratamiento. Tratamiento de abuso de substancia. 2003;25: 263-270. [PubMed]
51. Schenk S, Perdiz B. Influencia de un estímulo de luz condicionado sobre la autoadministración de cocaína en ratas. Psicofarmacología (Berl) 2001;154: 390-396. [PubMed]
52. Aldridge JW, Berridge KC, Herman M, Zimmer L. Codificación neuronal del orden en serie: sintaxis de acicalamiento en el neostriatum. Psychol Sci. 1993;4: 391-395.
53. Volkow ND, Wang GJ, Telang F, Fowler JS, Logan J, Childress AR, Jayne M, Ma Y, Wong C. Señales de cocaína y dopamina en el cuerpo estriado dorsal: mecanismo de deseo en la adicción a la cocaína. J Neurosci. 2006;26: 6583-6588. [PubMed]
54. Everitt BJ, Belin D, Economidou D, Pelloux Y, Dalley JW, Robbins TW Mecanismos neuronales subyacentes a la vulnerabilidad para desarrollar hábitos compulsivos de búsqueda de drogas y adicción. Philos Trans R Soc Lond B Biol Sci. 2008;363: 3125-3135. [PubMed]Presenta de manera convincente la opinión a favor de la idea de que la adicción se debe a hábitos de SR exagerados debido a la distorsión del componente de aprendizaje de la recompensa.
55. Haber SN, Fudge JL, McFarland NR. Las vías estriatonigrostriatales en los primates forman una espiral ascendente desde el caparazón hasta el cuerpo estriado dorsolateral. J Neurosci. 2000;20: 2369-2382. [PubMed]
56. Reynolds SM, Berridge KC. Los entornos emocionales reajustan la valencia de las funciones apetitivas versus temerosas en el núcleo accumbens. Nat Neurosci. 2008;11: 423-425. [Artículo gratuito de PMC] [PubMed]
57. Faure A, Reynolds SM, Richard JM, Berridge KC Dopamina mesolímbica en el deseo y el miedo: permitiendo que la motivación sea generada por interrupciones localizadas del glutamato en el núcleo accumbens. J Neurosci. 2008;28: 7184-7192. [PubMed]Este experimento demuestra por primera vez que la dopamina genera una motivación de incentivo positiva y una motivación de miedo negativa al interactuar con las señales de glutamato corticolímbico de una manera anatómica específica dentro del núcleo accumbens.
58. Levita L, Dalley JW, Robbins TW. Núcleo accumbens dopamina y el miedo aprendido revisitado: una revisión y algunos nuevos hallazgos. Behav Brain Res. 2002;137: 115-127. [PubMed]
59. Kapur S. Cómo los antipsicóticos se vuelven antipsicóticos, desde la dopamina hasta la prominencia y la psicosis. Tendencias Pharmacol Sci. 2004;25: 402-406. [PubMed]
60. Aragona BJ, Carelli RM. Neuroplasticidad dinámica y la automatización del comportamiento motivado. Aprende Mem. 2006;13: 558-559. [PubMed]
61. Tindell AJ, Berridge KC, Zhang J, Peciña S, Aldridge JW Código de neuronas pálidas ventrales incentivo motivación: amplificación por sensibilización mesolímbica y anfetamina. Eur J Neurosci. 2005;22: 2617-2634. [PubMed]Una primera demostración de codificación neuronal de que la dopamina y la sensibilización amplifican las señales "deseadas", independientemente de los "gustos" o los componentes de aprendizaje de la recompensa.
62. Smith KS, Berridge KC, Aldridge JW. Las neuronas palidales ventrales distinguen las elevaciones de "gusto" y "deseo" causadas por los opioides versus la dopamina en el núcleo accumbens. En Society for Neuroscience Abstracts. 2007
63. Abler B, Erk S, Walter H. La activación del sistema de recompensa humana se modula con una dosis única de olanzapina en sujetos sanos en un estudio de fMRI controlado por placebo, doble ciego y relacionado con eventos. Psicofarmacología (Berl) 2007;191: 823-833. [PubMed]
64. Leyton M. La neurobiología del deseo: dopamina y la regulación del estado de ánimo y estados motivacionales en humanos. En: Kringelbach ML, Berridge KC, editores. Placeres del cerebro. Prensa de la Universidad de Oxford; en prensa.
65. Salamone JD, Correa M, Mingote SM, Weber SM. Más allá de la hipótesis de la recompensa: funciones alternativas del núcleo accumbens dopamina. Curr Opin Pharmacol. 2005;5: 34-41. [PubMed]
66. Peciña S, Cagniard B, Berridge KC, Aldridge JW, Zhuang X. Los ratones mutantes hiperdopaminérgicos tienen mayor "deseo" pero no "gusto" por las dulces recompensas. J Neurosci. 2003;23: 9395-9402. [PubMed]
67. Tindell AJ, Smith KS, Berridge KC, Aldridge JW. Las neuronas palidales ventrales integran señales de aprendizaje y fisiológicas para codificar la prominencia de incentivos de señales condicionadas; Conferencia de la Sociedad para la Neurociencia; 12 de noviembre de 2005; Washington DC. 2005