Dissecando Componentes da Recompensa: Gostando, Gostando e Aprendendo (2010)

Recompensa: Comentários - Este grupo tem muitos estudos e análises examinando os substratos neurais de querer versus gostar. A teoria atual sugere que os mecanismos da dopamina estão gostando e os mecanismos opióides estão faltando. O vício é querer tanto que você continue usando apesar das consequências negativas.


Estudo Completo: Dissecando os componentes da recompensa: 'gostar', 'querer' e aprender

Curr Opin Pharmacol. 2009 de fevereiro; 9 (1): 65 – 73.

Publicado on-line 2009 janeiro 21. doi: 10.1016 / j.coph.2008.12.014.

Kent C Berridge, Terry E Robinson e J Wayne Aldridge

Endereço Departamento de Psicologia, Universidade de Michigan, Ann Arbor, 48109-1043, EUA

Autor correspondente: Berridge, Kent C (Email: [email protegido])

Sumário

Nos últimos anos, um progresso significativo foi feito delineando os componentes psicológicos da recompensa e seus mecanismos neurais subjacentes. Aqui destacamos brevemente as descobertas sobre três componentes psicológicos dissociáveis ​​da recompensa:gosto'(impacto hedônico)'querendo'(saliência de incentivo) e aprendizagem (associações preditivas e cognições). Uma melhor compreensão dos componentes da recompensa e de seus substratos neurobiológicos pode ajudar na elaboração de tratamentos aprimorados para transtornos de humor e motivação, que vão desde depressão a transtornos alimentares, dependência de drogas e atividades compulsivas relacionadas a recompensas.

Introdução

Gosto

Para a maioria das pessoas, uma "recompensa" é algo desejado porque produz uma experiência consciente de prazer - e, assim, o termo pode ser usado para se referir aos eventos psicológicos e neurobiológicos que produzem prazer subjetivo. Mas as evidências sugerem que o prazer subjetivo é apenas um componente da recompensa, e que as recompensas podem influenciar o comportamento mesmo na ausência de estar consciente delas. De fato, a introspecção pode às vezes levar a uma confusão sobre até que ponto as recompensas são apreciadas, enquanto as reações imediatas podem ser mais precisas [1].

No extremo, até reações inconscientes ou implícitas de "gosto" a estímulos hedônicos podem ser medidas no comportamento ou na fisiologia sem sentimentos conscientes de prazer (por exemplo, após uma exibição subliminarmente breve de uma expressão facial feliz ou de uma dose muito baixa de cocaína intravenosa) [2,3]. Assim, embora talvez surpreendentes, medidas objetivas de "gostar" das reações às recompensas podem, às vezes, fornecer acesso mais direto aos sistemas hedônicos do que os relatórios subjetivos.

Um dos principais objetivos da neurociência afetiva é identificar quais substratos cerebrais causam prazer, seja subjetivo ou objetivo. Estudos de neuroimagem e de gravação neural descobriram que recompensas variando de gosto doce a cocaína intravenosa, ganhar dinheiro ou um rosto sorridente ativam muitas estruturas cerebrais, incluindo córtex orbitofrontal, cingulado anterior e ínsula, e estruturas subcorticais como núcleo accumbens, pallidum ventral, ventral tegmento e projeções de dopamina mesolímbica, amígdala etc. [4 •,5,6,7 ••,8,9 •,10 •,11-13].

Mas qual desses sistemas cerebrais realmente causa o prazer da recompensa? E quais ativações são meramente correlatas (por exemplo, devido à disseminação da ativação da rede) ou consequências do prazer (mediando outras funções cognitivas, motivacionais, motoras etc. relacionadas à recompensa)? Nós e outros buscamos a causa do prazer em estudos com animais, identificando manipulações cerebrais que ampliam o impacto hedônico [6,14 ••,15,16,17 •,18-22].

Para estudar os sistemas neurais responsáveis ​​pelo impacto hedônico das recompensas, nós e outros exploramos reações objetivas de "gosto" às recompensas do sabor adocicado, como expressões faciais afetivas de recém-nascidos humanos e reações faciais homólogas de orangotangos, chimpanzés, macacos e até mesmo ratos e camundongos [4 •,18,23,24]. Doces provocam expressões positivas de "gostar" em todos estes (lamber os lábios, protuberâncias rítmicas da língua, etc.), enquanto os sabores amargos provocam, em vez disso, expressões "não gostar" negativas (lacunas, etc .; Figura 1; Filme suplementar 1). Tais reações de "gosto" - "não gostar" do gosto são controladas por uma hierarquia de sistemas cerebrais para impacto hedônico no cérebro e tronco encefálico, e são influenciadas por muitos fatores que alteram o prazer, como fome / saciedade e preferências de gosto aprendidas ou aversões.

Figura 1

Exemplo de reações de 'gosto' comportamental e hotspots cerebrais para um prazer sensorial. Topo: As reacções hedónicas positivas de "gosto" são provocadas pelo gosto de sacarose de ratos bebés e adultos humanos (por exemplo, protrusão rítmica da língua). ...

Apenas alguns sistemas neuroquímicos foram encontrados até agora para aumentar as reações de "gosto" a um sabor adocicado em ratos, e apenas dentro de algumas localizações cerebrais circunscritas. Os sistemas de neurotransmissores opioides, endocanabinóides e GABA-benzodiazepínicos são importantes para gerar reações prazerosas [14 ••,15,16,17 •,25,26], particularmente em locais específicos em estruturas límbicas (Figura 1 e Figura 2) [15,16,17 •,21,27]. Chamamos de pontos críticos hedônicos a esses locais, porque eles são capazes de gerar aumentos nas reações de "gostar" e, por inferência, prazer. Um hotspot hotsônico para o aumento do prazer sensorial por opioides está localizado no núcleo accumbens no quadrante rostrodorsal de sua concha medial, com cerca de um milímetro cúbico de volume [14 ••,15,28].

Ou seja, o ponto de acesso compreende apenas 30% do volume medial da concha e menos de 10% de todo o núcleo accumbens. Dentro desse ponto de acesso hedônico, a microinjeção do agonista opióide mu, DAMGO, dobra ou triplica o número de reações de "simpatia" provocadas pelo sabor da sacarose [14 ••,28]. Outro hotsônico hotsônico é encontrado na metade posterior do pálio ventral, onde novamente o DAMGO aumenta potencialmente as reações de 'gosto' à doçura [17 •,21,28]. Em ambos os hotspots, a mesma microinjeção também dobra o "desejo" por comida, no sentido de estimular o comportamento alimentar e a ingestão de alimentos.

Figura 2

Expansão do hotspot opioide mu no nucleus accumbens com delineamento das zonas 'gostar' versus 'querer'. Verde: todo o invólucro medial medeia aumentos estimulados por opióides em "querer" a recompensa alimentar. ...

Fora desses hotspots, mesmo na mesma estrutura, os estímulos opióides produzem efeitos muito diferentes. Por exemplo, no NAc em virtualmente todos os outros locais, as microinjeções de DAMGO ainda estimulam o “desejo” por comida tanto quanto no hotspot, mas não aumentam o 'gosto' (e até suprimem o 'gosto' em um ponto frio mais posterior na concha medial enquanto ainda estimulando a ingestão de alimentos; Figura 2). Assim, comparando os efeitos da atividade opioide mu dentro ou fora do hotspot na concha medial NAc, indica que os sítios opióides responsáveis ​​por 'gostar' são anatomicamente dissociáveis ​​daqueles que influenciam 'querer' [14 ••,16].

Os endocanabinóides aumentam as reações de 'gostar' em um hotspot de NAc que se sobrepõe ao site opióide mu [16,27]. A microinjeção de anandamida no hotspot endocanabinóide, agindo talvez estimulando os receptores CB1, mais do que duplica o nível de reações de "gosto" ao gosto de sacarose (e mais que dobra a ingestão de alimentos). Este substrato endocanabinóide hedônico pode estar relacionado aos efeitos de medicação de antagonistas endocanabinóides quando usados ​​como potenciais tratamentos para obesidade ou dependência [16,29,30].

O pallidum ventral é um alvo principal para os outputs do nucleus accumbens, e sua metade posterior contém um segundo hotspot opioide [17 •,21]. No hotspot pallidum, as microinjeções de DAMGO “gostam” de sacarose e “querer” por alimentos (medidos como ingestão). Por outro lado, a microinjeção do DAMGO anterior ao hotspot suprime 'gostar' e 'querer'. Bastante independentemente, 'querer' é estimulado separadamente em todos os locais no pallidum ventral pelo bloqueio de GABAA receptores via microinjecção bicuculina, sem alterar 'gostar' em qualquer local [17 •,31].

O papel do pálidal ventral em "gostar" e "querer" torna-o de especial interesse para estudos de ativação neural induzida por recompensa. Em humanos, cocaína, sexo, comida ou recompensas em dinheiro ativam o pálidio ventral, incluindo a sub-região posterior que corresponde ao hotsônico em ratos [9 •,10 •,11,21]. Em estudos eletrofisiológicos mais detalhados sobre como os neurônios no pálio ventral posterior codificam os sinais hedônicos em ratos, descobrimos que os neurônios do hotspot disparam mais vigorosamente para o gosto doce da sacarose do que para um sabor salgado desagradável (o triplo da concentração da água do mar) [7 ••] Entretanto, por si só, uma diferença no disparo evocado entre sacarose e sal não prova que os neurônios codificam seu impacto hedônico relativo ('gostar' versus 'não gostar'), em vez de, digamos, meramente uma característica sensorial básica do estímulo (doce versus salgado) )

No entanto, também descobrimos que a atividade neuronal controlava uma alteração no valor hedônico relativo desses estímulos quando a agradável sensação de NaCl era seletivamente manipulada pela indução de um apetite fisiológico por sal. Quando os ratos estavam com depleção de sódio (pela administração de hormônio mineralocorticóide e diurético), o sabor salgado intenso tornou-se "apreciado" tanto quanto a sacarose, e os neurônios no pálido ventral começaram a disparar tão vigorosamente no sal quanto na sacarose [7 ••] (Figura 3). Acreditamos que tais observações indicam que, de fato, os padrões de disparo desses neurônios púbicos ventrais codificam o "gosto" hedônico pela sensação agradável, em vez de características sensoriais mais simples [21,32].

Figura 3

Codificação neuronal de 'gostar' pelo prazer sensorial do gosto doce e salgado. Respostas de disparo neuronal são mostradas a partir de um eletrodo de registro de pálido ventral para sabores de sacarose e sal intenso infundido na boca de um rato. Dois ...

Hotspots distribuídos entre o cérebro podem ser funcionalmente interligados em um circuito hierárquico integrado que combina múltiplos prosencéfalos e tronco cerebral, semelhante a várias ilhas de um arquipélago que operam juntas [21,24,27]. No nível relativamente alto de estruturas límbicas no prosencéfalo ventral, o aumento do 'gosto' por pontos quentes no acumbens e no pálidal ventral pode agir em conjunto como uma única heterarquia cooperativa, necessitando de 'votos' unânimes por ambos os hotspots [28]. Por exemplo, a amplificação hedônica por estimulação opióide de um hotspot pode ser interrompida pelo bloqueio do receptor opióide no outro hotspot, embora a amplificação "desejada" pelo hotspot NAc seja mais robusta e persista após o bloqueio do hotspot VP [28].

Uma interação semelhante subjacente ao 'gosto' foi observada após manipulações de opióides e benzodiazepínicos (provavelmente envolvendo o núcleo parabráquico dos ponteiros do tronco cerebral) [27]. O aumento de "gosto" produzido pela administração de benzodiazepínicos parece exigir o recrutamento obrigatório de opióides endógenos, porque é impedido pela administração de naloxona [33]. Assim, um único circuito hedônico pode combinar múltiplos mecanismos neuroanatômicos e neuroquímicos para potencializar as reações e o prazer de "gostar".

'Querendo'

Normalmente, um cérebro "gosta" das recompensas que "deseja". Mas às vezes pode apenas 'querer' eles. A pesquisa estabeleceu que as recompensas "gostar" e "querer" são dissociáveis ​​psicologicamente e neurobiologicamente. Por 'querer', nós queremos dizer saliência de incentivo, um tipo de motivação de incentivo que promove a abordagem e o consumo de recompensas, e que possui características psicológicas e neurobiológicas distintas. Por exemplo, saliência de incentivo é distinguível de formas mais cognitivas de desejo significadas pela palavra comum, querer, que envolvem metas declarativas ou expectativas explícitas de resultados futuros, e que são amplamente mediadas por circuitos corticais [34-37].

Em comparação, a importância do incentivo é mediada por sistemas neurais mais subcorticalmente ponderados, que incluem projeções de dopamina mesolímbica, não requer elaboradas expectativas cognitivas e concentra-se mais diretamente nos estímulos relacionados à recompensa [34,35,38]. Em casos como o vício, envolvendo sensibilização de incentivo, a diferença entre saliência de incentivo e mais desejos cognitivos pode às vezes levar ao que poderia ser chamado de 'querer' irracional: isto é, um 'querer' pelo que não é cognitivamente desejado, causado pelo excesso saliência de incentivo [39 •,40 •,41].

O "querer" pode aplicar-se a estímulos inatos de incentivo (estímulos incondicionados, UCSs) ou a estímulos aprendidos que eram originalmente neutros, mas agora prevêem a disponibilidade de UCSs de recompensa (estímulos pavlovianos condicionados, CSs) [38,40 •]. Ou seja, os SCs adquirem propriedades motivacionais de incentivo quando um CS é associado ao recebimento de uma recompensa inata ou "natural" através de associações de estímulo-estímulo pavloviano (aprendizado S-S). A saliência de incentivo passa a ser atribuída a esses SCs por mecanismos límbicos que recorrem a essas associações no momento do "querer", tornando um CS atraente e energizando e orientando o comportamento motivado em direção à recompensa.35].

Quando um CS é atribuído com saliência de incentivo, ele normalmente adquire propriedades 'desejadas' distintas e mensuráveis ​​[35,42], que pode ser desencadeada quando o CS é fisicamente reencontrado (embora imagens vívidas de dicas de recompensa também possam ser suficientes, especialmente em humanos). As propriedades 'desejadas' desencadeadas por tais sugestões de recompensa incluem o seguinte:

  1. Recurso de ímã motivacional de saliência de incentivo. Um CS atribuído com saliência de incentivo torna-se motivacionalmente fascinante, uma espécie de "ímã motivacional", que é abordado e às vezes até consumido (Filme Suplementar 1) [43,44 •,45]. O recurso de ímã motivacional dos incentivos de CS pode se tornar tão poderoso que um CS pode até mesmo evocar uma abordagem compulsiva [46]. Os viciados em cocaína, por exemplo, às vezes freneticamente "perseguem fantasmas" ou gritam atrás de grânulos brancos que eles sabem que não são cocaína.
  2. Recurso 'querer' dos EUA acionado por sugestão. Um encontro com um CS para uma recompensa também desencadeia 'querer' para o seu próprio UCS associado, presumivelmente via transferência de saliência de incentivo para representações associativamente ligadas da recompensa ausente [34,47,48]. Em testes de laboratório com animais, isso se manifesta como um pico fásico de aumentos desencadeados por estímulos para trabalhar pela recompensa ausente (principalmente avaliados especificamente em testes chamados PIT ou Transferência Pavloviana-Instrumental conduzidos sob condições de extinção; Figura 4). O "querer" acionado por sugestão pode ser bastante específico para a recompensa associada, ou às vezes transbordar de uma maneira mais geral para estimular outras recompensas também (como talvez quando viciados sensibilizados ou pacientes com desregulação dopaminérgica exibem jogo compulsivo, comportamento, etc., além do comportamento compulsivo de consumo de drogas) [49,50]. Assim, encontros com estímulos de incentivo podem dinamicamente aumentar a motivação para buscar recompensas e aumentar o vigor com que são procurados, um fenômeno que pode ser especialmente importante quando as sugestões desencadeiam a recaída no vício.

    Figura 4

    Amplificação de anfetamina NAc de 'querer' disparado por cue. Os picos transientes de 'querer' a recompensa de sacarose são desencadeados por aparições de 30 de uma sugestão de sacarose pavloviana em um teste de transferência de Pavlovian-Instrumental (CS +; direita). ...
  3. Recurso reforçado condicionado. A saliência de incentivo também torna um CS atraente e "desejado" no sentido de que um indivíduo irá trabalhar para obter o próprio CS, mesmo na ausência da recompensa dos EUA. Isso é freqüentemente chamado de reforço instrumental condicionado. Da mesma forma, adicionar uma CS ao que é ganho quando um animal trabalha para uma recompensa dos EUA, como cocaína ou nicotina, aumenta a avidez com que funciona, talvez porque o CS adiciona um alvo "desejado" adicional [51]. No entanto, notamos que o reforço condicionado é mais amplo do que 'querer', necessitando de mecanismos associativos adicionais para adquirir a tarefa instrumental. Além disso, mecanismos alternativos de RS podem mediar o reforço condicionado em certas situações sem qualquer saliência de incentivo. Isso faz com que o imã motivacional e as propriedades 'desejadas' acionadas por sugestão sejam especialmente importantes para a identificação de uma saliência de incentivo excessiva.

Extensões de saliência de incentivo

  1. Saliência de ação? Antes de deixarmos as características psicológicas do 'querer', somos tentados a especular que alguns comportamentos ações ou programas motores pode também tornar-se "desejado", quase como estímulo de incentivo, através de uma forma de saliência de incentivo aplicada a representações cerebrais de movimentos internos, em vez de representações de estímulos externos. Chamamos essa ideia de "saliência de ação" ou "querer" de agir. A saliência de ação que sugerimos pode ser um equivalente motor da saliência de estímulo de estímulo e mediada por sistemas cerebrais sobrepostos (por exemplo, sistemas de dopamina nigroestriatais dorsais que se sobrepõem aos mesolímbicos ventrais). A geração de impulsos para agir, talvez envolvendo funções motoras combinadas e motivacionais dentro do neostriatum (uma estrutura também conhecida por participar do movimento) parece consistente com várias linhas emergentes de pensamento sobre a função dos gânglios basais [52,53,54 •,55].
  2. Pode desejar estar relacionado ao pavor? Finalmente, notamos que a saliência de incentivo também pode compartilhar talvez surpreendentes fundamentos nos mecanismos mesocorticolímbicos com saliência medrosa [56,57 •,58,59]. Por exemplo, as interações de dopamina e glutamato nos circuitos do nucleus accumbens geram não apenas desejo, mas também pavor, organizado anatomicamente como um teclado afetivo, no qual a interrupção de chaves sequencialmente localizadas gera misturas incrementais de comportamentos apetitivos versus medrosos [57 •]. Além disso, algumas “chaves” locais no nucleus accumbens podem ser transformadas em gerar uma motivação para o oposto, alterando psicologicamente o ambiente afetivo externo (por exemplo, mudar de um ambiente doméstico confortável para um estressante iluminado e cheio de música rock estridente).56].
    Tais descobertas recentes indicam que as especializações neuroquímicas ou localizações anatômicas de funções 'gostar' ou 'querer' descritas acima podem não refletir necessariamente mecanismos permanentemente dedicados de 'linha marcada' onde 'um substrato = uma função'. Em vez disso, eles podem refletir capacidades afetivas especializadas (por exemplo, hotspots hedônicos) ou vieses de motivação / valência (por exemplo, teclado de desejo-pavor) de seus substratos neurobiológicos específicos. Alguns desses substratos podem ser capazes de vários modos funcionais, dependendo de outros fatores simultâneos, para que possam alternar entre funções geradoras tão opostas quanto desejo versus pavor.

Substratos neurobiológicos para 'querer'

Contrastando a neurobiologia de "querer" a "gostar", notamos que substratos cerebrais para "querer" são mais amplamente distribuídos e mais facilmente ativados do que substratos para "gostar" [38,53,60,61 •,62-65]. Mecanismos neuroquímicos de "querer" são mais numerosos e diversos nos domínios neuroquímico e neuroanatômico, o que talvez seja a base para o fenômeno de "querer" uma recompensa sem "gostar" da mesma recompensa. Além dos sistemas opióides, as interações dopamina e dopamina com o glutamato corticolímbico e outros sistemas neuroquímicos ativam a saliência de incentivo 'querer'. Manipulações farmacológicas de alguns desses sistemas podem facilmente alterar o "querer" sem mudar "gostar". Por exemplo, a supressão da neurotransmissão de dopamina endógena reduz o "querer", mas não "gostar" [38,64].

Por outro lado, a amplificação de "querer" sem "gostar" foi produzida pela ativação de sistemas de dopamina por anfetamina ou drogas ativadoras de catecolamina, administradas sistemicamente ou microinjectadas diretamente no núcleo accumbens, ou por mutação genética que eleva os níveis extracelulares de dopamina (via knockdown de transportadores de dopamina na sinapse) em circuitos mesocorticolímbicos e pela sensibilização quase permanente dos sistemas relacionados com mesocorticolímbicos-dopamina pela administração repetida de altas doses de drogas viciantes (Figura 3-Figura 5) [39 •,40 •,61 •,66]. Propusemos que, em indivíduos suscetíveis, a sensibilização neural da saliência de incentivo por drogas de abuso pode gerar um “querer” compulsivo de tomar mais drogas, se as mesmas drogas são ou não correspondentemente “apreciadas” e, assim, contribuir para a dependência [39 •,40 •,42] (Figura 5).

Figura 5

Modelo de sensibilização ao incentivo da dependência. O modelo esquemático de como "querer" tomar drogas pode aumentar com o tempo, independentemente de "gostar" do prazer das drogas, à medida que um indivíduo se torna um viciado. A transição da droga casual ...

Dissecando o aprendizado de 'querer': as propriedades preditivas versus as propriedades de incentivo de sugestões relacionadas à recompensa

Uma vez que as dicas relacionadas à recompensa são aprendidas, essas pistas preveem as recompensas associadas e, além disso, acionam o 'querer' motivacional para obter as recompensas. São previsão e 'querer' um e o mesmo? Ou eles envolvem mecanismos diferentes? Nossa visão é que predição aprendida e saliência de incentivo podem ser analisadas separadamente, assim como 'gostar' e 'querer' podem [37,38,39 •,41,46,61 •]. Analisar as funções psicológicas e seus substratos neurobiológicos é importante para modelos experimentais de aprendizagem e motivação por recompensa, e tem implicações para patologias, incluindo o vício. Vamos descrever brevemente três linhas de evidência de nossos laboratórios que sugerem que as propriedades motivacionais preditivas e de incentivo de pistas relacionadas à recompensa são dissociáveis.

O primeiro exemplo vem de experimentos demonstrando que os CSs podem elucidar a abordagem - isto é, eles agem como um "ímã motivacional", atraindo o indivíduo para eles. Muitos experimentos estabeleceram que quando uma sugestão ou 'sinal' (CS), como a inserção de uma alavanca na parede, é emparelhada com a apresentação de um US recompensador, como comida, os animais tendem a se aproximar e se empenhar.43,44 •]. A chave para distinguir a previsão da motivação reside parcialmente na natureza da resposta condicionada de um indivíduo (CR) [43].

Alguns ratos se aproximam cada vez mais rapidamente da alavanca a cada apresentação e passam a engatá-la avidamente cheirando, mordiscando e até mordendo-a - aparentemente tentando 'comer' a alavanca (Filme Suplementar 1) [45]. Uma dica que prevê a recompensa da cocaína é similarmente abordada e engajada com seu próprio padrão de comportamento excitado [sniffing] [44 •], que pode explicar a capacidade de as drogas associadas se tornarem inadequadas, atraindo-as para dependentes. Tais CR direcionados para o próprio CS são chamados de "rastreamento de sinais".

No entanto, nem todos os ratos desenvolvem um CR de rastreamento de sinais. Mesmo na mesma situação experimental, alguns ratos desenvolvem uma RC diferente - eles aprendem a se aproximar da "meta" (a bandeja de comida), não a alavanca, quando a alavanca CS é apresentada. Esse CR é chamado de "acompanhamento de metas". Assim, com a experiência, os perseguidores de metas chegam a abordar a meta cada vez mais rapidamente em cada apresentação da alavanca CS, e eles começam a engajar a bandeja de comida avidamente, mordiscando e até mordendo-a [43,44 •,45] Para todos os ratos, o CS (inserção de alavanca) possui significância preditiva igual: desencadeia os CRs de rastreamento de sinais e os CRs de rastreamento de objetivos.

A única diferença é para onde o CR é direcionado. Isso sugere que, nos rastreadores de sinais, a alavanca-CS é atribuída com saliência de incentivo, porque para eles é atraente, e isso é apoiado por observações de que os rastreadores de sinais também aprenderão a executar uma nova resposta para obter a CS (ou seja, reforço) [46]. Para os rastreadores de metas, o CS prediz o alimento e leva ao desenvolvimento de um CR, mas o próprio CS não parece ser atribuído com ênfase de incentivo nesses termos (em vez disso, se qualquer coisa, o objetivo é 'desejado') [43,46]. Tais achados são consistentes com a nossa proposição de que o valor preditivo ou associativo de uma CS aprendida pode ser dissociado de seu valor motivacional, dependendo se ela é ativamente atribuída com saliência de incentivo [46].

Uma segunda linha de evidência para analisar a predição a partir da saliência de incentivo vem de estudos de "querer" códigos neurais, especialmente após ativações cerebrais relacionadas à dopamina (por anfetamina ou sensibilização prévia). A elevação da dopamina parece aumentar especificamente a ativação neural límbica para sinais que codificam a máxima saliência de incentivo (Figura 6) [61 •]. Por outro lado, a ativação da dopamina não aumentou os sinais neurais que codificam a previsão máxima [61 •].

Figura 6

Separação do valor de incentivo do CS (querer) do valor preditivo do CS (aprendizagem) por ativação mesolimbica (induzida por sensibilização ou administração aguda de anfetamina). Esta análise de perfil dos padrões de disparo neuronal no pallidum ventral mostra mudanças ...

Uma terceira linha de evidência vem de reverter dinamicamente o "querer" de um CS, mantendo constante sua previsão aprendida. Por exemplo, uma dica que prevê intensa salinidade é normalmente "não desejada", mas pode ser revertida em uma sugestão "desejada" quando um apetite fisiológico de sal é induzido. Nenhum novo aprendizado e, portanto, nenhuma mudança nas previsões aprendidas, precisa ocorrer para que essa inversão de motivação aconteça. Além disso, o estado de apetite incomum nunca deve ter sido experimentado antes, e o CS não precisa ter sido associado com um gosto 'apreciado' antes. Ainda assim, a CS anteriormente negativa de repente torna-se 'desejada' no novo estado e capaz de provocar padrões de disparo que são típicos da saliência de incentivo. Nos primeiros testes no estado de apetite ao sal, o CS repentinamente evoca sinais de disparo neural que codificam o 'querer' positivo, mesmo antes do sal ter sido provado como 'gostei' [67]. Tais observações indicam que o valor preditivo de uma sugestão é distinto de sua capacidade de provocar "querer", já que a última exige o envolvimento de sistemas neurais adicionais para gerar saliência de incentivo e atribuir "querer" a um alvo motivacional.

Mais pesquisas serão necessárias para determinar como 'querer' versus aprendizagem e predição são analisadas dentro do cérebro. No entanto, as evidências até agora indicam que esses componentes têm identidades psicológicas distintas e substratos neurais distinguíveis.

Conclusão

Estudos de neurociência afetiva de "gostar", "querer" e aprender componentes de recompensas revelaram que esses processos psicológicos mapeiam sistemas de recompensa cerebral neuroanatômicos e neuroquímicos distintos até um grau acentuado. Essa percepção pode levar a um melhor entendimento de como os sistemas cerebrais geram recompensas normais e a disfunções clínicas de motivação e humor. Tais aplicações incluem, especialmente, como a sensibilização dos sistemas mesolímbicos pode produzir uma busca compulsiva de recompensas na dependência de drogas e distúrbios relacionados à motivação, distorcendo especificamente o “querer” uma recompensa.

Material suplementar

Vídeo de 'curtir' gosto hedônico

Agradecimentos

A pesquisa dos autores foi apoiada por doações do Instituto Nacional sobre Drug Abuse e do Instituto Nacional de Saúde Mental (EUA).

Apêndice A. Dados Suplementares

Dados suplementares associados a este artigo podem ser encontrados, na versão on-line, em doi: 10.1016 / j.coph. 2008.12.014.

Referências e leitura recomendada

Trabalhos de especial interesse, publicados no período de revisão, foram destacados

• de interesse especial

•• de interesse pendente

1. Schooler JW, Mauss IB. Ser feliz e conhecê-lo: a experiência e a metaconsciência do prazer. In: Kringelbach ML, Berridge KC, editores. Prazeres do Cérebro. Imprensa da Universidade de Oxford; na imprensa.
2. Winkielman P, Berridge KC, Wilbarger JL. Reações afetivas inconscientes a rostos felizes e zangados mascarados influenciam o comportamento de consumo e julgamentos de valor. Pers Soc Psychol Bull. 2005;31: 121 – 135. [PubMed]
3. Fischman MW, Foltin RW. Autoadministração de cocaína por seres humanos: uma perspectiva laboratorial. In: Bock GR, Whelan J, editores. Cocaína: dimensões científicas e sociais. Simpósio da Fundação CIBA; Wiley; 1992. pp. 165-180.
4. Kringelbach ML O córtex orbitofrontal humano: ligando a recompensa à experiência hedônica. Nat Rev Neurosci. 2005;6: 691 – 702. [PubMed]Vividamente e concisa descreve o papel do córtex orbitofrontal no prazer em seres humanos.
5. Leknes S, Tracey I. Uma neurobiologia comum para dor e prazer. Nat Rev Neurosci. 2008;9: 314 – 320. [PubMed]
6. Wheeler RA, Carelli RM. A neurociência do prazer: foco nos códigos de disparo do pálido ventral recompensa hedônica: quando um mau gosto se torna bom. J Neurophysiol. 2006;96: 2175 – 2176. [PubMed]
7. Tindell AJ, Smith KS, Pecina S, Kridge Berridge, Aldridge JW Ventral pallidum códigos de disparo recompensa hedônica: quando um gosto ruim fica bom. J Neurophysiol. 2006;96: 2399 – 2409. [PubMed]Este estudo fornece evidências para a codificação neuronal de 'gostar' como um componente objetivo do prazer de recompensa através de padrões de disparo neuronal no pálidal ventral ao gosto de sacarose e sal.
8. Knutson B, Wimmer GE, Kuhnen CM, Winkielman P. A ativação do núcleo accumbens medeia a influência das sugestões de recompensa na assunção de riscos financeiros. Neuroreport. 2008;19: 509 – 513. [PubMed]
9. Beaver JD, Lawrence AD, van Ditzhuijzen J, Davis MH, Woods A, Calder AJ Diferenças individuais na condução de recompensa predizem respostas neurais a imagens de alimentos. J Neurosci. 2006;26: 5160 – 5166. [PubMed]Demonstra que os circuitos de incentivo são ativados por dicas de recompensa alimentar em humanos de maneiras ligadas a um traço de personalidade (BAS) que pode estar relacionado à busca de sensações.
10. Pessiglione M, Schmidt L, Draganski B, R Kalisch, Lau H, Dolan R, Frith C Como o cérebro traduz dinheiro em vigor: um estudo de neuroimagem de motivação subliminar. Ciência. 2007;316: 904 – 906. [PubMed]Demonstra em humanos que os circuitos de incentivo cerebral envolvendo o pálido ventral são ativados até mesmo por estímulos de recompensa implícitos que permanecem abaixo da percepção consciente e são capazes de ampliar a ação motivada para recompensa.
11. Childress AR, Ehrman RN, Wang Z, Li Y, Sciortino N, Hakun J, Jens W, Suh J, Listerud J, Marquez K, et al. Prelúdio à paixão: ativação límbica por drogas 'invisíveis' e sinais sexuais. PLoS ONE. 2008;3: E1506. [Artigo gratuito do PMC] [PubMed]
12. Small DM, Veldhuizen MG, Felsted J, Mak YE, McGlone F. Substratos separáveis ​​para quimiossensibilidade alimentar antecipatória e consumidora. Neurônio. 2008;57: 786 – 797. [Artigo gratuito do PMC] [PubMed]
13. Tobler P, O'Doherty JP, Dolan RJ, Schultz W. Codificação do valor da recompensa distinta da codificação da incerteza relacionada à atitude de risco em sistemas de recompensa humanos. J Neurophysiol. 2007;97: 1621 – 1632. [Artigo gratuito do PMC] [PubMed]
14. Peciña S, Berridge Ponto quente de KC Hedonic na casca do núcleo accumbens: Onde os mu-opioides causam um aumento do impacto hedônico da doçura? J Neurosci. 2005;25: 11777 – 11786. [PubMed]Identifica um 'hedônico hotsônico' de milímetro cúbico na casca do núcleo, no qual os sinais opióides mu causam um aumento de "gosto" pelo prazer sensorial do sabor adocicado. Este estudo também forneceu a primeira evidência para a separação anatômica da causação de 'gosto' opióide a partir de zonas de 'desejo' e zonas de frio fora do ponto de acesso.
15. Peciña S, Smith KS, Berridge KC. Pontos quentes hedônicos no cérebro. Neuro cientista. 2006;12: 500 – 511. [PubMed]
16. Mahler SV, Smith KS, Berridge KC. Ponto de acesso hedônico endocanabinóide para o prazer sensorial: a anandamida na concha do núcleo accumbens melhora o "gosto" de uma recompensa doce. Neuropsychopharmacology. 2007;32: 2267 – 2278. [PubMed]
17. Smith KS, Berridge KC O pallidum ventral e a recompensa hedônica: mapas neuroquímicos de "gosto" e ingestão de sacarose. J Neurosci. 2005;25: 8637 – 8649. [PubMed]Este estudo demonstrou que o pallidum ventral contém um hotspot 'hedônico' de milímetro cúbico no pallidum ventral para amplificação opióide de reações de 'gosto' à doçura, localizadas dentro de sua zona posterior.
18. Berridge KC, Kringelbach ML. Neurociência afetiva do prazer: recompensa em humanos e animais. Psicofarmacologia (Berl) 2008;199: 457 – 480. [Artigo gratuito do PMC] [PubMed]
19. Pecina S. Recompensa dos opióides 'gostar' e 'querer' no núcleo accumbens. Physiol Behav. 2008;94: 675 – 680. [PubMed]
20. Kringelbach ML. O cérebro hedônico: uma neuroanatomia funcional do prazer humano. In: Kringelbach ML, Berridge KC, editores. Prazeres do Cérebro. Imprensa da Universidade de Oxford; na imprensa.
21. Smith KS, Tindell AJ, Aldridge JW e Berridge KC. Papéis de pallidum ventral em recompensa e motivação. Behav Brain Res. 2009;196: 155 – 167. [Artigo gratuito do PMC] [PubMed]
22. Circuito de recompensa Ikemoto S. Dopamine: dois sistemas de projeção do mesencéfalo ventral até o núcleo accumbens-complexo olfativo do tubérculo. Brain Res. Rev. 2007;56: 27 – 78. [Artigo gratuito do PMC] [PubMed]
23. Steiner JE, Glaser D, Hawilo ME, Berridge KC. Expressão comparativa do impacto hedônico: reações afetivas ao paladar de bebês humanos e outros primatas. Neurosci Biobehav Rev. 2001;25: 53 – 74. [PubMed]
24. Grill HJ, Norgren R. O teste de reatividade do sabor. II Respostas miméticas a estímulos gustativos em ratos talâmicos e decerebrados crônicos. Cérebro Res. 1978;143: 281 – 297. [PubMed]
25. Jarrett MM, Limebeer CL, Parker LA. Efeito do Delta9-tetra-hidrocanabinol na palatabilidade da sacarose, medida pelo teste de reatividade gustativa. Physiol Behav. 2005;86: 475 – 479. [PubMed]
26. Zheng H, Berthoud HR. Comer por prazer ou calorias. Curr Opin Pharmacol. 2007;7: 607 – 612. [Artigo gratuito do PMC] [PubMed]
27. Smith KS, Mahler SV, Pecina S, Berridge KC. Pontos quentes hedônicos: gerando prazer sensorial no cérebro. In: Kringelbach M, Berridge KC, editores. Prazeres do Cérebro. Imprensa da Universidade de Oxford; na imprensa.
28. Smith KS, Berridge KC. Circuito límbico opióide para recompensa: interação entre pontos quentes hedônicos do núcleo accumbens e pálido ventral. J Neurosci. 2007;27: 1594 – 1605. [PubMed]
29. Solinas M, Goldberg SR, Piomelli D. O sistema endocanabinóide em processos de recompensa cerebral. Br J Pharmacol. 2008;154: 369 – 383. [Artigo gratuito do PMC] [PubMed]
30. Kirkham T. Endocanabinóides e a neuroquímica da glutonaria. J Neuroendocrinol. 2008;20: 1099 – 1100. [PubMed]
31. Shimura T, Imaoka H, ​​Yamamoto T. Modulação neuroquímica do comportamento ingestivo no pálido ventral. Eur J Neurosci. 2006;23: 1596 – 1604. [PubMed]
32. Aldridge JW, Berridge KC. Codificação neural do prazer: “Óculos com cor de rosa” do pálido ventral. In: Kringelbach ML, Berridge KC, editores. Prazeres do Cérebro. Imprensa da Universidade de Oxford; na imprensa.
33. Richardson DK, Reynolds SM, Cooper SJ, Berridge KC. Os opióides endógenos são necessários para o aumento da palatabilidade da benzodiazepina: o naltrexona bloqueia o aumento do efeito de sacarose induzido pelo diazepam Pharmacol Biochem Behav. 2005;81: 657 – 663. [PubMed]
34. Dickinson A, Balleine B. Hedonics: a interface cognitivo-motivacional. In: Kringelbach ML, Berridge KC, editores. Prazeres do Cérebro. Imprensa da Universidade de Oxford; na imprensa.
35. Berridge KC. Aprendizado de recompensa: reforço, incentivos e expectativas. In: Medin DL, editor. A psicologia da aprendizagem e motivação. vol. 40. Imprensa Acadêmica; 2001. pp. 223 – 278.
36. Daw ND, Niv Y, Dayan P. Competição baseada na incerteza entre sistemas estriatais pré-frontal e dorsolateral para controle comportamental. Nat Neurosci. 2005;8: 1704 – 1711. [PubMed]
37. Dayan P, Balleine BW. Recompensa, motivação e aprendizado por reforço. Neurônio. 2002;36: 285 – 298. [PubMed]
38. Berridge KC. O debate sobre o papel da dopamina na recompensa: o caso da saliência de incentivo. Psicofarmacologia (Berl) 2007;191: 391 – 431. [PubMed]
39. Robinson TE, Berridge KC A teoria de sensibilização de incentivo do vício: algumas questões atuais. Philos Trans R Sociedade Lond B Biol Sci. 2008;363: 3137 – 3146. [PubMed]Última atualização em evidências sobre a teoria de que o vício é causado em parte pela sensibilização de drogas de substratos neurais para 'querer'.
40. Robinson TE, vício de Berridge KC. Annu Rev Psychol. 2003;54: 25 – 53. [PubMed]Compara a ideia de que o vício é causado pela sensibilização de incentivo, com hipóteses de aprendizado ou hábito e com hipóteses de abstinência ou de hedonismo do oponente.
41. Berridge KC, Aldridge JW. Utilidade de decisão, o cérebro e a busca de objetivos hedônicos. Soc Cognition. 2008;26: 621 – 646.
42. Robinson TE, Berridge KC. A base neural do desejo de drogas: uma teoria de incentivo-sensibilização da dependência. Brain Res. Rev. 1993;18: 247 – 291. [PubMed]
43. Flagel SB, Akil H, Robinson TE. Diferenças individuais na atribuição de saliência de incentivo a dicas relacionadas à recompensa: implicações para o vício. Neurofarmacologia. 2009;56: 139 – 148. [Artigo gratuito do PMC] [PubMed]
44. A atribuição de saliência de incentivo a um estímulo que sinaliza uma injeção intravenosa de cocaína. Behav Brain Res. 2006;169: 320 – 324. [PubMed]Demonstra pela primeira vez em um modelo animal que pistas para drogas como a cocaína assumem propriedades de "ímã motivacional", de modo que as pistas induzem a abordagem e estimulam a investigação em um paradigma autoshaping.
45. Mahler S, mecanismos de Berridge K. Amygdala de saliência de incentivo. Society for Neuroscience Abstracts. 2007
46. ​​Robinson TE, Flagel SB. Dissociar as propriedades motivacionais preditivas e de incentivo de sugestões relacionadas à recompensa por meio do estudo de diferenças individuais. Biol Psychiatry. 2008 doi: 10.1016 / j.biopsych.2008.09.006.
47. Wyvell CL, Berridge KC. A anfetamina intra-accumbens aumenta a importância condicionada do incentivo à recompensa com sacarose: aprimoramento da “recompensa” por recompensa sem “gosto” aprimorado ou reforço da resposta. J Neurosci. 2000;20: 8122 – 8130. [PubMed]
48. Holland PC. Relações entre transferência instrumento-pavloviana e desvalorização do reforçador. J Exp Psychol-Anim Behav Process. 2004;30: 104 – 117. [PubMed]
49. Evans AH, Pavese N, Lawrence AD, Tai YF, Appel S, Doder M, Brooks DJ, Lees AJ, Piccini P. Uso compulsivo de drogas ligado à transmissão sensitiva de dopamina do estriado ventral. Ann Neurol. 2006;59: 852 – 858. [PubMed]
50. Kausch O. Padrões de abuso de substâncias entre jogadores patológicos em busca de tratamento. J Subst Abuse Treat. 2003;25: 263 – 270. [PubMed]
51. Schenk S, Partridge B. Influência de um estímulo luminoso condicionado na auto-administração de cocaína em ratos. Psicofarmacologia (Berl) 2001;154: 390 – 396. [PubMed]
52. Aldridge JW, Berridge KC, Herman M, Zimmer L. Codificação neuronal de ordem serial: sintaxe de aparar no neostriatum. Psychol Sci. 1993;4: 391 – 395.
53. Volkow ND, Wang GJ, Telang F, Fowler JS, Logan J, Childress AR, Jayne M, Ma Y, Wong C. Sugestões de cocaína e dopamina no estriado dorsal: mecanismo de desejo pelo vício em cocaína. J Neurosci. 2006;26: 6583 – 6588. [PubMed]
54. Everitt BJ, Belin D, Economidou D, Pelloux Y, Dalley JW, Robbins TW Mecanismos neurais subjacentes à vulnerabilidade para desenvolver hábitos compulsivos de busca de drogas e dependência. Philos Trans R Sociedade Lond B Biol Sci. 2008;363: 3125 – 3135. [PubMed]Cogentemente apresenta a visão em favor da ideia de que o vício resulta de hábitos de SR exagerados devido à distorção do componente de aprendizagem da recompensa.
55. Haber SN, Fudge JL, McFarland NR. As vias estriatonigrostriatais nos primatas formam uma espiral ascendente da concha ao estriado dorsolateral. J Neurosci. 2000;20: 2369 – 2382. [PubMed]
56. Reynolds SM, Berridge KC. Os ambientes emocionais reajustam a valência das funções apetitivas versus medrosas no núcleo accumbens. Nat Neurosci. 2008;11: 423 – 425. [Artigo gratuito do PMC] [PubMed]
57. Faure A, Reynolds SM, Richard JM, Berridge KC Dopamina mesolimbica em desejo e temor: possibilitar que a motivação seja gerada por rupturas localizadas de glutamato no núcleo accumbens. J Neurosci. 2008;28: 7184 – 7192. [PubMed]Este experimento demonstra pela primeira vez que a dopamina gera tanto motivação de incentivo positiva quanto motivação negativa para o medo ao interagir com sinais de glutamato corticolímbico de uma maneira anatomicamente específica dentro do núcleo accumbens.
58. Levita L., Dalley JW, Robbins TW. Núcleo accumbens dopamina e medo aprendido revisitado: uma revisão e algumas novas descobertas. Behav Brain Res. 2002;137: 115 – 127. [PubMed]
59. Kapur S. Como os antipsicóticos se tornam antipsicóticos - da dopamina à saliência e à psicose. Trends Pharmacol Sci. 2004;25: 402 – 406. [PubMed]
60. Aragona BJ, Carelli RM. Neuroplasticidade dinâmica e a automação do comportamento motivado. Aprenda Mem. 2006;13: 558 – 559. [PubMed]
61. Tindell AJ, Berridge KC, Zhang J, Peciña S, neurônios nervosos pélvicos de Aldridge JW Ventral motivam motivação de incentivo: amplificação por sensibilização mesolímbica e anfetamina. Eur J Neurosci. 2005;22: 2617 – 2634. [PubMed]Uma primeira demonstração de codificação neural de que a dopamina e a sensibilização amplificam os sinais "desejados", independentemente de "gostar" ou de aprender componentes de recompensa.
62. Smith KS, Berridge KC, Aldridge JW. Os neurônios palidais ventrais distinguem elevações de "gostar" e "querer" causadas por opióides versus dopamina no núcleo accumbens. Em Society for Neuroscience Abstracts. 2007
63. Abler B, Erk S, Walter H. A ativação do sistema de recompensa humana é modulada por uma dose única de olanzapina em indivíduos saudáveis ​​em um estudo fMRI controlado por placebo, duplo-cego e relacionado ao evento. Psicofarmacologia (Berl) 2007;191: 823 – 833. [PubMed]
64. Leyton M. A neurobiologia do desejo: dopamina e a regulação do humor e estados motivacionais em humanos. In: Kringelbach ML, Berridge KC, editores. Prazeres do Cérebro. Imprensa da Universidade de Oxford; na imprensa.
65. Salamone JD, Correa M, Mingote SM, Weber SM. Além da hipótese da recompensa: funções alternativas do núcleo accumbens dopamina. Curr Opin Pharmacol. 2005;5: 34 – 41. [PubMed]
66. Peciña S, Cagniard B, Berridge KC, Aldridge JW, Zhuang X. Os camundongos mutantes hiperdopaminérgicos têm maior “desejo”, mas não “gostando” de recompensas doces. J Neurosci. 2003;23: 9395 – 9402. [PubMed]
67. Tindell AJ, Smith KS, Berridge KC, Aldridge JW. Os neurônios palidais ventrais integram aprendizagem e sinais fisiológicos para codificar a saliência de incentivo de sinais condicionados; Conferência da Sociedade de Neurociências; 12 de novembro de 2005; Washington DC. 2005.