Dissecting, Wanting and Learning (2010): Componenti di dissezione di ricompensa

Ricompensa: commenti - Questo gruppo ha molti studi e recensioni che esaminano i substrati neurali del desiderio e del piacere. La teoria attuale suggerisce che i meccanismi della dopamina piacciono e i meccanismi oppioidi sono carenti. La dipendenza vuole così tanto che continui a usarla nonostante le conseguenze negative.


Studio completo: analisi dei componenti del premio: "gradimento", "volere" e apprendimento

Curr Opin Pharmacol. 2009 febbraio; 9 (1): 65-73.

Pubblicato online 2009 gennaio 21. doi: 10.1016 / j.coph.2008.12.014.

Kent C Berridge, Terry E Robinson e J Wayne Aldridge

Indirizzo Dipartimento di Psicologia, Università del Michigan, Ann Arbor, 48109-1043, USA

Autore corrispondente: Berridge, Kent C (Email: [email protected])

Astratto

Negli ultimi anni sono stati fatti progressi significativi delineando le componenti psicologiche della ricompensa e i loro meccanismi neurali sottostanti. Qui evidenziamo brevemente i risultati di tre componenti psicologiche dissociabili di ricompensa:simpatia"(impatto edonico),"volendo'(incentive salience), e apprendimento (associazioni predittive e cognizioni). Una migliore comprensione delle componenti della ricompensa, e dei loro substrati neurobiologici, può aiutare a escogitare trattamenti migliorati per i disturbi dell'umore e della motivazione, che vanno dalla depressione ai disturbi alimentari, alla tossicodipendenza e alle relative attività compulsive di ricompense.

Introduzione

simpatia

Per la maggior parte delle persone una "ricompensa" è qualcosa che si desidera perché produce un'esperienza di piacere consapevole - e quindi il termine può essere usato per riferirsi agli eventi psicologici e neurobiologici che producono piacere soggettivo. Ma le prove suggeriscono che il piacere soggettivo è solo una componente della ricompensa, e che i premi possono influenzare il comportamento anche in assenza di essere coscientemente consapevoli di loro. In effetti, l'introspezione può in realtà portare a confusione sulla misura in cui i premi sono graditi, mentre le reazioni immediate possono essere più accurate [1].

In casi estremi, anche inconsci o impliciti, le reazioni di "gradimento" agli stimoli edonici possono essere misurate nel comportamento o nella fisiologia senza sensazioni di piacere coscienti (ad esempio dopo una visualizzazione subliminalmente breve di un'espressione facciale felice o una dose molto bassa di cocaina per via endovenosa) [2,3]. Pertanto, anche se forse sorprende, le misure oggettive di reazioni "gradite" alle gratifiche possono a volte fornire un accesso più diretto ai sistemi edonici rispetto alle segnalazioni soggettive.

Uno dei principali obiettivi delle neuroscienze affettive è identificare quali substrati cerebrali causano piacere, sia esso soggettivo o oggettivo. Studi di neuroimaging e di registrazione neurale hanno scoperto che i premi che vanno dal gusto dolce alla cocaina per via endovenosa, il denaro vincente o una faccia sorridente attivano molte strutture cerebrali, tra cui corteccia orbitofrontale, cingolo anteriore e insula e strutture subcorticali come nucleus accumbens, ventrale pallidum, ventrale tegmentum e proiezioni mesolimbiche della dopamina, amigdala, ecc. [4 •,5,6,7 ••,8,9 •,10 •,11-13].

Ma quale di questi sistemi cerebrali provoca effettivamente il piacere della ricompensa? E quali attivazioni invece sono semplicemente correlate (ad es. A causa della diffusione dell'attivazione della rete) o conseguenze del piacere (mediando invece altre funzioni cognitive, motivazionali, motorie, ecc. Relative alla ricompensa)? Noi e altri abbiamo cercato la causalità del piacere negli studi sugli animali identificando le manipolazioni del cervello che amplificano l'impatto edonico [6,14 ••,15,16,17 •,18-22].

Per studiare i sistemi neurali responsabili dell'impatto edonistico dei premi, noi e altri abbiamo sfruttato le reazioni oggettive del "gradimento" ai dolci assaggi di gusto, come le espressioni facciali affettive dei neonati umani e le reazioni facciali omologhe di oranghi, scimpanzé, scimmie e persino ratti e topi [4 •,18,23,24]. I dolci suscitano espressioni positive del "piacere" del viso in tutti questi (leccate delle labbra, protuberanze linguistiche ritmiche, ecc.), Mentre i sapori amari suscitano invece espressioni negative "antipatiche" (spazi vuoti, ecc .; Figure 1 ; Film supplementare 1). Tali reazioni "gradite" - "antipatiche" al gusto sono controllate da una gerarchia di sistemi cerebrali per l'impatto edonico nel proencefalo e nel tronco cerebrale, e sono influenzati da molti fattori che alterano la piacevolezza, come la fame / sazietà e le preferenze di gusto o avversione apprese.

Figure 1

Esempio di reazioni "simpatiche" comportamentali e hotspot cerebrali edonici per un piacere sensoriale. In alto: Le reazioni edonistiche positive del "simpatico" sono provocate dal gusto del saccarosio da topo umano adulto e adulto (es. Protrusione della lingua ritmica). ...

Solo pochi sistemi neurochimici sono stati trovati finora per migliorare le reazioni di "gradimento" a un gusto dolce nei ratti e solo in alcune posizioni cerebrali circoscritte. I sistemi di neurotrasmissione di oppioidi, endocannabinoidi e GABA-benzodiazepine sono importanti per generare reazioni piacevoli [14 ••,15,16,17 •,25,26], in particolare in siti specifici in strutture limbiche (Figure 1 ed Figure 2 ) [15,16,17 •,21,27]. Abbiamo chiamato "hedpots hedonic" di questi siti perché sono in grado di generare aumenti nelle reazioni di "simpatia" e per deduzione, piacere. Un hotspot edonico per l'aumento degli oppiacei del piacere sensoriale si trova nel nucleo accumbens all'interno del quadrante rostrodorsale del suo guscio mediale, di circa un millimetro cubo in volume [14 ••,15,28].

Cioè, l'hotspot comprende solo il 30% del volume della conchiglia mediale e meno del 10% dell'intero nucleo accumbens. All'interno di questo hotspot edonico, la microiniezione dell'agonista mu oppioide, DAMGO, raddoppia o triplica il numero di reazioni di "gradimento" suscitate dal gusto di saccarosio [14 ••,28]. Un altro hedpot hedonico si trova nella metà posteriore del pallido ventrale, dove ancora DAMGO accresce potentemente le reazioni del "gradimento" alla dolcezza [17 •,21,28]. In entrambi gli hotspot, la stessa microiniezione raddoppia anche il "volere" per il cibo nel senso di stimolare il comportamento alimentare e l'assunzione di cibo.

Figure 2

Espansione dell'hotspot mu oppioide nel nucleo accumbens con delineazione di zone 'miking' contro 'wanting'. Verde: l'intero guscio mediale media gli aumenti stimolati da oppioidi nel "volere" per la ricompensa del cibo. ...

Al di fuori di questi hotspot, anche nella stessa struttura, gli stimoli oppioidi producono effetti molto diversi. Ad esempio, in NAc praticamente in tutte le altre località le microiniezioni DAMGO stimolano ancora il "volere" per il cibo tanto quanto nell'hotspot, ma non aumentano il "gradimento" (e addirittura sopprimono i "mi piace" in un punto freddo più posteriore nel guscio mediale mentre stimolando ancora l'assunzione di cibo; Figure 2 ). Pertanto, confrontando gli effetti dell'attività mu oppioide all'interno o all'esterno dell'hotspot nel guscio mediale NAc, i siti oppioidi responsabili del "Mi piace" sono anatomicamente dissociabili da quelli che influenzano il "volere" [14 ••,16].

Gli endocannabinoidi aumentano le reazioni di "simpatia" in un hotspot NAc che si sovrappone al sito mu oppioide [16,27]. Microiniezione di anandamide nell'hotspot endocannabinoide, che agisce forse stimolando i recettori CB1, più che raddoppia il livello di reazioni "gradite" al gusto del saccarosio (e più che raddoppia l'assunzione di cibo). Questo substrato edonico endocannabinoide può essere correlato agli effetti dei farmaci degli antagonisti degli endocannabinoidi quando usati come potenziali trattamenti per l'obesità o la dipendenza [16,29,30].

Il pallidum ventrale è un bersaglio principale per le uscite del nucleo accumbens, e la sua metà posteriore contiene un secondo hotspot oppioide [17 •,21]. Nel pallidum hotspot, microiniezioni di DAMGO doppia "simpatia" per saccarosio e "volere" per il cibo (misurato come assunzione). Al contrario, la microiniezione di DAMGO anteriore all'hotspot sopprime il "piacere" e il "volere". Abbastanza indipendente, il "volere" viene stimolato separatamente in tutte le località del pallido ventrale mediante il blocco del GABAA i recettori mediante microiniezione bicucullale, senza alterare il "piacere" in nessun luogo [17 •,31].

Il ruolo del ventre pallido in "simpatia" e "volere" lo rende di particolare interesse per gli studi sull'attivazione neurale indotti dalla ricompensa. Nell'uomo, la cocaina, il sesso, il cibo o i premi in denaro attivano tutti il ​​pallido ventrale, inclusa la subregione posteriore che corrisponde all'hotspot hedonico nei ratti [9 •,10 •,11,21]. In studi elettrofisiologici più dettagliati di come i neuroni nel pallido ventrale posteriore codificano i segnali edonici nei ratti, abbiamo scoperto che i neuroni hotspot sparano più vigorosamente al gusto dolce del saccarosio che a un sapore salato sgradevole (tripla concentrazione dell'acqua di mare) [7 ••]. Tuttavia, di per sé una differenza nel fuoco evocato tra saccarosio e sale non dimostra che i neuroni codifichino il loro impatto edonico relativo ("gradimento" contro "non gradimento") piuttosto che, diciamo, semplicemente una caratteristica sensoriale di base dello stimolo (dolce contro salato ).

Tuttavia, abbiamo anche scoperto che l'attività neuronale ha seguito un cambiamento nel valore edonico relativo di questi stimoli quando la piacevolezza del gusto NaCl è stata manipolata selettivamente inducendo un appetito salino fisiologico. Quando i ratti erano impoveriti di sodio (dall'ormone mineralcorticoide e dalla somministrazione di diuretici), il gusto salato intenso divenne "gradito" dal punto di vista comportamentale tanto quanto il saccarosio, e i neuroni nel pallido ventrale iniziarono a sparare vigorosamente al sale quanto al saccarosio [7 ••] (Figure 3 ). Pensiamo che tali osservazioni indichino che, in effetti, i modelli di fuoco di questi neuroni pallidi ventrale codificano il "piacere" edonico per la sensazione piacevole, piuttosto che le più semplici caratteristiche sensoriali [21,32].

Figure 3

Codifica neuronale del "piacere" per il piacere sensoriale dei sapori dolci e salati. Le risposte di fuoco neuronali sono mostrate da un elettrodo di registrazione ventrale pallido a gusti di saccarosio e sale intenso infuso nella bocca di un topo. Due ...

Gli hedpot hedonici distribuiti attraverso il cervello possono essere collegati funzionalmente insieme in un circuito gerarchico integrato che combina più proencefalo e tronco cerebrale, simile a più isole di un arcipelago che commerciano insieme [21,24,27]. A livello relativamente alto di strutture limbiche nel proencefalo ventrale, il miglioramento del "gradimento" da parte di hotspot in accumbens e ventrale pallidum può agire insieme come un'unica eterarchia cooperativa, che richiede "voti" unanimi da entrambi i punti caldi [28]. Ad esempio, l'amplificazione edonica mediante stimolazione oppioide di un hotspot può essere interrotta dal blocco del recettore oppioide presso l'altro hotspot sebbene l'amplificazione "volendo" dall'hotspot di NAc fosse più robusta e persistesse dopo il blocco dell'hotspot VP [VP]28].

Un'interazione simile alla base del "gradimento" è stata osservata in seguito a manipolazioni di oppioidi e benzodiazepine (probabilmente coinvolgendo il nucleo parabrachiale dei ponti cerebrali) [27]. Il miglioramento del "gradimento" prodotto dalla somministrazione di benzodiazepine sembra richiedere il reclutamento obbligatorio di oppioidi endogeni, poiché è impedito dalla somministrazione di naloxone [33]. Quindi un singolo circuito edonico può combinare più meccanismi neuroanatomici e neuro-chimici per potenziare le reazioni e il piacere del "piacere".

'' Volendo

Di solito un cervello "gradisce" i premi che "vuole". Ma a volte possono semplicemente "volere" loro. La ricerca ha stabilito che i premi "gradimento" e "volere" sono dissociabili sia psicologicamente che neurobiologicamente. Per "volere", intendiamo incentive salience, un tipo di motivazione incentivante che promuove l'approccio e il consumo di premi, e che ha caratteristiche psicologiche e neurobiologiche distinte. Ad esempio, la salienza incentivante è distinguibile dalle forme cognitive più desiderabili intese dalla parola ordinaria, dal volere, che coinvolgono obiettivi dichiarativi o aspettative esplicite di esiti futuri, e che sono ampiamente mediate da circuiti corticali [34-37].

In confronto, la salienza incentivante è mediata da sistemi neurali più ponderati sottocorticamente che includono proiezioni di dopamina mesolimbica, non richiede aspettative cognitive elaborate e si concentra più direttamente sugli stimoli legati alla ricompensa [34,35,38]. In casi come la dipendenza, che coinvolgono la sensibilizzazione incentivante, la differenza tra salienza incentivante e desideri cognitivi può a volte portare a quello che si potrebbe chiamare "volere" irrazionale: cioè, un "volere" per ciò che non è voluto, causato da un eccessivo incentive salience [39 •,40 •,41].

Il "desiderio" può applicarsi a stimoli innati stimolanti (stimoli incondizionati, UCS) oa stimoli appresi che erano originariamente neutrali ma che ora prevedono la disponibilità di UCS ricompensa (stimoli condizionati pavloviani, CS) [38,40 •]. Cioè, le CS acquisiscono proprietà motivazionali di incentivo quando un CS è accoppiato con il ricevimento di una ricompensa innata o "naturale" tramite le associazioni di stimolo-stimolo pavloviano (apprendimento S-S). La salienza dell'incentivo viene attribuita a questi CS dai meccanismi limbici che attingono a quelle associazioni al momento del "volere", rendendo un CS attraente, e motivando il comportamento motivato verso il premio [35].

Quando un CS viene attribuito con salienza incentivante, acquisisce tipicamente proprietà "volitive" distinte e misurabili [35,42], che può essere attivato quando il CS viene fisicamente ri-incontrato (anche se le immagini vivide di segnali di ricompensa possono anche essere sufficienti, specialmente negli umani). Le proprietà "volere" innescate da tali segnali di ricompensa includono quanto segue:

  1. Caratteristica del magnete motivazionale della salienza degli incentivi. Un CS attribuito con salienza incentivante diventa motivatamente affascinante, una sorta di "calamita motivazionale", che viene avvicinato e talvolta persino consumato (Film supplementare 1) [43,44 •,45]. La caratteristica del magnete motivazionale degli incentivi CS può diventare così potente che un CS può persino evocare un approccio compulsivo [46]. Per esempio, a volte i drogati di cocaina, a volte freneticamente "inseguono i fantasmi" o scarabocchiano dopo che i granuli bianchi che sanno non sono cocaina.
  2. Funzionalità 'volere' degli Stati Uniti innescati. Un incontro con un CS per una ricompensa fa scattare anche il "volere" per il proprio UCS associato, presumibilmente attraverso il trasferimento della salienza incentivante alle rappresentazioni associate in modo associativo della ricompensa assente [34,47,48]. Nei test di laboratorio su animali, questo si manifesta come un picco fasale degli aumenti di stimoli provocati dal cue nel lavorare per la ricompensa assente (per lo più specificamente valutati in test chiamati PIT o trasferimento pavloviano-strumentale condotto in condizioni di estinzione; Figure 4 ). Il "volere" innescato dalla stecca può essere abbastanza specifico per la ricompensa associata, o talvolta traboccare in modo più generico per stimolare il "volere" anche per altri premi (come forse quando i dipendenti sensibilizzati o i pazienti con disregolazione della dopamina esibiscono il gioco compulsivo, sessuale comportamento, ecc., oltre al comportamento compulsivo di assunzione di droghe) [49,50]. Pertanto, gli incontri con gli stimoli incentivanti possono aumentare dinamicamente la motivazione per cercare ricompense e aumentare il vigore con cui sono ricercati, un fenomeno che può essere particolarmente importante quando gli stimoli scatenano la ricaduta nella dipendenza.

    Figure 4

    NAc amplificazione anfetaminica di "volere" innescata da una stecca. I picchi transitori di "volere" per la ricompensa del saccarosio sono innescati dall'apparizione di 30 di un'indicazione di saccarosio pavloviano in un test di trasferimento strumentale di Pavlovian (CS +, a destra). ...
  3. Funzione di rinforzo condizionato. La salienza dell'incentivo rende anche un CS attraente e "ricercato" nel senso che un individuo lavorerà per ottenere il CS stesso, anche in assenza della ricompensa degli Stati Uniti. Questo è spesso chiamato rinforzo condizionale strumentale. Allo stesso modo, aggiungere un CS a ciò che si guadagna quando un animale lavora per una ricompensa degli Stati Uniti come la cocaina o la nicotina, aumenta il loro funzionamento avidamente, forse perché il CS aggiunge un ulteriore obiettivo "ricercato" [51]. Tuttavia, notiamo che il rinforzo condizionato è più ampio del "volere", e necessita di ulteriori meccanismi associativi per acquisire il compito strumentale. Inoltre, i meccanismi SR alternativi potrebbero mediare il rinforzo condizionato in determinate situazioni senza alcuna importanza saliente. Ciò rende il magnete motivazionale e le proprietà "volitive" innescate dalla stecca, particolarmente importanti per l'identificazione di un'eccessiva salienza degli incentivi.

Estensioni di salienza incentivante

  1. Salienza d'azione? Prima di lasciare le caratteristiche psicologiche del "volere", siamo tentati di ipotizzare che alcuni comportamentali azioni o programmi motori può anche diventare "ricercato", quasi come stimoli incentivanti, attraverso una forma di salienza incentivante applicata a rappresentazioni cerebrali di movimenti interni piuttosto che rappresentazioni di stimoli esterni. Chiamiamo questa idea "azione salienza" o "volere" per agire. La salienza dell'azione che suggeriamo potrebbe essere un motore equivalente alla salienza stimolante dello stimolo e mediata da sistemi cerebrali sovrapposti (ad esempio sistemi dopamina dorsale nigrostriatale che si sovrappongono a quelli mesolimbici ventrale). Generazione di impulsi per agire, forse coinvolgendo funzioni motorie e motivazionali all'interno del neostriato (una struttura nota anche per partecipare al movimento) sembra coerente con diverse linee emergenti di pensiero sulla funzione dei gangli della base [52,53,54 •,55].
  2. Il desiderio può essere correlato al terrore? Infine, notiamo che la salienza degli incentivi può anche condividere le basi forse sorprendenti nei meccanismi mesocorticentrici con salienza spaventosa [56,57 •,58,59]. Per esempio, le interazioni di dopamina e glutammato nei circuiti del nucleo accumbens generano non solo il desiderio, ma anche il terrore, organizzato anatomicamente come una tastiera affettiva, in cui la rottura di chiavi sequenzialmente localizzate genera miscele incrementali di comportamenti appetitosi rispetto a comportamenti paurosi [57 •]. Inoltre, alcune "chiavi" locali nel nucleo accumbens possono essere capovolte dal generare una motivazione al contrario cambiando psicologicamente l'ambiente affettivo esterno (ad esempio il cambiamento da un ambiente domestico confortevole a uno stressante illuminato e pieno di musica rock rauca) [56].
    Tali scoperte recenti indicano che le specializzazioni neurochimiche o le localizzazioni anatomiche delle funzioni di "gradimento" o di "desiderio" sopra descritte potrebbero non riflettere necessariamente meccanismi di "linea etichettata" permanentemente dedicati in cui "un substrato = una funzione". Piuttosto possono riflettere capacità affettive specializzate (ad es. Hotspot edonici) o distorsioni da motivazione-valenza (ad es. Tastiera del terrore del desiderio) dei loro particolari substrati neurobiologici. Alcuni di questi substrati possono essere in grado di molteplici modalità funzionali, a seconda di altri fattori simultanei, in modo che siano in grado di alternare tra funzioni generatrici opposte come desiderio rispetto al terrore.

Supporti neurobiologici per "volere"

In contrasto con la neurobiologia del "volere" con il "piacere", notiamo che i substrati del cervello per "volere" sono più ampiamente distribuiti e più facilmente attivabili dei substrati per "piacere" [38,53,60,61 •,62-65]. I meccanismi "desideranti" neurochimici sono più numerosi e diversificati nei domini neurochimici e neuroanatomici, che è forse la base per il fenomeno del "voler" una ricompensa senza ugualmente "gradire" la stessa ricompensa. Oltre ai sistemi oppioidi, le interazioni con la dopamina e la dopamina con il glutammato corticolimbico e altri sistemi neurochimici attivano il "desiderio" di salienza incentivante. Le manipolazioni farmacologiche di alcuni di questi sistemi possono facilmente alterare il "volere" senza cambiare "simpatia". Ad esempio, la soppressione della neurotrasmissione endogena della dopamina riduce il "volere" ma non il "gradimento" [38,64].

Al contrario, l'amplificazione del "volere" senza "gradimento" è stata prodotta dall'attivazione di sistemi dopaminici da parte di anfetamine o analoghi farmaci attivanti la catecolamina somministrati sistemicamente o microiniettati direttamente nel nucleo accumbens, o mediante mutazione genetica che aumenta i livelli extracellulari di dopamina (via abbattimento dei trasportatori di dopamina nella sinapsi) nei circuiti mesocorticolimbici e dalla sensibilizzazione quasi permanente dei sistemi mesocorticolimbici-dopaminici mediante somministrazione ripetuta di dosi elevate di droghe che provocano dipendenza (Figure 3 -Figure 5 ) [39 •,40 •,61 •,66]. Abbiamo proposto che negli individui sensibili la sensibilizzazione neurale della salienza incentivante da parte di droghe d'abuso possa generare "voglia" compulsivo di assumere più farmaci, indipendentemente dal fatto che gli stessi farmaci siano o meno "piaciuti", e quindi contribuiscano alla dipendenza [39 •,40 •,42] (Figure 5 ).

Figure 5

Modello di dipendenza incentivante. Il modello schematico di come "voler" assumere droghe può crescere nel tempo indipendentemente dal "piacere" per il piacere della droga quando un individuo diventa un tossicodipendente. Il passaggio dalla droga casuale ...

Sezionare l'apprendimento dal "volere": le proprietà predittive rispetto agli incentivi degli stimoli correlati alla ricompensa

Una volta che gli indizi relativi alla ricompensa vengono appresi, questi segnali stimolano i loro premi associati e inoltre innescano motivazioni "volendo" per ottenere i premi. La predizione e 'volere' la stessa cosa? Oppure coinvolgono diversi meccanismi? La nostra opinione è che la predizione appresa e la salienza degli incentivi possano essere analizzate separatamente, proprio come "simpatia" e "volere" possono [37,38,39 •,41,46,61 •]. L'analisi delle funzioni psicologiche e dei loro substrati neurobiologici è importante per i modelli sperimentali di apprendimento e motivazione della ricompensa e ha implicazioni per le patologie, inclusa la dipendenza. Descriveremo brevemente tre linee di evidenza dei nostri laboratori che suggeriscono che le proprietà motivazionali predittive e incentive degli stimoli correlati alla ricompensa sono dissociabili.

Il primo esempio viene dagli esperimenti che dimostrano che le CS possono suscitare l'approccio - cioè, agiscono come un "magnete motivazionale", attirando l'individuo verso di loro. Molti esperimenti hanno stabilito che quando una stecca o un "segno" (CS), come l'inserimento di una leva attraverso il muro, è accoppiato con la presentazione di un USA gratificante, come il cibo, gli animali tendono ad avvicinarsi e impegnarsi nella stecca [43,44 •]. La chiave per distinguere la previsione dalla motivazione risiede in parte nella natura della risposta condizionata di una persona (CR) [43].

Alcuni ratti si avvicinano sempre più rapidamente alla leva su ogni presentazione e arrivano ad impegnarsi avidamente la leva annusando, rosicchiando e persino mordendola - apparentemente tentando di "mangiare" la leva (Film supplementare 1) [45]. Una battuta che predice la ricompensa di cocaina viene avvicinata in modo simile e impegnata con il proprio modello di comportamento di fiuto eccitato [44 •], che può spiegare la capacità degli indizi associati ai farmaci di diventare disadattivi, attirando loro tossicodipendenti. Tali CR indirizzati verso il CS stesso sono chiamati "sign-tracking".

Tuttavia, non tutti i ratti sviluppano un CR di tracciamento dei segni. Anche nella stessa situazione sperimentale alcuni ratti sviluppano una CR diversa - imparano ad avvicinarsi alla "meta" (il vassoio del cibo), non alla leva, quando viene presentata la leva-CS. Questo CR è chiamato "tracciamento degli obiettivi". Così, con l'esperienza, gli inseguitori di obiettivi arrivano ad avvicinarsi sempre più rapidamente all'obiettivo su ogni presentazione della leva-CS, e iniziano a coinvolgere avidamente il vassoio di cibo, a mordicchiarlo e persino a morderlo [43,44 •,45]. Per tutti i ratti, il CS (inserimento a leva) ha un uguale significato predittivo: innesca sia i CR di tracciamento dei segni sia i CR di tracciamento degli obiettivi.

L'unica differenza è dove è diretto il CR. Ciò suggerisce che nei segnalatori la leva CS è attribuita con salienza incentivante perché per loro è attraente, e ciò è supportato da osservazioni che i segnalatori tracciano in modo specifico impareranno anche a eseguire una nuova risposta per ottenere il CS (cioè condizionato strumentalmente rinforzo) [46]. Per i tracker degli obiettivi, il CS predice il cibo e conduce allo sviluppo di un CR, ma il CS stesso non sembra essere attribuito con salienza incentivante in questi modi (invece, semmai, l'obiettivo è "ricercato") [43,46]. Tali risultati sono coerenti con la nostra proposizione secondo cui il valore predittivo o associativo di un SC acquisito può essere dissociato dal suo valore motivazionale, a seconda che sia attivamente attribuito con salienza incentivante [46].

Una seconda linea di evidenze per analizzare la predizione dalla salienza degli incentivi viene dagli studi sui codici neurali "desiderosi", specialmente dopo attivazioni cerebrali legate alla dopamina (da anfetamina o da precedenti sensibilizzazioni). L'elevazione della dopamina sembra migliorare in modo specifico il tiro neurale limbico a segnali che codificano la salienza massima incentivante (Figure 6 ) [61 •]. Al contrario, l'attivazione della dopamina non ha migliorato i segnali neurali che codificano la previsione massimale [61 •].

Figure 6

Separazione del valore di incentivazione CS (volendo) dal valore predittivo di CS (apprendimento) mediante attivazione mesolimbica (indotta da sensibilizzazione o somministrazione di anfetamine acuta). Questa analisi del profilo dei modelli di fuoco neuronale nel pallido ventrale mostra i cambiamenti ...

Una terza linea di prove proviene dal "volere" invertire dinamicamente un CS mantenendo costante la sua predizione appresa. Ad esempio, una stecca che predice l'intensa salinità è normalmente "non desiderata", ma può essere invertita in un'indicazione "ricercata" quando viene indotto un appetito salino fisiologico. Nessun nuovo apprendimento, e quindi nessun cambiamento nelle predizioni apprese, deve verificarsi perché questo inversione di motivazione avvenga. Inoltre, l'insolito stato di appetito non è mai stato sperimentato prima, e il CS non ha mai dovuto essere associato a un gusto "gradito" prima. Tuttavia, il CS precedentemente negativo diventa improvvisamente "ricercato" nel nuovo stato e in grado di suscitare schemi di sparo tipici della salienza degli incentivi. Alle primissime prove nello stato di appetito salato, il CS evoca improvvisamente segnali di sparo neurali che codificano "volere" positivo, anche prima che il sale UCS sia mai stato assaggiato come "amato" [67]. Tali osservazioni indicano che il valore predittivo di una stecca è distinto dalla sua capacità di suscitare il "volere", poiché quest'ultimo richiede l'impiego di sistemi neurali aggiuntivi per generare salienza incentivante e attribuire il "volere" a un obiettivo motivazionale.

Saranno necessarie ulteriori ricerche per determinare come il "volere" rispetto all'apprendimento e alla predizione vengono analizzati all'interno del cervello. Tuttavia, le prove finora indicano che queste componenti hanno identità psicologiche distinte e substrati neurali distinguibili.

Conclusione

Studi affettivi di neuroscienza di "gradimento", "volere" e componenti di apprendimento delle ricompense hanno rivelato che questi processi psicologici si mappano su distinti sistemi di ricompensa cerebrale neuroanatomici e neurochimici in misura notevole. Questa intuizione può portare a una migliore comprensione di come i sistemi cerebrali generano una normale ricompensa e in disfunzioni cliniche della motivazione e dell'umore. Tali applicazioni comprendono in particolare il modo in cui la sensibilizzazione dei sistemi mesolimbici può produrre una ricerca compulsiva di ricompense nella tossicodipendenza e nei relativi disturbi motivazionali distorcendo specificamente il "volere" per una ricompensa.

Materiale supplementare

Video di "mi piace" dal gusto edonico

Ringraziamenti

La ricerca degli autori è stata supportata da sovvenzioni dal National Institute on Drug Abuse e dal National Institute of Mental Health (USA).

Appendice A. Dati supplementari

Dati supplementari associati a questo articolo possono essere trovati, nella versione online, all'indirizzo doi: 10.1016 / j.coph. 2008.12.014.

Referenze e letture consigliate

I documenti di particolare interesse, pubblicati nel periodo di revisione, sono stati evidenziati come

• di particolare interesse

•• di eccezionale interesse

1. Schooler JW, Mauss IB. Essere felici e conoscerlo: l'esperienza e la meta-consapevolezza del piacere. In: Kringelbach ML, Berridge KC, editori. Piaceri del cervello. La stampa dell'università di Oxford; in stampa.
2. Winkielman P, Berridge KC, Wilbarger JL. Le reazioni affettive inconsce alle facce felici e arrabbiate mascherate influenzano il comportamento di consumo e i giudizi di valore. Pers Soc Psychol Bull. 2005;31: 121-135. [PubMed]
3. Fischman MW, Foltin RW. Autosomministrazione di cocaina da parte dell'uomo: una prospettiva di laboratorio. In: Bock GR, Whelan J, editori. Cocaina: dimensioni scientifiche e sociali. Simposio della Fondazione CIBA; Wiley; 1992. pagg. 165-180.
4. Kringelbach ML La corteccia orbitofrontale umana: collegare la ricompensa all'esperienza edonica. Nat Rev Neurosci. 2005;6: 691-702. [PubMed]Descrive in modo chiaro e conciso il ruolo del ruolo della corteccia orbitofrontale nel piacere nell'uomo.
5. Leknes S, Tracey I. Una neurobiologia comune per dolore e piacere. Nat Rev Neurosci. 2008;9: 314-320. [PubMed]
6. Wheeler RA, Carelli RM. La neuroscienza del piacere: concentrarsi sul pallido ventrale che emette la ricompensa edonica: quando un cattivo gusto diventa buono. J Neurophysiol. 2006;96: 2175-2176. [PubMed]
7. Tindell AJ, Smith KS, Pecina S, Berridge KC, Aldridge JW Ventral pallidum firing codes premio edonico: quando un cattivo gusto diventa buono. J Neurophysiol. 2006;96: 2399-2409. [PubMed]Questo studio fornisce la prova per la codifica neuronale del "piacere" come componente oggettivo del piacere della ricompensa attraverso modelli di fuoco neuronale nel pallido ventrale a gusti di saccarosio e sale.
8. Knutson B, Wimmer GE, Kuhnen CM, Winkielman P. Nucleus accumbens attivazione media l'influenza dei segnali di ricompensa sull'assunzione di rischi finanziari. Neuroreport. 2008;19: 509-513. [PubMed]
9. Beaver JD, Lawrence AD, van Ditzhuijzen J, Davis MH, Woods A, Calder AJ Le differenze individuali nella ricompensa stimolano le risposte neurali alle immagini del cibo. J Neurosci. 2006;26: 5160-5166. [PubMed]Dimostra che i circuiti di incentivi sono attivati ​​da segnali di gratificazione negli esseri umani in modi collegati a un tratto di personalità (BAS) che può essere correlato alla ricerca di sensazioni.
10 Pessiglione M, Schmidt L, Draganski B, Kalisch R, Lau H, Dolan R, Frith C Come il cervello traduce il denaro in forza: uno studio neuroimaging della motivazione subliminale. Scienza. 2007;316: 904-906. [PubMed]Dimostra negli esseri umani che i circuiti di incentivazione cerebrale che coinvolgono il pallido ventrale sono attivati ​​anche da stimoli di ricompensa impliciti che rimangono al di sotto della consapevolezza cosciente e sono in grado di amplificare l'azione motivata per la ricompensa.
11. Childress AR, Ehrman RN, Wang Z, Li Y, Sciortino N, Hakun J, Jens W, Suh J, Listerud J, Marquez K, et al. Preludio alla passione: attivazione limbica da parte di droghe "invisibili" e segnali sessuali. PLoS ONE. 2008;3: e1506. [Articolo gratuito di PMC] [PubMed]
12. DM piccolo, Veldhuizen MG, Felsted J, Mak YE, McGlone F. Substrati separabili per la chemiosazione alimentare anticipata e consumata. Neuron. 2008;57: 786-797. [Articolo gratuito di PMC] [PubMed]
13. Tobler P, O'Doherty JP, Dolan RJ, Schultz W. Codifica del valore del premio distinta dalla codifica dell'incertezza relativa all'atteggiamento del rischio nei sistemi di ricompensa umani. J Neurophysiol. 2007;97: 1621-1632. [Articolo gratuito di PMC] [PubMed]
14 Peciña S, Berridge KC Hedonic hot spot nel nucleo accumbens shell: dove i mu-oppioidi causano un maggiore impatto edonistico della dolcezza? J Neurosci. 2005;25: 11777-11786. [PubMed]Identifica un hedonic hotspot "cubico-millimetrico" nel guscio del nucleo, dove i segnali mu oppioidi causano un miglioramento "gradevole" per il piacere sensoriale del gusto dolce. Questo studio ha anche fornito le prime prove per la separazione anatomica della causa del "piacere" degli oppioidi dalle zone "vuote" e "coldspot" al di fuori dell'hotspot.
15. Peciña S, Smith KS, Berridge KC. Punti caldi edonici nel cervello. Neuroscienziato. 2006;12: 500-511. [PubMed]
16. Mahler SV, Smith KS, Berridge KC. Hotspot edonico endocannabinoide per il piacere sensoriale: l'anandamide nel guscio del nucleo accumbens migliora il "gradimento" di una dolce ricompensa. Neuropsicofarmacologia. 2007;32: 2267-2278. [PubMed]
17 Smith KS, Berridge KC Il ventre pallido e la ricompensa edonica: mappe neurochimiche del "gusto" del saccarosio e assunzione di cibo. J Neurosci. 2005;25: 8637-8649. [PubMed]Questo studio ha dimostrato che il pallido ventrale contiene un "hedpot hedonic" cubico-millimetrico nel pallido ventrale per l'amplificazione degli oppioidi delle reazioni "gradite" alla dolcezza, localizzate nella sua zona posteriore.
18. Berridge KC, Kringelbach ML. Neuroscienze affettive del piacere: ricompensa nell'uomo e negli animali. Psicofarmacologia (Berl) 2008;199: 457-480. [Articolo gratuito di PMC] [PubMed]
19. Pecina S. Oppioide ricompensa il "gradimento" e il "volere" nel nucleo accumbens. Physiol Behav. 2008;94: 675-680. [PubMed]
20. Kringelbach ML. Il cervello edonico: una neuroanatomia funzionale del piacere umano. In: Kringelbach ML, Berridge KC, editori. Piaceri del cervello. La stampa dell'università di Oxford; in stampa.
21. Smith KS, Tindell AJ, Aldridge JW, Berridge KC. Ruolo pallido dei ruoli in ricompensa e motivazione. Behav Brain Res. 2009;196: 155-167. [Articolo gratuito di PMC] [PubMed]
22. Circuito di ricompensa di Ikemoto S. Dopamine: due sistemi di proiezione dal mesencefalo ventrale al nucleo accumbens – complesso tubercolare olfattivo. Cervello Res Rev. 2007;56: 27-78. [Articolo gratuito di PMC] [PubMed]
23. Steiner JE, Glaser D, Hawilo ME, Berridge KC. Espressione comparativa di impatto edonico: reazioni affettive al gusto da parte di neonati e altri primati. Neurosci Biobehav Rev. 2001;25: 53-74. [PubMed]
24. Grill HJ, Norgren R. Il test di reattività gustativa. II. Risposte mimetiche agli stimoli gustativi nei ratti talamici cronici e decerebrati cronici. Cervello. 1978;143: 281-297. [PubMed]
25. Jarrett MM, Limebeer CL, Parker LA. Effetto del Delta9-tetraidrocannabinolo sulla appetibilità del saccarosio misurata dal test di reattività del gusto. Physiol Behav. 2005;86: 475-479. [PubMed]
26. Zheng H, Berthoud HR. Mangiare per piacere o calorie. Curr Opin Pharmacol. 2007;7: 607-612. [Articolo gratuito di PMC] [PubMed]
27. Smith KS, Mahler SV, Pecina S, Berridge KC. Hotspot edonici: generare piacere sensoriale nel cervello. In: Kringelbach M, Berridge KC, editori. Piaceri del cervello. La stampa dell'università di Oxford; in stampa.
28. Smith KS, Berridge KC. Circuito limbico oppioide per ricompensa: interazione tra hotspot edonici di nucleus accumbens e pallidum ventrale. J Neurosci. 2007;27: 1594-1605. [PubMed]
29. Solinas M, Goldberg SR, Piomelli D. Il sistema endocannabinoide nei processi di ricompensa del cervello. Br J Pharmacol. 2008;154: 369-383. [Articolo gratuito di PMC] [PubMed]
30. Kirkham T. Endocannabinoidi e la neurochimica della gola. J Neuroendocrinol. 2008;20: 1099-1100. [PubMed]
31. Shimura T, Imaoka H, ​​Yamamoto T. Modulazione neurochimica del comportamento ingestivo nel pallido ventrale. Eur J Neurosci. 2006;23: 1596-1604. [PubMed]
32. Aldridge JW, Berridge KC. Codifica neurale del piacere: "vetri colorati di rosa" del pallido ventrale. In: Kringelbach ML, Berridge KC, editori. Piaceri del cervello. La stampa dell'università di Oxford; in stampa.
33. Richardson DK, Reynolds SM, Cooper SJ, Berridge KC. Gli oppioidi endogeni sono necessari per migliorare l'appetibilità della benzodiazepina: il naltrexone blocca l'aumento del saccarosio indotto dal diazepam Pharmacol Biochem Behav. 2005;81: 657-663. [PubMed]
34. Dickinson A, Balleine B. Hedonics: l'interfaccia cognitivo-motivazionale. In: Kringelbach ML, Berridge KC, editori. Piaceri del cervello. La stampa dell'università di Oxford; in stampa.
35. Berridge KC. Ricompensa: rinforzo, incentivi e aspettative. In: Medin DL, editore. La psicologia dell'apprendimento e della motivazione. vol. 40. Academic Press; 2001. pp. 223-278.
36. Daw ND, Niv Y, Dayan P. Concorrenza basata sull'incertezza tra sistemi striatali prefrontali e dorsolaterali per il controllo comportamentale. Nat Neurosci. 2005;8: 1704-1711. [PubMed]
37. Dayan P, Balleine BW. Apprendimento di ricompensa, motivazione e rinforzo. Neuron. 2002;36: 285-298. [PubMed]
38. Berridge KC. Il dibattito sul ruolo della dopamina nella ricompensa: il caso della salienza incentivante. Psicofarmacologia (Berl) 2007;191: 391-431. [PubMed]
39 Robinson TE, Berridge KC La teoria della dipendenza da incentivazione della dipendenza: alcuni problemi attuali. Philos Trans R Soc Lond B Biol Sci. 2008;363: 3137-3146. [PubMed]Ultimo aggiornamento sulle prove relative alla teoria che la dipendenza è causata in parte dalla sensibilizzazione ai farmaci dei substrati neurali per "volere".
40 Robinson TE, dipendenza da Berridge KC. Annu Rev Psychol. 2003;54: 25-53. [PubMed]Confronta l'idea che la dipendenza sia causata da incentivazione-sensibilizzazione, con ipotesi di apprendimento o abitudine e da ritiro o ipotesi di dipendenza edonistica di dipendenza.
41. Berridge KC, Aldridge JW. Utilità decisionale, cervello e perseguimento di obiettivi edonici. Soc Cognition. 2008;26: 621-646.
42. Robinson TE, Berridge KC. Le basi neurali del desiderio di droga: una teoria di dipendenza-incentivazione della dipendenza. Cervello Res Rev. 1993;18: 247-291. [PubMed]
43. Flagel SB, Akil H, Robinson TE. Differenze individuali nell'attribuzione della salienza degli incentivi ai segnali relativi alla ricompensa: implicazioni per la dipendenza. Neurofarmacologia. 2009;56: 139-148. [Articolo gratuito di PMC] [PubMed]
44 Uslaner JM, Acerbo MJ, Jones SA, Robinson TE L'attribuzione di salienza incentivante a uno stimolo che segnala un'iniezione endovenosa di cocaina. Behav Brain Res. 2006;169: 320-324. [PubMed]Dimostra per la prima volta in un modello animale che spinge droghe come la cocaina ad assumere proprietà di "calamita motivazionale", in modo che gli stimoli suscitino un approccio e un'indagine eccitata in un paradigma di autoshaping.
45. Mahler S, Berridge K. Amygdala meccanismi di salienza incentivante. Society for Neuroscience Abstracts. 2007
46. ​​Robinson TE, Flagel SB. Dissociare le proprietà motivazionali predittive e incentivanti dei segnali relativi alla ricompensa attraverso lo studio delle differenze individuali. Biol Psychiatry. 2008 doi: 10.1016 / j.biopsych.2008.09.006.
47. Wyvell CL, Berridge KC. L'anfetamina intra-accumbens aumenta la salienza incentivante condizionata della ricompensa di saccarosio: potenziamento della ricompensa "volere" senza "gradimento" migliorato o rafforzamento della risposta. J Neurosci. 2000;20: 8122-8130. [PubMed]
48. Holland PC. Rapporti tra trasferimento pavloviano-strumentale e svalutazione del rinforzo. J Exp Psychol-Anim Behav Process. 2004;30: 104-117. [PubMed]
49. Evans AH, Pavese N, Lawrence AD, Tai YF, Appel S, Doder M, Brooks DJ, Lees AJ, Piccini P. Uso compulsivo di droghe collegato alla trasmissione sensibilizzata della dopamina striatale ventrale. Ann Neurol. 2006;59: 852-858. [PubMed]
50. Kausch O. Modelli di abuso di sostanze tra giocatori d'azzardo patologici in cerca di cure. J Subst Abuse Treat. 2003;25: 263-270. [PubMed]
51. Schenk S, Pernice B. Influenza di uno stimolo luminoso condizionato sull'autosomministrazione di cocaina nei ratti. Psicofarmacologia (Berl) 2001;154: 390-396. [PubMed]
52. Aldridge JW, Berridge KC, Herman M, Zimmer L. Codifica neuronale di ordine seriale: sintassi del grooming nel neostriato. Psychol Sci. 1993;4: 391-395.
53. Volkow ND, Wang GJ, Telang F, Fowler JS, Logan J, Childress AR, Jayne M, Ma Y, Wong C. Cocaina e dopamina nello striato dorsale: meccanismo di brama nella dipendenza da cocaina. J Neurosci. 2006;26: 6583-6588. [PubMed]
54 Everitt BJ, Belin D, Economidou D, Pelloux Y, Dalley JW, Robbins TW Meccanismi neurali alla base della vulnerabilità a sviluppare abitudini compulsive per la ricerca di droghe e dipendenza. Philos Trans R Soc Lond B Biol Sci. 2008;363: 3125-3135. [PubMed]Cogently presenta il punto di vista a favore dell'idea che la dipendenza derivi da abitudini SR esagerate a causa della distorsione della componente di apprendimento della ricompensa.
55. Haber SN, Fudge JL, McFarland NR. Le vie striatonigrostriatali nei primati formano una spirale ascendente dal guscio allo striato dorsolaterale. J Neurosci. 2000;20: 2369-2382. [PubMed]
56. Reynolds SM, Berridge KC. Gli ambienti emotivi risintonizzano la valenza delle funzioni appetitive rispetto a quelle spaventose nel nucleo accumbens. Nat Neurosci. 2008;11: 423-425. [Articolo gratuito di PMC] [PubMed]
57 Faure A, Reynolds SM, Richard JM, Berridge KC La dopamina mesolimbica nel desiderio e nel terrore: la motivazione può essere generata dalle interruzioni localizzate del glutammato nel nucleo accumbens. J Neurosci. 2008;28: 7184-7192. [PubMed]Questo esperimento dimostra per la prima volta che la dopamina genera sia una motivazione incentivante positiva che una motivazione negativa alla paura interagendo con i segnali del glutammato corticolimbico in modo anatomicamente specifico all'interno del nucleo accumbens.
58. Levita L, Dalley JW, Robbins TW. Nucleus accumbens dopamine e apprese la paura rivisitata: una recensione e alcune nuove scoperte. Behav Brain Res. 2002;137: 115-127. [PubMed]
59. Kapur S. Come gli antipsicotici diventano anti-"psicotici" - dalla dopamina alla salienza fino alla psicosi. Tendenze Pharmacol Sci. 2004;25: 402-406. [PubMed]
60. Aragona BJ, Carelli RM. Neuroplasticità dinamica e automazione del comportamento motivato. Impara Mem. 2006;13: 558-559. [PubMed]
61 Tindell AJ, Berridge KC, Zhang J, Peciña S, Aldridge JW Ventrale pallidi neuroni codice motivazione incentivo: amplificazione da sensibilizzazione mesolimbica e anfetamine. Eur J Neurosci. 2005;22: 2617-2634. [PubMed]Una prima dimostrazione di codifica neurale secondo cui la dopamina e la sensibilizzazione amplificano i segnali "desideranti", indipendentemente dal "gradimento" o dall'apprendimento di componenti di ricompensa.
62. Smith KS, Berridge KC, Aldridge JW. I neuroni pallidi ventrale distinguono gli aumenti di "gradimento" e di "desiderio" causati da oppioidi rispetto alla dopamina nei nuclei accumbens. In Society for Neuroscience Abstracts. 2007
63. Abler B, Erk S, Walter H. L'attivazione del sistema di ricompensa umana è modulata da una singola dose di olanzapina in soggetti sani in uno studio di fMRI correlato all'evento, in doppio cieco, controllato con placebo. Psicofarmacologia (Berl) 2007;191: 823-833. [PubMed]
64. Leyton M. La neurobiologia del desiderio: dopamina e regolazione dell'umore e degli stati motivazionali nell'uomo. In: Kringelbach ML, Berridge KC, editori. Piaceri del cervello. La stampa dell'università di Oxford; in stampa.
65. Salamone JD, Correa M, Mingote SM, Weber SM. Oltre l'ipotesi della ricompensa: funzioni alternative del nucleo accumbens dopamina. Curr Opin Pharmacol. 2005;5: 34-41. [PubMed]
66. Peciña S, Cagniard B, Berridge KC, Aldridge JW, Zhuang X. I topi mutanti iperdopaminergici hanno un "desiderio" maggiore ma non "simpatia" per dolci ricompense. J Neurosci. 2003;23: 9395-9402. [PubMed]
67. Tindell AJ, Smith KS, Berridge KC, Aldridge JW. I neuroni pallidi ventrale integrano i segnali di apprendimento e fisiologici per codificare la salienza incentivante di segnali condizionati; Conferenza Society for Neuroscience; 12 novembre 2005; Washington DC. Del 2005.