Dopamin v motivacijskem nadzoru: nagrajevanje, odbijanje in opozarjanje (2010)

Oglejte si druge članke v PMC quote objavljeni članek.

Srednji možganski dopaminski nevroni so dobro znani po močnih odzivih na nagrade in kritični vlogi pri pozitivni motivaciji. Vse bolj jasno pa je, da dopaminski nevroni prenašajo tudi signale, povezane s vidnimi, vendar neprimernimi izkušnjami, kot so averzivni in alarmantni dogodki. Tukaj pregledamo nedavni napredek v razumevanju funkcij dopamina za nagrajevanje in ne-nagrajevanje. Na podlagi teh podatkov predlagamo, da dopaminski nevroni prihajajo v več tipov, ki so povezani z različnimi možganskimi omrežji in imajo izrazito vlogo pri motivacijskem nadzoru. Nekateri dopaminski nevroni kodirajo motivacijsko vrednost in podpirajo možganske mreže za iskanje, ocenjevanje in vrednotenje. Druge kodirajo motivacijsko značilnost in podpirajo možganske mreže za orientacijo, kognicijo in splošno motivacijo. Obe vrsti dopaminskih nevronov se povečata z opozorilnim signalom, ki je vključen v hitro odkrivanje potencialno pomembnih senzornih znakov. Predpostavljamo, da te dopaminergične poti za vrednost, izrazitost in opozarjanje sodelujejo v podporo prilagodljivemu vedenju.

Dopamin v motivaciji dejavnosti, ki iščejo nagrado

Že dolgo je znano, da je dopamin pomemben za okrepitev in motivacijo ukrepov. Zdravila, ki motijo ​​prenos DA, motijo ​​učenje okrepitve, medtem ko manipulacije, ki izboljšujejo prenos DA, na primer stimulacija možganov in zasvojenost, pogosto delujejo kot okrepitve (Wise, 2004). Prenos DA je ključnega pomena za ustvarjanje motivacije za iskanje nagrad (Berridge in Robinson, 1998; Salamone et al., 2007) in za vzpostavljanje spominov na združenja podeljenih nagrad (Dalley et al., 2005). Izpustitev DA ni potrebna za vse oblike učenja nagrad in ne more biti vedno "všeč" v smislu, da povzročajo zadovoljstvo, vendar je ključnega pomena za to, da cilji postanejo "želeni" v smislu motiviranja za njihovo doseganje (Berridge in Robinson, 1998; Palmiter, 2008).

Ena hipoteza o tem, kako dopamin podpira krepitev učenja, je, da prilagodi moč sinaptičnih povezav med nevroni. Najbolj preprosta različica te hipoteze je, da dopamin uravnava sinaptično plastičnost v skladu s spremenjenim hebbijskim pravilom, ki ga lahko v grobem navedemo kot "nevrone, ki skupaj streljajo med seboj, če dobijo dopamin". Z drugimi besedami, če celica A aktivira celico B in celica B povzroči vedenjsko dejanje, kar ima za posledico nagrado, bi se dopamin sprostil in povezava A → B okrepila (Montague et al., 1996; Schultz, 1998). Ta mehanizem bi omogočil organizmu, da se nauči optimalne izbire ukrepov za pridobitev nagrad ob zadostnih izkušnjah s poskusi in napakami. V skladu s to hipotezo dopamin močno vpliva na sinaptično plastičnost v številnih možganskih regijah (Surmeier et al., 2010; Goto et al., 2010; Molina-Luna in sod., 2009; Marowsky et al., 2005; Lisman in Grace, 2005). V nekaterih primerih dopamin omogoča sinaptično plastičnost skladno z opisanimi Hebbijinimi pravili, na način, ki je povezan z vedenjem, ki išče nagrado (Reynolds et al., 2001). Poleg svojega učinka na dolgoročno sinaptično plastičnost lahko dopamin izvaja tudi takojšen nadzor nad nevronskimi vezji z modulacijo nevronske špičaste aktivnosti in sinaptičnih povezav med nevroni (Surmeier et al., 2007; Robbins in Arnsten, 2009), v nekaterih primerih pa na način, ki bi spodbudil takojšnje ukrepe, ki iščejo nagrado (Frank, 2005).

Signali za nagrajevanje dopaminskih nevronov

Za motiviranje dejanj, ki vodijo v nagrade, je treba med nagrajevanjem izkušenj izpustiti dopamin. Dejansko je večina nevronov DA močno aktivirana zaradi nepričakovanih primarnih nagrad, kot sta hrana in voda, ki pogosto povzročajo fazistične "razpoke" aktivnosti (Schultz, 1998) (fazna vzbujanja, vključno z več konci (Grace in Bunney, 1983)). Vendar so pionirske študije Wolframa Schultza pokazale, da teh odzivov DA nevrona ne sproži poraba nagrade po sebi. Namesto tega spominjajo na "napako napovedovanja nagrad" in poročajo o razliki med prejeto nagrado in nagrado, za katero je bilo predvideno, da se bo zgodila (Schultz et al., 1997) (Slika 1A). Če je torej nagrada večja od predvidene, so DA nevroni močno navdušeni (pozitivna napaka napovedovanja oz. Slika 1E, rdeča); če je nagrada manjša od predvidene ali se ob določenem času ne zgodi, se nevroni DA fazno zavirajo (negativna napaka napovedovanja, Slika 1E, modra); in če je nagrada vnešena vnaprej, tako da je njena velikost povsem predvidljiva, imajo DA nevroni malo ali nič odziva (nič napake napovedovanja, Slika 1C, Črna). Isto načelo velja tudi za odzive DA na senzorične napotke, ki zagotavljajo nove informacije o prihodnjih nagradah. DA nevroni so navdušeni, ko iztočnica kaže na povečanje prihodnje vrednosti nagrade (Slika 1C, rdeča), preprečeno, ko iztočnica kaže na znižanje vrednosti prihodnje nagrade (Slika 1C, modra) in imajo na splošno premalo odzivov na napotke, ki ne posredujejo novih informacij o nagradi (Slika 1E, Črna). Ti odzivi DA spominjajo na določeno vrsto napake napovedovanja nagrade, imenovano napaka časovne razlike ali "napaka TD", za katero je bilo predlagano, da deluje kot ojačitveni signal za učenje vrednosti dejanj in okoljskih stanj (Houk et al., 1995; Montague et al., 1996; Schultz et al., 1997). Računalniški modeli z uporabo TD-podobnega ojačitvenega signala lahko razložijo številne vidike učenja ojačitve pri ljudeh, živalih in samih nevronih DA (Sutton in Barto, 1981; Waelti et al., 2001; Montague in Berns, 2002; Dayan in Niv, 2008).

 

Slika 1

Dopaminsko kodiranje napak pri napovedovanju nagrad in prednost pred napovednimi informacijami

Impresivna vrsta eksperimentov je pokazala, da signali DA predstavljajo napovedi nagrade na način, ki se natančno ujema z vedenjskimi preferencami, vključno s prednostjo velikih nagrad pred majhnimi (Tobler et al., 2005) verjetne nagrade nad neverjetnimi (Fiorillo et al., 2003; Satoh et al., 2003; Morris et al., 2004) in takojšnje nagrade za zapoznele (Roesch et al., 2007; Fiorillo et al., 2008; Kobayashi in Schultz, 2008). Obstajajo celo dokazi, da DA nevroni pri ljudeh kodirajo nagrajeno vrednost denarja (Zaghloul in sod., 2009). Poleg tega se signali DA pojavijo med učenjem s podobnim časovnim potekom kot vedenjski ukrepi napovedovanja nagrad (Hollerman in Schultz, 1998; Satoh et al., 2003; Takikawa in sod., 2004; Day et al., 2007) in so v povezavi s subjektivnimi ukrepi prednostne nagrade (Morris et al., 2006). Te ugotovitve so nevroni DA postavili kot enega najbolje razumljenih in najbolj ponovljenih primerov kodiranja nagrad v možganih. Kot rezultat tega so nedavne študije podvrgle intenzivnemu pregledu nevronov DA, da bi odkrile, kako ustvarjajo napovedi nagrade in kako njihovi signali delujejo na strukturah navzdol, da bi nadzirali vedenje.

Signali za nagrajevanje dopaminskih nevronov

Nedavni napredek v razumevanju signalov nagrad DA je posledica obravnave treh širokih vprašanj: Kako se DA nevroni naučijo napovedi nagrade? Kako natančne so njihove napovedi? In le kaj obravnavajo kot nagrajevanje?

Kako se nevroni DA naučijo napovedi nagrade? Klasične teorije kažejo, da se napovedi nagrajevanja učijo s postopnim postopkom okrepitve, ki zahteva ponavljajoče se spodbujevalne nagrade in nagrade (Rescorla in Wagner, 1972; Montague et al., 1996). Vsakič, ko dražljaju A sledi nepričakovana nagrada, se ocenjena vrednost A poveča. Nedavni podatki pa kažejo, da nevroni DA presegajo preprosto učenje s spodbudami in dajejo napovedi na podlagi prefinjenega prepričanja o strukturi sveta. DA nevroni lahko pravilno napovedujejo nagrade tudi v nekonvencionalnih okoljih, kjer nagrade, povezane z dražljajem, povzročajo zmanjša v vrednosti tega dražljaja (Satoh et al., 2003; Nakahara in sod., 2004; Bromberg-Martin in sod., 2010c) ali povzroči spremembo vrednosti popolnoma drugačnega dražljaja (Bromberg-Martin in sod., 2010b). DA nevroni lahko svoje signale nagrajevanja prilagodijo tudi na podlagi statistike višjega reda porazdelitve nagrad, kot so na primer napovedovalni signali napake napovedi na podlagi pričakovane razlike (Tobler et al., 2005) in "spontano izterjajo" svoje odzive na ugasnjene nagradne naloge (Pan et al., 2008). Vsi ti pojavi tvorijo izjemno vzporednico s podobnimi učinki, ki jih opazimo pri senzorični in motorični prilagoditvi (Braun in sod., 2010; Fairhall in sod., 2001; Shadmehr in sod., 2010), kar kaže, da morda odražajo splošni nevronski mehanizem za napovedno učenje.

Kako natančne so napovedi nagrad DA? Nedavne študije so pokazale, da DA nevroni zvesto prilagajajo svoje nagradne signale tako, da upoštevajo tri vire negotovosti napovedi. Prvič, ljudje in živali trpijo zaradi notranjega hrupa, ki jim preprečuje zanesljive napovedi o dolgih časovnih intervalih med nagrajevanjem (Gallistel in Gibbon, 2000). Če so torej zamude pri izvrstitvi nagrad kratke (1 – 2 sekunde), so napovedi časovnega toka točne in oddaja nagrad sproži malo odgovora DA, toda pri daljših zamudah z izbranimi nagradami časovne napovedi postanejo manj zanesljive in nagrade prinesejo jasne razpoke DA (Kobayashi in Schultz, 2008; Fiorillo et al., 2008). Drugič, veliko namigov v vsakdanjem življenju je nenatančno, kar določa široko razporeditev dobavnih rokov. DA nevroni ponovno odražajo to obliko časovne negotovosti: postopoma jih zavirajo med spremenljivimi zamudami nagrajevanja, kot da signalizirajo vedno bolj negativne napake napovedovanja nagrade v vsakem trenutku, ko se nagrada ne pojavi (Fiorillo et al., 2008; Bromberg-Martin in sod., 2010a; Nomoto et al., 2010). Nazadnje je veliko namigov zapleteno, ki zahtevajo natančen pregled, da se lahko dokončno sklene o vrednosti nagrade. V takih situacijah se nagradni signali DA pojavljajo v dolgih poznih obdobjih in postopoma, ki kažejo, da odražajo postopen pretok zaznavnih informacij, ko je vrednost dražljaja dekodirana (Nomoto et al., 2010).

Le katere dogodke nevroni DA obravnavajo kot koristne? Konvencionalne teorije učenja nagrad nakazujejo, da DA nevroni dodelijo vrednost na podlagi pričakovanega zneska prihodnje primarne nagrade (Montague et al., 1996). Kljub temu, da je stopnja primarne nagrade konstantna, ljudje in živali pogosto izrazijo dodatno prednost pred okolicami, ki iščejo predvidljivost, kjer je mogoče vnaprej poznati velikost, verjetnost in čas posamezne nagrade (Daly, 1992; Chew and Ho, 1994; Ahlbrecht in Weber, 1996). Nedavna študija na opicah je pokazala, da nevroni DA signalizirajo to prednost (Bromberg-Martin in Hikosaka, 2009). Opice so močno izrazile informativne vizualne napotke, ki bi jim omogočili napovedovanje velikosti prihodnje nagrade, ne pa neinformativne napotke, ki niso zagotovili novih informacij. Vzporedno so bili nevroni DA navdušeni nad prikazom informativnih znakov na način, ki je bil koreliran z živalskimi vedenjskimi preferencami (Slika 1B, D). To kaže, da nevroni DA ne samo motivirajo akcije za pridobitev nagrad, ampak tudi motivirajo dejanja za natančno napovedovanje teh nagrad, da se zagotovi, da je mogoče nagrade predvideti in vnaprej pripraviti nanje.

Skupaj te ugotovitve kažejo, da so signali napak pri napovedovanju nagrad DA občutljivi na prefinjene dejavnike, ki obveščajo napovedi ljudi o nagradi in živalih, vključno s prilagajanjem statistike nagrad za visoke naloge, negotovostjo nagrad in preferenčnimi prediktivnimi informacijami.

Učinki faznih dopaminskih nagradnih signalov na strukturo navzdol

Odzivi za nagrado DA se pojavijo v sinhronih faznih poruhih (Joshua in sod., 2009b), odzivnega vzorca, ki oblikuje sproščanje DA v ciljnih strukturah (Gonon, 1988; Zhang et al., 2009; Tsai et al., 2009). Dolgo je bilo teoretično, da ti fazni učinki vplivajo na učenje in motivacijo na način, ki vpliva na tonično DA (Grace, 1991; Grace et al., 2007; Schultz, 2007; Lapish et al., 2007). Nedavno razvita tehnologija je omogočila potrditev te hipoteze z nadzorom aktivnosti nevrona DA s fino prostorsko in časovno natančnostjo. Optogenetska stimulacija nevronov VTA DA povzroči močno kondicijsko prednostno mesto, ki se pojavi le, če stimulacijo uporabimo v porušitvenem vzorcu (Tsai et al., 2009). Nasprotno pa genetski izpad receptorjev NMDA iz nevronov DA, ki poslabša porušitev, medtem ko tonične aktivnosti v glavnem ostanejo nedotaknjene, povzroči selektivno okvaro določenih oblik učenja nagrad (Zweifel et al., 2009; Parker et al., 2010) (čeprav upoštevajte, da ta izpad poslabša tudi sinaptično plastičnost DA nevrona (Zweifel et al., 2008)). DA izbruhi lahko izboljšajo učenje nagrad s ponovnim konfiguriranjem lokalnih nevronskih vezij. Zlasti napovedni napovedi DA se pošiljajo v določena območja jeder jedra, ki imajo še posebej visoke stopnje nevronske aktivnosti, ki predvideva nagrado (Cheer et al., 2007; Owesson-White in sod., 2009).

V primerjavi s faznimi poruhi je manj znanega o pomenu faznih pavz v špičasti aktivnosti za negativne napake napovedovanja nagrad. Te pavze povzročajo manjše spremembe hitrosti konic, so manj modulirane s pričakovanjem nagrade (Bayer in Glimcher, 2005; Joshua in sod., 2009a; Nomoto et al., 2010) in ima lahko manjše učinke na učenje (Rutledge et al., 2009). Vendar nekatere vrste negativnih napovedi učenja napak zahtevajo VTA (Takahashi et al., 2009), kar kaže na to, da lahko fazne pavze še vedno dekodirajo strukture navzdol.

Ker porušitve in pavze povzročajo zelo različne vzorce sproščanja DA, bodo verjetno vplivali na strukturo navzdol skozi različne mehanizme. Nedavni dokazi za to hipotezo obstajajo v enem glavnih tarč nevronov DA, hrbtnem striatumu. Projekcijski nevroni hrbtnega striatuma so na voljo v dveh vrstah, ki izražajo različne DA-receptorje. Ena vrsta izraža receptorje D1 in projicira na bazalni ganglij „direktno pot“, da olajša gibanje telesa; druga vrsta izraža D2 receptorje in projicira na „indirektno pot“ za zatiranje gibov telesa (Slika 2) (Albin et al., 1989; Gerfen et al., 1990; Kravitz et al., 2010; Hikida et al., 2010). Na podlagi lastnosti teh poti in receptorjev je bilo teoretično, da DA porušitve ustvarijo pogoje visokega DA, aktivirajo D1 receptorje in povzročijo, da neposredna pot izbere premike z visoko vrednostjo (Slika 2A), ker pavze DA povzročajo razmere z nizkim DA, zavirajo D2 receptorje in povzročijo, da indirektna pot zavira premike z nizko vrednostjo (Slika 2B) (Frank, 2005; Hikosaka, 2007). V skladu s to hipotezo, visoka aktivacija receptorjev DA spodbuja potenciranje kortiko-strijatalnih sinaps na direktno pot (Shen et al., 2008) in učenje iz pozitivnih rezultatov (Frank et al., 2004; Voon et al., 2010), medtem ko blokade strijatalnih D1 receptorjev selektivno poslabšajo premike k nagrajenim ciljem (Nakamura in Hikosaka, 2006). Na podoben način nizka aktivacija receptorjev DA spodbuja potenciranje kortiko-strijatalnih sinaps na indirektno pot (Shen et al., 2008) in učenje iz negativnih rezultatov (Frank et al., 2004; Voon et al., 2010), medtem ko strijatalna blokada D2 receptorjev selektivno zavira premike k neplačanim ciljem (Nakamura in Hikosaka, 2006). Ta delitev funkcij receptorjev D1 in D2 v motivacijskem nadzoru pojasnjuje številne učinke genov, povezanih z DA, na človekovo vedenje (Ullsperger, 2010; Frank in Fossella, 2010) in lahko presega dorzalni striatum, saj obstajajo dokazi za podobno delitev dela v ventralnem striatumu (Grace et al., 2007; Lobo et al., 2010).

 

Slika 2

Dopaminski nadzor pozitivne in negativne motivacije v dorzalnem striatumu

Medtem ko zgornja shema nariše preprosto sliko faznega DA nadzorovanja vedenja z učinki na striatum, je celotna slika veliko bolj zapletena. DA vpliva na vedenje, povezano z nagrajevanjem, tako da deluje na številne možganske regije, vključno s predfrontalno skorjo (Hitchcott in sod., 2007), nosna skorja (Liu et al., 2004), hipokampus (Packard in White, 1991; Grecksch in Matties, 1981) in amigdala (Phillips et al., 2010). Učinki DA se med temi regijami lahko močno razlikujejo zaradi sprememb gostote innervacije DA, transporterjev DA, presnovnih encimov, avtoreceptorjev, receptorjev in spajanja receptorjev na znotrajcelične signalne poti (Neve et al., 2004; Bentivoglio in Morelli, 2005; Frank in Fossella, 2010). Poleg tega imajo lahko vsaj v VTA nevroni DA različne celične lastnosti, odvisno od svojih projekcijskih ciljev (Lammel et al., 2008; Margolis in sod., 2008), nekateri pa imajo izjemno sposobnost prenašanja glutamata kot tudi dopamina (Descarries in sod., 2008; Chuhma in sod., 2009; Hnasko in sod., 2010; Tecuapetla et al., 2010; Stuber et al., 2010; Birgner et al., 2010). Tako se celoten obseg nadzora DA nevronov nad nevronsko obdelavo šele začenja razkrivati.

Različni odzivi dopamina na averzivne dogodke

Nevronov odziv na averzivne dogodke je ključni test njegovih funkcij v motivacijskem nadzoru (Schultz, 1998; Berridge in Robinson, 1998; Redgrave et al., 1999; Horvitz, 2000; Joseph et al., 2003). V mnogih pogledih nagrajujemo in odvračamo dogodke na nasprotne načine, kar odraža njihovo nasprotje motivacijska vrednost. Iščemo nagrade in jim dodelimo pozitivno vrednost, medtem ko se izogibamo averzivnim dogodkom in jim dodelimo negativno vrednost. V drugih pogledih nagradimo in odklonilne dogodke obravnavamo na podoben način, kar odraža njihovo podobnost motivacijska vidljivost [FOOTNOTE1]. Tako nagrajujoči kot averzivni dogodki sprožijo usmerjenost pozornosti, kognitivno obdelavo in povečajo splošno motivacijo.

Katero od teh funkcij podpirajo nevroni DA? Že dolgo je znano, da stresne in averzivne izkušnje povzročajo velike spremembe koncentracije DA v možganskih strukturah navzdol in da vedenjske reakcije na te izkušnje močno spremenijo agonisti, antagonisti in lezije DA (Salamone, 1994; Di Chiara, 2002; Pezze in Feldon, 2004; Young et al., 2005). Vendar pa so te študije prinesle presenetljivo raznolikost rezultatov (Levita et al., 2002; Di Chiara, 2002; Young et al., 2005). Številne študije so skladne z nevroni DA, ki kodirajo motivacijsko značilnost. Poročajo, da averzivni dogodki zvišujejo ravni DA in da vedenjska odklonost podpira visoke ravni prenosa DA (Salamone, 1994; Joseph et al., 2003; Ventura et al., 2007; Barr in sod., 2009; Fadok in sod., 2009) vključno s faznimi rafali DA (Zweifel et al., 2009). Toda druge študije so bolj skladne z DA nevroni, ki kodirajo motivacijsko vrednost. Poročajo, da averzivni dogodki znižujejo raven DA in da vedenjsko odklonost podpira nizka raven prenosa DA (Mark et al., 1991; Shippenberg et al., 1991; Liu et al., 2008; Roitman et al., 2008). V mnogih primerih so te mešane rezultate ugotovili v posameznih raziskavah, kar kaže, da averzivne izkušnje povzročajo različne vzorce sproščanja DA v različnih možganskih strukturah (Thierry in sod., 1976; Besson in Louilot, 1995; Ventura et al., 2001; Jeanblanc in sod., 2002; Bassareo et al., 2002; Pascucci in sod., 2007) in da lahko zdravila, povezana z DA, ustvarijo mešanico živčnih in vedenjskih učinkov, podobnih učinkom, ki jih povzročajo tako nagrajujoče kot odporne izkušnje (Ettenberg, 2004; Wheeler et al., 2008).

To raznolikost vzorcev in funkcij sproščanja DA je težko uskladiti z idejo, da DA nevroni prenašajo enoten motivacijski signal na vse možganske strukture. Te raznolike odzive je mogoče razložiti, če so nevroni DA sami raznoliki - sestavljeni iz več nevronskih populacij, ki podpirajo različne vidike averzivne obdelave. To stališče podpirajo študije nevronskih zapisov pri anesteziranih živalih. Te raziskave so pokazale, da škodljivi dražljaji v nekaterih nevronih DA povzročajo vzbujanje, v drugih nevronih DA pa zaviranje (Chiodo in sod., 1980; Maeda in Mogenson, 1982; Schultz in Romo, 1987; Mantz in sod., 1989; Gao in sod., 1990; Coizet in sod., 2006). Pomembno je, da se vzbujevalni in zaviralni odzivi pojavijo pri nevronih, za katere je bilo potrjeno, da so dopaminergični z uporabo jukstaceličnega označevanja (Brischoux et al., 2009) (Slika 3). Podobna raznolikost averzivnih odzivov se pojavlja med aktivnim vedenjem. Različne skupine DA nevronov fazno vzbujajo ali zavirajo averzivne dogodke, vključno s škodljivo stimulacijo kože (Kiyatkin, 1988a; Kiyatkin, 1988b), senzorične znake, ki napovedujejo averzivne šoke (Guarraci in Kapp, 1999), averzivni zračniki (Matsumoto in Hikosaka, 2009b) in senzorični napisi, ki napovedujejo averzivne zračne napade (Matsumoto in Hikosaka, 2009b; Joshua in sod., 2009a). Če sta dva nevrona DA zabeležena hkrati, imata njihova averzivna odziva na splošno malo medsebojne povezave med poskusom (Joshua in sod., 2009b), kar kaže, da averzivni odzivi niso usklajeni za celotno populacijo DA.

 

Slika 3

Različni odzivi dopaminskih nevronov na averzivne dogodke

Da bi razumeli funkcije teh raznovrstnih averzivnih odzivov, moramo vedeti, kako so združeni z odzivi nagrad, da ustvarijo pomemben motivacijski signal. Nedavna študija je preučila to temo in razkrila, da so DA nevroni razdeljeni na več populacij z izrazitimi motivacijskimi signali (Matsumoto in Hikosaka, 2009b). Ena populacija je navdušena nad nagrajevanjem dogodkov in jo zavirajo averzivni dogodki, kot da bi kodirali motivacijska vrednost (Slika 4A). Drugo populacijo navdušujejo tako nagrajujoči kot averzivni dogodki na podoben način, kot da bi kodirali motivacijska vidljivost (Slika 4B). V obeh populacijah je veliko nevronov občutljivih na nagradne in averzivne napovedi: odzivajo se, kadar so nagrajevalni dogodki bolj nagrajujoči od napovedanih in ko so averzivni dogodki bolj odporni od napovedanih (Matsumoto in Hikosaka, 2009b). To kaže, da njihovi averzivni odzivi resnično izvirajo iz napovedi o averzivnih dogodkih in izključujejo možnost, da bi jih lahko povzročili nespecifični dejavniki, na primer surovi senzorični vložek ali posplošene asociacije z nagrado (Schultz, 2010). Ti dve populaciji pa se razlikujeta v podrobnosti narave svoje napovedne kode. Motivacijsko vrednost kodiranje DA nevronov kodira natančen signal napake napovedovanja, vključno z močno inhibicijo z opustitvijo nagrad in blagim vzbujanjem z opustitvijo averzivnih dogodkov (Slika 4A, prav). V nasprotju s tem pa motivacijski slience, ki kodirajo DA nevrone, se odzivajo takrat, ko so vidni dogodki, ne pa takrat, ko so odsotni (Slika 4B, prav), skladno s teoretičnimi pojmi vzburjenja (Lang in Davis, 2006) [FOOTNOTE2]. Dokazi za ti dve populaciji DA nevronov so bili opaženi, tudi kadar je bila nevronska aktivnost pregledana v povprečju. Tako so študije, usmerjene na različne dele sistema DA, našle fazne DA-signale, ki kodirajo averzivne dogodke z inhibicijo (Roitman et al., 2008), podobno kodiranju motivacijske vrednosti ali z vzbujanjem (Joshua in sod., 2008; Anstrom et al., 2009), podobno kot kodiranje motivacijske vidljivosti.

 

Slika 4

Različne populacije dopaminskih nevronov, ki kodirajo motivacijsko vrednost in izrazitost

Te nedavne ugotovitve so lahko v nasprotju z zgodnjim poročilom, da se nevroni DA odzivajo prednostno na nagradne znake in ne na averzivne znake (Mirenowicz in Schultz, 1996). Če pa jo natančno preučimo, je tudi ta študija popolnoma skladna z vrednostjo DA in kodiranjem izrazitosti. V tej študiji so nagradni znaki privedli do izidov z visoko verjetnostjo (> 90%), medtem ko so averzivni znaki privedli do averzivnih rezultatov z majhno verjetnostjo (<10%). Zato bi DA in nevroni DA, ki kodirajo izrazitost, imeli le malo odziva na averzivne znake in natančno kodirali njihovo nizko stopnjo averzivnosti.

Funkcionalna vloga motivacijskih vrednosti in signala strnjenosti

Zgoraj navedeni rezultati kažejo, da so nevroni DA razdeljeni na več populacij, primernih za različne vloge v motivacijski kontroli. Motivacijsko vrednost kodiranje DA nevronov se dobro ujema s trenutnimi teorijami dopaminskih nevronov in procesiranjem nagrad (Schultz et al., 1997; Berridge in Robinson, 1998; Wise, 2004). Ti nevroni kodirajo popoln signal napake napovedovanja in kodirajo nagrajevalne in averzivne dogodke v nasprotnih smereh. Tako ti nevroni zagotavljajo ustrezen poučni signal za iskanje, vrednotenje in vrednotenje (Slika 5). Če dražljaj povzroči, da vznemirja nevrone DA kodiranja, potem se mu moramo približati, mu dodeliti visoko vrednost in se naučiti dejanj, da ga bomo v prihodnosti spet iskali. Če dražljaj povzroči, da kodiranje vrednosti DA nevronov zavira, se mu moramo izogibati, mu dodeliti nizko vrednost in se naučiti dejanj, da se ga v prihodnosti spet izognemo.

 

Slika 5

Hipotezirane funkcije motivacijske vrednosti, vidnosti in opozorilnih signalov

V nasprotju s tem se motivacijski vidni kodiranje DA nevronov dobro ujema z teorijami dopaminskih nevronov in obdelavo vidnih dogodkov (Redgrave et al., 1999; Horvitz, 2000; Joseph et al., 2003; Kapur, 2003). Ti nevroni se navdušujejo nad nagrajevanjem in odvračanjem dogodkov ter imajo šibkejše odzive na nevtralne dogodke, ki zagotavljajo ustrezen poučni signal za nevronsko vezje, da se naučijo odkriti, napovedati in se odzvati na situacije velikega pomena. Tu bomo razmislili o treh takih možganskih sistemih (Slika 5). Prvič, nevronska vezja za vizualno in pozorno orientacijo se umerijo tako, da odkrijejo informacije o vseh vrstah dogodkov, tako koristnih kot averzivnih. Na primer, tako nagradni kot averzivni napisi privabljajo usmerjevalne reakcije učinkoviteje kot nevtralne znake (Lang in Davis, 2006; Matsumoto in Hikosaka, 2009b; Austin in Duka, 2010). Drugič, tako nagrajevalne kot averzivne situacije vključujejo nevronske sisteme za kognitivni nadzor in izbiro dejanj - vključiti moramo delovni spomin, da imamo v mislih informacije, rešiti konflikt, da se odločimo za potek akcije, in dolgoročni spomin, da si zapomnimo rezultat (Bradley et al., 1992; Botvinick et al., 2001; Savine et al., 2010). Tretjič, obojestransko nagrajevanje in odbojnost zahtevata povečanje splošne motivacije za spodbujanje ukrepov in zagotovitev njihovega pravilnega izvajanja. Dejansko so DA nevroni kritični pri motiviranju prizadevanja za doseganje ciljev visoke vrednosti in pri prevajanju znanja o potrebah v zanesljive motorične zmogljivosti (Berridge in Robinson, 1998; Mazzoni in sod., 2007; Niv et al., 2007; Salamone et al., 2007).

Vzbujanje dopamina z opozarjanjem senzoričnih znakov

Poleg svojih signalov, ki kodirajo motivacijsko vrednost in vidnost, ima večina DA nevronov tudi burne odzive na več vrst čutnih dogodkov, ki niso neposredno povezani z nagrajevanjem ali averzivno izkušnjo. Ti odzivi so teoretizirali, da so odvisni od številnih nevronskih in psiholoških dejavnikov, vključno z neposrednim senzoričnim vnosom, presenečenjem, novostjo, vzburjenjem, pozornostjo, strpnostjo, posplošitvijo in psevdokondicijo (Schultz, 1998; Redgrave et al., 1999; Horvitz, 2000; Lisman in Grace, 2005; Redgrave in Gurney, 2006; Joshua in sod., 2009a; Schultz, 2010).

Tu bomo poskušali sintetizirati te ideje in upoštevati te odzive DA v smislu enega samega osnovnega signala, an opozorilni signal (Slika 5). Izraz "opozorilo" je uporabil Schultz (Schultz, 1998) kot splošen izraz za dogodke, ki pritegnejo pozornost. Tu ga bomo uporabili v bolj specifičnem smislu. Z alarmantnim dogodkom mislimo na nepričakovani senzorični znak, ki zajame pozornost na podlagi hitre ocene njegovega potencialnega pomena z uporabo preprostih funkcij, kot so njegova lokacija, velikost in senzorična modalnost. Takšni alarmantni dogodki pogosto sprožijo takojšnje vedenjske reakcije, da jih raziščejo in določijo njihov natančen pomen. Tako se opozorilni signali DA ponavadi pojavijo v kratkih obdobjih, temeljijo na grobih lastnostih dražljaja in jih je najbolje povezati s takojšnjimi reakcijami, kot so orientacijske reakcije (Schultz in Romo, 1990; Joshua in sod., 2009a; Schultz, 2010). To je v nasprotju z drugimi motivacijskimi signali v DA nevronih, ki se običajno pojavljajo pri daljših poznih obdobjih, upoštevajo natančno identiteto dražljaja in jih je najbolje povezati z obravnavanimi vedenjskimi dejanji, kot so odločitve za pristop ali izogibanje (Schultz in Romo, 1990; Joshua in sod., 2009a; Schultz, 2010).

DA-ove opozorilne odzive lahko sprožijo presenetljivi senzorični dogodki, kot so nepričakovani utripi svetlobe in slušni kliki, ki sprožijo izrazito vznemirjenje vznemirjenja v 60 – 90% DA nevronov v celotnem SNc in VTA (Strecker in Jacobs, 1985; Horvitz in sod., 1997; Horvitz, 2000) (Slika 6A). Zdi se, da ti opozorilni odsevi odražajo stopnjo presenetljivosti in pritegnejo pozornost; zmanjšajo se, če se dražljaj pojavi v predvidljivih časih, če je pozornost vključena drugje ali med spanjem (Schultz, 1998; Takikawa in sod., 2004; Strecker in Jacobs, 1985; Steinfels et al., 1983). Na primer, nepričakovan zvok klika sproži izrazit praskec DA, ko je mačka v pasivnem stanju tihega budnosti, vendar nima nobenega učinka, ko se mačka ukvarja s pozornimi dejavnostmi, kot so lov na podgana, krmljenje, negovanje, mazanje s strani eksperimentatorja itd. (Strecker in Jacobs, 1985) (Slika 6A). Podobno odzivi DA porušitve sprožijo senzorične dogodke, ki so fizično šibki, a opozarjajo zaradi svoje novosti (Ljungberg et al., 1992; Schultz, 1998). Ti odzivi se navadijo, ko nova spodbuda postane znana, vzporedno s habituacijo orientacijskih reakcij (Slika 6B). V skladu s temi ugotovitvami presenetljivi in ​​novi dogodki izzovejo sproščanje DA v strukturah navzdol (Lisman in Grace, 2005) in aktivirajte možganska vezja, povezana z DA, na način, ki oblikuje obdelavo nagrade (Zink et al., 2003; Davidson et al., 2004; Duzel in sod., 2010).

 

Slika 6

Dovzetni odzivi dopaminskih nevronov na opozorilne dogodke

Alarmni odzivi DA sprožijo tudi nepričakovane senzorične napotke, ki lahko ponudijo nove informacije o motivacijsko vidnih dogodkih. Kot je pričakovano za opozorilni signal s kratko zakasnitvijo, so ti odzivi precej neselektivni: sproži jih vsak dražljaj, ki spominja motivacijsko vidna iztočnica, tudi če je podobnost zelo majhna (pojav, imenovan posploševanje) (Schultz, 1998). Posledično se nevroni DA pogosto odzovejo na dražljaj z mešanico dveh signalov: hiter opozorilni signal, ki kodira dejstvo, da je dražljaj potencialno pomemben in drugi signal, ki ga kodira dejanska nagrajevalni ali averzivni pomen (Schultz in Romo, 1990; Waelti et al., 2001; Tobler et al., 2003; Day et al., 2007; Kobayashi in Schultz, 2008; Fiorillo et al., 2008; Nomoto et al., 2010) (glej (Kakade in Dayan, 2002; Joshua in sod., 2009a; Schultz, 2010) v pregled). Primer lahko vidimo v naboru motivacijskega vidnega šifriranja DA nevronov, prikazanih v Slika 6C (Bromberg-Martin in sod., 2010a). Ti nevroni so bili navdušeni nad nagrajevanjem in averzivno nalogo, vznemirjali pa so jih tudi nevtralni iztočnici. Nevtralna iztočnica ni bila nikoli seznanjena z motivacijskimi izidi, vendar je imela (zelo rahlo) fizično podobnost z nagrado in averzivno nalogo.

Ti opozorilni odzivi se zdijo tesno povezani z zmožnostjo senzorične iztočnice, da sproži orientacijske reakcije, da jo dodatno preuči in odkrije njen pomen. To je razvidno iz treh pomembnih lastnosti. Prvič, opozorilni odzivi se pojavljajo samo za senzorične napotke, ki jih je treba preučiti, da ugotovijo njihov pomen, ne pa tudi za resnično nagrajujoče ali averzivne dogodke, kot sta dobava soka ali zračne posode (Schultz, 2010). Drugič, opozorilni odzivi se pojavijo le takrat, kadar je iztočnica potencialno pomembna in lahko sproži orientacijske reakcije, ne pa če iztočnica ni pomembna za nalogo in ne sproži orientacijskih reakcij (Schultz in Romo, 1990). Tretjič, opozorilni odzivi so okrepljeni v situacijah, ko bi znaki sprožili nenadno preusmeritev pozornosti - ko se pojavijo ob nepričakovanem času ali stran od središča pogleda (Bromberg-Martin in sod., 2010a). Kadar so motivacijski nakazili predstavljeni z nepredvidljivim časovnim razporedom, sprožijo takojšnje orientacijske reakcije in splošen opozorilni odziv DA - vzbujanje vseh signalov, vključno z nevtralnimi znaki (Slika 6C, Črna). Če pa je njihov čas predviden - na primer s tem, da bodo subjekte opozorili s "poskusno začetno iztočnico", ki je bila predstavljena eno sekundo, preden se pojavijo znaki, - signali ne sprožajo več opozorilnega odziva (Slika 6D, siva). Namesto tega se opozorilni odziv preusmeri na iztočnico za začetek sojenja - prvi dogodek sojenja, ki ima nepredvidljiv časovni potek in sproži orientacijske reakcije (Slika 6D, Črna).

Kateri je osnovni mehanizem, ki ustvarja alarmne signale nevronskih DA? Ena hipoteza je, da so opozorilni odzivi preprosto običajni signali napake napovedovanja nagrad, ki se pojavijo v kratkem času, ki kodirajo pričakovano vrednost nagrade za spodbudo, preden je v celoti razkrita (Kakade in Dayan, 2002). Novejši dokazi pa kažejo, da lahko opozorilne signale generira ločen mehanizem od običajnih nagradnih signalov DA (Satoh et al., 2003; Bayer in Glimcher, 2005; Bromberg-Martin in sod., 2010a; Bromberg-Martin in sod., 2010c; Nomoto et al., 2010). Najbolj presenetljivo je, da opozorilni odziv na preizkusni začetek preizkušnje ni omejen na nagradne naloge; lahko ima enako moč med odklonilno nalogo, pri kateri ne bo podeljenih nagrad (Slika 6C, D, spodaj, "averzivna naloga"). To se zgodi, čeprav običajni signali za nagrado DA v istih nevronih pravilno signalizirajo, da ima naloga za nagrajevanje veliko višjo pričakovano vrednost kot averzivna naloga (Bromberg-Martin in sod., 2010a). Ti opozorilni signali niso zgolj oblika kodiranja vrednosti ali zgolj oblika kodiranja vidljivosti, saj se pojavljajo v večini tako motivacijske vrednosti kot kodirajočega nevrona DA-ja (Bromberg-Martin in sod., 2010a). Drugo disociacijo lahko vidimo na način, kako nevroni DA napovedujejo prihodnje nagrade na podlagi spomina na pretekle rezultate nagrad (Satoh et al., 2003; Bayer in Glimcher, 2005). Medtem ko običajne signale za nagrado DA nadzirajo pomnilniški sled dolgoročne lestvice, optimiziran za natančno napovedovanje nagrade, se opozorilni odzivi na preizkusni začetni vrsti nadzirajo z ločeno pomnilniško sledjo, ki je podobna neposrednim orientacijskim reakcijam (Bromberg-Martin in sod., 2010c). Tretjo disociacijo lahko vidimo na način, kako se ti signali porazdelijo med populacijo DA nevronov. Medtem ko so običajni nagradni signali DA najmočnejši v ventromedialnem SNc, se v celotnem SNc oddajajo opozorilni odzivi na preskusno začetno iztočnico (in na druge nepričakovano časovno opozorilo) (Nomoto et al., 2010).

V nasprotju s temi disociacijami od običajnih nagradnih signalov so signalni DA opozorilni signali povezani s hitrostjo orientacije in odzivom na pristop na alarmni dogodek (Satoh et al., 2003; Bromberg-Martin in sod., 2010a; Bromberg-Martin in sod., 2010c). To kaže, da alarmne signale generira nevronski proces, ki motivira hitre reakcije za raziskovanje potencialno pomembnih dogodkov. Trenutno je na žalost relativno malo znanega o natančno določenih dogodkih, ki jih ta postopek obravnava kot "pomembne". Ali so na primer opozorilni odzivi enako občutljivi na nagrajevalne in averzivne dogodke? Znano je, da se pojavljajo opozorilni odzivi na dražljaje, ki spominjajo na nagradne znake ali na podobne nagrade in odpornost (npr. Z deljenjem iste čutne modalnosti). Ni pa še znano, ali se pojavljajo alarmantni odzivi na dražljaje, ki spominjajo izključno na averzivne znake.

Funkcionalna vloga dopaminskih opozorilnih signalov

Kot smo videli, bodo alarmni signali verjetno ustvarjeni z ločenim mehanizmom od motivacijskih vrednosti in signalov strnjenosti. Vendar pa se opozorilni signali pošiljajo tako na motivacijsko vrednost kot na šifriranje, ki kodirajo DA nevrone, in zato verjetno uravnavajo obdelavo možganov in vedenje na podoben način kot signali vrednosti in strnjenosti (Slika 5).

Opozorilni signali, poslani na motivacijsko vidljivost, ki kodirajo nevrone DA, bi podpirali usmerjanje pozornosti na opozorilni dražljaj, vključevanje kognitivnih virov, da bi odkrili njegov pomen in se odločili za načrt ukrepanja, ter povečali stopnjo motivacije za učinkovito izvajanje tega načrta (Slika 5). Ti učinki se lahko pojavijo s takojšnjimi učinki na nevronsko obdelavo ali z okrepitvijo ukrepov, ki so privedli do odkritja opozorilnega dogodka. Ta funkcionalna vloga se dobro prilega korelaciji med opozarjajočimi odzivi DA in hitro vedenjskimi reakcijami na opozorilni dražljaj ter s teorijami, da so kratkoročni odzivi nevronskih DA vključeni v usmerjanje pozornosti, vzburjenje, povečanje kognitivne obdelave in takojšnje vedenjske reakcije (Redgrave et al., 1999; Horvitz, 2000; Joseph et al., 2003; Lisman in Grace, 2005; Redgrave in Gurney, 2006; Joshua in sod., 2009a).

Težko je razložiti prisotnost opozorilnih signalov v motivacijskih vrednosti, ki kodirajo nevrone DA. Ti nevroni oddajajo signale motivacijske vrednosti, ki so idealni za iskanje, oceno rezultatov in vrednotenje učenja; vendar jih lahko navdušijo tudi opozorili na dogodke, kot so nepričakovani kliki in začetek averzivnih preizkušenj. Po naši hipotezizirani poti (Slika 5), to bi povzročilo, da se opozorilnim dogodkom dodeli pozitivna vrednost in da jih je treba iskati na način, podoben nagradam! Na prvi pogled je presenetljivo, vendar obstaja razlog za sum, da lahko opozarjajoče dogodke obravnavamo kot pozitivne cilje. Signali alarmiranja so prvo opozorilo, da se bo zgodil potencialno pomemben dogodek, in tako dajejo prvo priložnost za ukrepanje za nadzor nad tem dogodkom. Če so na voljo opozorila, je mogoče vnaprej odkriti, napovedati in pripraviti motivacijsko vidne dogodke; če opozorila ni, se motivacijski vidni dogodki vedno pojavijo kot nepričakovano presenečenje. Ljudje in živali pogosto izražajo prednost pred okoljem, v katerem je mogoče vnaprej opazovati in napovedovati nagrajevalne, averzivne in celo motivacijsko nevtralne čutne dogodke (Badia et al., 1979; Herry in sod., 2007; Daly, 1992; Chew and Ho, 1994) in številni nevroni DA signalizirajo vedenjsko prednost za prikaz napovednih napovedi (Bromberg-Martin in Hikosaka, 2009). Alarmni signali DA lahko podpirajo te nastavitve z dodeljevanjem pozitivne vrednosti okoliščinam, kjer je mogoče vnaprej predvideti potencialno pomembne senzorične napotke.

Anatomske lokacije vrednosti in nevronov, ki kodirajo vrednost

Nedavna študija je preslikala lokacije nagradne in averzijske signale v bočnem srednjem mozgu, vključno s SNc in skrajnim bočnim delom VTA (Matsumoto in Hikosaka, 2009b). Motivacijska vrednost in signali motiviranosti so bili razporejeni po tem območju v anatomskem gradientu. Signali motivacijske vrednosti so bili pogostejši v nevronih v ventromedijalnem SNc in lateralnem VTA, medtem ko so bili motivi za močne vidljivosti pogostejši v nevronih v dorsolateralnem SNc (Slika 7B). To je v skladu s poročili, da je kodiranje vrednosti nagrad DA najmočnejše v ventromedialnem SNc (Nomoto et al., 2010) medtem ko so averzivna vzbujanja najmočnejša bolj bočno (Mirenowicz in Schultz, 1996). Druge študije so raziskale bolj medialni srednji možgan. V teh študijah so bile ugotovljene mešanice vznemirljivih in zaviralnih averzivnih odzivov brez pomembne razlike v njihovih lokacijah, čeprav je trend, da se averzivna vzbujanja locirajo bolj tvegano (Guarraci in Kapp, 1999; Brischoux et al., 2009) (Slika 7C).

Destinacijski signali motivacijske vrednosti

Po naši hipotezi naj bi motivacijsko vrednost kodiranje nevronov DA projiciralo na možganske regije, vključene v ukrepe pristopa in izogibanja, ocenjevanje rezultatov in vrednotenje učenja (Slika 5). Ventromedialni SNc in VTA v resnici projicirata na ventromedialno prefrontalno skorjo (Williams in Goldman-Rakic, 1998) vključno z orbitofrontalno skorjo (OFC) (Porrino in Goldman-Rakic, 1982) (Slika 7A). OFC je bil v kodiranju vrednosti dosledno vključen v študije funkcionalnih slik (Anderson et al., 2003; Small et al., 2003; Jensen et al., 2007; Litt in sod., 2010) in posamični posnetki nevronov (Morrison in Salzman, 2009; Roesch in Olson, 2004). OFC naj bi ocenil možnosti izbire (Padoa-Schioppa, 2007; Kable in Glimcher, 2009), kodirajte pričakovanja o rezultatih (Schoenbaum et al., 2009) in ta pričakovanja posodobite med učenjem (Walton et al., 2010). Poleg tega je OFC vključen v učenje iz negativnih napak pri napovedovanju nagrad (Takahashi et al., 2009), ki so najmočnejši pri nevronih, ki kodirajo vrednost (Slika 4).

Poleg tega so medialni deli dopaminergičnega srednjega možganskega projekta do ventralnega striatuma, vključno z lupino nukleus acumbens (NAc lupina) (Haber et al., 2000) (Slika 7A). Nedavna raziskava je pokazala, da lupina NAc sprejema fazne DA-signale, ki kodirajo motivacijsko vrednost rezultatov okusa (Roitman et al., 2008). Ti signali bodo verjetno povzročili vrednostno učenje, saj se neposredna infuzija zdravil DA v lupino NAc močno krepi (Ikemoto, 2010), medtem ko zdravljenje, ki zmanjšuje vnos DA v lupino, lahko sproži odvračanje (Liu et al., 2008). Ena od ugotovitev je, da so študije sproščanja DA lupine DA v daljšem časovnem razmaku (minute) dale mešane rezultate, nekateri so skladni z kodiranjem vrednosti in drugi s kodiranjem strnjenosti (npr. (Bassareo et al., 2002; Ventura et al., 2007)). To kaže, da so lahko signali vrednosti omejeni na določene lokacije znotraj lupine NAc. Zlasti so različna področja lupine NAc specializirana za nadzor apetitnega in averzivnega vedenja (Reynolds in Berridge, 2002), ki zahtevata vnos DA nevronov (Faure et al., 2008).

Nazadnje DA nevroni v celotnem obsegu SNc pošiljajo težke projekcije na dorzalni striatum (Haber et al., 2000), kar kaže, da lahko hrbtni striatum prejme motivacijsko vrednost in vidno kodiranje DA signalov (Slika 7A). Motivacijsko vrednost kodiranje DA nevronov bi bil idealen poučni signal za strijce vezja, ki sodelujejo pri učenju vrednosti, kot je učenje navad na odziv na dražljaje (Faure et al., 2005; Yin in Knowlton, 2006; Balleine in O'Doherty, 2010). Ko se ti DA nevroni počijo, bi se lotili neposredne poti, da bi se naučili doseči rezultate nagrajevanja; ko začasno ustavijo, bi se lotili posredne poti, da bi se naučili izogniti averzivnim izidom (Slika 2). Dejansko obstajajo nedavni dokazi, da strijce sledijo natančno tej delitvi dela za nagrajevanje in averzivno obdelavo (Hikida et al., 2010). Še vedno pa ni znano, kako se nevroni na teh poteh med vedenjem odzivajo na nagrajevalne in averzivne dogodke. Vsaj v hrbtnem striatumu kot celoti se podvrsta nevronov na različne načine odziva na koristne in averzivne dogodke (Ravel et al., 2003; Yamada et al., 2004, 2007; Joshua in sod., 2008).

Destinacijski signali motivacijske vidljivosti

Po naši hipotezi naj bi motivacijski vidni kodiranje DA nevronov štrlel v možganske regije, ki so vključene v orientacijo, kognitivno obdelavo in splošno motivacijo (Slika 5). Dejansko DA nevroni v dorsolateralnem srednjem možganu pošiljajo projekcije na hrbtni in bočni čelni korteks (Williams in Goldman-Rakic, 1998) (Slika 7A), regijo, ki je vključena v kognitivne funkcije, kot so iskanje pozornosti, delovni pomnilnik, kognitivni nadzor in odločanje med motivacijskimi izidi (Williams in Castner, 2006; Lee in Seo, 2007; Wise, 2008; Kable in Glimcher, 2009; Wallis in Kennerley, 2010). Dorsolateralne prefrontalne kognitivne funkcije so natančno urejene z ravnijo DA (Robbins in Arnsten, 2009) in so teoretizirani na to, da so odvisni od fazne aktivacije nevrona DA (Cohen et al., 2002; Lapish et al., 2007). Zlasti podskupina lateralnih prefrontalnih nevronov se odziva tako na nagrajujoče kot na averzivne vidne znake, velika večina pa se odziva v isti smeri, podobni kodiranju motivacijske vidljivosti (Kobayashi et al., 2006). Poleg tega je aktivnost teh nevronov povezana z vedenjskim uspehom pri opravljanju delovnih nalog spomina (Kobayashi et al., 2006). Čeprav se zdi, da je ta dorsolateralna DA → dorsolateralna frontalna skorja pot specifična za primate (Williams in Goldman-Rakic, 1998), funkcionalno podobna pot lahko obstaja pri drugih vrstah. Zlasti veliko kognitivnih funkcij primorjeve dorsolateralne prefrontalne skorje opravlja medialna prefrontalna skorja glodavcev (Uylings in sod., 2003), in obstajajo dokazi, da to območje sprejema DA motivacijske signale opaznosti in nadzoruje vedenje, povezano z vidljivostjo (Mantz in sod., 1989; Di Chiara, 2002; Joseph et al., 2003; Ventura et al., 2007; Ventura et al., 2008).

Glede na dokaze, da VTA vsebuje nevrone, ki kodirajo vrednost in vrednosti, in da se signali kodiranja vrednosti pošiljajo v lupino NAc, se lahko signali strnitve pošljejo v jedro NAc (Slika 7A). Dejansko je jedro NAc (vendar ne lupina) ključnega pomena za omogočanje motivacije za premagovanje stroškov odziva, kot je fizični napor; za izvajanje nalog prestavljanja nastavitev, ki zahtevajo kognitivno fleksibilnost; in za omogočanje možnosti nagrajevanja za povečanje splošne motivacije (Ghods-Sharifi in Floresco, 2010; Floresco et al., 2006; Hall et al., 2001; Kardinal, 2006). V skladu s kodiranjem motivacijske vidljivosti jedro NAc prejme fazične razpoke DA med obema nagradnima izkušnjama (Day et al., 2007) in averzivne izkušnje (Anstrom et al., 2009).

Kot končno razloženo, lahko nekateri nevroni, ki kodirajo sliko, projicirajo na dorzalni striatum (Slika 7A). Medtem ko so nekatere regije dorzalnega striatuma vključene v funkcije, povezane z vrednostmi učenja akcijskih vrednosti, je dorzalni striatum vključen tudi v funkcije, ki bi jih bilo treba vključiti v vse vidnejše dogodke, kot so orientacija, pozornost, delovni spomin in splošna motivacija (Hikosaka et al., 2000; Klingberg, 2010; Palmiter, 2008). Dejansko podvrsta dorzalnih strijatalnih nevronov močneje reagira na nagrajevalne in averzivne dogodke kot na nevtralne dogodke (Ravel et al., 1999; Blazquez in sod., 2002; Yamada et al., 2004, 2007), čeprav njihova vzročna vloga v motiviranem vedenju še ni znana.

Viri signalov motivacijske vrednosti

Nedavna serija raziskav kaže, da nevroni DA prejemajo signale motivacijske vrednosti iz majhnega jedra v epitelamu, lateralni habenuli (LHb) (Hikosaka, 2010) (Slika 8). LHb izvaja močan negativni nadzor nad DA nevroni: stimulacija LHb zavira DA nevrone v kratkem času (Christoph in sod., 1986) in lahko ureja učenje na nasprotni način kot stimulacija VTA (Shumake in sod., 2010). V skladu z negativnim kontrolnim signalom imajo številni LHb nevroni zrcalno obrnjeni fazni odzivi na DA nevrone: LHb nevroni so zavrne s pozitivnimi napakami napovedovanja nagrad in razburjen z negativnimi napakami napovedi nagrade (Matsumoto in Hikosaka, 2007, 2009a; Bromberg-Martin in sod., 2010a; Bromberg-Martin in sod., 2010c). V več primerih se ti signali pojavijo ob krajših zakasnitvah v LHb, skladno s prenosom LHb → DA (Matsumoto in Hikosaka, 2007; Bromberg-Martin in sod., 2010a).

 

Slika 8

Hipotezirani viri motivacijske vrednosti, vidnosti in opozorilni signali

LHb je sposoben nadzorovati nevrone DA skozi srednji možgan, vendar več dokazov kaže, da ima prednostni nadzor nad motivacijsko vrednostjo, ki kodira DA nevrone. Prvič, LHb nevroni kodirajo motivacijsko vrednost na način, ki natančno zrcali DA nevrone, ki kodirajo vrednost - kodirajo tako pozitivne kot negativne napake napovedovanja nagrad in se v nasprotnih smereh odzivajo na nagrajevanje in averzivne dogodke (Matsumoto in Hikosaka, 2009a; Bromberg-Martin in sod., 2010a). Drugič, stimulacija LHb ima svoje najmočnejše učinke na nevrone DA, katerih lastnosti so skladne z kodiranjem vrednosti, vključno z inhibicijo s pomočjo ne-nagrade in anatomsko lokacijo v ventromedialnem SNc (Matsumoto in Hikosaka, 2007, 2009b). Tretjič, lezije na LHb poslabšajo odzivnost nevronskih zaviralcev na averzivne dogodke, kar kaže na vzročno vlogo LHb pri ustvarjanju signalov vrednosti DA (Gao in sod., 1990).

LHb je del obsežnejše nevronske poti, po kateri lahko nevroni DA nadzirajo bazalne ganglije (Slika 8). LHb sprejema signale, ki spominjajo na napake napovedovanja nagrade s projekcijo iz populacije nevronov, ki se nahajajo okoli meje globusa pallidusa (GPb) (Hong in Hikosaka, 2008). Ko ti signali dosežejo LHb, bodo verjetno poslani do DA nevronov po disinaptični poti, po kateri LHb vzbudi nevrone srednjih možganov GABA, ki pa zavirajo DA nevrone (Ji in Shepard, 2007; Omelchenko et al., 2009; Brinschwitz in sod., 2010). To se lahko zgodi s projekcijami LHb na internevrone v VTA in na sosednje GABA-ergično jedro, imenovano rostromedialno tegmentalno jedro (RMTg) (Jhou in sod., 2009b) (imenovano tudi "kaudalni rep VTA" (Kaufling in sod., 2009)). Zlasti RMTg nevroni imajo odzivne lastnosti, podobne LHb nevronom, kodirajo motivacijsko vrednost in močno zavirajočo projekcijo dopaminergičnega srednjega mozga (Jhou in sod., 2009a). Tako je lahko celotna pot bazalnih ganglijev za pošiljanje signalov motivacijske vrednosti na nevrone DA GPb → LHb → RMTg → DA (Hikosaka, 2010).

Pomembno vprašanje za prihodnje raziskave je, ali se signali motivacijske vrednosti oddajajo izključno skozi LHb ali jih prenaša več vhodnih poti. Zlasti DA inhibicije z averzivnimi stopničkami nadzorujejo z aktivnostjo v mezopontinskem parabrahialnem jedru (PBN) (Coizet in sod., 2010) (Slika 8). To jedro vsebuje nevrone, ki prejemajo neposredni vnos iz hrbtenjače, ki kodira škodljive občutke in lahko zavirajo DA nevrone skozi ekscitacijske projekcije na RMTg (Coizet in sod., 2010; Gauriau in Bernard, 2002). To kaže, da LHb pošilja DA motivacijske vrednosti signalov nevronov tako za nagrajevanje kot za averzivno nalogo in rezultate, medtem ko PBN zagotavlja komponento signala vrednosti, ki je posebej povezana z averzivnimi izidi.

Viri signalov motivacijske vidljivosti

Manj znanega je o izvoru signalov motivacijske uravnanosti v nevronih DA. Eden od zanimivih kandidatov je osrednje jedro amigdale (CeA), ki je bilo vpleteno v orientacijo, pozornost in splošne motivacijske odzive med nagrajevanjem in odpornostjo (Holland in Gallagher, 1999; Baxter in Murray, 2002; Merali in sod., 2003; Balleine in Killcross, 2006) (Slika 8). Jedra CeA in druga amigdala vsebujejo veliko nevronov, katerih signali so skladni z motivacijsko močjo: signalizirajo nagrajujoče in averzivne dogodke v isti smeri, se okrepijo, kadar se dogodki nepričakovano pojavijo, in so povezani z vedenjskimi ukrepi vzburjenja (Nishijo in sod., 1988; Belova et al., 2007; Shabel in Janak, 2009). Ti signali se lahko pošljejo nevronom DA, ker ima CeA padajoče projekcije na možgansko deblo, ki nosijo koristne in averzivne informacije (Lee et al., 2005; Pascoe in Kapp, 1985) in CeA je potreben za sprostitev DA med dogodki, povezanimi z nagradami (Phillips in sod., 2003a). Poleg tega CeA sodeluje z DA nevroni na poteh, skladnih z našimi predlaganimi anatomskimi in funkcionalnimi mrežami za motivacijsko značilnost. Pot, ki vključuje CeA, SNc in dorzalni striatum, je potrebna za naučeno orientacijo na prehranske znake (Han et al., 1997; Lee et al., 2005; El-Amamy in Holland, 2007). Skladno z našo delitvijo signalov pameti v primerjavi z vrednostjo je ta pot potrebna za učenje orientacije na prehrambene izdelke, ne pa tudi za učenje približevanja rezultatov hrane (Han et al., 1997). Druga pot, ki vključuje jedro CeA, SNc, VTA in NAc, je potrebna za nagradne naloge, da se poveča splošna motivacija za izvajanje ukrepov, ki iščejo nagrado (Hall et al., 2001; Corbit in Balleine, 2005; El-Amamy in Holland, 2007).

Poleg CeA bi lahko nevroni DA sprejemali motivacijske signale strnjenosti iz drugih virov, kot so nevroni, ki kodirajo sliko, v bazalni sprednji možgan (Lin in Nicolelis, 2008; Richardson in DeLong, 1991) in nevroni v PBN (Coizet in sod., 2010), čeprav je treba te poti še raziskati.

Viri opozorilnih signalov

Obstaja več dobrih kandidatov za zagotavljanje alarmnih signalov nevronom DA. Morda je najatraktivnejši kandidat vrhunski kolikulus (SC), jedro srednjega možganov, ki sprejema senzorični vnos s kratko zakasnitvijo iz več senzoričnih modalitet in nadzoruje orientacijske reakcije in pozornost (Redgrave in Gurney, 2006) (Slika 8). SC ima direktno projekcijo na SNc in VTA (May et al., 2009; Comoli in sod., 2003). Pri anesteziranih živalih je SC bistven vod za kratkoročne vizualne signale, da dosežejo nevrone DA in sprožijo sproščanje DA v strukturah navzdol (Comoli in sod., 2003; Dommett in sod., 2005). Pot SC-DA je najprimernejša za prenos opozorilnih signalov in ne nagradnih in odklonskih signalov, saj se SC nevroni slabo odzivajo na oddajo nagrade in imajo le blag vpliv na odporne odzive DA (Coizet in sod., 2006). To kaže na zaporedje dogodkov, v katerih SC nevroni (1) zaznajo dražljaj, (2) ga izberejo kot potencialno pomembnega, (3) sproži orientacijsko reakcijo za preučitev dražljaja in (4) hkrati sproži opozorilo DA, ki povzroči porušitev DA v strukturah navzdol (Redgrave in Gurney, 2006).

Drugi kandidat za pošiljanje opozorilnih signalov na DA nevrone je LHb (Slika 8). Zlasti nepričakovani začetek preizkusne začetne iztočnice zavira veliko LHb nevronov na obratni način na signal alarma DA nevrona in ta odziv se pojavi pri krajši zakasnitvi v LHb, skladni s smerjo prenosa LHb → DA (Bromberg-Martin in sod., 2010a; Bromberg-Martin in sod., 2010c). Prav tako smo naključno opazili, da nevrone LHb običajno zavirajo nepričakovane vizualne slike in zvoki na vzvratni način do vzbujanja DA (MM, ESB-M. In OH, neobjavljena opazovanja), čeprav to čaka na bolj sistematično preiskavo.

Končno je tretji kandidat za pošiljanje opozorilnih signalov na nevrone DA pedunkulopontinsko tegmentalno jedro (PPTg), ki projicira v SNc in VTA in je vključeno v motivacijsko obdelavo (Winn, 2006) (Slika 8). PPTg je pomemben za omogočanje porušitve nevronskih VTA DA (Grace et al., 2007), vključno s hitrimi odgovori na nagradne naloge (Pan in Hyland, 2005). Skladno z opozorilnim signalom imajo PPTg nevroni s kratkim odzivom na več senzoričnih modalitet in so aktivni med orientacijskimi reakcijami (Winn, 2006). Obstajajo dokazi, da na senzorične odzive na PPTg vpliva vrednost nagrajevanja in zahteve po takojšnjem ukrepanju (Dormont in sod., 1998; Okada et al., 2009) (vendar glej (Pan in Hyland, 2005)). Nekateri nevroni PPTg se tudi sami odzivajo na nagrajevanje ali averzivne rezultate (Dormont in sod., 1998; Kobayashi et al., 2002; Ivlieva in Timofeeva, 2003b, a). Pomembno bo preizkusiti, ali so signali, ki jih PPTg pošilja DA nevronom, posebej povezani z opozarjanjem ali vsebujejo druge motivacijske signale, kot sta vrednost in vidljivost.

To delo je podprl intramuralni raziskovalni program na Nacionalnem očesnem inštitutu. Zahvaljujemo se tudi Amy Arnsten za dragocene razprave.

Omejitev odgovornosti založnika: To je PDF datoteka neurejenega rokopisa, ki je bil sprejet za objavo. Kot storitev za naše stranke nudimo to zgodnjo različico rokopisa. Rokopis bo podvržen kopiranju, stavljanju in pregledu dobljenega dokaza, preden bo objavljen v končni obliki. Upoštevajte, da se med proizvodnim procesom lahko odkrijejo napake, ki bi lahko vplivale na vsebino, in vse pravne omejitve, ki veljajo za revijo.

^FOOTNOTE1By motivacijska vidljivost mislimo na količino, ki je velika tako za nagrajevanje kot za averzivne dogodke in nizka za motivacijsko nevtralne (ne nagrajujoče in ne-averzivne) dogodke. To je podobno definiciji, ki jo je dal (Berridge in Robinson, 1998). Upoštevajte, da se motivacijska značilnost razlikuje od drugih pojmov opaznosti, ki se uporabljajo v nevroznanosti, kot je spodbujevalna značilnost (ki velja samo za zaželene dogodke; (Berridge in Robinson, 1998)) in zaznavne značilnosti (kar velja za motivacijsko nevtralne dogodke, kot so premikajoči se objekti in barvne luči; (Bisley in Goldberg, 2010)).]

^FOOTNOTE2Upoštevajte, da se motivacijska značilnost, ki kodira DA nevronske signale, razlikuje od klasičnih pojmov "združljivosti" in "spremembe v združljivosti", ki so bili predlagani za uravnavanje stopnje učenosti okrepitve (npr. (Pearce in Hall, 1980)). Takšne teorije navajajo, da se živali naučijo (in prilagodijo stopnje učenja) tako iz pozitivnih kot negativnih napak napovedovanja. Čeprav lahko ti nevroni DA prispevajo k učenju iz napak pozitivnega napovedovanja, med katerimi imajo močan odziv (npr. Na nepričakovano izplačilo nagrad), morda ne bodo prispevali k učenju na podlagi negativnih napak napovedovanja, med katerimi lahko dobijo malo ali nič odziva ( npr. nepričakovano izpustitev nagrade) (Slika 4B).

1. Ahlbrecht M, Weber M. Ločljivost negotovosti: eksperimentalna študija. Časopis za institucionalno in teoretično ekonomijo. 1996; 152: 593 – 607.
2. Albin RL, Young AB, Penney JB. Funkcionalna anatomija bazalnih ganglijskih motenj. Trendi v nevroznanosti. 1989; 12: 366 – 375. [PubMed]
3. Anderson AK, Christoff K, Stappen I, Panitz D, Ghahremani DG, Glover G, Gabrieli JD, Sobel N. Disociirane nevronske predstavitve intenzivnosti in valencije v človekovem vonju. Nat Neurosci. 2003; 6: 196 – 202. [PubMed]
4. Anstrom KK, Miczek KA, Budygin EA. Povečana fazna signalizacija dopamina na mezolimbični poti med socialnim porazom pri podganah. Nevroznanost. 2009; 161: 3 – 12. [PubMed]
5. Aragona BJ, Day JJ, Roitman MF, Cleaveland NA, Wightman RM, Carelli RM. Regionalna posebnost v razvoju v realnem času vzorcev faznega prenosa dopamina med pridobitvijo združenja cue-kokain pri podganah. Evropska revija za nevroznanost. 2009; 30: 1889 – 1899. [PMC brez članka] [PubMed]
6. Austin AJ, Duka T. Mehanizmi pozornosti za apetitne in averzivne rezultate pri Pavlovianovi kondicioniranju. Vedenjske raziskave možganov. 2010; 213: 19 – 26. [PubMed]
7. Badia P, Harsh J, Abbott B. Izbira med predvidljivimi in nepredvidljivimi pogoji šoka: podatki in teorija. Psihološki bilten. 1979; 86: 1107 – 1131.
8. Balleine BW, Killcross S. Vzporedna spodbujevalna obdelava: integriran pogled na funkcijo amigdale. Trendi v nevroznanosti. 2006; 29: 272 – 279. [PubMed]
9. Balleine BW, O'Doherty JP. Homologije človeka in glodalcev pri nadzoru delovanja: kortikostriatalne determinante ciljno usmerjenega in običajnega delovanja. Nevropsihofarmakologija. 2010; 35: 48–69. [PMC brez članka] [PubMed]
10. Barr GA, Moriceau S, Shionoya K, Muzny K, Gao P, Wang S, Sullivan RM. Prelaze pri učenju dojenčkov modulira dopamin v amigdali. Nat Neurosci. 2009; 12: 1364 – 1366. [PMC brez članka] [PubMed]
11. Bassareo V, MA Lu De Maca, Di Chiara G. Diferencialno izražanje motivacijskih lastnosti stimulusa z dopaminom v lupini jedrskih celic v primerjavi z jedrom in predfrontalno skorjo. J Nevrosci. 2002; 22: 4709 – 4719. [PubMed]
12. Bassareo V, Di Chiara G. Diferencialna odzivnost prenosa dopamina na dražljaje s hrano v delih lupine / jedra. Nevroznanost. 1999; 89: 637 – 641. [PubMed]
13. Baxter MG, Murray EA. Amigdala in nagrada. Nat Rev Neurosci. 2002; 3: 563 – 573. [PubMed]
14. Bayer HM, Glimcher PW. Dopaminski nevroni srednjega možganov kodirajo količinsko napako napovedi napake. Neuron. 2005; 47: 129 – 141. [PMC brez članka] [PubMed]
15. Belova MA, Paton JJ, Morrison SE, CD CD Salzman. Pričakovanje modulira nevronske odzive na prijetne in averzivne dražljaje v amigdali primata. Neuron. 2007; 55: 970 – 984. [PMC brez članka] [PubMed]
16. Bentivoglio M, Morelli M. Organizacija in vezje mezencefalnih dopaminergičnih nevronov in porazdelitev dopaminskih receptorjev v možganih. Priročnik za kemično nevroanatomijo. 2005: 1 – 107.
17. Berridge KC, Robinson TE. Kakšna je vloga dopamina pri nagrajevanju: hedonski vpliv, učenje nagrad ali spodbuda spodbuda? Raziskave možganov 1998; 28: 309 – 369. [PubMed]
18. Besson C, Louilot A. Asimetrična vpletenost mezolimbičnih dopaminergičnih nevronov v afektivno zaznavanje. Nevroznanost. 1995; 68: 963 – 968. [PubMed]
19. Birgner C, Nordenankar K, Lundblad M, Mendez JA, Smith C, le Greves M, Galter D, Olson L, Fredriksson A, Trudeau LE in sod. VGLUT2 v nevronih dopamina je potreben za vedenjsko aktivacijo, ki jo povzroča psihostimulant. Zbornik Nacionalne akademije znanosti Združenih držav Amerike. 2010; 107: 389 – 394. [PMC brez članka] [PubMed]
20. Bisley JW, Goldberg ME. Pozor, namera in prednost v parietalnem reženju. Letni pregled nevroznanosti. 2010; 33: 1 – 21. [PMC brez članka] [PubMed]
21. Bjorklund A, Dunnett SB. Dopaminski nevronski sistemi v možganih: posodobitev. Trendi v nevroznanosti. 2007; 30: 194 – 202. [PubMed]
22. Blazquez PM, Fujii N, Kojima J, Graybiel AM. Omrežna predstavitev verjetnosti odziva v striatumu. Neuron. 2002; 33: 973 – 982. [PubMed]
23. Botvinick MM, Braver TS, Barch DM, Carter CS, Cohen JD. Spremljanje konfliktov in kognitivni nadzor. Psychol Rev. 2001; 108: 624 – 652. [PubMed]
24. Bradley MM, Greenwald MK, Petry MC, Lang PJ. Spomin na slike: zadovoljstvo in vzburjenje v spominu. J Exp Psychol Learn Mem Cogn. 1992; 18: 379 – 390. [PubMed]
25. Braun DA, Mehring C, Wolpert DM. Strukturirano učenje v akciji. Vedenjske raziskave možganov. 2010; 206: 157 – 165. [PMC brez članka] [PubMed]
26. Brinschwitz K, Dittgen A, Madai VI, Lommel R, Geisler S, Vehicle RW. Glutamatergični aksoni iz lateralne habenule večinoma prenehajo na GABAergičnih nevronih ventralnega srednjega mozga. Nevroznanost. 2010; 168: 463 – 476. [PubMed]
27. Brischoux F, Chakraborty S, Brierley DI, Ungless MA. Fazno vzbujanje dopaminskih nevronov v ventralni VTA s škodljivimi dražljaji. Zbornik Nacionalne akademije znanosti Združenih držav Amerike. 2009; 106: 4894 – 4899. [PMC brez članka] [PubMed]
28. Bromberg-Martin ES, Hikosaka O. Nevroni srednjih možganov dopaminskih signalov dajejo prednostne informacije za vnaprejšnje informacije o prihajajočih nagradah. Neuron. 2009; 63: 119 – 126. [PMC brez članka] [PubMed]
29. Bromberg-Martin ES, Matsumoto M, Hikosaka O. Izrazita tonična in fazna anticipirajoča aktivnost v lateralnih habenulah in dopaminskih nevronih. Neuron. 2010a; 67: 144 – 155. [PMC brez članka] [PubMed]
30. Bromberg-Martin ES, Matsumoto M, Hong S, Hikosaka O. Pot pallidus-habenula-dopamin signalizira sklepne vrednosti dražljajev. J Nevrofiziol. 2010b; 104: 1068 – 1076. [PMC brez članka] [PubMed]
31. Bromberg-Martin ES, Matsumoto M, Nakahara H, Hikosaka O. Večkratni časovni pomnilniki spomina v nevronih lateralne habenule in dopamina. Neuron. 2010c; 67: 499 – 510. [PMC brez članka] [PubMed]
32. Brown MTC, Henny P, Bolam JP, Magill PJ. Aktivnost nevrokemično heterogenih dopaminergičnih nevronov v substantia nigra med spontanimi in gibalnimi spremembami možganskega stanja. J Nevrosci. 2009; 29: 2915 – 2925. [PubMed]
33. Kardinal RN. Nevronski sistemi vpleteni v zamudo in verjetnostno okrepitev. Nevronska mreža. 2006; 19: 1277 – 1301. [PubMed]
34. Navijači JF, Aragona BJ, Heien ML, Seipel AT, Carelli RM, Wightman RM. Usklajeno sproščanje dopamina in živčna aktivnost povzročata ciljno usmerjeno vedenje. Neuron. 2007, 54: 237 – 244. [PubMed]
35. Cheramy A, Kemel ML, Gauchy C, Desce JM, Galli T, Barbeito L, Glowinski J. Vloga ekscitatornih aminokislin pri neposredni in posredni presinaptični regulaciji sproščanja dopamina iz živčnih terminalov nigrostriatalnih dopaminskih nevronov. Amino kisline. 1991; 1: 351 – 363. [PubMed]
36. Chew SH, Ho JL. Upanje: empirična študija odnosa do časa reševanja negotovosti. Časopis za tveganja in negotovost. 1994; 8: 267 – 288.
37. Chiodo LA, Antelman SM, Caggiula AR, Lineberry CG. Senzorični dražljaji spreminjajo hitrost praznjenja dopaminskih (DA) nevronov: dokazi za dve funkcionalni vrsti DA celic v substantia nigra. Možgani Res. 1980; 189: 544 – 549. [PubMed]
38. Christoph GR, Leonzio RJ, Wilcox KS. Stimulacija stranske habenule zavira nevrone, ki vsebujejo dopamin, v substanci nigra in ventralnem tegmentalnem območju podgane. J Nevrosci. 1986; 6: 613 – 619. [PubMed]
39. Chuhma N, Choi WY, Mingote S, Rayport S. Kotransmisija nevronskih glutamatov dopamina: frekvenčno odvisna modulacija v mezoventromedialni projekciji. Nevroznanost. 2009; 164: 1068 – 1083. [PMC brez članka] [PubMed]
40. Cohen JD, Braver TS, rjava JW. Računske perspektive funkcije dopamina v predfrontalni skorji. Trenutno mnenje o nevrobiologiji. 2002; 12: 223 – 229. [PubMed]
41. Coizet V, Dommett EJ, Klop EM, Redgrave P, Overton PG. Parabrahialno jedro je kritična povezava pri prenosu nociceptivnih informacij s kratkim sporom na dopaminergične nevrone srednjega možganov. Nevroznanost. 2010; 168: 263 – 272. [PMC brez članka] [PubMed]
42. Coizet V, Dommett EJ, Redgrave P, Overton PG. Nociceptivni odzivi dopaminergičnih nevronov srednjega mozga modulirajo superiorni kolikulus pri podganah. Nevroznanost. 2006; 139: 1479 – 1493. [PubMed]
43. Comoli E, Coizet V, Boyes J, Bolam JP, Canteras NS, Quirk RH, Overton PG, Redgrave P. Neposredna projekcija od vrhunskega coliculusa do substantia nigra za zaznavanje vidnih vizualnih dogodkov. Nat Neurosci. 2003; 6: 974 – 980. [PubMed]
44. Corbit LH, Balleine BW. Dvojna disociacija bazolateralnih in centralnih amigdalanih lezij na splošne in za rezultat specifične oblike pavloviano-instrumentalnega prenosa. J Nevrosci. 2005; 25: 962 – 970. [PubMed]
45. Dalley JW, Laane K, Theobald DE, Armstrong HC, Corlett PR, Chudasama Y, Robbins TW. Časovno omejena modulacija apetitivnega Pavlovianovega spomina z D1 in NMDA receptorji v jedru jedra. Zbornik Nacionalne akademije znanosti Združenih držav Amerike. 2005; 102: 6189 – 6194. [PMC brez članka] [PubMed]
46. Daly HB. Prednost do nepredvidljivosti je obratna, kadar je nepredvidljivo nerevidiranje nenaklonjeno: postopki, podatki in teorije privlačnega opazovanja opazovanja. V: Gormezano I, Wasserman EA, uredniki. Učenje in spomin: vedenjski in biološki substrati. LE Associates; 1992. strani 81 – 104.
47. Davidson MC, Horvitz JC, Tottenham N, Fossella JA, Watts R, Ulug AM, Casey BJ. Diferencialna aktivacija kaudata in cingulata po nepričakovanih nerevidiranih dražljajih. NeuroImage. 2004; 23: 1039 – 1045. [PubMed]
48. Dan JJ, Roitman MF, Wightman RM, Carelli RM. Asocijativno učenje posreduje dinamične premike signalizacije dopamina v nucleus accumbens. Nat Neurosci. 2007, 10: 1020 – 1028. [PubMed]
49. Dayan P, Niv Y. Okrepitveno učenje: dobro, slabo in grdo. Trenutno mnenje o nevrobiologiji. 2008; 18: 185 – 196. [PubMed]
50. Descarries L, Berube-Carriere N, Riad M, Bo GD, Mendez JA, Trudeau LE. Glutamat v dopaminskih nevronih: sinaptični v primerjavi z difuznim prenosom. Pregledi raziskav možganov. 2008; 58: 290 – 302. [PubMed]
51. Di Chiara G. Nucleus obdaja lupino in jedro dopamina: diferencialna vloga v vedenju in odvisnosti. Vedenjske raziskave možganov. 2002; 137: 75 – 114. [PubMed]
52. Dommett E, Coizet V, CD Blaha, Martindale J, Lefebvre V, Walton N, Mayhew JE, Overton PG, Redgrave P. Kako vizualni dražljaji aktivirajo dopaminergične nevrone s kratko zamudo. Znanost. 2005; 307: 1476 – 1479. [PubMed]
53. Dormont JF, Conde H, Farin D. Vloga pedunkulopontinskega tegmentalnega jedra glede na pogojeno motorično delovanje pri mački. I. Kontekstna in okrepitev povezana enotna dejavnost. Eksperimentalne raziskave možganov Experimentelle Hirnforschung. 1998; 121: 401 – 410. [PubMed]
54. Duzel E, Bunzeck N, Guitart-Masip M, Duzel S. Z novostjo povezana motivacija predvidevanja in raziskovanja z dopaminom (NOMAD): posledice za zdravo staranje. Nevroznanost in biobehevioralni pregledi. 2010; 34: 660 – 669. [PubMed]
55. El-Amamy H, Holland PC. Disociativni učinki odklopa osrednje jedro amigdale z ventralnega tegmentalnega območja ali substantia nigra na naučeno orientacijo in spodbujevalno motivacijo. Evropska revija za nevroznanost. 2007; 25: 1557 – 1567. [PMC brez članka] [PubMed]
56. Ettenberg A. Nasprotne lastnosti kokaina, ki se daje sam. Nevroznanost in biobehevioralni pregledi. 2004; 27: 721 – 728. [PubMed]
57. Fadok JP, Dickerson TM, Palmiter RD. Dopamin je nujen za kondicijo, ki je odvisna od strahu. J Nevrosci. 2009; 29: 11089 – 11097. [PMC brez članka] [PubMed]
58. Fairhall AL, Lewen GD, Bialek W, de Ruyter Van Steveninck RR. Učinkovitost in dvoumnost v prilagodljivem nevronskem kodu. Narava. 2001; 412: 787 – 792. [PubMed]
59. Faure A, Haberland U, Conde F, El Massioui N. Lezija nigrostriatalnega dopaminskega sistema moti nastanek navade stimulacije-odziva. J Neurosci. 2005, 25: 2771 – 2780. [PubMed]
60. Faure A, Reynolds SM, Richard JM, Berridge KC. Mezolimbični dopamin v želji in strahu: omogoča, da se motivacija ustvari z lokaliziranimi motnjami glutamata v jedrih. J Nevrosci. 2008; 28: 7184 – 7192. [PMC brez članka] [PubMed]
61. Fiorillo CD, Newsome WT, Schultz W. Časovna natančnost napovedi napovedi v dopaminskih nevronih. Nat Neurosci. 2008, 11: 966 – 973. [PubMed]
62. Fiorillo CD, Tobler PN, Schultz W. Diskretno kodiranje verjetnosti nagrajevanja in negotovosti dopaminskih nevronov. Znanost. 2003, 299: 1898 – 1902. [PubMed]
63. Floresco SB, Ghods-Sharifi S, Vexelman C, Magyar O. Disociabilne vloge za jedro in lupino jedra prikličejo pri uravnavanju premikov. J Nevrosci. 2006; 26: 2449 – 2457. [PubMed]
64. Ford CP, Gantz SC, Phillips PE, Williams JT. Nadzor zunajceličnega dopamina na terminalih dendrita in aksona. J Nevrosci. 2010; 30: 6975 – 6983. [PMC brez članka] [PubMed]
65. Frank MJ. Dinamična modulacija dopamina v bazalnih ganglijih: nevrokomputacijski prikaz kognitivnih primanjkljajev pri medikamentoznem in nemediciranem parkinsonizmu. Časopis za kognitivno nevroznanost. 2005; 17: 51 – 72. [PubMed]
66. Frank MJ, Fossella JA. Nevrogenetika in farmakologija učenja, motivacije in spoznavanja. Nevropsihoparmakologija. 2010 [PMC brez članka] [PubMed]
67. Frank MJ, Seeberger LC, O'Reilly RC. S korenčkom ali palico: kognitivno okrepitev učenja v parkinsonizmu. Znanost. 2004; 306: 1940 – 1943. [PubMed]
68. Gallistel CR, Gibbon J. Čas, stopnja in kondicioniranje. Psychol Rev. 2000; 107: 289 – 344. [PubMed]
69. Gao DM, Jeaugey L, Pollak P, Benabid AL. Intenzivno odvisni nociceptivni odzivi iz domnevnih dopaminergičnih nevronov substantia nigra, pars compacta pri podganah in njihova sprememba s stranskimi vnosi habenule. Možgani Res. 1990; 529: 315 – 319. [PubMed]
70. Gauriau C, Bernard JF. Bolezni poti in parabrahialni krogi pri podganah. Eksperimentalna fiziologija. 2002; 87: 251 – 258. [PubMed]
71. Geisler S, Zahm DS. Zagovorniki ventralnega tegmentalnega območja v podganah za podgane za integrativne funkcije. Časopis za primerjalno nevrologijo. 2005; 490: 270 – 294. [PubMed]
72. Gerfen CR, Engber TM, Mahan LC, Susel Z, Chase TN, Monsma FJ, Jr, Sibley DR. D1 in D2 dopaminska receptorsko-regulirana genska ekspresija striatonigral in striatopalidnih nevronov. Znanost. 1990, 250: 1429 – 1432. [PubMed]
73. Ghods-Sharifi S, Floresco SB. Diferencialni učinki na znižanje napora, ki ga povzročajo inaktivacije jedra ali lupine, ki jih vsebuje jedro. Vedenjska nevroznanost. 2010; 124: 179 – 191. [PubMed]
74. Gonon FG. Nelinearna povezava med impulznim tokom in dopaminom, ki ga sproščajo dopaminergični nevroni podgane srednjega mozga, kot je bilo raziskano v elektrokemiji in vivo. Nevroznanost. 1988; 24: 19 – 28. [PubMed]
75. Goto Y, Yang CR, Otani S. Funkcionalna in disfunkcionalna sinaptična plastičnost v predfrontalni skorji: vloge pri psihiatričnih motnjah. Biološka psihiatrija. 2010; 67: 199 – 207. [PubMed]
76. Grace AA. Sproščanje faznega in toničnega dopamina in modulacija odzivnosti dopaminskega sistema: hipoteza za etiologijo shizofrenije. Nevroznanost. 1991, 41: 1 – 24. [PubMed]
77. Grace AA, Bunney BS. Znotrajcelična in zunajcelična elektrofiziologija nigralnih dopaminergičnih nevronov – 1. Identifikacija in karakterizacija. Nevroznanost. 1983; 10: 301–315. [PubMed]
78. Grace AA, Floresco SB, Goto Y, Lodge DJ. Uravnavanje odstranjevanja dopaminergičnih nevronov in nadzor ciljno usmerjenega vedenja. Trendi v nevroznanosti. 2007; 30: 220 – 227. [PubMed]
79. Grecksch G, Matties H. Vloga dopaminergičnih mehanizmov v hipokampusu podgan pri utrjevanju pri diskriminaciji svetlosti. Psihoparmakologija (Berl) 1981; 75: 165 – 168. [PubMed]
80. Guarraci FA, Kapp BS. Elektrofiziološka karakterizacija dopaminergičnih nevronov ventralnega tegmentalnega območja med diferencialnim pavlovianskim kondicijskim strahom pri budnem zajcu. Vedenjske raziskave možganov. 1999; 99: 169 – 179. [PubMed]
81. Haber SN, Fudge JL, McFarland NR. Stratatonigrostriatalne poti v primatih tvorijo naraščajočo spiralo od lupine do dorzolateralne striatuma. J Neurosci. 2000, 20: 2369 – 2382. [PubMed]
82. Hall J, Parkinson JA, Connor TM, Dickinson A, Everitt BJ. Vključevanje osrednjega jedra amigdale in jedra jedra pripomore k posredovanju Pavlovićevih vplivov na instrumentalno vedenje. Evropska revija za nevroznanost. 2001; 13: 1984 – 1992. [PubMed]
83. Han JS, McMahan RW, Holland P, Gallagher M. Vloga amigdalo-nigrostriatalne poti pri asociativnem učenju. J Nevrosci. 1997; 17: 3913 – 3919. [PubMed]
84. Harris GC, Aston-Jones G. Vzburjenje in nagrada: dihotomija v funkciji oreksina. Trendi v nevroznanosti. 2006; 29: 571 – 577. [PubMed]
85. Herry C, Bach DR, Esposito F, Di Salle F, Perrig WJ, Scheffler K, Luthi A, Seifritz E. Obdelava časovne nepredvidljivosti človeške in živalske amigdale. J Nevrosci. 2007; 27: 5958 – 5966. [PubMed]
86. Hikida T, Kimura K, Wada N, Funabiki K, Nakanishi S. Različne vloge sinaptičnega prenosa v neposrednih in posrednih striatnih poteh do nagrajevanja in averzivnega vedenja. Neuron. 2010, 66: 896 – 907. [PubMed]
87. Hikosaka O. Bazalni ganglijski mehanizmi gibanja oči z orientacijo. Anali newyorške akademije znanosti. 2007; 1104: 229 – 249. [PubMed]
88. Hikosaka O. Habenula: od izmikanja stresa do odločanja na podlagi vrednosti. Nat Rev Neurosci. 2010; 11: 503 – 513. [PMC brez članka] [PubMed]
89. Hikosaka O, Takikawa Y, Kawagoe R. Vloga bazalnih ganglijev pri nadzoru nameravanih sakadejskih gibov oči. Fiziološki pregledi. 2000; 80: 953 – 978. [PubMed]
90. Hitchcott PK, Quinn JJ, Taylor JR. Dvosmerna modulacija ciljno usmerjenih ukrepov s prefrontalnim kortikalnim dopaminom. Cereb Cortex. 2007; 17: 2820 – 2827. [PubMed]
91. Hnasko TS, Chuhma N, Zhang H, Goh GY, Sulzer D, Palmiter RD, Rayport S, Edwards RH. Vesišični transport glutamata spodbuja skladiščenje dopamina in glutamatno jedro v in vivo. Neuron. 2010; 65: 643 – 656. [PMC brez članka] [PubMed]
92. Holland PC, Gallagher M. Amygdala vezja v procesih pozornosti in reprezentacije. Trendi kognitivnih znanosti. 1999; 3: 65 – 73. [PubMed]
93. Hollerman JR, Schultz W. Dopaminski nevroni poročajo o napaki v časovni napovedi nagrade med učenjem. Nat Neurosci. 1998; 1: 304 – 309. [PubMed]
94. Holroyd CB, Coles MG. Nevronska osnova obdelave napak pri ljudeh: učvrstitev okrepitve, dopamin in negativnost, povezana z napakami. Psychol Rev. 2002; 109: 679 – 709. [PubMed]
95. Hong S, Hikosaka O. Globalus pallidus pošilja signale, povezane z nagrajevanjem, v stransko habenulo. Neuron. 2008; 60: 720 – 729. [PMC brez članka] [PubMed]
96. Horvitz JC. Mezolimbokortični in nigrostriatalni dopaminski odzivi na pomembne dogodke, ki niso povezani z nagrajevanjem. Nevroznanost. 2000, 96: 651 – 656. [PubMed]
97. Horvitz JC, Stewart T, Jacobs BL. Potek aktivnosti ventralnih tegmentalnih dopaminskih nevronov povzročajo čutni dražljaji pri budni mački. Možgani Res. 1997; 759: 251 – 258. [PubMed]
98. Houk JC, Adams JL, Barto AG. Model, kako bazalni gangliji ustvarjajo in uporabljajo nevronske signale, ki napovedujejo okrepitev. V: Houk JC, Davis JL, Beiser DG, uredniki. Modeli obdelave informacij v Basal Ganglia. Cambridge, MA: MIT Press; 1995. strani 249 – 274.
99. Ikemoto S. Vezje nagrajevanja možganov zunaj mezolimbičnega dopaminskega sistema: Nevrobiološka teorija. Nevroznanost in biobehevioralni pregledi. 2010 [PMC brez članka] [PubMed]
100. Ito R, Dalley JW, Howes SR, Robbins TW, Everitt BJ. Disociacija pri pogojnem sproščanju dopamina v jedru in lupini, ki se nabira v jedru kot odziv na kokain in med obnašanjem kokaina pri podganah. J Nevrosci. 2000; 20: 7489 – 7495. [PubMed]
101. Ivlieva NY, Timofejeva NE. Aktivnost nevrona v jedru pedunkulopontina med operacijo, povezanim s hrano, pogojevala refleks. Nevroznanost in vedenjska fiziologija. 2003a; 33: 919 – 928. [PubMed]
102. Ivlieva NY, Timofejeva NE. Aktivnost nevrona v jedru pedunkulopontina med operantnim pogojenim refleksom. Nevroznanost in vedenjska fiziologija. 2003b; 33: 499 – 506. [PubMed]
103. Jalabert M, Aston-Jones G, Herzog E, Manzoni O, Georges F. Vloga posteljnega jedra stria terminalis pri nadzoru dopaminskih nevronov ventralnega tegmentalnega območja. Napredek na področju nevro-psihofarmakologije in biološke psihiatrije. 2009; 33: 1336–1346. [PMC brez članka] [PubMed]
104. Jeanblanc J, Hoeltzel A, Louilot A. Disocijacija pri vpletenosti dopaminergičnih nevronov, ki posrkavajo jedro in lupino podregij jedra, se prikrijejo pri latentni inhibiciji in afektivnem zaznavanju. Nevroznanost. 2002; 111: 315 – 323. [PubMed]
105. Jensen J, Smith AJ, Willeit M, Crawley AP, Mikulis DJ, Vitcu I, Kapur S. Ločene možganske regije označujejo moč in valenco med napovedjo nagrade pri ljudeh. Preslikava človeških možganov 2007; 28: 294 – 302. [PubMed]
106. Jhou TC, Polja HL, Baxter MG, Saper CB, Holland PC. Rodromedialno tegmentalno jedro (RMTg), GABAergično aferentno do dopaminskih nevronov na sredini, kodira averzivne dražljaje in zavira motorične odzive. Neuron. 2009a, 61: 786 – 800. [PMC brez članka] [PubMed]
107. Jhou TC, Geisler S, Marinelli M, Degarmo BA, Zahm DS. Tegmentalno jedro mezopontinskega rostromediala: Struktura, usmerjena s stransko habenulo, ki štrli v ventralno tegmentalno območje Tsai in substantia nigra compacta. Časopis za primerjalno nevrologijo. 2009b; 513: 566 – 596. [PMC brez članka] [PubMed]
108. Ji H, Shepard PD. Lateralna stimulacija habenula zavira dopaminske nevrone dopaminskih možganov prek mehanizma, posredovanega z GABA (A) receptorjem. J Neurosci. 2007, 27: 6923 – 6930. [PubMed]
109. Jin X, Costa RM. Signali za zagon / zaustavitev se pojavijo v nigrostriatalnih vezjih med učenjem zaporedja. Narava. 2010; 466: 457 – 462. [PMC brez članka] [PubMed]
110. Johansen JP, Fields HL. Glutamatergična aktivacija sprednje cingulatske skorje povzroči averzivni učni signal. Nat Neurosci. 2004; 7: 398 – 403. [PubMed]
111. Joseph MH, Datla K, Young AM. Interpretacija merjenja jedra prikroji dopamin z in vivo dializo: brc, hrepenenje ali spoznanje? Nevroznanost in biobehevioralni pregledi. 2003; 27: 527 – 541. [PubMed]
112. Joshua M, Adler A, Bergman H. Dinamika dopamina v nadzoru motoričnega vedenja. Trenutno mnenje o nevrobiologiji. 2009a; 19: 615 – 620. [PubMed]
113. Joshua M, Adler A, Mitelman R, Vaadia E, Bergman H. Srednji možganski dopaminergični nevroni in strijatalni holinergični internevroni kodirajo razliko med nagradnimi in averzivnimi dogodki v različnih obdobjih verjetnostnih klasičnih preskušanj kondicioniranja. J Nevrosci. 2008; 28: 11673 – 11684. [PubMed]
114. Joshua M, Adler A, Prut Y, Vaadia E, Wickens JR, Bergman H. S sinhronizacijo dopaminergičnih nevronov srednjega mozga se krepi z nagrajevanjem dogodkov. Neuron. 2009b; 62: 695 – 704. [PubMed]
115. Kable JW, Glimcher PW. Nevrobiologija odločitve: soglasje in polemika. Neuron. 2009; 63: 733 – 745. [PMC brez članka] [PubMed]
116. Kakade S, Dayan P. Dopamin: posplošitev in bonusi. Nevronske mreže. 2002; 15: 549 – 559. [PubMed]
117. Kapur S. Psihoza kot stanje odstopanja: izraz, ki povezuje biologijo, fenomenologijo in farmakologijo pri shizofreniji. Ameriški časopis za psihiatrijo. 2003; 160: 13 – 23. [PubMed]
118. Kaufling J, Veinante P, Pawlowski SA, Freund-Mercier MJ, Barrot M. Prizadene GABAergični rep ventralnega tegmentalnega območja pri podganah. Časopis za primerjalno nevrologijo. 2009; 513: 597 – 621. [PubMed]
119. Kennerley SW, Wallis JD. Vrednotenje izbire posameznih nevronov v čelnem reženju: vrednost izida, kodirana v več spremenljivkah odločitev. Evropska revija za nevroznanost. 2009; 29: 2061 – 2073. [PMC brez članka] [PubMed]
120. Kim H, Sul JH, Huh N, Lee D, Jung MW. Vloga striatuma pri posodabljanju vrednosti izbranih dejanj. J Nevrosci. 2009; 29: 14701 – 14712. [PubMed]
121. Kiyatkin EA. Funkcionalne lastnosti domnevnih podgan, ki vsebujejo dopamin in drugih ventralnih tegmentalnih področij. Int J Nevrosci. 1988a; 42: 21 – 43. [PubMed]
122. Kiyatkin EA. Morfij-povzročena sprememba funkcionalnih lastnosti nevronov ventralnega tegmentalnega območja pri zavestnih podganah. Stažist J Nevroznanost. 1988b; 41: 57 – 70. [PubMed]
123. Klingberg T. Trening in plastičnost delovnega spomina. Trendi kognitivnih znanosti. 2010; 14: 317 – 324. [PubMed]
124. Kobayashi S, Nomoto K, Watanabe M, Hikosaka O, Schultz W, Sakagami M. Vplivi nagrajevanja in averzivnih rezultatov na aktivnost v makaki lateralne prefrontalne skorje. Neuron. 2006; 51: 861 – 870. [PubMed]
125. Kobayashi S, Schultz W. Vpliv zamud pri nagrajevanju na odzive dopaminskih nevronov. J Nevrosci. 2008; 28: 7837 – 7846. [PMC brez članka] [PubMed]
126. Kobayashi Y, Inoue Y, Yamamoto M, Isa T, Aizawa H. Prispevek pedunkulopontinskih tegmentalnih jedernih nevronov k opravljanju vizualno vodenih sakadejskih nalog pri opicah. J Nevrofiziol. 2002; 88: 715 – 731. [PubMed]
127. Koyama T, Tanaka YZ, Mikami A. Nociceptivni nevroni v prednjem cingulatu makake se aktivirajo med pričakovanjem bolečine. Neuroreport. 1998; 9: 2663 – 2667. [PubMed]
128. Kravitz AV, Freeze BS, Parker PR, Kay K, Thwin MT, Deisseroth K, Kreitzer AC. Uravnavanje motoričnega vedenja parkinsonov z optogenetskim nadzorom vezja bazalnih ganglijev. Narava. 2010 [PMC brez članka] [PubMed]
129. Lammel S, Hetzel A, Hackel O, Jones I, Liss B, Roeper J. Edinstvene lastnosti mezoprefrontalnih nevronov znotraj dvojnega mezokortikolimbičnega dopaminskega sistema. Neuron. 2008; 57: 760 – 773. [PubMed]
130. Lang PJ, Davis M. Čustva, motivacija in možgani: refleksni temelji v raziskavah na živalih in ljudeh. Napredek na področju raziskav možganov. 2006; 156: 3 – 29. [PubMed]
131. Lapish CC, Kroener S, Durstewitz D, Lavin A, Seamans JK. Sposobnost mezokortikalnega dopaminskega sistema, da deluje v različnih časovnih načinih. Psihoparmakologija (Berl) 2007; 191: 609 – 625. [PubMed]
132. Lee D, Seo H. Mehanizmi krepitvenega učenja in odločanja v dorsolateralnem predfrontalnem korteksu primata. Anali newyorške akademije znanosti. 2007; 1104: 108 – 122. [PubMed]
133. Lee HJ, Groshek F, Petrovich GD, Cantalini JP, Gallagher M, Holland PC. Vloga vezanja amigdalo-nigrala v kondicioniranju vizualnega dražljaja v kombinaciji s hrano. J Nevrosci. 2005; 25: 3881 – 3888. [PMC brez članka] [PubMed]
134. Levita L, Dalley JW, Robbins TW. Nucleus acccumens dopamin in naučil se je strah ponovno: pregled in nekaj novih ugotovitev. Vedenjske raziskave možganov. 2002; 137: 115 – 127. [PubMed]
135. Lin SC, Nicolelis MA. Nevronski ansambel razpočenja v bazalni sprednji možganov kodira slinavost ne glede na valenco. Neuron. 2008; 59: 138 – 149. [PMC brez članka] [PubMed]
136. Lisman JE, Grace AA. Hippocampal-VTA zanke: nadzor vnosa informacij v dolgoročni spomin. Neuron. 2005, 46: 703 – 713. [PubMed]
137. Litt A, Plassmann H, Shiv B, Rangel A. Ločevanje signalov vrednotenja in strmosti med odločanjem. Cereb Cortex. 2010 v tisku. [PubMed]
138. Liu Z, Richmond BJ, Murray EA, Saunders RC, Steenrod S, Stubblefield BK, Montague DM, Ginns EI. Ciljanje DNA na beljakovine receptorjev D2 nočne skorje reverzibilno blokira učenje namigov, ki napovedujejo nagrado. Zbornik Nacionalne akademije znanosti Združenih držav Amerike. 2004; 101: 12336 – 12341. [PMC brez članka] [PubMed]
139. Liu ZH, Shin R, Ikemoto S. Dvojna vloga medialnih doksaminskih nevronov A10 pri afektivnem kodiranju. Nevropsihoparmakologija. 2008; 33: 3010 – 3020. [PMC brez članka] [PubMed]
140. Ljungberg T, Apicella P, Schultz W. Odzivi opojnih dopaminskih nevronov med učenjem vedenjskih reakcij. J Neurofiziol. 1992, 67: 145 – 163. [PubMed]
141. Lobo MK, Covington HE, 3rd, Chaudhury D, Friedman AK, Sun H, Damez-Werno D, Dietz DM, Zaman S, Koo JW, Kennedy PJ in sod. Za celice izguba signala BDNF posnema optogenetsko kontrolo nagrade kokaina. Znanost. 2010; 330: 385 – 390. [PMC brez članka] [PubMed]
142. Maeda H, Mogenson GJ. Učinki periferne stimulacije na aktivnost nevronov v ventralnem tegmentalnem območju, substantia nigra in retikularne tvorbe podgan. Bilten o raziskavah možganov 1982; 8: 7 – 14. [PubMed]
143. Mantz J, Thierry AM, Glowinski J. Vpliv zdravju škodljivega repa na hitrost praznjenja mezokortikalnih in mezolimbičnih dopaminskih nevronov: selektivna aktivacija mezokortikalnega sistema. Možgani Res. 1989; 476: 377 – 381. [PubMed]
144. Margolis EB, ključavnica H, Hjelmstad GO, polja HL. Pregledali smo ventralno tegmentalno območje: ali obstaja elektrofiziološki marker za dopaminergične nevrone? Časopis za fiziologijo. 2006; 577: 907 – 924. [PMC brez članka] [PubMed]
145. Margolis EB, Mitchell JM, Ishikawa J, Hjelmstad GO, Fields HL. Srednji možganski dopaminski nevroni: projekcijski cilj določa trajanje akcijskega potenciala in inhibicijo receptorja dopamina D (2). J Nevrosci. 2008; 28: 8908 – 8913. [PubMed]
146. Mark GP, Blander DS, Hoebel BG. Pogojni stimulus zmanjša zunajcelični dopamin v nucleus accumbens po razvoju odpornosti na naučeni okus. Brain Res. 1991, 551: 308 – 310. [PubMed]
147. Marowsky A, Yanagawa Y, Obata K, Vogt KE. Specializiran podrazred intervronov posreduje dopaminergično olajšanje funkcije amigdale. Neuron. 2005; 48: 1025 – 1037. [PubMed]
148. Matsumoto M, Hikosaka O. Lateralna habenula kot vir negativnih nagradnih signalov v dopaminskih nevronih. Narava. 2007; 447: 1111 – 1115. [PubMed]
149. Matsumoto M, Hikosaka O. Prikaz negativne motivacijske vrednosti v bočni habuli primata. Nat Neurosci. 2009a; 12: 77 – 84. [PMC brez članka] [PubMed]
150. Matsumoto M, Hikosaka O. Dve vrsti dopaminskega nevrona izrazito prenašata pozitivne in negativne motivacijske signale. Narava. 2009b; 459: 837 – 841. [PMC brez članka] [PubMed]
151. Matsumoto M, Matsumoto K, Abe H, Tanaka K. Medijska prefrontalna aktivnost celic signalizira napake napovedovanja akcijskih vrednosti. Nat Neurosci. 2007; 10: 647 – 656. [PubMed]
152. Maj PJ, McHaffie JG, Stanford TR, Jiang H, Costello MG, Coizet V, Hayes LM, Haber SN, Redgrave P. Tektonigralne projekcije pri primatih: pot za predhodno pozoren senzorični vnos dopaminergičnih nevronov srednjih možganov. Evropska revija za nevroznanost. 2009; 29: 575 – 587. [PMC brez članka] [PubMed]
153. Mazzoni P, Hristova A, Krakauer JW. Zakaj se ne premikamo hitreje? Parkinsonova bolezen, moč gibanja in implicitna motivacija. J Neurosci. 2007; 27: 7105–7116. [PubMed]
154. Merali Z, Michaud D, McIntosh J, Kent P, Anisman H. Diferencialna vpletenost amigdaloidnih CRH sistemov v izpostavljenost in valenco dražljajev. Napredek na področju nevro-psihofarmakologije in biološke psihiatrije. 2003; 27: 1201–1212. [PubMed]
155. Mirenowicz J, Schultz W. Prednostna aktivacija dopaminskih nevronov srednjega možganov z apetitnimi in ne averzivnimi dražljaji. Narava. 1996; 379: 449 – 451. [PubMed]
156. Molina-Luna K, Pekanović A, Rohrich S, Hertler B, Schubring-Giese M, Rioult-Pedotti MS, Luft AR. Dopamin v motorični skorji je nujen za učenje spretnosti in sinaptično plastičnost. PLOŠČE ENO. 2009; 4: e7082. [PMC brez članka] [PubMed]
157. Montague PR, Berns GS. Nevronska ekonomija in biološki substrati vrednotenja. Neuron. 2002; 36: 265 – 284. [PubMed]
158. Montague PR, Dayan P, Sejnowski TJ. Okvir za mezencefalne dopaminske sisteme, ki temeljijo na napovednem učenju Hebbian. J Neurosci. 1996, 16: 1936 – 1947. [PubMed]
159. Morris G, Arkadir D, Nevet A, Vaadia E, Bergman H. Sovpadajoča, vendar različna sporočila dopamina srednjega možganov in striatalnih tonično aktivnih nevronov. Neuron. 2004; 43: 133 – 143. [PubMed]
160. Morris G, Nevet A, Arkadir D, Vaadia E, Bergman H. Nevroni dopaminskih možganov kodirajo odločitve za prihodnje ukrepanje. Nat Neurosci. 2006, 9: 1057 – 1063. [PubMed]
161. Morrison SE, CD Salzman. Konvergenca informacij o nagrajevanju in averzivnih dražljajih v posameznih nevronih. J Nevrosci. 2009; 29: 11471 – 11483. [PMC brez članka] [PubMed]
162. Nakahara H, Itoh H, Kawagoe R, Takikawa Y, Hikosaka O. Nevroni dopamina lahko predstavljajo kontekstno odvisno napako napovedovanja. Neuron. 2004; 41: 269 – 280. [PubMed]
163. Nakamura K, Hikosaka O. Vloga dopamina v jedru primatovega kaudata v nagradni modulaciji sakade. J Nevrosci. 2006; 26: 5360 – 5369. [PubMed]
164. Neve KA, Seamans JK, Trantham-Davidson H. Dopaminski receptor signalizacije. Časopis za raziskave receptorskih in signalnih transdukcij. 2004; 24: 165 – 205. [PubMed]
165. Nishijo H, Ono T, Nishino H. Enojni odzivi nevronov v amigdali budne opice med kompleksno senzorično stimulacijo z afektivnim pomenom. J Nevrosci. 1988; 8: 3570 – 3583. [PubMed]
166. Niv Y, Daw ND, Joel D, dayan P. Tonic dopamin: priložnostni stroški in nadzor odzivnosti. Psihoparmakologija. 2007; 191: 507 – 520. [PubMed]
167. Nomoto K, Schultz W, Watanabe T, Sakagami M. Časovno razširjeni odzivi na dopamin na zaznavno zahtevne dražilne napovedi. J Nevrosci. 2010; 30: 10692 – 10702. [PMC brez članka] [PubMed]
168. Okada K, Toyama K, Inoue Y, Isa T, Kobayashi Y. Različni pedunkulopontinski tegmentalni nevroni signalizirajo napovedane in dejanske nagrade. J Nevrosci. 2009; 29: 4858 – 4870. [PubMed]
169. Omelchenko N, Bell R, Sesack SR. Bočne projekcije habenule za dopamin in GABA nevrone v tegmentalnem območju podgan. Evropska revija za nevroznanost. 2009; 30: 1239 – 1250. [PMC brez članka] [PubMed]
170. Owesson-White CA, Ariansen J, Stuber GD, Cleaveland NA, Cheer JF, Wightman RM, Carelli RM. Nevronsko kodiranje vedenja, ki išče kokain, sovpada s faznim sproščanjem dopamina v jedru in lupini. Evropska revija za nevroznanost. 2009; 30: 1117 – 1127. [PMC brez članka] [PubMed]
171. Oyama K, Hernadi I, Iijima T, Tsutsui K. Kodiranje napake napovednega kodiranja v dorzalnih striatalnih nevronih. J Nevrosci. 2010; 30: 11447 – 11457. [PubMed]
172. Packard MG, bela NM. Disociacija spominskih sistemov hipokampusa in kaudata z naknadnim injiciranjem intracerebralne injekcije dopaminskih agonistov. Vedenjska nevroznanost. 1991; 105: 295 – 306. [PubMed]
173. Padoa-Schioppa C. Orbitofrontalna skorja in izračun ekonomske vrednosti. Anali newyorške akademije znanosti. 2007; 1121: 232 – 253. [PubMed]
174. Palmiter RD. Signalizacija dopamina v dorzalnem striatumu je bistvenega pomena za motivirano vedenje: lekcije o miših z pomanjkanjem dopamina. Anali newyorške akademije znanosti. 2008; 1129: 35 – 46. [PMC brez članka] [PubMed]
175. Pan WX, Hyland BI. Pedunkulopontinsko tegmentalno jedro nadzira pogojene odzive dopaminskih nevronov srednjega mozga pri obnašanju podgan. J Nevrosci. 2005; 25: 4725 – 4732. [PubMed]
176. Pan WX, Schmidt R, Wickens JR, Hyland BI. Tristranski mehanizem izumrtja, ki ga predlagata aktivnost dopaminskih nevronov in časovna razlika. J Nevrosci. 2008; 28: 9619 – 9631. [PubMed]
177. Parker JG, Zweifel LS, Clark JJ, Evans SB, Phillips PE, Palmiter RD. Odsotnost receptorjev NMDA v dopaminskih nevronih zmanjšuje sproščanje dopamina, vendar ne pogojen pristop med Pavlovianovim kondicioniranjem. Zbornik Nacionalne akademije znanosti Združenih držav Amerike. 2010 [PMC brez članka] [PubMed]
178. Pascoe JP, Kapp BS. Elektrofiziološke značilnosti amigdaloidnih nevronov centralnega jedra med Pavlovianskim kondicijskim strahom pri zajcu. Vedenjske raziskave možganov. 1985; 16: 117 – 133. [PubMed]
179. Pascucci T, Ventura R, Latagliata EC, Cabib S, Puglisi-Allegra S. Medialni prefrontalni korteks določa pristopni dopaminski odziv na stres s pomočjo nasprotnih vplivov norepinefrina in dopamina. Cereb Cortex. 2007; 17: 2796 – 2804. [PubMed]
180. Pearce JM, Hall G. Model za Pavlovianovo učenje: razlike v učinkovitosti pogojenih, ne pa brezpogojnih dražljajev. Psychol Rev. 1980; 87: 532 – 552. [PubMed]
181. Pezze MA, Feldon J. Mesolimbic dopaminergične poti v kondicioniranju strahu. Napredek v nevrobiologiji. 2004; 74: 301 – 320. [PubMed]
182. Phillips AG, Ahn S, Howland JG. Amigdalarna kontrola mezokortikolimimbskega dopaminskega sistema: vzporedne poti do motiviranega vedenja. Nevroznanost in biobehevioralni pregledi. 2003a; 27: 543 – 554. [PubMed]
183. Phillips GD, Salussolia E, Hitchcott PK. Vloga projekcije mezoamigdaloidnega dopamina v čustvenem učenju. Psihoparmakologija. 2010 [PubMed]
184. Phillips PE, Stuber GD, Heien ML, Wightman RM, Carelli RM. Podsekunda sproščanja dopamina spodbuja iskanje kokaina. Narava. 2003b; 422: 614 – 618. [PubMed]
185. Porrino LJ, Goldman-Rakic ​​PS. Innervacija možganskega debla predfrontalne in sprednje cingulatne skorje pri opicah rezus, ki se razkrije z retrogradnim transportom HRP. Časopis za primerjalno nevrologijo. 1982; 205: 63 – 76. [PubMed]
186. Puryear CB, Kim MJ, Mizumori SJ. Konjunktivno kodiranje gibanja in nagrajevanje nevronov ventralnega tegmentalnega območja pri glodalcu, ki prosto pluje. Vedenjska nevroznanost. 2010; 124: 234 – 247. [PMC brez članka] [PubMed]
187. Ravel S, Legallet E, Apicella P. Tonično aktivni nevroni v opičjem striatumu se ne odzivajo prednostno na apetitne dražljaje. Eksperimentalne raziskave možganov Experimentelle Hirnforschung. 1999; 128: 531 – 534. [PubMed]
188. Ravel S, Legallet E, Apicella P. Odzivi tonično aktivnih nevronov v opičjem striatumu razlikujejo med motivacijsko nasprotnimi dražljaji. J Nevrosci. 2003; 23: 8489 – 8497. [PubMed]
189. Ravel S, Richmond BJ. Dopaminski odzivi nevronov pri opicah, ki izvajajo vizualno nastavljen razpored nagrad. Evropska revija za nevroznanost. 2006; 24: 277 – 290. [PubMed]
190. Redgrave P, Gurney K. Signal dopamina s kratko zamudo: vloga pri odkrivanju novih dejanj? Nat Rev Neurosci. 2006; 7: 967 – 975. [PubMed]
191. Redgrave P, Prescott TJ, Gurney K. Je odziv na dopamin s kratkim latenco prekratek, da bi nakazal napako pri nagrajevanju? Trendi v nevroznanosti. 1999; 12: 146 – 151. [PubMed]
192. Rescorla RA, Wagner AR. Teorija Pavlovičeve kondicioniranja: razlike v učinkovitosti ojačitve in ojačitve. V: Black AH, Prokasy WF, uredniki. Klasično kondicioniranje II: Aktualno raziskovanje in teorija. New York, New York: Appleton Century Crofts; 1972. strani 64 – 99.
193. Reynolds JNJ, Hyland BI, Wickens JR. Celični mehanizem učenja, povezanega z nagradami. Narava. 2001; 413: 67 – 70. [PubMed]
194. Reynolds SM, Berridge KC. Pozitivna in negativna motivacija v lupini nucleus accumbens: dvovalentni rostrokavdalni gradienti za prehranjevanje, ki ga povzroča GABA, reakcije "všeč" / "nenaklonjenost" okusu, prednost / izogibanje in strah. J Neurosci. 2002; 22: 7308–7320. [PubMed]
195. Richardson RT, DeLong MR. Elektrofiziološke študije funkcij jedra basalis pri primatih. Napredek eksperimentalne medicine in biologije. 1991; 295: 233 – 252. [PubMed]
196. Robbins TW, Arnsten AF. Nevropsifarmakologija fronto-executive funkcije: monoaminergična modulacija. Letni pregled nevroznanosti. 2009; 32: 267 – 287. [PMC brez članka] [PubMed]
197. Robinson DL, Hermans A, Seipel AT, Wightman RM. Spremljanje hitre kemične komunikacije v možganih. Kemični pregledi. 2008; 108: 2554 – 2584. [PMC brez članka] [PubMed]
198. Roesch MR, Calu DJ, Schoenbaum G. Dopaminski nevroni kodirajo boljšo možnost pri podganah, ki se odločajo med različno zapoznelimi ali velikostnimi nagradami. Nat Neurosci. 2007; 10: 1615 – 1624. [PMC brez članka] [PubMed]
199. Roesch MR, Olson CR. Nevronska aktivnost, povezana z nagrajevanjem vrednosti in motivacijo v primarni frontalni korteksu. Znanost. 2004, 304: 307 – 310. [PubMed]
200. Roitman MF, Wheeler RA, Wightman RM, Carelli RM. Kemijski odzivi v realnem času v nucleus accumbens razlikujejo nagrajevanje in averzivne dražljaje. Nat Neurosci. 2008, 11: 1376 – 1377. [PMC brez članka] [PubMed]
201. Rutledge RB, Lazzaro SC, Lau B, Myers CE, Gluck MA, Glimcher PW. Dopaminergična zdravila pri dinamičnem iskanju hrane pri bolnikih s Parkinsonovo boleznijo prilagajajo stopnjo učenja in vztrajnosti. J Neurosci. 2009; 29: 15104–15114. [PMC brez članka] [PubMed]
202. Salamone JD. Vključenost jedra dopamina v privlačno in averzivno motivacijo. Vedenjske raziskave možganov. 1994; 61: 117 – 133. [PubMed]
203. Salamone JD, Correa M, Farrar A, Mingote SM. Naloge, povezane z naporom, jedro obdajajo dopamin in s tem povezana vezja sprednjega možganov. Psihoparmakologija (Berl) 2007; 191: 461 – 482. [PubMed]
204. Satoh T, Nakai S, Sato T, Kimura M. Korelirano kodiranje motivacije in izida odločitve dopaminskih nevronov. J Nevrosci. 2003; 23: 9913 – 9923. [PubMed]
205. Savine AC, Beck SM, Edwards BG, Chiew KS, Braver TS. Izboljšanje kognitivnega nadzora s pristopom in izogibanje motivacijskim stanjem. Spoznanje in čustva. 2010; 24: 338–356. [PMC brez članka] [PubMed]
206. Schoenbaum G, Roesch MR, Stalnaker TA, Takahashi YK. Nov pogled na vlogo orbitofrontalne skorje v adaptivnem vedenju. Nat Rev Neurosci. 2009, 10: 885 – 892. [PMC brez članka] [PubMed]
207. Schultz W. Odzivi dopaminskih nevronov srednjega mozga na vedenjske sprožilne dražljaje pri opicah. J Nevrofiziol. 1986; 56: 1439 – 1461. [PubMed]
208. Schultz W. Prediktivni signal nagrajevanja dopaminskih nevronov. J Neurofiziol. 1998, 80: 1 – 27. [PubMed]
209. Schultz W. Več funkcij dopamina v različnih časovnih tečajih. Letni pregled nevroznanosti. 2007; 30: 259 – 288. [PubMed]
210. Schultz W. Dopamin signali za vrednost in tveganje nagrade: osnovni in najnovejši podatki. Funkcija možganov Behav. 2010; 6: 24. [PMC brez članka] [PubMed]
211. Schultz W, Dayan P, Montague PR. Nevralni substrat napovedovanja in nagrajevanja. Znanost. 1997, 275: 1593 – 1599. [PubMed]
212. Schultz W, Romo R. Odzivi nigrostriatalnih dopaminskih nevronov na visokointenzivno somatosenzorično stimulacijo pri anestezirani opici. J Nevrofiziol. 1987; 57: 201 – 217. [PubMed]
213. Schultz W, Romo R. Dopaminski nevroni opice srednjega mozga: nepredvideni odzivi na dražljaje, ki sprožijo takojšnje vedenjske reakcije. J Nevrofiziol. 1990; 63: 607 – 624. [PubMed]
214. Seo H, Lee D. Časovno filtriranje nagradnih signalov v hrbtni zadnjični cingulatni skorji med igro z mešano strategijo. J Nevrosci. 2007; 27: 8366 – 8377. [PMC brez članka] [PubMed]
215. Shabel SJ, Janak PH. Pomembna podobnost nevronskih aktivnosti amigdale med pogojenim apetitnim in averzivnim čustvenim vzburjenjem. Zbornik Nacionalne akademije znanosti Združenih držav Amerike. 2009; 106: 15031 – 15036. [PMC brez članka] [PubMed]
216. Shadmehr R, Smith MA, Krakauer JW. Popravljanje napak, senzorično napovedovanje in prilagajanje v upravljanju motorja. Letni pregled nevroznanosti. 2010 [PubMed]
217. Shen W, Flajolet M, Greengard P, Surmeier DJ. Dihotomna dopaminergična kontrola striptične sinaptične plastičnosti. Znanost. 2008; 321: 848 – 851. [PMC brez članka] [PubMed]
218. Shimo Y, Wichmann T. Nevronska aktivnost v subtalamičnem jedru modulira sproščanje dopamina v opicijskem striatumu. Evropska revija za nevroznanost. 2009; 29: 104 – 113. [PMC brez članka] [PubMed]
219. Shippenberg TS, Bals-Kubik R, Huber A, Herz A. Nevroanatomski substrati, ki posredujejo neželene učinke antagonistov D-1 dopaminskih receptorjev. Psihoparmakologija (Berl) 1991; 103: 209 – 214. [PubMed]
220. Shumake J, Ilango A, Scheich H, Wetzel W, Ohl FW. Diferencialna nevromodulacija pridobivanja in pridobivanja izogibnega učenja s strani bočne habenule in ventralnega tegmentalnega območja. J Nevrosci. 2010; 30: 5876 – 5883. [PubMed]
221. Majhen DM, dr. Gregory, Mak YE, Gitelman D, Mesulam MM, Parrish T. Disociacija nevronske reprezentacije intenzivnosti in afektivnega vrednotenja v človeški gustaciji. Neuron. 2003; 39: 701 – 711. [PubMed]
222. Stefani MR, Moghaddam B. Pravilo učenja in nepredvidenih nagrad je povezano z ločenimi vzorci aktivacije dopamina v predfrontalni skorji podgane, nukleusih in dorzalnem striatumu. J Nevrosci. 2006; 26: 8810 – 8818. [PMC brez članka] [PubMed]
223. Steinfels GF, Heym J, Strecker RE, Jacobs BL. Odziv dopaminergičnih nevronov pri mački na slušne dražljaje, predstavljene v celotnem ciklu spanja. Možgani Res. 1983; 277: 150 – 154. [PubMed]
224. Strecker RE, Jacobs BL. Aktivnost dopaminergične enote substantia nigra pri obnašanju mačk: učinek vzburjenja na spontani izcedek in senzorično aktivnost. Možgani Res. 1985; 361: 339 – 350. [PubMed]
225. Stuber GD, Hnasko TS, Britt JP, Edwards RH, Bonci A. Dopaminergični terminali v jedru se pojavijo, ne pa tudi dorzalni striatum corelease glutamat. Časopis za nevroznanost. 2010; 30: 8229 – 8233. [PMC brez članka] [PubMed]
226. Stuber GD, Wightman RM, Carelli RM. Izumrtje kokaina, ki ga dajemo sami, razkriva funkcionalno in časovno ločene dopaminergične signale v jedru jedra. Neuron. 2005; 46: 661 – 669. [PubMed]
227. Sul JH, Kim H, Huh N, Lee D, Jung MW. Ločene vloge orbitofrontalne in medialne prefrontalne skorje glodavcev pri odločanju. Neuron. 2010; 66: 449 – 460. [PMC brez članka] [PubMed]
228. Surmeier DJ, Ding J, Day M, Wang Z, Shen W. D1 in D2 modulacija dopaminskih receptorjev strijatalne glutamatergične signalizacije v striatalnih srednjih špičastih nevronih. Trendi v nevroznanosti. 2007; 30: 228 – 235. [PubMed]
229. Surmeier DJ, Shen W, Day M, Gertler T, Chan S, Tian X, Plotkin JL. Vloga dopamina pri moduliranju strukture in delovanja striatalnih vezij. Napredek na področju raziskav možganov. 2010; 183C: 148 – 167. [PubMed]
230. Sutton RS, Barto AG. V smeri sodobne teorije prilagodljivih omrežij: pričakovanja in napovedovanja. Psychol Rev. 1981; 88: 135 – 170. [PubMed]
231. Takahashi YK, Roesch MR, Stalnaker TA, Haney RZ, Calu DJ, Taylor AR, Burke KA, Schoenbaum G. Orbitofrontalna skorja in ventralno tegmentalno območje sta potrebna za učenje iz nepričakovanih rezultatov. Neuron. 2009; 62: 269 – 280. [PMC brez članka] [PubMed]
232. Takikawa Y, Kawagoe R, Hikosaka O. Možna vloga dopaminskih nevronov srednjega mozga pri kratko- in dolgoročni prilagoditvi sakade na preslikavo položaja in nagrade. J Nevrofiziol. 2004; 92: 2520 – 2529. [PubMed]
233. Tecuapetla F, Patel JC, Xenias H, angleščina D, Tadros I, Shah F, Berlin J, Deisseroth K, Rice ME, Tepper JM, Koos T. Glutamatergično signaliziranje z mezolimbičnimi dopaminskimi nevroni v pristopnem jedru. J Nevrosci. 2010; 30: 7105 – 7110. [PMC brez članka] [PubMed]
234. Thierry AM, Tassin JP, Blanc G, Glowinski J. Selektivna aktivacija mezokortikalnega DA sistema s stresom. Narava. 1976; 263: 242 – 244. [PubMed]
235. Tobler PN, Dickinson A, Schultz W. Kodiranje napovedane nagradne opustitve dopaminskih nevronov v paradigmi pogojene inhibicije. J Nevrosci. 2003; 23: 10402 – 10410. [PubMed]
236. Tobler PN, CD Fiorillo, Schultz W. Prilagodljivo kodiranje vrednosti nagrade dopaminskih nevronov. Znanost. 2005; 307: 1642 – 1645. [PubMed]
237. Tsai HC, Zhang F, Adamantidis A, Stuber GD, Bonci A, de Lecea L, Deisseroth K. Fazično gašenje v dopaminergičnih nevronih je dovolj za vedenjsko kondicijo. Znanost. 2009 [PubMed]
238. Ullsperger M. Študije genetske zveze spremljanja uspešnosti in učenja iz povratnih informacij: vloga dopamina in serotonina. Nevroznanost in biobehevioralni pregledi. 2010; 34: 649 – 659. [PubMed]
239. Neutemeljen MA. Dopamin: vidno vprašanje. Trendi v nevroznanosti. 2004; 27: 702 – 706. [PubMed]
240. Uylings HB, Groenewegen HJ, Kolb B. Ali imajo podgane predfrontalno skorjo? Vedenjske raziskave možganov. 2003; 146: 3 – 17. [PubMed]
241. Ventura R, Cabib S, Puglisi-Allegra S. Nasproten od genotipa odvisen od mezokortikolimbičnega dopaminskega odziva na stres. Nevroznanost. 2001; 104: 627 – 631. [PubMed]
242. Ventura R, Latagliata EC, Morrone C, La Mela I, Puglisi-Allegra S. Prefrontalni noradrenalin določa atribut "visoke" motivacijske pomembnosti. PLOS ONE. 2008; 3: e3044. [PMC brez članka] [PubMed]
243. Ventura R, Morrone C, Puglisi-Allegra S. Prefrontalni / akumbalni kateholaminski sistem določa pripisovanje motivacijskemu pljusk tako dražljajem kot odvračanju. Zbornik Nacionalne akademije znanosti Združenih držav Amerike. 2007; 104: 5181 – 5186. [PMC brez članka] [PubMed]
244. Vogt BA. Interakcije bolečine in čustev v podregijah cingulatskega gyrusa. Nat Rev Neurosci. 2005; 6: 533 – 544. [PMC brez članka] [PubMed]
245. Voon V, Pessiglione M, Brezing C, Gallea C, Fernandez HH, Dolan RJ, Hallett M. Mehanizmi, ki temeljijo na dopaminskih medijskih nagradah v kompulzivnem vedenju. Neuron. 2010; 65: 135 – 142. [PMC brez članka] [PubMed]
246. Waelti P, Dickinson A, Schultz W. Dopaminski odgovori ustrezajo osnovnim predpostavkam formalne teorije učenja. Narava. 2001, 412: 43 – 48. [PubMed]
247. Wallis JD, Kennerley SW. Heterogeni nagradni signali v predfrontalni skorji. Trenutno mnenje o nevrobiologiji. 2010; 20: 191 – 198. [PMC brez članka] [PubMed]
248. Walton ME, Behrens TE, Buckley MJ, Rudebeck PH, Rushworth MF. Ločljivi učni sistemi v možganih makake in vloga orbitofrontalne skorje pri učenju v kontingentu. Neuron. 2010; 65: 927 – 939. [PMC brez članka] [PubMed]
249. Wheeler RA, Twining RC, Jones JL, Slater JM, Grigson PS, Carelli RM. Vedenjski in elektrofiziološki indeksi negativnega učinka napovedujejo samo dajanje kokaina. Neuron. 2008; 57: 774 – 785. [PubMed]
250. Wightman RM, Heien MLAV, Wassum KM, Sombers LA, Aragona BJ, Khan AS, Ariansen JL, Cheer JF, Phillips PE, Carelli RM. Sproščanje dopamina je raznovrstno v mikrookoliščih jedra podgane. Evropska revija za nevroznanost. 2007; 26: 2046 – 2054. [PubMed]
251. Williams GV, Castner SA. Pod krivuljo: kritična vprašanja za razjasnitev funkcije receptorjev D1 v delovnem pomnilniku. Nevroznanost. 2006; 139: 263 – 276. [PubMed]
252. Williams SM, Goldman-Rakić PS. Široko razširjen izvor mezofrontalnega dopaminskega sistema primatov. Cereb Cortex. 1998; 8: 321 – 345. [PubMed]
253. Winn P. Kako najbolje upoštevati zgradbo in delovanje tegmentalnega jedra pedunculopontina: dokazi iz študij na živalih. Časopis za nevrološke znanosti. 2006; 248: 234 – 250. [PubMed]
254. Wise RA. Dopamin, učenje in motivacija. Nat Rev Neurosci. 2004; 5: 483 – 494. [PubMed]
255. Wise RA. Spodnji možgani substrata nagrade in motivacije. Časopis za primerjalno nevrologijo. 2005; 493: 115 – 121. [PMC brez članka] [PubMed]
256. Wise SP. Prednja čelna polja: filogenija in temeljna funkcija. Trendi v nevroznanosti. 2008; 31: 599 – 608. [PMC brez članka] [PubMed]
257. Yamada H, Matsumoto N, Kimura M. Tonično aktivni nevroni v jedru primatovega kaudata in putamen različno kodirajo poučene motivacijske izide delovanja. J Nevrosci. 2004; 24: 3500 – 3510. [PubMed]
258. Yamada H, Matsumoto N, Kimura M. Zgodovinsko in trenutno na podlagi navodil kodiranje prihodnjih vedenjskih rezultatov v striatumu. J Nevrofiziol. 2007; 98: 3557 – 3567. [PubMed]
259. Yin HH, Knowlton BJ. Vloga bazalnih ganglijev pri oblikovanju navad. Nat Rev Neurosci. 2006; 7: 464 – 476. [PubMed]
260. Mladi AM, premier Moran, Joseph MH. Vloga dopamina pri kondicioniranju in latentni inhibiciji: kaj, kdaj, kje in kako? Nevroznanost in biobehevioralni pregledi. 2005; 29: 963 – 976. [PubMed]
261. Zaghloul KA, Blanco JA, Weidemann CT, McGill K, Jaggi JL, Baltuch GH, Kahana MJ. Človeški nevroni substantia nigra kodirajo nepričakovane finančne nagrade. Znanost. 2009; 323: 1496 – 1499. [PMC brez članka] [PubMed]
262. Zahniser NR, Sorkin A. Hitra regulacija prenašalca dopamina: vloga pri odvisnosti od stimulansov? Nevrofarmakologija. 2004; 47 Suppl 1: 80 – 91. [PubMed]
263. Zhang L, Doyon WM, Clark JJ, Phillips PE, Dani JA. Nadzor toničnega in faznega prenosa dopamina v dorzalnem in ventralnem striatumu. Molekularna farmakologija. 2009; 76: 396 – 404. [PMC brez članka] [PubMed]
264. Cink CF, Pagnoni G, Martin ME, Dhamala M, Berns GS. Človeški strijski odziv na vidne dražljaje. Časopis za nevroznanost. 2003; 23: 8092 – 8097. [PubMed]
265. Zweifel LS, Argilli E, Bonci A, Palmiter RD. Vloga NMDA receptorjev v dopaminskih nevronih za plastičnost in zasvojenost. Neuron. 2008; 59: 486 – 496. [PMC brez članka] [PubMed]
266. Zweifel LS, Parker JG, Lobb CJ, Rainwater A, Wall VZ, Fadok JP, Darvas M, Kim MJ, Mizumori SJ, Paladini CA in sod. Motnje NMDAR odpornega rafala dopaminskih nevronov omogoča selektivno oceno faznega od dopamina odvisnega vedenja. Zbornik Nacionalne akademije znanosti Združenih držav Amerike. 2009; 106: 7281 – 7288. [PMC brez članka] [PubMed]