Dopamīns motivācijas kontrolē: atalgojošs, atbaidošs un brīdinājums (2010)

Skatiet citus PMC rakstus citāts publicēto rakstu.

Vidējā smadzeņu dopamīna neironi ir labi pazīstami ar spēcīgu reakciju uz atlīdzību un kritisko lomu pozitīvajā motivācijā. Tomēr arvien skaidrāks kļūst fakts, ka dopamīna neironi arī pārraida signālus, kas saistīti ar ievērojamu, bet neapmierinošu pieredzi, piemēram, nepatīkamiem un trauksmainiem notikumiem. Šeit mēs aplūkojam jaunākos sasniegumus izpratnē par dopamīna atlīdzības un ar atlīdzību nesaistītajām funkcijām. Balstoties uz šiem datiem, mēs ierosinām, ka dopamīna neironiem ir vairāki veidi, kas ir saistīti ar atšķirīgiem smadzeņu tīkliem un kuriem ir atšķirīga loma motivācijas kontrolē. Daži dopamīna neironi kodē motivējošo vērtību, atbalstot smadzeņu tīklus meklēšanai, novērtēšanai un vērtību apguvei. Citi kodē motivējošu izpausmi, atbalstot smadzeņu tīklus orientācijai, izziņai un vispārējai motivācijai. Abus dopamīna neironu veidus papildina trauksmes signāls, kas iesaistīts potenciāli svarīgo maņu norāžu ātrā noteikšanā. Mēs izvirzām hipotēzi, ka šie dopamīnerģiskie ceļi, kas saistīti ar vērtību, atpazīstamību un trauksmi, sadarbojas, lai atbalstītu adaptīvo uzvedību.

Dopamīns atlīdzības meklēšanas darbību motivācijā

Jau sen ir zināms, ka dopamīns ir svarīgs darbību pastiprināšanai un motivēšanai. Narkotikas, kas traucē DA transmisiju, traucē pastiprināšanas mācīšanos, savukārt manipulācijas, kas veicina DA transmisiju, piemēram, smadzeņu stimulēšana un atkarību izraisošas zāles, bieži darbojas kā pastiprinātāji (Gudrs, 2004). DA pārraide ir būtiska, lai radītu motivācijas stāvokli meklēt atalgojumu (Berridge un Robinson, 1998; Salamone et al., 2007) un lai izveidotu atmiņu par bišu atlīdzības asociācijām (Dalley et al., 2005). DA atbrīvošana nav nepieciešama visiem atalgojuma apguves veidiem, un to ne vienmēr var “patikt” izpriecu radīšanas nozīmē, taču kritiski svarīgi, lai mērķi kļūtu “gribēti” motivējošu darbību nozīmē to sasniegšanai (Berridge un Robinson, 1998; Palmiter, 2008).

Viena hipotēze par to, kā dopamīns atbalsta pastiprināšanas mācīšanos, ir tā, ka tā pielāgo sinaptisko savienojumu stiprumu starp neironiem. Šīs hipotēzes visvienkāršākā versija ir tāda, ka dopamīns kontrolē sinaptisko plastiskumu saskaņā ar modificētu Hebija likumu, ko var aptuveni pateikt kā “neironus, kas kopā sadedzina kopā, ja vien viņiem rodas dopamīna eksplozija”. Citiem vārdiem sakot, ja šūna A aktivizē šūnu B un šūna B izraisa uzvedības darbību, kuras rezultātā tiek atalgota, tad dopamīns izdalās un A → B savienojums tiek pastiprināts (Montague et al., 1996; Schultz, 1998). Šis mehānisms ļautu organismam iemācīties optimālu darbību izvēli, lai iegūtu atlīdzību, ņemot vērā pietiekamu izmēģinājumu un kļūdu pieredzi. Saskaņā ar šo hipotēzi dopamīnam ir spēcīga ietekme uz sinaptisko plastiskumu daudzos smadzeņu reģionos (Surmeier et al., 2010; Goto et al., 2010; Molina-Luna et al., 2009; Marowsky et al., 2005; Lisman un Grace, 2005). Dažos gadījumos dopamīns nodrošina sinaptisko plastiskumu, ievērojot iepriekš aprakstīto Habija likumu, tādā veidā, kas ir saistīts ar atlīdzību meklējošu uzvedību (Reynolds et al., 2001). Papildus ietekmei uz ilgtermiņa sinaptisko plastiskumu dopamīns var arī nekavējoties kontrolēt neironu ķēdes, modulējot neironu spīdošo aktivitāti un sinaptiskos savienojumus starp neironiem (Surmeier et al., 2007; Robbins un Arnsten, 2009), dažos gadījumos to darot tādā veidā, kas veicinātu tūlītējas atalgojuma meklēšanas darbības (Frank, 2005).

Dopamīna neironu atlīdzības signāli

Lai motivētu darbības, kas noved pie atlīdzības, apbalvošanas pieredzes laikā dopamīns ir jāatbrīvo. Patiešām, lielāko daļu DA neironu spēcīgi aktivizē negaidīti primāri ieguvumi, piemēram, pārtika un ūdens, bieži izraisot pakāpeniskas aktivitātes “pārrāvumus” (Schultz, 1998) (fāzes ierosmes, ieskaitot vairākus tapas (Grace un Bunney, 1983)). Tomēr novatoriski Volframa Šulca pētījumi parādīja, ka šīs DA neironu reakcijas neizraisa atalgojuma patēriņš per se. Tā vietā tie atgādina “atlīdzības prognozēšanas kļūdu”, norādot atšķirību starp saņemto atlīdzību un atlīdzību, kas tika prognozēta (Schultz et al., 1997) (Attēls 1A). Tādējādi, ja atlīdzība ir lielāka, nekā prognozēts, DA neironi ir spēcīgi satraukti (pozitīvas prognozes kļūda, 1E attēls, sarkans); ja atlīdzība ir mazāka nekā prognozēts vai tā nenotiek noteiktā laikā, DA neironi tiek pakāpeniski kavēti (negatīva prognozes kļūda, 1E attēls, zils); un ja atlīdzība tiek noteikta iepriekš, lai tās lielums būtu pilnībā prognozējams, DA neironiem ir maza reakcija vai tās nav vispār (nulles prognozēšanas kļūda, Attēls 1C, melns). Tas pats princips attiecas uz DA reakcijām uz maņu norādēm, kas sniedz jaunu informāciju par ieguvumiem nākotnē. DA neironi ir satraukti, ja bižele norāda uz atlīdzības vērtības pieaugumu nākotnē (Attēls 1C, sarkans), tiek bloķēts, ja norāde norāda uz atlīdzības vērtības samazināšanos nākotnē (Attēls 1C, zils) un parasti maz reaģē uz norādēm, kas nesniedz jaunu informāciju par atlīdzību (1E attēls, melns). Šīs DA atbildes atgādina īpaša veida atlīdzības prognozēšanas kļūdas, ko sauc par laika starpības kļūdu vai “TD kļūdu”, kuras ir ierosinātas darboties kā pastiprinājuma signāls, lai uzzinātu darbību un vides stāvokļu vērtību (Houk et al., 1995; Montague et al., 1996; Schultz et al., 1997). Skaitļošanas modeļi, izmantojot TD līdzīgu pastiprināšanas signālu, var izskaidrot daudzus pastiprināšanas mācīšanās aspektus cilvēkiem, dzīvniekiem un pašiem DA neironiem (Sutton un Barto, 1981; Waelti et al., 2001; Montague un Berns, 2002; Dayan un Niv, 2008).

 

Skaitlis 1

Atalgojuma prognozēšanas kļūdu kodēšana ar dopamīnu un prediktīvās informācijas priekšroka

Iespaidīgs eksperimentu klāsts ir parādījis, ka DA signāli atspoguļo atlīdzības prognozes tādā veidā, kas precīzi atbilst uzvedības preferencēm, ieskaitot priekšroku lieliem atalgojumiem, nevis maziem (Tobler et al., 2005) iespējamie ieguvumi no neiespējamiem (Fiorillo et al., 2003; Satoh et al., 2003; Morris et al., 2004) un tūlītēja atlīdzība par kavējumiem (Roesch et al., 2007; Fiorillo et al., 2008; Kobajaši un Šulcs, 2008). Ir pat pierādījumi, ka DA neironi cilvēkā kodē naudas atdeves vērtību (Zaghloul et al., 2009). Turklāt DA signāli parādās mācīšanās laikā ar līdzīgu laika gaitu uz uzvedības mērauklām, kas paredz atlīdzību (Hollermans un Šulcs, 1998; Satoh et al., 2003; Takikawa et al., 2004; Day et al., 2007) un ir savstarpēji saistīti ar subjektīviem atlīdzības izvēles priekšmetiem (Morris et al., 2006). Šie atklājumi ir izveidojuši DA neironus kā vienu no vislabāk saprotamiem un replicētākajiem atalgojuma kodēšanas piemēriem smadzenēs. Tā rezultātā jaunākie pētījumi DA neironiem ir pakļauti intensīvai pārbaudei, lai atklātu, kā tie ģenerē atlīdzības prognozes un kā viņu signāli iedarbojas uz pakārtotajām struktūrām, lai kontrolētu uzvedību.

Dopamīna neironu atlīdzības signāli

Nesenie panākumi izpratnē par DA atalgojuma signāliem rodas, apsverot trīs plašus jautājumus: Kā DA neironi apgūst atlīdzības prognozes? Cik precīzas ir viņu prognozes? Un tikai to, ko viņi uzskata par atlīdzinošu?

Kā DA neironi apgūst atlīdzības prognozes? Klasiskās teorijas liecina, ka atlīdzības prognozes tiek apgūtas pakāpeniskā pastiprināšanas procesā, kam nepieciešami atkārtoti stimula un atlīdzības pāri (Rescorla un Wagner, 1972; Montague et al., 1996). Katru reizi, kad stimulam A seko negaidīts atalgojums, tiek aprēķināta A vērtība. Jaunākie dati tomēr liecina, ka DA neironi pārsniedz vienkāršu stimula un atalgojuma apguvi un ļauj prognozēt, pamatojoties uz izsmalcinātiem uzskatiem par pasaules struktūru. DA neironi var pareizi paredzēt atlīdzību pat netradicionālā vidē, kur atlīdzība, kas savienota pārī ar stimulu, izraisa a samazināt šī stimula vērtībā (Satoh et al., 2003; Nakahara et al., 2004; Brombergs-Martins et al., 2010c) vai izraisīt izmaiņas pavisam cita stimula vērtībā (Brombergs-Martins et al., 2010b). DA neironi var arī pielāgot savus atlīdzības signālus, balstoties uz atlīdzības sadalījuma augstākas kārtas statistiku, piemēram, prognozēšanas kļūdas signālu mērogošana, pamatojoties uz to paredzamo dispersiju (Tobler et al., 2005) un “spontāni atgūst” savu reakciju uz izdzēstiem atalgojuma norādījumiem (Pan et al., 2008). Visas šīs parādības veido ievērojamu paralēlu līdzīgu efektu, ko novēro sensoro un motora adaptācijā (Braun et al., 2010; Fairhall et al., 2001; Shadmehr et al., 2010), kas liek domāt, ka tie var atspoguļot vispārēju neironu mehānismu paredzamai mācībai.

Cik precīzas ir DA atlīdzības prognozes? Jaunākie pētījumi liecina, ka DA neironi uzticīgi pielāgo savus atlīdzības signālus, lai ņemtu vērā trīs prognozes nenoteiktības avotus. Pirmkārt, cilvēki un dzīvnieki cieš no iekšējā laika trokšņa, kas neļauj viņiem veikt ticamas prognozes par gariem bišu atlīdzības laika intervāliem (Gallistel un Gibbon, 2000). Tādējādi, ja bižerijas apbalvojuma kavējumi ir īsi (1 – 2 sekundes), laika prognozes ir precīzas un atlīdzības piegāde izraisa nelielu DA reakciju, bet ilgākam bišu atlīdzības kavējumam laika prognozes kļūst mazāk ticamas un atlīdzība izraisa skaidrus DA pārrāvumus (Kobajaši un Šulcs, 2008; Fiorillo et al., 2008). Otrkārt, daudzas norādes ikdienas dzīvē ir neprecīzas, norādot plašu atlīdzības piegādes laiku sadalījumu. DA neironi atkal atspoguļo šo laika nenoteiktības formu: mainīgā atalgojuma kavēšanās laikā tie tiek pakāpeniski kavēti, it kā signalizējot arvien negatīvākas atlīdzības prognozēšanas kļūdas katrā brīdī, kad atlīdzība nerodas (Fiorillo et al., 2008; Brombergs-Martins et al., 2010a; Nomoto et al., 2010). Visbeidzot, daudzas norādes ir uztverami sarežģītas, un tām nepieciešama sīka pārbaude, lai stingri secinātu par to atlīdzības vērtību. Šādās situācijās DA atalgojuma signāli notiek ar ilgu latenci un pakāpeniski, kas atspoguļo pakāpenisku uztveres informācijas plūsmu, kad stimula vērtība tiek dekodēta (Nomoto et al., 2010).

Tikai kādus notikumus DA neironi uzskata par atalgojošiem? Parastās atalgojuma apguves teorijas liek domāt, ka DA neironi piešķir vērtību, pamatojoties uz paredzamo nākotnes primārās atlīdzības summu (Montague et al., 1996). Pat ja primārā atalgojuma likme tiek turēta nemainīga, cilvēki un dzīvnieki bieži pauž papildu priekšroku prognozējamībai - meklējot vidi, kurā katras atlīdzības lielums, varbūtība un laiks var būt iepriekš zināms (Dalijs, 1992; Košļā un Ho, 1994; Ahlbrehts un Vēbers, 1996). Nesenā pērtiķu pētījumā atklājās, ka DA neironi signalizē par šo izvēli (Brombergs-Martins un Hikosaka, 2009). Pērtiķi izteica stingru priekšroku skatīties informatīvas vizuālas norādes, kas ļautu viņiem paredzēt nākotnes atlīdzības lielumu, nevis neinformējošas norādes, kas nesniedza jaunu informāciju. Paralēli DA neironiem uzbudināja iespēja aplūkot informatīvās norādes veidā, kas bija saistīts ar dzīvnieka uzvedības izvēli (1B, D attēls). Tas liek domāt, ka DA neironi ne tikai motivē darbības, lai iegūtu atlīdzību, bet arī motivē darbības, lai izdarītu precīzas prognozes par šīm atlīdzībām, lai nodrošinātu, ka atlīdzību var pareizi paredzēt un iepriekš sagatavot.

Kopumā šie atklājumi liecina, ka DA atlīdzības prognozēšanas kļūdu signāli ir jutīgi pret sarežģītiem faktoriem, kas informē cilvēku un dzīvnieku atlīdzības prognozes, ieskaitot pielāgošanos augstas pakāpes atlīdzības statistikai, atlīdzības nenoteiktību un prediktīvās informācijas izvēli.

Fāzes dopamīna atlīdzības signālu ietekme uz pakārtotajām struktūrām

DA atalgojuma reakcijas notiek sinhronos fāziskos pārrāvumos (Džošua un citi, 2009b), reakcijas shēma, kas veido DA izdalīšanos mērķa struktūrās (Gonons, 1988; Zhang et al., 2009; Tsai et al., 2009). Jau sen tiek teorēts, ka šie fāziskie pārrāvumi ietekmē mācīšanos un motivāciju atšķirīgā veidā no tonizējošās DA aktivitātes (Grace, 1991; Grace et al., 2007; Schultz, 2007; Lapish et al., 2007). Nesen izstrādātā tehnoloģija ļāva apstiprināt šo hipotēzi, kontrolējot DA neironu darbību ar precīzu telpisko un laika precizitāti. VTA DA neironu optoģenētiskā stimulācija izraisa spēcīgu nosacītu vietas izvēli, kas notiek tikai tad, ja stimulācija tiek piemērota pārraušanas režīmā (Tsai et al., 2009). Un otrādi, DADA neironu NMDA receptoru ģenētiskā izgāšanās, kas pasliktina plīšanu, vienlaikus atstājot tonizējošu aktivitāti gandrīz neskartu, izraisa selektīvus traucējumus īpašās atalgojuma apguves formās (Zweifel et al., 2009; Parker et al., 2010) (lai gan ņemiet vērā, ka šis izsitums arī pasliktina DA neironu sinaptisko plastiskumu (Zweifel et al., 2008)). DA pārrāvumi var uzlabot atalgojuma apguvi, pārkonfigurējot vietējās neironu shēmas. Proti, atlīdzību prognozējošie DA pārrāvumi tiek nosūtīti uz noteiktiem kodolu akumulācijas kodoliem, un šiem reģioniem ir īpaši augsts atlīdzību prognozējošās neirālās aktivitātes līmenis (Cheer et al., 2007; Owesson-White et al., 2009).

Salīdzinot ar fāzes pārrāvumiem, mazāk ir zināms par fāzu paužu nozīmi aktivitātes palielināšanā negatīvu atlīdzības prognozēšanas kļūdu gadījumā. Šīs pauzes rada mazākas izmaiņas pieauguma tempā, tās mazāk modulē atalgojuma gaidīšana (Bayer un Glimcher, 2005; Džošua un citi, 2009a; Nomoto et al., 2010), un tam var būt mazāka ietekme uz mācīšanos (Rutledge et al., 2009). Tomēr dažiem negatīvu prognozēšanas kļūdu apguves veidiem ir nepieciešama VTA (Takahashi et al., 2009), kas liek domāt, ka pakārtotās struktūras joprojām var atšifrēt pauzes.

Tā kā pārrāvumi un pauzes izraisa ļoti atšķirīgus DA izdalīšanās modeļus, tie, iespējams, ietekmē atšķirīgus mehānismus pakārtotajās struktūrās. Nesen ir pierādījumi par šo hipotēzi vienā galvenajā DA neironu mērķī - muguras striatumā. Dorsālā striatum projekcijas neironi ir divu veidu, kas izsaka dažādus DA receptorus. Viens tips izsaka D1 receptorus un projicē bazālo gangliju “tiešo ceļu”, lai atvieglotu ķermeņa kustības; otrais tips izsaka D2 receptorus un projicē “netiešo ceļu” ķermeņa kustību nomākšanai (Skaitlis 2) (Albin et al., 1989; Gerfen et al., 1990; Kravitz et al., 2010; Hikida et al., 2010). Balstoties uz šo ceļu un receptoru īpašībām, tika teorēti, ka DA pārrāvumi rada augstas DA apstākļus, aktivizē D1 receptorus un liek tiešajam ceļam atlasīt augstas vērtības kustības (Attēls 2A), tā kā DA pauzes rada zemas DA apstākļus, kavē D2 receptorus un liek netiešajam ceļam nomākt mazvērtīgas kustības (Attēls 2B) (Frank, 2005; Hikosaka, 2007). Saskaņā ar šo hipotēzi, augsta DA receptoru aktivācija veicina kortikostriatīvas sinapses pastiprināšanos tiešajā ceļā (Shen et al., 2008) un mācīšanās no pozitīviem rezultātiem (Frank et al., 2004; Voon et al., 2010), bet striatālā D1 receptoru blokāde selektīvi kavē kustības pret apbalvotajiem mērķiem (Nakamura un Hikosaka, 2006). Līdzīgā veidā zema DA receptoru aktivācija veicina kortikostriatīvas sinapses pastiprināšanos uz netiešo ceļu (Shen et al., 2008) un mācīšanās no negatīviem rezultātiem (Frank et al., 2004; Voon et al., 2010), bet striatālā D2 receptoru blokāde selektīvi nomāc kustības uz nemērķētiem mērķiem (Nakamura un Hikosaka, 2006). Šis D1 un D2 receptoru funkciju sadalījums motivācijas kontrolē izskaidro daudzos ar DA saistīto gēnu ietekmi uz cilvēka uzvedību (Ullsperger, 2010; Frenks un Fossella, 2010) un var pārsniegt muguras striatumu, jo ir pierādījumi par līdzīgu darba dalīšanu vēdera striatumā (Grace et al., 2007; Lobo et al., 2010).

 

Skaitlis 2

Dopamīna pozitīvas un negatīvas motivācijas kontrole muguras smadzenēs

Lai gan iepriekšminētā shēma attēlo vienkāršu DA fāziskās uzvedības kontroles ainu, pateicoties tās ietekmei uz striatum, viss attēls ir daudz sarežģītāks. DA ietekmē ar atlīdzību saistīto izturēšanos, iedarbojoties uz daudziem smadzeņu reģioniem, ieskaitot prefrontālo garozu (Hitchcott et al., 2007), rhinal cortex (Liu et al., 2004), hipokamps (Packard un White, 1991; Grecksch un Matties, 1981) un amigdala (Phillips et al., 2010). DA iedarbība šajos reģionos, iespējams, ir ļoti atšķirīga, ņemot vērā DA inervācijas blīvuma, DA transportieru, metabolisko enzīmu, autoreceptoru, receptoru un receptoru savienošanās ar intracelulāriem signālceļiem atšķirības (Neve et al., 2004; Bentivoglio un Morelli, 2005; Frenks un Fossella, 2010). Turklāt vismaz VTA DA neironiem var būt dažādas šūnu īpašības atkarībā no to projekcijas mērķiem (Lammel et al., 2008; Margolis et al., 2008), un dažiem ir ievērojama spēja pārnest glutamātu, kā arī dopamīnu (Descarries et al., 2008; Chuhma et al., 2009; Hnasko et al., 2010; Tecuapetla et al., 2010; Stubers et al., 2010; Birgner et al., 2010). Tādējādi tikai sāk parādīties DA neironu kontrole pār neironu apstrādi.

Dažādas dopamīna reakcijas uz nelabvēlīgiem notikumiem

Neirona reakcija uz nelabvēlīgiem notikumiem nodrošina būtisku tā funkciju pārbaudi motivācijas kontrolē (Schultz, 1998; Berridge un Robinson, 1998; Redgrave et al., 1999; Horvitz, 2000; Joseph et al., 2003). Daudzos aspektos mēs izturamies pret atalgojošiem un nelabvēlīgiem notikumiem pretējā veidā, atspoguļojot to pretējos motivācijas vērtība. Mēs meklējam atlīdzību un piešķiram viņiem pozitīvu vērtību, vienlaikus izvairoties no nelabvēlīgiem notikumiem un piešķirot tiem negatīvu vērtību. Citos aspektos mēs izturamies pret atalgojošiem un nelabvēlīgiem notikumiem līdzīgā veidā, atspoguļojot tos līdzīgos motivējoša interese [FOOTNOTE1]. Gan atalgojoši, gan nelabvēlīgi notikumi izraisa uzmanības koncentrēšanu, kognitīvo apstrādi un paaugstina vispārējo motivāciju.

Kuras no šīm funkcijām atbalsta DA neironi? Jau sen ir zināms, ka stresa un aversīva pieredze izraisa lielas DA koncentrācijas izmaiņas smadzeņu pakārtotajās struktūrās un ka uzvedības reakcijas uz šo pieredzi dramatiski maina DA agonisti, antagonisti un bojājumi (Salamone, 1994; Di Chiara, 2002; Pezze un Feldon, 2004; Young et al., 2005). Šie pētījumi ir devuši pārsteidzošu rezultātu dažādību (Levita et al., 2002; Di Chiara, 2002; Young et al., 2005). Daudzi pētījumi saskan ar DA neironiem, kas kodē motivējošu faktoru. Viņi ziņo, ka nepatīkami notikumi palielina DA līmeni un ka izturēšanos pret izturēšanos veicina augsts DA pārnešanas līmenis (Salamone, 1994; Joseph et al., 2003; Ventura et al., 2007; Barr et al., 2009; Fadok et al., 2009), ieskaitot pakāpeniskus DA pārrāvumus (Zweifel et al., 2009). Bet citi pētījumi vairāk atbilst DA neironiem, kas kodē motivācijas vērtību. Viņi ziņo, ka nepatīkami notikumi samazina DA līmeni un ka izturēšanos pret izturēšanos atbalsta zems DA pārnešanas līmenis (Mark et al., 1991; Shippenberg et al., 1991; Liu et al., 2008; Roitman et al., 2008). Daudzos gadījumos šie jauktie rezultāti tika atrasti atsevišķos pētījumos, norādot, ka negatīva pieredze izraisa atšķirīgus DA izdalīšanās modeļus dažādās smadzeņu struktūrās (Thierry et al., 1976; Besons un Luilots, 1995; Ventura et al., 2001; Jeanblanc et al., 2002; Bassareo et al., 2002; Pascucci et al., 2007) un ka ar DA saistītās zāles var radīt neironu un uzvedības efektu sajaukumu, kas līdzīgs tam, ko izraisa gan atalgojoša, gan aversīva pieredze (Ettenbergs, 2004; Wheeler et al., 2008).

Šo DA izdalīšanās veidu un funkciju dažādību ir grūti saskaņot ar domu, ka DA neironi pārraida vienotu motivācijas signālu visām smadzeņu struktūrām. Šīs dažādās reakcijas tomēr varētu izskaidrot, ja DA neironi paši ir dažādi - sastāv no vairākām neironu populācijām, kas atbalsta dažādus aversīvas apstrādes aspektus. Šo viedokli apstiprina neironu reģistrēšanas pētījumi anestēzijas dzīvniekiem. Šie pētījumi parādīja, ka kaitīgie stimuli dažos DA neironos izraisa ierosmi, bet citos DA neironos kavē (Chiodo et al., 1980; Maeda un Mogensons, 1982; Schultz un Romo, 1987; Mantz et al., 1989; Gao et al., 1990; Coizet et al., 2006). Svarīgi, ka gan ierosinošā, gan inhibējošā reakcija notiek neironos, kas apstiprināti kā dopamīnerģiski, izmantojot suxtacellular marķējumu (Brischoux et al., 2009) (Skaitlis 3). Līdzīga aversīvu reakciju dažādība notiek aktīvas izturēšanās laikā. Dažādas DA neironu grupas tiek pakāpeniski ierosinātas vai kavētas ar nelabvēlīgiem notikumiem, ieskaitot kaitīgu ādas stimulēšanu (Kijatkins, 1988a; Kijatkins, 1988b), sensoro cēloņi, kas prognozē nepatīkamus satricinājumus (Guarraci un Kapp, 1999), aversīvie gaisa pulveri (Matsumoto un Hikosaka, 2009b) un maņu niansēm, kas prognozē nepatīkamas gaisa pūtītes (Matsumoto un Hikosaka, 2009b; Džošua un citi, 2009a). Turklāt, ja vienlaikus reģistrē divus DA neironus, to aversīvajām atbildēm parasti ir maza korelācija viena ar otru (Džošua un citi, 2009b), kas liek domāt, ka negatīvās atbildes netiek koordinētas visā DA populācijā.

 

Skaitlis 3

Dažādas dopamīna neironu reakcijas uz nelabvēlīgiem notikumiem

Lai saprastu šo dažādo aversīvo atbilžu funkcijas, mums jāzina, kā tās tiek apvienotas ar atlīdzības atbildēm, lai radītu jēgpilnu motivācijas signālu. Nesenā pētījumā tika pētīta šī tēma un atklāts, ka DA neironi ir sadalīti vairākās populācijās ar atšķirīgiem motivācijas signāliem (Matsumoto un Hikosaka, 2009b). Vienu iedzīvotāju satrauc atalgojošie notikumi, un to kavē nepatīkami notikumi, it kā kodējot motivācijas vērtība (Attēls 4A). Otru populāciju satrauc gan atalgojoši, gan nepatīkami notikumi līdzīgā veidā, it kā kodējot motivējoša interese (Attēls 4B). Abās no šīm populācijām daudzi neironi ir jutīgi pret atalgojumu un aversīvām prognozēm: tie reaģē, kad atalgojošie notikumi ir atalgojošāki nekā prognozēts un kad aversīvie notikumi ir satraucošāki, nekā prognozēts (Matsumoto un Hikosaka, 2009b). Tas parāda, ka viņu aversīvās atbildes patiesi izraisa prognozes par nelabvēlīgiem notikumiem, izslēdzot iespēju, ka tos varētu izraisīt nespecifiski faktori, piemēram, neapstrādāta maņu ievade vai vispārīgas asociācijas ar atlīdzību (Schultz, 2010). Šīs divas populācijas tomēr atšķiras ar to paredzamā koda detalizēto raksturu. Motivējošo vērtību kodējošie DA neironi kodē precīzu prognozes kļūdas signālu, ieskaitot spēcīgu kavēšanu, ja netiek nodrošināta atlīdzība, un vieglu ierosmi, ja netiek ievēroti negatīvi notikumi (Attēls 4A, pa labi). Turpretī motivējošie fizioloģisko faktoru kodējošie DA neironi reaģē, kad notiek nozīmīgi notikumi, bet ne tad, kad to nav (Attēls 4B, pa labi), atbilstoši teorētiskiem satraukuma priekšstatiem (Langs un Deiviss, 2006) [FOOTNOTE2]. Pierādījumi par šīm divām DA neironu populācijām ir novēroti pat tad, ja neironu aktivitāte ir pārbaudīta vidēji. Tādējādi pētījumos, kas vērsti uz dažādām DA sistēmas daļām, tika atklāti fāzes DA signāli, kas kodē aversīvus notikumus ar kavēšanu (Roitman et al., 2008), līdzīgi motivācijas vērtības kodēšanai vai ar ierosmi (Džošua un citi, 2008; Anstrom et al., 2009), kas līdzīgs motivējošas uzmanības kodēšanai.

 

Skaitlis 4

Atšķirīgas dopamīna neironu populācijas, kas kodē motivācijas vērtību un nozīmīgumu

Šie jaunākie atklājumi varētu šķist pretrunā ar agrīno ziņojumu, ka DA neironi galvenokārt reaģē uz atlīdzību, nevis aversīvām norādēm (Mirenowicz un Schultz, 1996). Tomēr, ja to rūpīgi pārbauda, ​​pat šis pētījums pilnībā atbilst DA vērtības un galvenās vērtības kodēšanai. Šajā pētījumā atlīdzības norādes ar lielu varbūtību (> 90%) noveda pie atlīdzības rezultātiem, savukārt aversīvas norādes noveda pie aversīviem rezultātiem ar mazu varbūtību (<10%). Tādējādi vērtībai un uzmanību pievilcīgajiem DA neironiem būtu maz atbildes uz aversīvām norādēm, precīzi kodējot viņu zemo aversivitātes līmeni.

Motivācijas vērtības un svarīguma signālu funkcionālā loma

Kopumā iepriekš minētie atklājumi norāda, ka DA neironi ir sadalīti vairākās populācijās, kas piemērotas atšķirīgām lomām motivācijas kontrolē. Motivējošo vērtību kodējošie DA neironi labi atbilst pašreizējām dopamīna neironu teorijām un atalgojuma apstrādei (Schultz et al., 1997; Berridge un Robinson, 1998; Gudrs, 2004). Šie neironi kodē pilnīgu prognozēšanas kļūdas signālu un kodē atlīdzinošus un aversīvus notikumus pretējos virzienos. Tādējādi šie neironi nodrošina piemērotu pamācošu signālu meklēšanai, novērtēšanai un vērtību apguvei (Skaitlis 5). Ja stimuls izraisa vērtības kodēšanas DA neironu satraukumu, tad mums vajadzētu tuvināties tam, piešķirt tam augstu vērtību un mācīties darbības, lai to atkal meklētu nākotnē. Ja stimuls izraisa DA DA vērtības neironu kodēšanu, tad no tā vajadzētu izvairīties, piešķirt tam mazu vērtību un mācīties darbības, lai nākotnē no tā atkal izvairītos.

 

Skaitlis 5

Hipotizētas motivācijas vērtības, uzmanības un trauksmes signālu funkcijas

Turpretī motivējošie fizioloģiskie apstākļi, kas kodē DA neironus, labi saskan ar dopamīna neironu teorijām un svarīgāko notikumu apstrādi (Redgrave et al., 1999; Horvitz, 2000; Joseph et al., 2003; Kapura, 2003). Šos neironus uzbudina gan atalgojošie, gan aversīvie notikumi, un tiem ir vājāka reakcija uz neitrālajiem notikumiem, nodrošinot atbilstošu pamācošu signālu neironu shēmai, lai iemācītos atklāt, paredzēt un reaģēt uz ļoti svarīgām situācijām. Šeit mēs apskatīsim trīs šādas smadzeņu sistēmas (Skaitlis 5). Pirmkārt, neironu shēmas vizuālai un uzmanības orientēšanai tiek kalibrētas, lai atklātu informāciju par visiem notikumu veidiem, gan atalgojošiem, gan satraucošiem. Piemēram, gan atlīdzinošie, gan nepatīkamie norādījumi efektīvāk piesaista orientējošās reakcijas nekā neitrālie norādījumi (Langs un Deiviss, 2006; Matsumoto un Hikosaka, 2009b; Austin un Duka, 2010). Otrkārt, gan atalgojošās, gan aversīvās situācijās neironu sistēmas tiek iesaistītas kognitīvajā kontrolē un darbību atlasē - mums jāiesaista darba atmiņa, lai paturētu prātā informāciju, konfliktu risināšana, lai izlemtu par darbības virzienu, un ilgtermiņa atmiņa, lai atcerētos iegūto rezultātu (Bradley et al., 1992; Botvinick et al., 2001; Savine et al., 2010). Treškārt, gan atalgojošām, gan nepatīkamām situācijām ir nepieciešama vispārēja motivācija palielināt darbības un nodrošināt to pareizu izpildi. DA neironiem ir liela nozīme, motivējot centienus sasniegt augstvērtīgus mērķus un pārvēršot zināšanas par uzdevumu prasībām ticamā motora darbībā (Berridge un Robinson, 1998; Mazzoni et al., 2007; Niv et al., 2007; Salamone et al., 2007).

Dopamīna ierosināšana, brīdinot par maņu norādēm

Papildus to signāliem, kas kodē motivējošo vērtību un pievilcību, lielākajai daļai DA neironu ir arī pārsprāgtas reakcijas uz vairāku veidu sensoro notikumiem, kas nav tieši saistīti ar atalgojošu vai nepatīkamu pieredzi. Šīs atbildes tika teorētiski atkarīgas no vairākiem neironu un psiholoģiskiem faktoriem, ieskaitot tiešu maņu ievadi, pārsteigumu, novitāti, satraukumu, uzmanību, uzmanības sajūtu, vispārināšanu un pseido kondicionēšanu (Schultz, 1998; Redgrave et al., 1999; Horvitz, 2000; Lisman un Grace, 2005; Redgrave un Gurney, 2006; Džošua un citi, 2009a; Schultz, 2010).

Šeit mēs centīsimies sintezēt šīs idejas un ņemt vērā šīs DA atbildes viena vienīga pamata signāla, an trauksmes signāls (Skaitlis 5). Terminu “trauksme” izmantoja Schultz (Schultz, 1998) kā vispārēju apzīmējumu notikumiem, kas piesaista uzmanību. Šeit mēs to izmantosim precīzākā nozīmē. Ar trauksmes signālu mēs domājam negaidītu maņu norādi, kas piesaista uzmanību, pamatojoties uz ātru tās iespējamās nozīmes novērtējumu, izmantojot vienkāršas pazīmes, piemēram, atrašanās vietu, lielumu un maņu veidu. Šādi trauksmes gadījumi bieži izraisa tūlītējas uzvedības reakcijas, lai tos izmeklētu un noteiktu to precīzo nozīmi. Tādējādi DA trauksmes signāli parasti rodas ar nelielu latentumu, balstās uz stimula aptuvenām iezīmēm un vislabāk korelē ar tūlītējām reakcijām, piemēram, orientējošām reakcijām (Schultz un Romo, 1990; Džošua un citi, 2009a; Schultz, 2010). Tas ir pretstatā citiem motivācijas signāliem DA neironos, kas parasti rodas ar ilgāku latenci, ņem vērā precīzu stimula identitāti un ir vislabāk korelēti ar apsvērtām uzvedības darbībām, piemēram, lēmumiem tuvoties vai no tiem izvairīties (Schultz un Romo, 1990; Džošua un citi, 2009a; Schultz, 2010).

DA trauksmes reakcijas var izraisīt pārsteidzoši sensoro notikumi, piemēram, negaidīti gaismas zibspuldzes un dzirdami klikšķi, kas izraisa ievērojamu eksplozijas ierosmi 60 – 90% DA neironu visā SNc un VTA (Strekers un Džeikobs, 1985; Horvitz et al., 1997; Horvitz, 2000) (Attēls 6A). Šīs trauksmes reakcijas, šķiet, atspoguļo pakāpi, kādā stimuls ir pārsteidzošs un piesaista uzmanību; tie tiek samazināti, ja stimuls notiek paredzamā laikā, ja uzmanība tiek piesaistīta citur vai miega laikā (Schultz, 1998; Takikawa et al., 2004; Strekers un Džeikobs, 1985; Steinfels et al., 1983). Piemēram, neparedzēta klikšķa skaņa izsauc pamanāmu DA eksploziju, kad kaķis ir pasīvā klusā pamošanās stāvoklī, bet tam nav nekādas ietekmes, ja kaķis nodarbojas ar uzmanību piepratošām darbībām, piemēram, medī žurku, baro, kopj, izmitina eksperimentētājs utt. (Strekers un Džeikobs, 1985) (Attēls 6A). Līdzīgi DA pārrāvuma reakcijas izsauc maņu notikumi, kas ir fiziski vāji, bet ir trauksmes to novitātes dēļ (Ljungberg et al., 1992; Schultz, 1998). Šīs reakcijas pierod, jo jaunais stimuls kļūst pazīstams, paralēli orientējošo reakciju (Attēls 6B). Saskaņā ar šiem atklājumiem pārsteidzoši un jauni notikumi izraisa DA izdalīšanos pakārtotajās struktūrās (Lisman un Grace, 2005) un aktivizē ar DA saistītas smadzeņu shēmas veidā, kas veido atlīdzību apstrādi (Zink et al., 2003; Davidson et al., 2004; Duzel et al., 2010).

 

Skaitlis 6

Dopamīna neironu ierosinošās reakcijas uz trauksmes gadījumiem

DA trauksmes reakcijas izraisa arī negaidītas maņu norādes, kurām ir potenciāls sniegt jaunu informāciju par motivējoši nozīmīgiem notikumiem. Kā paredzēts īslaicīga brīdinājuma signālam, šīs reakcijas ir diezgan neselektīvas: tās izraisa jebkurš stimuls, kas tikai atgādina motivējoši nozīmīga norāde, pat ja līdzība ir ļoti neliela (parādību sauc par vispārinājumu) (Schultz, 1998). Tā rezultātā DA neironi uz stimulu bieži reaģē ar divu signālu sajaukumu: ātras trauksmes signāls, kas kodē faktu, ka stimuls ir potenciāli svarīgs, un otrs signāls, kas to kodē faktisks apbalvojoša vai aversīva nozīme (Schultz un Romo, 1990; Waelti et al., 2001; Tobler et al., 2003; Day et al., 2007; Kobajaši un Šulcs, 2008; Fiorillo et al., 2008; Nomoto et al., 2010) (skatīt (Kakade un Dayan, 2002; Džošua un citi, 2009a; Schultz, 2010) pārskatīšanai). Kā piemēru var redzēt motivējošu pievilcību, kas kodē DA neironus, kas parādīts Attēls 6C (Brombergs-Martins et al., 2010a). Šie neironi bija satraukti ar atlīdzību un nepatiku, bet arī ar neitrālu norādi. Neitrālā norāde nekad nebija savienota pārī ar motivācijas rezultātiem, taču tai bija (ļoti neliela) fiziska līdzība ar atlīdzību un nepatīkamām norādēm.

Šīs trauksmes reakcijas, šķiet, ir cieši saistītas ar sensoro bišu spēju izraisīt orientējošas reakcijas, lai to tālāk izpētītu un atklātu tā nozīmi. To var redzēt trīs ievērojamās īpašībās. Pirmkārt, trauksmes reakcijas rodas tikai sensoro zīmēm, kuras ir jāpārbauda, ​​lai noteiktu to nozīmi, nevis attiecībā uz patiesi labvēlīgiem vai satraucošiem notikumiem, piemēram, sulas vai gaisa pūtīšu piegādi (Schultz, 2010). Otrkārt, trauksmes reakcijas rodas tikai tad, ja norāde ir potenciāli nozīmīga un tai ir spēja izraisīt orientējošas reakcijas, nevis tad, ja norāde nav būtiska attiecīgajam uzdevumam un neizraisa orientējošas reakcijas (Schultz un Romo, 1990). Treškārt, trauksmes reakcijas tiek pastiprinātas situācijās, kad norādes izraisītu pēkšņu uzmanības maiņu - kad tās parādās negaidītā laikā vai prom no skatiena centra (Brombergs-Martins et al., 2010a). Tādējādi, kad motivējošās norādes tiek uzrādītas ar neparedzamu laika grafiku, tās izraisa tūlītēju orientējošu reakciju un vispārinātu DA trauksmes reakciju - visu norāžu, ieskaitot neitrālas norādes, ierosmi (Attēls 6C, melns). Bet, ja viņu laiks tiek padarīts paredzams - piemēram, brīdinot subjektus ar “izmēģinājuma sākuma norādi”, kas tiek uzrādīta vienu sekundi pirms norāžu parādīšanās, - norādes vairs neizraisa trauksmes signālu (6D attēls, pelēks). Tā vietā trauksmes reakcija pāriet uz izmēģinājuma sākuma norādi - pirmo izmēģinājuma notikumu, kuram ir neparedzams laiks un kas izraisa orientējošas reakcijas (6D attēls, melns).

Kāds ir pamatā esošais mehānisms, kas ģenerē DA neironu trauksmes signālus? Viena hipotēze ir tāda, ka trauksmes reakcijas ir vienkārši parastie atlīdzības prognozēšanas kļūdas signāli, kas rodas ar nelielu latentumu, kodējot stimulētā sagaidāmo atlīdzības vērtību, pirms tā ir pilnībā diskriminēta (Kakade un Dayan, 2002). Jaunāki pierādījumi tomēr liecina, ka trauksmes signālus var radīt atšķirīgs mehānisms no parastajiem DA atlīdzības signāliem (Satoh et al., 2003; Bayer un Glimcher, 2005; Brombergs-Martins et al., 2010a; Brombergs-Martins et al., 2010c; Nomoto et al., 2010). Pārsteidzošāk, ka trauksmes reakcija uz izmēģinājuma sākuma norādi neaprobežojas tikai ar uzdevumu apbalvošanu; tam var būt vienāds spēks nepatīkamā uzdevumā, kurā netiek pasniegta atlīdzība (6C attēls, D, apakšā, “nepatīkams uzdevums”). Tas notiek pat tad, ja parastie DA atlīdzības signāli tajos pašos neironos pareizi norāda, ka atalgojuma uzdevumam ir daudz augstāka paredzētā vērtība nekā aversīvajam uzdevumam (Brombergs-Martins et al., 2010a). Šie trauksmes signāli nav tikai vērtības kodēšanas forma vai tīri izteikta koda kodēšanas forma, jo tie notiek gan motivācijas vērtības, gan fiziskās aktivitātes kodēšanas DA neironu lielākajā daļā (Brombergs-Martins et al., 2010a). Otro disociāciju var redzēt tādā veidā, ka DA neironi paredz nākotnes atalgojumu, pamatojoties uz pagātnes atalgojuma iznākumu atmiņu (Satoh et al., 2003; Bayer un Glimcher, 2005). Tā kā parastos DA atlīdzības signālus kontrolē ilgstoša atmiņas izsekošana, kas optimizēta precīzai atlīdzības prognozēšanai, trauksmes reakcijas uz izmēģinājuma sākuma norādi kontrolē ar atsevišķu atmiņas izsekošanu, kas atgādina to, kas redzams tūlītējās orientēšanās reakcijās (Brombergs-Martins et al., 2010c). Trešo disociāciju var redzēt tādā veidā, ka šie signāli tiek sadalīti pa DA neironu populāciju. Tā kā parastie DA atlīdzības signāli ir visspēcīgākie ventromediālajā SNc, visā SNc tiek pārraidītas trauksmes reakcijas uz izmēģinājuma sākuma norādi (un citām negaidīti laikiestatītām norādēm) (Nomoto et al., 2010).

Pretstatā šīm disociācijām no parastajiem atlīdzības signāliem DA trauksmes signāli ir korelēti ar trauksmes notikuma orientēšanās ātrumu un tuvošanās reakcijām (Satoh et al., 2003; Brombergs-Martins et al., 2010a; Brombergs-Martins et al., 2010c). Tas liek domāt, ka trauksmes signālus rada neirāls process, kas motivē ātri reaģēt, lai izmeklētu potenciāli svarīgus notikumus. Pašlaik diemžēl ir samērā maz zināms, tieši kādus notikumus šis process uzskata par “svarīgiem”. Piemēram, vai trauksmes reakcijas ir vienlīdz jutīgas pret atalgojošiem un pretējiem notikumiem? Ir zināms, ka trauksmes reakcijas rodas stimuliem, kas līdzinās atlīdzību norādēm vai kas atgādina gan atlīdzību, gan nepatiku (piemēram, daloties vienā un tajā pašā maņu modalitātē). Bet vēl nav zināms, vai notiek trauksmes reakcijas uz stimuliem, kas tikai atgādina nepatīkamas norādes.

Dopamīna trauksmes signālu funkcionālā nozīme

Kā redzējām, trauksmes signālus, visticamāk, ģenerēs atšķirīgs mehānisms no motivācijas vērtības un svarīgākajiem signāliem. Tomēr trauksmes signāli tiek nosūtīti gan motivējošai vērtībai, gan veselīgumu kodējošiem DA neironiem, un tāpēc tie, iespējams, smadzeņu apstrādi un uzvedību regulē līdzīgi vērtību un jutīguma signāliem (Skaitlis 5).

Brīdinājuma signāli, kas tiek nosūtīti uz motivējošiem fiziskās aktivitātes kodēšanas DA neironiem, atbalstītu uzmanības koncentrēšanu uz trauksmes stimulu, kognitīvo resursu piesaisti, lai atklātu tā nozīmi un izlemtu par rīcības plānu, kā arī paaugstinātu motivācijas līmeni šī plāna efektīvai īstenošanai (Skaitlis 5). Šīs sekas varētu rasties, tūlītēji ietekmējot neironu apstrādi, vai pastiprinot darbības, kuru rezultātā tika atklāts trauksmes notikums. Šī funkcionālā loma labi atbilst korelācijai starp DA trauksmes reakcijām un ātras uzvedības reakcijām uz trauksmes stimulu, kā arī teorijām, ka īslaicīgas DA neironu reakcijas ir iesaistītas uzmanības virzīšanā, uzbudināšanā, izziņas apstrādes uzlabošanā un tūlītējās uzvedības reakcijās (Redgrave et al., 1999; Horvitz, 2000; Joseph et al., 2003; Lisman un Grace, 2005; Redgrave un Gurney, 2006; Džošua un citi, 2009a).

Trauksmes signālu klātbūtne motivācijas vērtību kodēšanas DA neironos ir grūtāk izskaidrojama. Šie neironi pārraida motivācijas vērtību signālus, kas ir ideāli meklēšanai, rezultātu novērtēšanai un vērtību apguvei; tomēr viņus var satraukt arī trauksmes signāli, piemēram, negaidītas noklikšķināšanas skaņas un nepatīkamu izmēģinājumu sākums. Saskaņā ar mūsu hipotēziSkaitlis 5), tas izraisītu, ka trauksmes signāliem tiek piešķirta pozitīva vērtība un tie tiek meklēti līdzīgi kā atlīdzība! Kaut arī no pirmā acu uzmetiena tas ir pārsteidzoši, ir iemesls aizdomām, ka trauksmes celšanas notikumus var uzskatīt par pozitīviem mērķiem. Trauksmes signāli ir pirmais brīdinājums par potenciāli nozīmīga notikuma iestāšanos un tādējādi sniedz pirmo iespēju rīkoties, lai kontrolētu šo notikumu. Ja ir pieejamas brīdināšanas norādes, motivējoši nozīmīgus notikumus var atklāt, paredzēt un iepriekš sagatavot; ja nav brīdinošu norāžu, motivējoši nozīmīgi notikumi vienmēr notiek kā negaidīts pārsteigums. Patiešām, cilvēki un dzīvnieki bieži dod priekšroku videi, kurā var novērot un iepriekš paredzēt atalgojošus, nepatīkamus un pat motivējoši neitrālus maņu notikumus (Badia et al., 1979; Herijs un citi, 2007; Dalijs, 1992; Košļā un Ho, 1994) un daudzi DA neironi signalizē par uzvedības izvēli, lai apskatītu atlīdzību prognozējošo informāciju (Brombergs-Martins un Hikosaka, 2009). DA trauksmes signāli var atbalstīt šīs preferences, piešķirot pozitīvu vērtību videi, kurā jau iepriekš var paredzēt potenciāli svarīgas maņu norādes.

Vērtību un izpausmes kodējošo neironu anatomiskās atrašanās vietas

Nesen veikts pētījums kartēja DA atlīdzības un aversīvo signālu atrašanās vietas smadzeņu sānu vidusdaļā, ieskaitot SNc un VTA sānu daļu (Matsumoto un Hikosaka, 2009b). Motivācijas vērtība un motivācijas signāli tika sadalīti visā reģionā anatomiskā gradientā. Motivācijas vērtības signāli biežāk tika konstatēti ventromedialā SNc un sānu VTA neironos, savukārt motivācijas signāli biežāk tika atrasti dorsolaterālā SNc neironos (Attēls 7B). Tas saskan ar ziņojumiem, ka DA atlīdzības vērtības kodēšana ir visstiprākā ventromedial SNc (Nomoto et al., 2010), kamēr aversīvie ierosinājumi mēdz būt visstiprākie vairāk (Mirenowicz un Schultz, 1996). Citos pētījumos ir izpētīta mediālāka vidējā smadzeņu daļa. Šajos pētījumos tika atklāts uzbudinošo un kavējošo aversīvo reakciju sajaukums bez būtiskām atšķirībām to atrašanās vietās, lai arī ar tendenci, ka aversīvie ierosinājumi atrodas vairāk ventrālā virzienā (Guarraci un Kapp, 1999; Brischoux et al., 2009) (Attēls 7C).

Motivācijas vērtību signālu mērķi

Saskaņā ar mūsu hipotēzi, motivējošo vērtību kodējošajiem DA neironiem vajadzētu izplūst smadzeņu reģionos, kas iesaistīti pieejas un izvairīšanās darbībās, rezultātu novērtēšanā un vērtību apguvē (Skaitlis 5). Patiešām, ventromedial SNc un VTA projektē ventromedial prefrontālo garozu (Viljamss un Goldmans-Rakiks, 1998), ieskaitot orbitofrontālo garozu (OFC) (Porrino un Goldman-Rakic, 1982) (Attēls 7A). OFC ir konsekventi iesaistīts vērtību kodēšanā funkcionālā attēlveidošanas pētījumos (Anderson et al., 2003; Small et al., 2003; Jensen et al., 2007; Litt et al., 2010) un viena neirona ieraksti (Morisons un Salzmans, 2009; Roesch un Olson, 2004). Tiek domāts, ka OFC novērtē izvēles iespējas (Padoa-Schioppa, 2007; Kable un Glimcher, 2009), kodēt iznākuma cerības (Schoenbaum et al., 2009) un atjauniniet šīs cerības mācīšanās laikā (Walton et al., 2010). Turklāt OFC ir iesaistīts mācībās no negatīvām atlīdzības prognozēšanas kļūdām (Takahashi et al., 2009), kas ir visspēcīgākie vērtību kodējošajos DA neironos (Skaitlis 4).

Turklāt vidējā smadzeņu dopamīnerģiskā daļa nonāk ventrālajā striatumā, ieskaitot nucleus carrbens apvalku (NAc apvalks) (Haber et al., 2000) (Attēls 7A). Nesenais pētījums parādīja, ka NAc apvalks saņem DA fāzes signālus, kas kodē garšas rezultātu motivācijas vērtību (Roitman et al., 2008). Šie signāli, iespējams, izraisa vērtību apguvi, jo tieša DA zāļu infūzija NAc apvalkā spēcīgi pastiprina (Ikemoto, 2010), kamēr procedūras, kas samazina DA ievadīšanu apvalkā, var izraisīt nepatiku (Liu et al., 2008). Viens brīdinājums ir tāds, ka NAc čaulas DA izdalīšanās pētījumi ilgos laika periodos (minūtēs) ir devuši atšķirīgus rezultātus, daži atbilst vērtības kodēšanai, bet citi - īslaicīgai kodēšanai (piemēram, (Bassareo et al., 2002; Ventura et al., 2007)). Tas liek domāt, ka vērtību signālus var ierobežot līdz noteiktām vietām NAc apvalkā. Proti, dažādi NAc apvalka reģioni ir specializēti ēstgribas un aversīvas uzvedības kontrolei (Reynolds un Berridge, 2002), kas abiem prasa ievadi no DA neironiem (Faure et al., 2008).

Visbeidzot, DA neironi visā SNc apjomā sūta smagas projekcijas uz muguras striatum (Haber et al., 2000), kas liek domāt, ka muguras striatums var saņemt gan motivējošu vērtību, gan vēlamo kodu DA signālus (Attēls 7A). Motivējoši vērtību kodējošie DA neironi sniegtu ideālu pamācošu signālu striatūrajai shēmai, kas iesaistīta vērtību apgūšanā, piemēram, stimulēšanas un reakcijas ieradumu apgūšanai (Faure et al., 2005; Yin un Knowlton, 2006; Balleine un O'Doherty, 2010). Kad šie DA neironi pārsprāgst, viņi iesaistīsies tiešā ceļā, lai iemācītos gūt atlīdzību; pauzējot, viņi iesaistītos netiešā veidā, lai iemācītos izvairīties no nelabvēlīgiem rezultātiem (Skaitlis 2). Patiešām, nesen ir pierādījumi, ka striatīvas ceļi precīzi seko šai darba dalīšanai atlīdzībai un aversīvai apstrādei (Hikida et al., 2010). Tomēr joprojām nav zināms, kā šajos ceļos esošie neironi reaģē uz atalgojošiem un satraucošiem notikumiem uzvedības laikā. Vismaz muguras smadzenēs kopumā neironu apakškopa reaģē uz noteiktiem atlīdzinošiem un aversīviem notikumiem atšķirīgā veidā (Ravel et al., 2003; Yamada et al., 2004, 2007; Džošua un citi, 2008).

Motivācijas signālu mērķi

Saskaņā ar mūsu hipotēzi, motivējošiem pievilcības kodēšanas DA neironiem vajadzētu izplūst smadzeņu reģionos, kas iesaistīti orientācijā, izziņas apstrādē un vispārējā motivācijā (Skaitlis 5). Patiešām, DA neironi dorsolaterālajā vidējā smadzenē sūta projekcijas uz muguras un sānu frontālo garozu (Viljamss un Goldmans-Rakiks, 1998) (Attēls 7A), reģions, kas iesaistīts tādās izziņas funkcijās kā uzmanības meklēšana, darba atmiņa, kognitīvā kontrole un lēmumu pieņemšana starp motivācijas rezultātiem (Viljamss un Kastners, 2006; Lī un Seo, 2007; Gudrs, 2008; Kable un Glimcher, 2009; Voliss un Kennerlijs, 2010). Dorsolaterālās prefrontālās kognitīvās funkcijas stingri regulē DA līmeņi (Robbins un Arnsten, 2009) un ir teorēti, ka tie ir atkarīgi no DA fāzes neironu aktivizācijas (Cohen et al., 2002; Lapish et al., 2007). Proti, sānu prefrontālo neironu apakškopa reaģē gan uz atlīdzinošajiem, gan aversīvajiem vizuālajiem norādījumiem, un lielākais vairums reaģē tajā pašā virzienā, kas atgādina motivējošas ievirzes kodēšanu (Kobayashi et al., 2006). Turklāt šo neironu aktivitāte ir saistīta ar panākumiem uzvedībā, veicot darba atmiņas uzdevumus (Kobayashi et al., 2006). Kaut arī šis dorsolaterālais DA → dorsolateral frontālās garozas ceļš šķiet raksturīgs primātiem (Viljamss un Goldmans-Rakiks, 1998), funkcionāli līdzīgs ceļš var būt arī citām sugām. Proti, daudzas primātu dorsolaterālās prefrontālās garozas kognitīvās funkcijas veic grauzēju mediālais prefrontālais garozs (Uylings et al., 2003), un ir pierādījumi, ka šis reģions saņem DA motivācijas signālus un kontrolē uzvedību (Mantz et al., 1989; Di Chiara, 2002; Joseph et al., 2003; Ventura et al., 2007; Ventura et al., 2008).

Ņemot vērā pierādījumus, ka VTA satur gan ievērojamu, gan vērtību kodējošu neironu un ka vērtību kodēšanas signāli tiek nosūtīti uz NAc apvalku, svarīguma signālus var nosūtīt uz NAc kodolu (Attēls 7A). Patiešām, NAc kodols (bet ne apvalks) ir izšķirīgs, lai motivētu pārvarēt atbildes izmaksas, piemēram, fizisko piepūli; komplektējošo maiņu uzdevumu veikšanai, kuriem nepieciešama izziņas elastība; un lai atlīdzības norādes varētu uzlabot vispārējo motivāciju (Ghods-Sharifi un Floresco, 2010; Floresco et al., 2006; Hall et al., 2001; Kardināls, 2006). Atbilstoši motivējošas attieksmes kodēšanai NAc kodols saņem pakāpeniskas DA pārrāvumus abu atalgojošās pieredzes laikā (Day et al., 2007) un aversīva pieredze (Anstrom et al., 2009).

Visbeidzot, kā apspriests iepriekš, daži pievilcību kodējoši DA neironi var projicēties muguras striatum (Attēls 7A). Kaut arī daži muguras smadzeņu striatuma reģioni ir iesaistīti funkcijās, kas saistītas ar mācīšanās darbības vērtībām, muguras smadzenes ir iesaistītas arī funkcijās, kuras jāiesaista visiem nozīmīgākajiem notikumiem, piemēram, orientēšanās, uzmanība, darba atmiņa un vispārējā motivācija (Hikosaka et al., 2000; Klingbergs, 2010; Palmiter, 2008). Dorsālā striatūra neironu apakšgrupa daudz spēcīgāk reaģē uz atlīdzinošiem un aversīviem notikumiem nekā uz neitrāliem notikumiem (Ravel et al., 1999; Blazquez et al., 2002; Yamada et al., 2004, 2007), kaut arī viņu cēloņsakarība motivētā uzvedībā vēl nav zināma.

Motivācijas vērtību signālu avoti

Jaunākās pētījumu sērijas liecina, ka DA neironi saņem motivācijas vērtības signālus no maza kodola epitēlijā, sānu habenula (LHb) (Hikosaka, 2010) (Skaitlis 8). LHb spēcīgi negatīvi kontrolē DA neironus: LHb stimulācija kavē DA neironus īsā latencē (Kristofs un citi, 1986) un var regulēt mācīšanos pretēji VTA stimulēšanai (Shumake et al., 2010). Saskaņā ar negatīvu kontroles signālu daudziem LHb neironiem ir spoguļapgrieztas fāzes atbildes uz DA neironiem: LHb neironi ir kavēta ar pozitīvas atlīdzības prognozēšanas kļūdām un satraukti ar negatīvām atlīdzības prognozēšanas kļūdām (Matsumoto un Hikosaka, 2007, 2009a; Brombergs-Martins et al., 2010a; Brombergs-Martins et al., 2010c). Vairākos gadījumos šie signāli rodas ar īsāku LHb latenci, kas atbilst LHb → DA pārraidei (Matsumoto un Hikosaka, 2007; Brombergs-Martins et al., 2010a).

 

Skaitlis 8

Hipotizēti motivācijas vērtības, uzmanības un trauksmes signālu avoti

LHb spēj kontrolēt DA neironus visā vidējā smadzenē, taču vairākas liecības liecina, ka tas veic preferenciālu kontroli pār motivācijas vērtību, kas kodē DA neironus. Pirmkārt, LHb neironi kodē motivācijas vērtību tādā veidā, kas precīzi atspoguļo vērtības kodējošos DA neironus - tie kodē gan pozitīvas, gan negatīvas atlīdzības prognozēšanas kļūdas un pretējā virzienā reaģē uz atalgojošiem un aversīviem notikumiem (Matsumoto un Hikosaka, 2009a; Brombergs-Martins et al., 2010a). Otrkārt, LHb stimulēšanai ir visspēcīgākā ietekme uz DA neironiem, kuru īpašības atbilst vērtību kodēšanai, ieskaitot inhibīciju ar bezatlīdzības norādēm un anatomisko atrašanās vietu ventromediālajā SNc (Matsumoto un Hikosaka, 2007, 2009b). Treškārt, bojājumi LHb pasliktina DA neironu inhibējošās reakcijas uz nelabvēlīgiem notikumiem, kas liecina par LHb cēloņsakarību DA vērtības signālu ģenerēšanā (Gao et al., 1990).

LHb ir daļa no plašāka neironu ceļa, pa kuru DA neironus var kontrolēt bazālās ganglijas (Skaitlis 8). LHb uztver signālus, kas atgādina atlīdzības prognozēšanas kļūdas, izmantojot projekciju no neironu populācijas, kas atrodas ap globusa pallidus robežu (GPb) (Honga un Hikosaka, 2008). Tiklīdz šie signāli sasniedz LHb, tie, iespējams, tiks nosūtīti uz DA neironiem caur disinaptisku ceļu, kurā LHb ierosina smadzeņu vidusdaļas GABA neironus, kas savukārt kavē DA neironus (Ji un Šepards, 2007; Omelchenko et al., 2009; Brinschwitz et al., 2010). Tas varētu notikt caur LHb projekcijām uz VTA interneuroniem un uz blakus esošo GABA-erģisko kodolu, ko sauc par rostromedial tegmental kodolu (RMTg) (Jhou et al., 2009b) (saukts arī par “VTA kaudālo asti” (Kaufling et al., 2009)). Proti, RMTg neironiem ir reakcijas īpašības, kas ir līdzīgas LHb neironiem, tie kodē motivācijas vērtību, un tiem ir izteikta inhibējoša projekcija uz dopamīnerģisko vidējo smadzeņu (Jhou et al., 2009a). Tādējādi pilnīgs bazālo gangliju ceļš motivācijas vērtības signālu nosūtīšanai DA neironiem var būt GPb → LHb → RMTg → DA (Hikosaka, 2010).

Svarīgs jautājums turpmākajiem pētījumiem ir par to, vai motivācijas vērtības signāli tiek novirzīti tikai caur LHb, vai arī tos ved vairāki ievades ceļi. Proti, DA kavēšanu ar nepatīkamām pēdām kontrolē aktivitāte mezopontīna parabrahiālajā kodolā (PBN) (Coizet et al., 2010) (Skaitlis 8). Šis kodols satur neironus, kas saņem tiešu ievadi no muguras smadzenēm, kas kodē kaitīgas sajūtas, un varētu kavēt DA neironus, ierosinot RMTg (Coizet et al., 2010; Gauriau un Bernards, 2002). Tas liek domāt, ka LHb sūta DA neironu motivācijas vērtību signālus gan apbalvojošām, gan aversīvām norādēm un rezultātiem, savukārt PBN nodrošina vērtības signāla sastāvdaļu, kas īpaši saistīta ar nelabvēlīgiem rezultātiem.

Motivācijas signālu avoti

Mazāk ir zināms par motīvu motivācijas signālu avotiem DA neironos. Viens intriģējošs kandidāts ir amigdala (CeA) centrālais kodols, kurš konsekventi ir iesaistīts orientācijā, uzmanības pievēršanā un vispārējā motivācijas reakcijā gan atalgojošu, gan satraucošu notikumu laikā (Holande un Gallagher, 1999; Baxter un Murray, 2002; Merali et al., 2003; Balleine un Killcross, 2006) (Skaitlis 8). CeA un citos amigdala kodolos ir daudz neironu, kuru signāli atbilst motivācijas stāvoklim: tie signalizē par gandarījuma un aversīviem notikumiem tajā pašā virzienā, tiek pastiprināti, ja notikumi notiek negaidīti, un ir savstarpēji saistīti ar uzvedības uzbudinājuma pasākumiem (Nishijo et al., 1988; Belova et al., 2007; Šabels un Janaks, 2009). Šos signālus var nosūtīt DA neironiem, jo ​​CeA smadzeņu stumbram ir dilstošas ​​projekcijas, kas satur atalgojošu un pretēju informāciju (Lee et al., 2005; Pascoe un Kapp, 1985) un CeA ir nepieciešama DA atbrīvošanai ar atlīdzību saistītu pasākumu laikā (Phillips et al., 2003a). Turklāt CeA piedalās ar DA neironiem ceļos, kas ir saskaņā ar mūsu ierosinātajiem anatomiskajiem un funkcionāliem tīkliem motivācijas uzlabošanai. Ceļš, ieskaitot CeA, SNc un muguras smadzenes, ir nepieciešams, lai iemācītos orientēties uz pārtikas norādēm (Han et al., 1997; Lee et al., 2005; El-Amamy un Holande, 2007). Atbilstoši mūsu iedalījumam par vēlamo signālu un vērtību signāliem, šis ceļš ir nepieciešams, lai iemācītos orientēties uz pārtikas norādēm, bet nevis lai iemācītos tuvināties pārtikas rezultātiem (Han et al., 1997). Otra pieeja, ieskaitot CeA, SNc, VTA un NAc kodolu, ir nepieciešama, lai atlīdzības norādes palielinātu vispārējo motivāciju veikt atalgojuma meklēšanas darbības (Hall et al., 2001; Corbit un Balleine, 2005; El-Amamy un Holande, 2007).

Papildus CeA, DA neironi varētu saņemt motivējošus signālus no citiem avotiem, piemēram, smadzenes kodējošiem neironiem priekšējā smadzenē (Lina un Nikolisa, 2008; Ričardsons un DeLongs, 1991) un neironiem PBN (Coizet et al., 2010), lai gan šie ceļi vēl ir jāizpēta.

Trauksmes signālu avoti

Ir vairāki labi kandidāti DA neironu nodrošināšanai ar trauksmes signāliem. Varbūt vispievilcīgākais kandidāts ir augstākā kolika (SC), smadzeņu vidusdaļa, kas saņem īslaicīgas sensoro ievadi no vairākām maņu formām un kontrolē orientējošās reakcijas un uzmanību (Redgrave un Gurney, 2006) (Skaitlis 8). SC ir tieša projekcija uz SNc un VTA (May et al., 2009; Comoli et al., 2003). Anestēzijas dzīvniekiem SC ir būtiska saite īslaicīgas redzes signāliem, lai sasniegtu DA neironus un izraisītu DA izdalīšanos pakārtotajās struktūrās (Comoli et al., 2003; Dommett et al., 2005). SC-DA ceļš ir vispiemērotākais trauksmes signālu nodošanai, nevis atlīdzības un nepatikas signālu saņemšanai, jo SC neironiem ir maza reakcija uz atlīdzības piegādi un tiem ir tikai neliela ietekme uz DA aversīvajām atbildēm (Coizet et al., 2006). Tas liek domāt par notikumu secību, kurā SC neironi (1) nosaka stimulu, (2) to izvēlas kā potenciāli svarīgu, (3) izsauc orientējošu reakciju stimula pārbaudei un (4) vienlaikus izsauc DA trauksmes reakciju, kas izraisa DA eksplozija pakārtotajās struktūrās (Redgrave un Gurney, 2006).

Otrs kandidāts trauksmes signālu nosūtīšanai uz DA neironiem ir LHb (Skaitlis 8). Proti, negaidīts izmēģinājuma sākuma norādes sākums kavē daudzus LHb neironus apgriezti pret DA neironu trauksmes signālu, un šī reakcija notiek ar LHb īsāku latentumu, kas atbilst LHb → DA pārraides virzienam (Brombergs-Martins et al., 2010a; Brombergs-Martins et al., 2010c). Mēs arī anekdotiski novērojām, ka LHb neironus parasti kavē negaidīti vizuālie attēli un skaņas apgriezti pret DA ierosinājumiem (MM, ESB-M un OH, nepublicēti novērojumi), lai gan tas gaida sistemātiskāku izmeklēšanu.

Visbeidzot, trešais kandidāts trauksmes signālu nosūtīšanai DA neironiem ir pedunculopontine tegmental kodols (PPTg), kas projicē gan SNc, gan VTA un ir iesaistīts motivācijas apstrādē (Winn, 2006) (Skaitlis 8). PPTg ir svarīgs, lai nodrošinātu VTA DA neironu pārrāvumus (Grace et al., 2007), ieskaitot atbildes signālus par atlīdzību (Pan un Hyland, 2005). Atbilstoši trauksmes signālam PPTg neironiem ir īslaicīga reakcija uz vairākām maņu modalitātēm un tie ir aktīvi orientēšanās reakciju laikā (Winn, 2006). Ir pierādījumi, ka PPTg sensoro reakciju ietekmē atlīdzības vērtība un prasības tūlītējai rīcībai (Dormont et al., 1998; Okada et al., 2009) (bet skatīt (Pan un Hyland, 2005)). Daži PPTg neironi arī paši reaģē uz atlīdzinošiem vai nelabvēlīgiem rezultātiem (Dormont et al., 1998; Kobayashi et al., 2002; Ivlieva un Timofeeva, 2003b, a). Būs svarīgi pārbaudīt, vai signāli, ko PPTg sūta DA neironiem, ir īpaši saistīti ar trauksmi, vai arī tie satur citus motivējošus signālus, piemēram, vērtību un pamanāmību.

Šo darbu atbalstīja intramural pētījumu programma Nacionālajā acu institūtā. Mēs arī pateicamies Amijai Arnstenai par vērtīgajām diskusijām.

Izdevēja atruna: Šis ir PDF fails, kurā nav publicēta manuskripta, kas ir pieņemts publicēšanai. Kā pakalpojums mūsu klientiem sniedzam šo rokraksta agrīno versiju. Manuskripts tiks pakļauts kopēšanu, apkopošanu un iegūto pierādījumu pārskatīšanu, pirms tas tiek publicēts tā galīgajā citējamajā formā. Lūdzu, ņemiet vērā, ka ražošanas procesa laikā var rasties kļūdas, kas var ietekmēt saturu, un attiecas uz visiem žurnālam piemērojamiem juridiskajiem atrunas.

^FOOTNOTE1By motivējoša interese mēs domājam daudzumu, kas ir liels gan atalgojošiem, gan satraucošiem notikumiem, un mazs - motivējoši neitrāliem (neatalgojošiem un neuzbāzīgiem) notikumiem. Tas ir līdzīgs definīcijai, kuru sniedza (Berridge un Robinson, 1998). Ņemiet vērā, ka motivējoša izpausme atšķiras no citiem neirozinātnē izmantojamiem priekšstatiem, piemēram, stimulējoša izpausme (kas attiecas tikai uz vēlamajiem notikumiem; (Berridge un Robinson, 1998)) un uztveres uztvere (kas attiecas uz motivējoši neitrāliem notikumiem, piemēram, kustīgiem objektiem un krāsainām gaismām; (Bislijs un Goldbergs, 2010)).]

^FOOTNOTE2Ņemiet vērā, ka DA neironu signālu motivējošie fizikālie parametri atšķiras no klasiskajiem jēdzieniem “asocialitāte” un “associējamības izmaiņas”, kas ierosināti, lai regulētu pastiprināšanas mācīšanās ātrumu (piemēram, (Pearce un Hall, 1980)). Šādas teorijas apgalvo, ka dzīvnieki mācās (un pielāgo mācīšanās ātrumu) gan no pozitīvām, gan negatīvām prognozēšanas kļūdām. Kaut arī šie DA neironi var palīdzēt mācīties no pozitīvām prognozēšanas kļūdām, kuru laikā viņiem var būt spēcīga reakcija (piemēram, uz negaidītu atalgojuma piegādi), tie, iespējams, neveicina mācīšanos no negatīvām prognozēšanas kļūdām, kuru laikā viņiem var būt neliela atbilde vai arī nekādas atbildes ( piem., negaidīta atlīdzība par izlaidumu) (4B).

1. Ahlbrehts M, Vēbers M. Nenoteiktības izšķirtspēja: eksperimentāls pētījums. Institucionālās un teorētiskās ekonomikas žurnāls. 1996; 152: 593 – 607.
2. Albīns RL, Young AB, Penney JB. Bazālo gangliju traucējumu funkcionālā anatomija. Tendences neirozinātnēs. 1989; 12: 366 – 375. [PubMed]
3. Andersons AK, Kristofs K, Stapēns I, Panics D, Ghahremani DG, Glover G, Gabrieli JD, Sobel N. Disociētie intensitātes un valences neironu attēlojumi cilvēka ožas veidošanā. Nat Neurosci. 2003; 6: 196 – 202. [PubMed]
4. Anstrom KK, Miczek KA, Budygin EA. Paaugstināta fāzes dopamīna signālu pārnešana mezolimbiskā ceļā žurku sociālās sakāves laikā. Neirozinātne. 2009; 161: 3 – 12. [PubMed]
5. Aragona BJ, Day JJ, Roitman MF, Cleaveland NA, Wightman RM, Carelli RM. Reģionālā specifika fāzisko dopamīna pārnešanas modeļu reālā laika attīstībā, iegūstot ko-kokaīna asociāciju žurkām. Eiropas neirozinātnes žurnāls. 2009; 30: 1889 – 1899. [PMC bezmaksas raksts] [PubMed]
6. Austin AJ, Duka T. Pavlovijas kondicionēšanas uzmanības mehānismi, kas vērsti uz ēstgribu un aversīvu iznākumu. Uzvedības smadzeņu izpēte. 2010; 213: 19 – 26. [PubMed]
7. Badia P, Harsh J, Abbott B. Izvēle starp paredzamiem un neparedzamiem šoka apstākļiem: dati un teorija. Psiholoģiskais biļetens. 1979; 86: 1107 – 1131.
8. Balleine BW, Killcross S. Paralēlā stimulēšana: integrēts amigdala funkcijas skats. Tendences neirozinātnēs. 2006; 29: 272 – 279. [PubMed]
9. Balleine BW, O'Doherty JP. Cilvēku un grauzēju homoloģijas darbības kontrolē: mērķtiecīgas un pierastas darbības kortikosteriatāla noteicēji. Neiropsihofarmakoloģija. 2010; 35: 48–69. [PMC bezmaksas raksts] [PubMed]
10. Barr GA, Moriceau S, Shionoya K, Muzny K, Gao P, Wang S, Sullivan RM. Pārejas zīdaiņu mācībā modulē dopamīns amigdālā. Nat Neurosci. 2009; 12: 1364 – 1366. [PMC bezmaksas raksts] [PubMed]
11. Bassareo V, De Luca MA, Di Chiara G. Dopamīna motivējošo stimulu īpašību diferencēta izpausme kodola Accumbens čaulā, salīdzinot ar kodolu un prefrontālo garozu. J Neurosci. 2002; 22: 4709 – 4719. [PubMed]
12. Bassareo V, Di Chiara G. Dopamīna pārnešanas diferenciālā reakcija uz pārtikas stimuliem kodolieroču kodola / serdes nodalījumos. Neirozinātne. 1999; 89: 637 – 641. [PubMed]
13. Baxter MG, Murray EA. Amigdala un atlīdzība. Nat Rev Neurosci. 2002; 3: 563 – 573. [PubMed]
14. Bayer HM, Glimcher PW. Vidējā smadzeņu dopamīna neironi kodē kvantitatīvu atlīdzības prognozēšanas kļūdas signālu. Neirons. 2005; 47: 129 – 141. [PMC bezmaksas raksts] [PubMed]
15. Belova MA, Paton JJ, Morrison SE, Salzman CD. Gaidīšana modulē neironu reakciju uz patīkamiem un aversīviem stimuliem primātu amigdālā. Neirons. 2007; 55: 970 – 984. [PMC bezmaksas raksts] [PubMed]
16. Bentivoglio M, Morelli M. Mezencefāli dopamīnerģisko neironu organizācija un shēmas, kā arī dopamīna receptoru sadalījums smadzenēs. Ķīmiskās neiroanatomijas rokasgrāmata. 2005: 1 – 107.
17. Berridge KC, Robinson TE. Kāda ir dopamīna loma atalgojumā: hedoniskā ietekme, atalgojuma apguve vai stimulējošā interese? Smadzeņu izpēte. 1998; 28: 309 – 369. [PubMed]
18. Bessons C, Louilots A. Mezolimbisko dopamīnerģisko neironu asimetriska iesaistīšana afektīvā uztverē. Neirozinātne. 1995; 68: 963 – 968. [PubMed]
19. Birgner C, Nordenankar K, Lundblad M, Mendez JA, Smith C, le Greves M, Galter D, Olson L, Fredriksson A, Trudeau LE et al. VGLUT2 dopamīna neironos ir nepieciešams psihostimulantu izraisītas uzvedības aktivizēšanai. Amerikas Savienoto Valstu Nacionālās zinātņu akadēmijas raksti. 2010; 107: 389 – 394. [PMC bezmaksas raksts] [PubMed]
20. Bislijs JW, Goldbergas ME. Uzmanība, nodoms un prioritāte parietālajā daivā. Gada neirozinātnes apskats. 2010; 33: 1 – 21. [PMC bezmaksas raksts] [PubMed]
21. Bjorklund A, Dunnett SB. Dopamīna neironu sistēmas smadzenēs: atjauninājums. Tendences neirozinātnēs. 2007; 30: 194 – 202. [PubMed]
22. Blazquez PM, Fujii N, Kojima J, Graybiel AM. Tīkla reakcijas varbūtības attēlojums striatumā. Neirons. 2002; 33: 973 – 982. [PubMed]
23. Botvinick MM, Braver TS, Barch DM, Carter CS, Cohen JD. Konfliktu uzraudzība un izziņas kontrole. Psychol rev. 2001; 108: 624 – 652. [PubMed]
24. Bredlija MM, Grīnvaldes MK, Petrija MC, Langa PJ. Attēlu atcerēšanās: prieks un satraukums atmiņā. J Exp Psychol Learn Mem Cogn. 1992; 18: 379 – 390. [PubMed]
25. Braun DA, Mehring C, Wolpert DM. Struktūras apguve darbībā. Uzvedības smadzeņu izpēte. 2010; 206: 157 – 165. [PMC bezmaksas raksts] [PubMed]
26. Brinschwitz K, Dittgen A, Madai VI, Lommel R, Geisler S, Veh RW. Sānu habenu glutamaterģiskie aksoni galvenokārt beidzas ar ventrālās vidējās smadzeņu GABAerģiskajiem neironiem. Neirozinātne. 2010; 168: 463 – 476. [PubMed]
27. Brischoux F, Chakraborty S, Brierley DI, Ungless MA. Faktiska dopamīna neironu ierosināšana ventrālajā VTA ar kaitīgiem stimuliem. Amerikas Savienoto Valstu Nacionālās zinātņu akadēmijas raksti. 2009; 106: 4894 – 4899. [PMC bezmaksas raksts] [PubMed]
28. Bromberg-Martin ES, Hikosaka O. Midbrain dopamīna neironi signalizē par priekšroku iepriekšējai informācijai par gaidāmajām balvām. Neirons. 2009; 63: 119 – 126. [PMC bezmaksas raksts] [PubMed]
29. Bromberg-Martin ES, Matsumoto M, Hikosaka O. Atšķirīga tonizējoša un fāziska paredzamā aktivitāte sānu habenulas un dopamīna neironos. Neirons. 2010a; 67: 144 – 155. [PMC bezmaksas raksts] [PubMed]
30. Brombergs-Martins ES, Matsumoto M, Hong S, Hikosaka O. Palidus-habenula-dopamīna ceļš signalizē izsecinātās stimula vērtības. J neirofiziols. 2010b; 104: 1068 – 1076. [PMC bezmaksas raksts] [PubMed]
31. Brombergs-Martins ES, Matsumoto M, Nakahara H, Hikosaka O. Vairāki laika grafiki sānu habenulas un dopamīna neironos. Neirons. 2010c; 67: 499 – 510. [PMC bezmaksas raksts] [PubMed]
32. Braunais MTC, Henijs P, Bolams JP, Magils PJ. Neiroķīmiski neviendabīgu dopamīnerģisko neironu aktivitāte būtiskajā nigrā spontānu un virzītu smadzeņu stāvokļa izmaiņu laikā. J Neurosci. 2009; 29: 2915 – 2925. [PubMed]
33. Kardināls RN. Neironu sistēmas, kas saistītas ar aizkavētu un varbūtīgu pastiprināšanu. Neironu tīkls. 2006; 19: 1277 – 1301. [PubMed]
34. Cheer JF, Aragona BJ, Heien ML, Seipel AT, Carelli RM, Wightman RM. Koordinēta dopamīna atbrīvošanās no dopamīna un neirālās aktivitātes virzība uz mērķi vērsta uzvedība. Neirons. 2007: 54: 237 – 244. [PubMed]
35. Cheramy A, Kemel ML, Gauchy C, Desce JM, Galli T, Barbeito L, Glowinski J. Uzbudinošo aminoskābju loma tiešā un netiešā dopamīna izdalīšanās presinaptiskā regulējumā no nigrostriatal dopamīna neironu nervu galiem. Aminoskābes. 1991; 1: 351 – 363. [PubMed]
36. Košļāt SH, Ho JL. Cerība: empīrisks pētījums par attieksmi pret nenoteiktības novēršanas laiku. Riska un nenoteiktības žurnāls. 1994; 8: 267 – 288.
37. Chiodo LA, Antelman SM, Caggiula AR, Lineberry CG. Sensori stimulē dopamīna (DA) neironu izplūdes ātrumu: pierādījumi par diviem funkcionāliem DA šūnu veidiem materiāla nigrā. Brain Res. 1980: 189: 544 – 549. [PubMed]
38. Kristofs GR, Leonzio RJ, Wilcox KS. Sānu habenulas stimulēšana kavē dopamīnu saturošus neironus žurkas pamatgalvā un ventrālajā pamata daļā. J Neurosci. 1986; 6: 613 – 619. [PubMed]
39. Chuhma N, Choi WY, Mingote S, Rayport S. Dopamīna neironu glutamāta kotransmisija: no frekvences atkarīga modulācija mezoventromediālajā projekcijā. Neirozinātne. 2009; 164: 1068 – 1083. [PMC bezmaksas raksts] [PubMed]
40. Koens JD, Braver TS, Brauns JW. Dopamīna funkcijas skaitļošanas perspektīvas prefrontālajā garozā. Pašreizējais viedoklis neirobioloģijā. 2002; 12: 223 – 229. [PubMed]
41. Coizet V, Dommett EJ, Klop EM, Redgrave P, Overton PG. Parabrahiālais kodols ir kritiska saite īsas latentuma nociceptīvās informācijas pārraidē uz smadzeņu vidusdaļas dopamīnerģiskajiem neironiem. Neirozinātne. 2010; 168: 263 – 272. [PMC bezmaksas raksts] [PubMed]
42. Coizet V, Dommett EJ, Redgrave P, Overton PG. Vidējā smadzeņu dopamīnerģisko neironu nociceptīvās reakcijas modulē augstāks koliķis žurkām. Neirozinātne. 2006; 139: 1479 – 1493. [PubMed]
43. Comoli E, Coizet V, Boyes J, Bolam JP, Canteras NS, Quirk RH, Overton PG, Redgrave P. Tieša projicēšana no augstākā kolikāla līdz pamatojuma nigrai ievērojamu vizuālo notikumu noteikšanai. Nat Neurosci. 2003; 6: 974 – 980. [PubMed]
44. Corbit LH, Balleine BW. Basolaterālo un centrālo amigdala bojājumu dubultā disociācija uz vispārējām un iznākuma specifiskajām pavlovian-instrumentālās pārneses formām. J Neurosci. 2005; 25: 962 – 970. [PubMed]
45. Dalley JW, Laane K, Theobald DE, Armstrong HC, Corlett PR, Chudasama Y, Robbins TW. Laika ziņā ierobežota apetitīvas Pavlovijas atmiņas modulācija ar D1 un NMDA receptoriem uzkrāšanās kodolā. Amerikas Savienoto Valstu Nacionālās zinātņu akadēmijas raksti. 2005; 102: 6189 – 6194. [PMC bezmaksas raksts] [PubMed]
46. Dālijs HB. Priekšroka neprognozējamībai tiek mainīta, ja neparedzams neatdošana ir nelabvēlīga: procedūras, dati un teorijas par apetitīvas novērošanas reakcijas iegūšanu. In: Gormezano I, Wasserman EA, redaktori. Mācīšanās un atmiņa: uzvedības un bioloģiskās substrāti. LE asociētie; 1992. 81 – 104 lpp.
47. Davidson MC, Horvitz JC, Tottenham N, Fossella JA, Watts R, Ulug AM, Casey BJ. Diferenciālā caudate un cingulate aktivācija pēc neparedzētiem neatgriezeniskiem stimuliem. NeuroImage. 2004; 23: 1039 – 1045. [PubMed]
48. Diena JJ, Roitman MF, Wightman RM, Carelli RM. Asociatīva mācīšanās starpniecību dinamiskajās dopamīna signālu maiņās kodolkrāsās. Nat Neurosci. 2007: 10: 1020 – 1028. [PubMed]
49. Dayan P, Niv Y. Pastiprināšanas mācīšanās: labais, sliktais un neglītais. Pašreizējais viedoklis neirobioloģijā. 2008; 18: 185 – 196. [PubMed]
50. Descarries L, Berube-Carriere N, Riad M, Bo GD, Mendez JA, Trudeau LE. Glutamāts dopamīna neironos: sinaptiskā un difūzā transmisija. Smadzeņu pētījumu pārskati. 2008; 58: 290 – 302. [PubMed]
51. Di Chiara G. Kodolbumbu apvalks un kodols dopamīns: atšķirīga loma uzvedībā un atkarībā. Uzvedības smadzeņu izpēte. 2002; 137: 75 – 114. [PubMed]
52. Dommett E, Coizet V, Blaha CD, Martindale J, Lefebvre V, Walton N, Mayhew JE, Overton PG, Redgrave P. Kā vizuālie stimuli īsā latentā laikā aktivizē dopamīnerģiskos neironus. Zinātne. 2005; 307: 1476 – 1479. [PubMed]
53. Dormont JF, Conde H, Farin D. Pedunculopontine tegmental kodola loma saistībā ar kaķa kondicionēto motorisko darbību. I. No konteksta atkarīga un ar pastiprināšanu saistīta vienas vienības darbība. Eksperimentālie smadzeņu pētījumi. Experimentelle Hirnforschung. 1998; 121: 401 – 410. [PubMed]
54. Duzel E, Bunzeck N, Guitart-Masip M, Duzel S. Ar novitāti saistīta dopamīna paredzēšanas un izpētes motivācija (NOMAD): ietekme uz veselīgu novecošanos. Neirozinātnes un biheiviorālās apskates. 2010; 34: 660 – 669. [PubMed]
55. El-Amamy H, Holland PC. Amigdala centrālā kodola atvienošanas no ventrālās pamatvirsmas zonas vai Pagrieziena nigras atšķirīgā ietekme uz iemācīto orientāciju un stimulējošo motivāciju. Eiropas neirozinātnes žurnāls. 2007; 25: 1557 – 1567. [PMC bezmaksas raksts] [PubMed]
56. Ettenbergs A. Patstāvīgi ievadīta kokaīna pretstatītās procesa īpašības. Neirozinātnes un biheiviorālās apskates. 2004; 27: 721 – 728. [PubMed]
57. Fadok JP, Dickerson TM, Palmiter RD. Dopamīns ir nepieciešams no kijas atkarīgu baiļu kondicionēšanai. J Neurosci. 2009; 29: 11089 – 11097. [PMC bezmaksas raksts] [PubMed]
58. Fairhall AL, Lewen GD, Bialek W, de Ruyter Van Steveninck RR. Efektivitāte un neskaidrība adaptīvajā neironu kodā. Daba. 2001; 412: 787 – 792. [PubMed]
59. Faure A, Haberland U, Conde F, El Massioui N. Lesion uz nigrostriatālā dopamīna sistēmu traucē stimulēšanas reakcijas veidošanās. J Neurosci. 2005: 25: 2771 – 2780. [PubMed]
60. Faure A, Reynolds SM, Richard JM, Berridge KC. Mezolimbiskais dopamīns vēlēšanās un bailēs: dodot iespēju radīt motivāciju lokalizētu glutamāta traucējumu rezultātā uzkrāšanās kodolos. J Neurosci. 2008; 28: 7184 – 7192. [PMC bezmaksas raksts] [PubMed]
61. Fiorillo CD, Newsome WT, Schultz W. Atalgojuma prognozēšanas laika precizitāte dopamīna neironos. Nat Neurosci. 2008: 11: 966 – 973. [PubMed]
62. Fiorillo CD, Tobler PN, Schultz W. Dopamīna neironu atalgojuma varbūtības un nenoteiktības diskrēta kodēšana. Zinātne. 2003: 299: 1898 – 1902. [PubMed]
63. Floresco SB, Ghods-Sharifi S, Vexelman C, Magyar O. Atdalāmās kodolbumbu kodola un apvalka lomas kopa maiņas regulēšanā. J Neurosci. 2006; 26: 2449 – 2457. [PubMed]
64. Ford CP, Gantz SC, Phillips PE, Williams JT. Āršūnu dopamīna kontrole dendrīta un aksona terminālos. J Neurosci. 2010; 30: 6975 – 6983. [PMC bezmaksas raksts] [PubMed]
65. Frenks MJ. Dinamiska dopamīna modulācija bazālajos ganglijos: neirokompensācijas kognitīvā deficīta pārskats ārstnieciskā un nemedicīniskā parkinsonisma gadījumā. Kognitīvās neirozinātnes žurnāls. 2005; 17: 51 – 72. [PubMed]
66. Frenks MJ, Fossella JA. Mācīšanās, motivācijas un izziņas neiroģenētika un farmakoloģija. Neiropsiofarmakoloģija. 2010 [PMC bezmaksas raksts] [PubMed]
67. Frank MJ, Seeberger LC, O'Reilly RC. Ar burkānu vai nūju: izziņas stiprināšana parka parkinsonismā. Zinātne. 2004: 306: 1940 – 1943. [PubMed]
68. Gallistel CR, Gibbon J. Laiks, ātrums un kondicionēšana. Psychol rev. 2000; 107: 289 – 344. [PubMed]
69. Gao DM, Jeaugey L, Pollak P, Benabid AL. No intensitātes atkarīgās nociceptīvās reakcijas no domājamiem būtiska nigra dopamīnerģiskiem neironiem, pars compacta žurkām un to modifikācija ar sānu habenulas ievadi. Brain Res. 1990; 529: 315 – 319. [PubMed]
70. Gauriau C, Bernards JF. Sāpju ceļi un parabrahiālas shēmas žurkām. Eksperimentālā fizioloģija. 2002; 87: 251 – 258. [PubMed]
71. Geisler S, Zahm DS. Ventral tegmental zonas ietekmējošie cilvēki žurku anatomiskajā substrātā integrējošām funkcijām. Salīdzinošās neiroloģijas žurnāls. 2005; 490: 270 – 294. [PubMed]
72. Gerfen CR, Engber TM, Mahan LC, Susel Z, Chase TN, Monsma FJ, Jr, Sibley DR. D1 un D2 dopamīna receptoru regulētais striatonigrālo un striatopallīdu neironu gēnu ekspresija. Zinātne. 1990: 250: 1429 – 1432. [PubMed]
73. Ghods-Sharifi S, Floresco SB. Diferenciālā ietekme uz piepūles diskontēšanu, ko izraisa kodolu uzkrāšanās kodola vai apvalka inaktivācijas. Uzvedības neirozinātne. 2010; 124: 179 – 191. [PubMed]
74. Gonons FG. Nelineāra saistība starp impulsu plūsmu un dopamīnu, ko atbrīvo žurku vidējā smadzeņu dopamīnerģiskie neironi, kā pētīts in vivo elektroķīmijā. Neirozinātne. 1988; 24: 19 – 28. [PubMed]
75. Goto Y, Yang CR, Otani S. Funkcionālā un disfunkcionālā sinaptiskā plastika prefrontālajā garozā: loma psihiskos traucējumos. Bioloģiskā psihiatrija. 2010; 67: 199 – 207. [PubMed]
76. Žēlastība AA. Fāzes un tonizējoša dopamīna izdalīšanās un dopamīna sistēmas reakcijas modulācija: hipotēze par šizofrēnijas etioloģiju. Neirozinātne. 1991; 41: 1 – 24. [PubMed]
77. Greisa AA, Bunney BS. Nigrālo dopamīnerģisko neironu intracelulārā un ārpusšūnu elektrofizioloģija – 1. Identifikācija un raksturojums. Neirozinātne. 1983; 10: 301–315. [PubMed]
78. Grace AA, Floresco SB, Goto Y, Lodge DJ. Dopamīnerģisko neironu atlaišanas regulēšana un mērķtiecīgas uzvedības kontrole. Tendences neirozinātnēs. 2007; 30: 220 – 227. [PubMed]
79. Grecksch G, Matties H. Dopamīnerģisko mehānismu loma žurku hipokampā konsolidācijā spilgtuma diskriminācijā. Psihofarmakoloģija (Berl) 1981; 75: 165 – 168. [PubMed]
80. Guarraci FA, Kapp BS. Ventrālā tegmentālā apgabala dopamīnerģisko neironu elektrofizioloģiskais raksturojums diferenciālo pavlovisko baiļu kondicionēšanas laikā nomodā trušam. Uzvedības smadzeņu izpēte. 1999; 99: 169 – 179. [PubMed]
81. Haber SN, Fudge JL, McFarland NR. Striatonigrostriatāla ceļi primātos veido augšupejošu spirāli no korpusa līdz dorsolaterālā striatum. J Neurosci. 2000: 20: 2369 – 2382. [PubMed]
82. J zālē, Parkinsona JA, Connor TM, Dickinson A, Everitt BJ. Amygdala centrālā kodola un nucleus carrbens kodola iesaistīšana Pavlovijas ietekmes starpniecībā uz instrumentālo uzvedību. Eiropas neirozinātnes žurnāls. 2001; 13: 1984 – 1992. [PubMed]
83. Han JS, McMahan RW, Holland P, Gallagher M. Amygdalo-nigrostriatal ceļa loma asociatīvajā mācībā. J Neurosci. 1997; 17: 3913 – 3919. [PubMed]
84. Hariss GC, Aston-Jones G. Arousal un atlīdzība: dihotomija oreksīna funkcijā. Tendences neirozinātnēs. 2006; 29: 571 – 577. [PubMed]
85. Herija C, Baha DR, Esposito F, Di Salle F, Perrig WJ, Scheffler K, Luthi A, Seifritz E. Laika neparedzamības apstrāde cilvēku un dzīvnieku amigdalā. J Neurosci. 2007; 27: 5958 – 5966. [PubMed]
86. Hikida T, Kimura K, Wada N, Funabiki K, Nakanishi S. Atšķirīgas sinaptiskās pārraides lomas tiešos un netiešos striatāla ceļos uz atalgojumu un atbaidošu uzvedību. Neirons. 2010: 66: 896 – 907. [PubMed]
87. Hikosaka O. Uz atlīdzību orientētas acu kustības pamata gangliju mehānismi. Ņujorkas Zinātņu akadēmijas žurnāli. 2007; 1104: 229 – 249. [PubMed]
88. Hikosaka O. Habenula: no izvairīšanās no stresa līdz lēmumu pieņemšanai uz vērtībām. Nat Rev Neurosci. 2010; 11: 503 – 513. [PMC bezmaksas raksts] [PubMed]
89. Hikosaka O, Takikawa Y, Kawagoe R. Bazālo gangliju loma mērķtiecīgu saccadic acu kustību kontrolē. Fizioloģiskie pārskati. 2000; 80: 953 – 978. [PubMed]
90. Hitchcott PK, Quinn JJ, Taylor JR. Prefrontālā garozas dopamīna mērķa darbību divvirzienu modulācija. Cereb Cortex. 2007; 17: 2820 – 2827. [PubMed]
91. Hnasko TS, Chuhma N, Zhang H, Goh GY, Sulzer D, Palmiter RD, Rayport S, Edwards RH. Vezikulārā glutamāta transportēšana veicina dopamīna uzkrāšanos un glutamāta kodoliezi in vivo. Neirons. 2010; 65: 643 – 656. [PMC bezmaksas raksts] [PubMed]
92. Holland PC, Gallagher M. Amigdala shēma uzmanības un reprezentācijas procesos. Kognitīvo zinātņu tendences. 1999; 3: 65 – 73. [PubMed]
93. Hollerman JR, Schultz W. Dopamīna neironi ziņo par kļūdu laika prognozēšanā par atlīdzību mācīšanās laikā. Nat Neurosci. 1998; 1: 304 – 309. [PubMed]
94. Holroyd CB, Coles MG. Cilvēka kļūdu apstrādes neirālais pamats: pastiprināšanas mācīšanās, dopamīns un ar kļūdām saistītais negatīvisms. Psychol rev. 2002; 109: 679 – 709. [PubMed]
95. Hong S, Hikosaka O. Globus pallidus sūta ar atlīdzību saistītus signālus sānu habenulai. Neirons. 2008; 60: 720 – 729. [PMC bezmaksas raksts] [PubMed]
96. Horvitz JC. Mesolimbokortikālā un nigrostriatālā dopamīna atbildes reakcija uz nenozīmīgiem notikumiem. Neirozinātne. 2000: 96: 651 – 656. [PubMed]
97. Horvitz JC, Stewart T, Jacobs BL. Ventral tegmental dopamīna neironu pārraušanas aktivitāte izraisa jutekļu stimulus nomodā. Brain Res. 1997: 759: 251 – 258. [PubMed]
98. Houk JC, Adams JL, Barto AG. Paraugs tam, kā bazālās ganglijas ģenerē un izmanto neironu signālus, kas paredz pastiprinājumu. In: Houk JC, Davis JL, Beiser DG, redaktori. Informācijas apstrādes modeļi bazālajā ganglijā. Kembridža, MA: MIT Press; 1995. 249 – 274 lpp.
99. Ikemoto S. Smadzeņu atalgojuma shēma ārpus mezolimbiskās dopamīna sistēmas: neirobioloģiskā teorija. Neirozinātnes un biheiviorālās apskates. 2010 [PMC bezmaksas raksts] [PubMed]
100. Ito R, Dalley JW, Howes SR, Robbins TW, Everitt BJ. Disociācija kondicionētā dopamīna izdalīšanās kodolieroču kodolā un apvalkā, reaģējot uz kokaīna norādēm, un kokaīna meklēšanas laikā žurkām. J Neurosci. 2000; 20: 7489 – 7495. [PubMed]
101. Ivlieva NY, Timofeeva NĒ. Neironu aktivitāte pedunculopontine kodolā ar pārtiku saistītā operētā kondicionētā refleksa laikā. Neirozinātne un uzvedības fizioloģija. 2003a; 33: 919 – 928. [PubMed]
102. Ivlieva NY, Timofeeva NĒ. Neironu darbība pedunculopontine kodolā operēta kondicionēta refleksa laikā. Neirozinātne un uzvedības fizioloģija. 2003b; 33: 499 – 506. [PubMed]
103. Jalabert M, Aston-Jones G, Herzog E, Manzoni O, Georges F. Stria terminalis gultas kodola loma ventrālās tegmentālās zonas dopamīna neironu kontrolē. Neiro-psihofarmakoloģijas un bioloģiskās psihiatrijas progress. 2009; 33: 1336–1346. [PMC bezmaksas raksts] [PubMed]
104. Jeanblanc J, Hoeltzel A, Louilot A. Disociācija dopamīnerģisko neironu iesaistīšanā, kas inervē kodolu un apvalka apakšreģionus, uzkrājoties kodoliem, latentā kavēšanā un emocionālajā uztverē. Neirozinātne. 2002; 111: 315 – 323. [PubMed]
105. Jensen J, Smith AJ, Willeit M, Crawley AP, Mikulis DJ, Vitcu I, Kapur S. Atsevišķi smadzeņu reģioni kodē jutīgumu pret valenci atlīdzības prognozēšanas laikā cilvēkiem. Cilvēka smadzeņu kartēšana. 2007; 28: 294 – 302. [PubMed]
106. Jhou TC, Fields HL, Baxter MG, Saper CB, Holland PC. Rostromedial tegmental kodols (RMTg), GABAerģisks, kas ietekmē vidēja smadzeņu dopamīna neironus, kodē nelabvēlīgus stimulus un kavē motorisko reakciju. Neirons. 2009a; 61: 786 – 800. [PMC bezmaksas raksts] [PubMed]
107. Jhou TC, Geisler S, Marinelli M, Degarmo BA, Zahm DS. Mezopontīna rostromedial tegmental kodols: struktūra, uz kuru vērsta sānu habenula un kas izvirzās Tsai ventrālajā tegmentālajā apgabalā un substantia nigra compacta. Salīdzinošās neiroloģijas žurnāls. 2009b; 513: 566 – 596. [PMC bezmaksas raksts] [PubMed]
108. Ji H, Shepard PD. Sānu habenulas stimulācija ar GABA (A) receptoru starpniecību kavē žurku vidējā smadzeņu dopamīna neironus. J Neurosci. 2007; 27: 6923 – 6930. [PubMed]
109. Džina X, Kosta RM. Starta / apstāšanās signāli parādās nigrostriatal ķēdēs secības mācīšanās laikā. Daba. 2010; 466: 457 – 462. [PMC bezmaksas raksts] [PubMed]
110. Johansens JP, lauki HL. Priekšējā cingulāta garozas aktivācija ar glutamaterģiju rada nepatīkamu mācību signālu. Nat Neurosci. 2004; 7: 398 – 403. [PubMed]
111. Džozefs MH, Datla K, jauns AM. Dopamīna uzkrāšanās kodola kodola interpretēšana ar in vivo dialīzi: sitiens, tieksme vai izziņa? Neirozinātnes un biheiviorālās apskates. 2003; 27: 527 – 541. [PubMed]
112. Džošua M, Adlers A, Bergmans H. Dopamīna dinamika motora uzvedības kontrolē. Pašreizējais viedoklis neirobioloģijā. 2009a; 19: 615 – 620. [PubMed]
113. Džošua M, Adlers A, Mitelmans R, Vaadija E, Bergmans H. Vidējā smadzeņu dopamīnerģiskie neironi un striatālās holīnerģiskie interneuroni kodē atšķirību starp atlīdzību un aversīvajiem notikumiem dažādos varbūtības klasisko kondicionēšanas pētījumu laikposmos. J Neurosci. 2008; 28: 11673 – 11684. [PubMed]
114. Džošua M, Adlers A, Pruts Y, Vaadija E, Vikenss JR, Bergmans H. Vidējo smadzeņu dopamīnerģisko neironu sinhronizāciju veicina atalgojošie notikumi. Neirons. 2009b; 62: 695 – 704. [PubMed]
115. Kable JW, Glimcher PW. Lēmuma neirobioloģija: vienprātība un polemika. Neirons. 2009; 63: 733 – 745. [PMC bezmaksas raksts] [PubMed]
116. Kakade S, Dayan P. Dopamīns: vispārinājumi un prēmijas. Neironu tīkli. 2002; 15: 549 – 559. [PubMed]
117. Kapur S. Psihoze kā novirzes izteikts stāvoklis: sistēma, kas savieno bioloģiju, fenomenoloģiju un farmakoloģiju šizofrēnijā. Amerikas psihiatrijas žurnāls. 2003; 160: 13 – 23. [PubMed]
118. Kaufling J, Veinante P, Pawlowski SA, Freund-Mercier MJ, Barrot M. Ietekmē GABAerģiskās astes žurkas ventrālās tegmentālās zonas. Salīdzinošās neiroloģijas žurnāls. 2009; 513: 597 – 621. [PubMed]
119. Kennerley SW, Wallis JD. Atsevišķu frontālās daivas neironu izvēles novērtēšana: iznākuma vērtība, kas kodēta vairākiem lēmumu mainīgajiem. Eiropas neirozinātnes žurnāls. 2009; 29: 2061 – 2073. [PMC bezmaksas raksts] [PubMed]
120. Kim H, Sul JH, Huh N, Lee D, Jung MW. Siata loma izvēlēto darbību vērtību atjaunināšanā. J Neurosci. 2009; 29: 14701 – 14712. [PubMed]
121. Kiyatkin EA. Domājams, ka dopamīnu saturoši un citi ventrālā pamatkategorijas neironi funkcionālās īpašības apzinātām žurkām. Int J Neurosci. 1988a; 42: 21 – 43. [PubMed]
122. Kiyatkin EA. Morfīna izraisītas ventrālā pamatgalva neironu funkcionālo īpašību modifikācijas apzinātā žurkā. Intern J neirozinātne. 1988b; 41: 57 – 70. [PubMed]
123. Klingbergs T. Darba atmiņas apmācība un plastiskums. Kognitīvo zinātņu tendences. 2010; 14: 317 – 324. [PubMed]
124. Kobajaši S, Nomoto K, Watanabe M, Hikosaka O, Schultz W, Sakagami M. Apbalvojošo un aversīvo rezultātu ietekme uz darbību makakas sānu prefrontālajā garozā. Neirons. 2006; 51: 861 – 870. [PubMed]
125. Kobayashi S, Schultz W. Atlīdzības kavēšanās ietekme uz dopamīna neironu atbildēm. J Neurosci. 2008; 28: 7837 – 7846. [PMC bezmaksas raksts] [PubMed]
126. Kobajaši Y, Inoue Y, Yamamoto M, Isa T, Aizawa H. Pedunculopontine tegmental kodola neironu ieguldījums vizuāli vadītu sakādes uzdevumu veikšanā pērtiķiem. J neirofiziols. 2002; 88: 715 – 731. [PubMed]
127. Koyama T, Tanaka YZ, Mikami A. Nociceptīvie neironi makaka priekšējā cingulātā aktivizējas sāpju gaidīšanas laikā. Neiroreport. 1998; 9: 2663 – 2667. [PubMed]
128. Kravitz AV, Freeze BS, Parker PR, Kay K, Thwin MT, Deisseroth K, Kreitzer AC. Parkinsona motora uzvedības regulēšana, izmantojot optoģenētisku kontroli bazālo gangliju shēmā. Daba. 2010 [PMC bezmaksas raksts] [PubMed]
129. Lammel S, Hetzel A, Hackel O, Jones I, Liss B, Roeper J. Mezoprefrontālo neironu unikālās īpašības divkāršā mezokortikolimfa dopamīna sistēmā. Neirons. 2008; 57: 760 – 773. [PubMed]
130. Lang PJ, Davis M. Emocijas, motivācija un smadzenes: refleksu pamati pētījumos ar dzīvniekiem un cilvēkiem. Smadzeņu izpētes progress. 2006; 156: 3 – 29. [PubMed]
131. Lapīšu PČ, Kroener S, Durstewitz D, Lavin A, Seamans JK. Mezokortikālās dopamīna sistēmas spēja darboties atšķirīgos laika režīmos. Psihofarmakoloģija (Berl) 2007; 191: 609 – 625. [PubMed]
132. Lī D, Seo H. Stiprināšanas mācīšanās un lēmumu pieņemšanas mehānismi primātu dorsolaterālajā prefrontālajā garozā. Ņujorkas Zinātņu akadēmijas žurnāli. 2007; 1104: 108 – 122. [PubMed]
133. Lee HJ, Groshek F, Petrovich GD, Cantalini JP, Gallagher M, Holland PC. Amygdalo-nigral shēmas loma redzes stimula kondicionēšanā, kas savienots ar pārtiku. J Neurosci. 2005; 25: 3881 – 3888. [PMC bezmaksas raksts] [PubMed]
134. Levita L, Dalley JW, Robbins TW. Kodolā uzkrājies dopamīns un iemācītās bailes pārskatītas: pārskats un daži jauni atklājumi. Uzvedības smadzeņu izpēte. 2002; 137: 115 – 127. [PubMed]
135. Lina SC, Nicolelis MA. Neironu ansamblis, kas eksplodē pamata priekšējā smadzenē, kodē pievilcību neatkarīgi no valences. Neirons. 2008; 59: 138 – 149. [PMC bezmaksas raksts] [PubMed]
136. Lisman JE, Grace AA. Hippocampal-VTA cilpa: informācijas ievadīšana ilgtermiņa atmiņā. Neirons. 2005: 46: 703 – 713. [PubMed]
137. Litt A, Plassmann H, Shiv B, Rangel A. Vērtēšanas un labvēlības signālu sadalīšana lēmumu pieņemšanas laikā. Cereb Cortex. 2010 presē. [PubMed]
138. Liu Z, Richmond BJ, Murray EA, Saunders RC, Steenrod S, Stubblefield BK, Montague DM, Ginns EI. Rhinālās garozas D2 receptoru olbaltumvielu mērķēšana uz DNS atgriezeniski bloķē norāžu apguvi, kas paredz atlīdzību. Amerikas Savienoto Valstu Nacionālās zinātņu akadēmijas raksti. 2004; 101: 12336 – 12341. [PMC bezmaksas raksts] [PubMed]
139. Liu ZH, Shin R, Ikemoto S. Mediālo A10 dopamīna neironu divkāršā loma emocionālajā kodēšanā. Neiropsiofarmakoloģija. 2008; 33: 3010 – 3020. [PMC bezmaksas raksts] [PubMed]
140. Ljungbergs T, Apicella P, Schultz W. Atbildes no pērtiķu dopamīna neironiem uzvedības reakciju apguves laikā. J Neurophysiol. 1992: 67: 145 – 163. [PubMed]
141. Lobo MK, Covington HE, 3rd, Chaudhury D, Friedman AK, Sun H, Damez-Werno D, Dietz DM, Zaman S, Koo JW, Kennedy PJ, et al. Šūnu tipam raksturīgais BDNF signālu zaudējums imitē kokaīna atlīdzības optoģenētisko kontroli. Zinātne. 2010; 330: 385 – 390. [PMC bezmaksas raksts] [PubMed]
142. Maeda H, Mogenson GJ. Perifērās stimulācijas ietekme uz neironu aktivitāti ventrālajā pamatvirsmā, activia nigra un vidējā smadzeņu retikulārā veidošanās žurkām. Smadzeņu izpētes biļetens. 1982; 8: 7 – 14. [PubMed]
143. Mantz J, Thierry AM, Glowinski J. Kaitīgas astes šķipsnu ietekme uz mezokortikālo un mezolimbisko dopamīna neironu izlādes ātrumu: selektīva mezokortikālās sistēmas aktivizēšana. Brain Res. 1989; 476: 377 – 381. [PubMed]
144. Margolis EB, Lock H, Hjelmstad GO, Fields HL. Tika pārskatīts ventrālais pamatvirziena apgabals: vai ir dopamīnerģisko neironu elektrofizioloģiskais marķieris? Fizioloģijas žurnāls. 2006; 577: 907 – 924. [PMC bezmaksas raksts] [PubMed]
145. Margolis EB, Mitchell JM, Ishikawa J, Hjelmstad GO, Fields HL. Vidējā smadzeņu dopamīna neironi: projekcijas mērķis nosaka darbības potenciāla ilgumu un dopamīna D (2) receptoru kavēšanu. J Neurosci. 2008; 28: 8908 – 8913. [PubMed]
146. Mark GP, Blander DS, Hoebel BG. Pēc apgūto garšas atturēšanās attīstības nosacītais stimuls samazina ekstracelulāro dopamīnu kodolā. Brain Res. 1991: 551: 308 – 310. [PubMed]
147. Marovska A, Yanagawa Y, Obata K, Vogt KE. Specializēta interneuronu apakšklase ir dopamīnerģiska amigdala funkcijas atvieglošana. Neirons. 2005; 48: 1025 – 1037. [PubMed]
148. Matsumoto M, Hikosaka O. Sānu habenula kā negatīvu atlīdzības signālu avots dopamīna neironos. Daba. 2007; 447: 1111 – 1115. [PubMed]
149. Matsumoto M, Hikosaka O. Negatīvas motivācijas vērtības attēlojums primāta sānu habenulā. Nat Neurosci. 2009a; 12: 77 – 84. [PMC bezmaksas raksts] [PubMed]
150. Matsumoto M, Hikosaka O. Dopamīna neironu divi veidi skaidri norāda pozitīvos un negatīvos motivācijas signālus. Daba. 2009b; 459: 837 – 841. [PMC bezmaksas raksts] [PubMed]
151. Matsumoto M, Matsumoto K, Abe H, Tanaka K. Mediālo prefrontālo šūnu aktivitātes signāldarbības kļūdu prognozēšanas kļūdas. Nat Neurosci. 2007; 10: 647 – 656. [PubMed]
152. Maijs PJ, McHaffie JG, Stanford TR, Jiang H, Costello MG, Coizet V, Hayes LM, Haber SN, Redgrave P. Tektonigrālas projekcijas primātā: ceļš iepriekš novērojošai maņu ievadīšanai smadzeņu vidusdaļas dopamīnerģiskajos neironos. Eiropas neirozinātnes žurnāls. 2009; 29: 575 – 587. [PMC bezmaksas raksts] [PubMed]
153. Mazzoni P, Hristova A, Krakauer JW. Kāpēc mēs nepārvietojamies ātrāk? Parkinsona slimība, kustību spars un netieša motivācija. J Neurosci. 2007; 27: 7105–7116. [PubMed]
154. Merali Z, Michaud D, McIntosh J, Kent P, Anisman H. Amygdaloid CRH sistēmas (-u) diferenciālā iesaistīšanās stimulu uzmanības centrā un valencē. Neiro-psihofarmakoloģijas un bioloģiskās psihiatrijas progress. 2003; 27: 1201–1212. [PubMed]
155. Mirenowicz J, Schultz W. Vidējā smadzeņu dopamīna neironu preferenciāla aktivizēšana ar apetītiskiem, nevis aversīviem stimuliem. Daba. 1996; 379: 449 – 451. [PubMed]
156. Molina-Luna K, Pekanovic A, Rohrich S, Hertler B, Schubring-Giese M, Rioult-Pedotti MS, Luft AR. Dopamīns motoriskajā garozā ir nepieciešams prasmju apgūšanai un sinaptiskajai plastiskumam. PLOS VIENS. 2009; 4: e7082. [PMC bezmaksas raksts] [PubMed]
157. Montague PR, Berns GS. Neironu ekonomika un vērtēšanas bioloģiskie substrāti. Neirons. 2002; 36: 265 – 284. [PubMed]
158. Montague PR, Dayan P, Sejnowski TJ. Sistēma mesencephalic dopamīna sistēmām, kuru pamatā ir prognozējamā Hebbian mācīšanās. J Neurosci. 1996: 16: 1936 – 1947. [PubMed]
159. Moriss G, Arkadirs D, Nevets A, Vaadija E, Bergmans H. Nejauši, bet atšķirīgi ziņojumi par vidējā smadzeņu dopamīna un striatālās toniski aktīvajiem neironiem. Neirons. 2004; 43: 133 – 143. [PubMed]
160. Morris G, Nevet A, Arkadir D, Vaadia E, Bergman H. Midbrain dopamīna neironi kodē lēmumus turpmākai rīcībai. Nat Neurosci. 2006: 9: 1057 – 1063. [PubMed]
161. Morrison SE, Salzman CD. Informācijas par atalgojošo un aversīvo stimulu apvienošana atsevišķos neironos. J Neurosci. 2009; 29: 11471 – 11483. [PMC bezmaksas raksts] [PubMed]
162. Nakahara H, Itoh H, Kawagoe R, Takikawa Y, Hikosaka O. Dopamīna neironi var attēlot no konteksta atkarīgu prognozēšanas kļūdu. Neirons. 2004; 41: 269 – 280. [PubMed]
163. Nakamura K, Hikosaka O. Dopamīna loma primāta caudate kodolā saccades atalgojuma modulācijā. J Neurosci. 2006; 26: 5360 – 5369. [PubMed]
164. Neve KA, Seamans JK, Trantham-Davidson H. Dopamīna receptoru signalizācija. Receptoru un signālu pārraides pētījumu žurnāls. 2004; 24: 165 – 205. [PubMed]
165. Nishijo H, Ono T, Nishino H. Atsevišķu neironu reakcijas trauksmaina pērtiķa amigdalā sarežģītas maņu stimulācijas laikā ar afektīvu nozīmi. J Neurosci. 1988; 8: 3570 – 3583. [PubMed]
166. Niv Y, Daw ND, Joel D, dayan P. Tonizējošais dopamīns: alternatīvās izmaksas un reakcijas spēka kontrole. Psihofarmakoloģija. 2007; 191: 507 – 520. [PubMed]
167. Nomoto K, Schultz W, Watanabe T, Sakagami M. Laika gaitā pagarinātas dopamīna atbildes reakcijas uz uztveroši prasīgiem atlīdzību prognozējošiem stimuliem. J Neurosci. 2010; 30: 10692 – 10702. [PMC bezmaksas raksts] [PubMed]
168. Okada K, Tojama K, Inoue Y, Isa T, Kobayashi Y. Dažādi pedunculopontine tegmental neironi signalizē par prognozēto un faktisko ieguvumu no uzdevuma. J Neurosci. 2009; 29: 4858 – 4870. [PubMed]
169. Omelchenko N, Bell R, Sesack SR. Sānu habenula projekcijas uz dopamīna un GABA neironiem žurku ventrālajā tegmentālajā zonā. Eiropas neirozinātnes žurnāls. 2009; 30: 1239 – 1250. [PMC bezmaksas raksts] [PubMed]
170. Owesson-White CA, Ariansen J, Stuber GD, Cleaveland NA, Cheer JF, Wightman RM, Carelli RM. Kokaīna meklējošās uzvedības neironu kodēšana sakrīt ar fāzisko dopamīna izdalīšanos akumulātajā kodolā un apvalkā. Eiropas neirozinātnes žurnāls. 2009; 30: 1117 – 1127. [PMC bezmaksas raksts] [PubMed]
171. Oyama K, Hernadi I, Iijima T, Tsutsui K. Apbalvojuma prognozēšanas kļūdu kodēšana muguras striatūra neironos. J Neurosci. 2010; 30: 11447 – 11457. [PubMed]
172. Packard MG, Baltais NM. Hipokampu un caudate kodola atmiņu sistēmu disociācija, pēcapmācot dopamīna agonistu intracerebrālās injekcijas. Uzvedības neirozinātne. 1991; 105: 295 – 306. [PubMed]
173. Padoa-Schioppa C. Orbitofrontālais garozs un ekonomiskās vērtības aprēķināšana. Ņujorkas Zinātņu akadēmijas žurnāli. 2007; 1121: 232 – 253. [PubMed]
174. Palmiter RD. Dopamīna signalizēšana muguras smadzenēs ir būtiska motivētai uzvedībai: mācības no pelēm, kurām trūkst dopamīna. Ņujorkas Zinātņu akadēmijas žurnāli. 2008; 1129: 35 – 46. [PMC bezmaksas raksts] [PubMed]
175. Pan WX, Hyland BI. Pedunculopontine tegmental kodola kontrolē vidēja smadzeņu dopamīna neironu reakcijas žurkām, kuras uzvedas. J Neurosci. 2005; 25: 4725 – 4732. [PubMed]
176. Pan WX, Schmidt R, Wickens JR, Hyland BI. Trīspusējs izmiršanas mehānisms, ko ierosinājusi dopamīna neironu aktivitāte un laika atšķirību modelis. J Neurosci. 2008; 28: 9619 – 9631. [PubMed]
177. Parker JG, Zweifel LS, Clark JJ, Evans SB, Phillips PE, Palmiter RD. NMDA receptoru neesamība dopamīna neironos mazina dopamīna izdalīšanos, bet Pavlovijas kondicionēšanas laikā tas nav nosacīts. Amerikas Savienoto Valstu Nacionālās zinātņu akadēmijas raksti. 2010 [PMC bezmaksas raksts] [PubMed]
178. Pascoe JP, Kapp BS. Amygdaloid centrālā kodola neironu elektrofizioloģiskās īpašības Pavlovian baiļu kondicionēšanas laikā trušiem. Uzvedības smadzeņu izpēte. 1985; 16: 117 – 133. [PubMed]
179. Pascucci T, Ventura R, Latagliata EC, Cabib S, Puglisi-Allegra S. Mediālais prefrontālais garozs nosaka akumulēto dopamīna reakciju uz stresu, izmantojot pretējās norepinefrīna un dopamīna ietekmes. Cereb Cortex. 2007; 17: 2796 – 2804. [PubMed]
180. Pearce JM, Hall G. Pavlovian mācīšanās modelis: kondicionētu, bet beznosacījumu stimulu efektivitātes variācijas. Psychol rev. 1980; 87: 532 – 552. [PubMed]
181. Pezze MA, Feldon J. Mesolimbic dopamīnerģiskie ceļi baiļu kondicionēšanā. Progress neirobioloģijā. 2004; 74: 301 – 320. [PubMed]
182. Phillips AG, Ahn S, Howland JG. Mezokortikolimbiskās dopamīna sistēmas amigdalārā kontrole: paralēli ceļi motivētai uzvedībai. Neirozinātnes un biheiviorālās apskates. 2003a; 27: 543 – 554. [PubMed]
183. Phillips GD, Salussolia E, Hitchcott PK. Mezoamigidaloīdā dopamīna projekcijas loma emocionālajā mācībā. Psihofarmakoloģija. 2010 [PubMed]
184. Phillips PE, Stuber GD, Heien ML, Wightman RM, Carelli RM. Subsekundes dopamīna izdalīšanās veicina kokaīna meklēšanu. Daba. 2003b; 422: 614 – 618. [PubMed]
185. Porrino LJ, Goldman-Rakic ​​PS. Prefrontālā un priekšējā cingulārā garozas smadzeņu cilmes inervācija rēzus pērtiķī, ko atklāja HRP retrogrāda transportēšana. Salīdzinošās neiroloģijas žurnāls. 1982; 205: 63 – 76. [PubMed]
186. Puryear CB, Kim MJ, Mizumori SJ. Kustības un atlīdzības konjunktīvs kodējums, ko veic ventrālie pamata zonas neironi brīvi pārvietojošos grauzējos. Uzvedības neirozinātne. 2010; 124: 234 – 247. [PMC bezmaksas raksts] [PubMed]
187. Ravel S, Legallet E, Apicella P. Toniski aktīvie pērtiķu striatum neironi preferenciāli nereaģē uz apetītes stimuliem. Eksperimentālie smadzeņu pētījumi. Experimentelle Hirnforschung. 1999; 128: 531 – 534. [PubMed]
188. Ravel S, Legallet E, Apicella P. Toniski aktīvo neironu atbildes pērtiķu striatumā atšķir motivējoši pretējus stimulus. J Neurosci. 2003; 23: 8489 – 8497. [PubMed]
189. Ravel S, Richmond BJ. Dopamīna neironu reakcija pērtiķiem, kas vizuāli veic atalgojuma grafiku. Eiropas neirozinātnes žurnāls. 2006; 24: 277 – 290. [PubMed]
190. Redgrave P, Gurney K. Īsa latentuma dopamīna signāls: loma jaunu darbību atklāšanā? Nat Rev Neurosci. 2006; 7: 967 – 975. [PubMed]
191. Redgrave P, Prescott TJ, Gurney K. Vai īsa latentuma dopamīna reakcija ir pārāk īsa, lai signalizētu par atlīdzības kļūdu? Tendences neirozinātnēs. 1999; 12: 146 – 151. [PubMed]
192. Rescorla RA, Vāgnera AR. Pavlovijas kondicionēšanas teorija: variācijas armatūras un nepiestiprināšanas efektivitātē. In: Black AH, Prokasy WF, redaktori. Klasiskā kondicionēšana II: pašreizējie pētījumi un teorija. Ņujorka, Ņujorka: Appleton Century Crofts; 1972. 64 – 99 lpp.
193. Reinoldss JNJ, Hyland BI, Wickens JR. Šūnu ar atalgojumu saistītas mācīšanās mehānisms. Daba. 2001; 413: 67 – 70. [PubMed]
194. Reinolds, SM, Berridge KC. Pozitīva un negatīva motivācija nucleus accumbens apvalkā: divvērtīgi rostrocaudālie gradienti GABA izraisītajai ēšanai, garšas “patika” / “nepatīk” reakcijai, priekšroka vietai / izvairīšanās un bailes. J Neurosci. 2002; 22: 7308–7320. [PubMed]
195. Richardson RT, DeLong MR. Kodolu bazālo funkciju elektrofizioloģiskie pētījumi primātiem. Jaunumi eksperimentālajā medicīnā un bioloģijā. 1991; 295: 233 – 252. [PubMed]
196. Robbins TW, Arnsten AF. Fronto-izpildfunkcijas neiropsiofarmakoloģija: monoamīnerģiskā modulācija. Gada neirozinātnes apskats. 2009; 32: 267 – 287. [PMC bezmaksas raksts] [PubMed]
197. Robinsons DL, Hermans A, Seipel AT, Wightman RM. Ātrās ķīmiskās komunikācijas uzraudzība smadzenēs. Ķīmiskās atsauksmes. 2008; 108: 2554 – 2584. [PMC bezmaksas raksts] [PubMed]
198. Roesch MR, Calu DJ, Schoenbaum G. Dopamīna neironi kodē labāku iespēju žurkām, izlemjot starp atšķirīgi aizkavētu vai lieluma atlīdzību. Nat Neurosci. 2007; 10: 1615 – 1624. [PMC bezmaksas raksts] [PubMed]
199. Roesch MR, Olson CR. Neironu darbības, kas saistītas ar atlīdzības vērtību un motivāciju primātu priekšējā garozā. Zinātne. 2004; 304: 307 – 310. [PubMed]
200. Roitman MF, Wheeler RA, Wightman RM, Carelli RM. Reālā laika ķīmiskās reakcijas kodolkrāsās atšķiras atalgojošus un atbaidošus stimulus. Nat Neurosci. 2008: 11: 1376 – 1377. [PMC bezmaksas raksts] [PubMed]
201. Rutledge RB, Lazzaro SC, Lau B, Myers CE, Gluck MA, Glimcher PW. Dopamīnerģiskie medikamenti modulē Parkinsona slimnieku mācīšanās ātrumu un neatlaidību, veicot dinamisku barības meklēšanu. J Neurosci. 2009; 29: 15104–15114. [PMC bezmaksas raksts] [PubMed]
202. Salamone JD. Kodola akumulācijas dopamīna iesaistīšana ēstgribas un aversīvas motivācijas nodrošināšanā. Uzvedības smadzeņu izpēte. 1994; 61: 117 – 133. [PubMed]
203. Salamone JD, Correa M, Farrar A, Mingote SM. Ar kodolu kodolu dopamīna kodola un ar piepūli saistītās funkcijas un ar tām saistītās priekšējo smadzeņu shēmas Psihofarmakoloģija (Berl) 2007; 191: 461 – 482. [PubMed]
204. Satoh T, Nakai S, Sato T, Kimura M. Dopamīna neironu savstarpēji saistītā motivācijas un lēmuma kodēšana. J Neurosci. 2003; 23: 9913 – 9923. [PubMed]
205. Savine AC, Beck SM, Edwards BG, Chiew KS, Braver TS. Kognitīvās kontroles uzlabošana ar pieejas un izvairīšanās motivācijas stāvokļiem. Izziņa un emocijas. 2010; 24: 338–356. [PMC bezmaksas raksts] [PubMed]
206. Schoenbaum G, Roesch MR, Stalnaker TA, Takahashi YK. Jauna perspektīva par orbitofrontālās garozas lomu adaptīvajā uzvedībā. Nat Rev Neurosci. 2009: 10: 885 – 892. [PMC bezmaksas raksts] [PubMed]
207. Schultz W. Vidējā smadzeņu dopamīna neironu reakcija uz uzvedības izraisošajiem stimuliem pērtiķī. J neirofiziols. 1986; 56: 1439 – 1461. [PubMed]
208. Schultz W. Paredzams dopamīna neironu atlīdzības signāls. J neirofiziols. 1998; 80: 1 – 27. [PubMed]
209. Schultz W. Vairākas dopamīna funkcijas dažādos laika kursos. Gada neirozinātnes apskats. 2007; 30: 259 – 288. [PubMed]
210. Schultz W. Dopamīna signāli par atlīdzības vērtību un risku: pamata un jaunākie dati. Behav Brain Funct. 2010; 6: 24. [PMC bezmaksas raksts] [PubMed]
211. Schultz W, Dayan P, Montague PR. Prognozēšanas un atalgojuma nervu substrāts. Zinātne. 1997: 275: 1593 – 1599. [PubMed]
212. Schultz W, Romo R. Nigrostriatal dopamīna neironu reakcija uz augstas intensitātes somatosensorisku stimulāciju anestēzijas pērtiķī. J neirofiziols. 1987; 57: 201 – 217. [PubMed]
213. Schultz W, Romo R. Pērtiķa vidējā smadzeņu dopamīna neironi: iespējamās reakcijas uz stimuliem, kas izraisa tūlītējas uzvedības reakcijas. J neirofiziols. 1990; 63: 607 – 624. [PubMed]
214. Seo H, Lee D. Atlīdzības signālu pagaidu filtrēšana muguras priekšējā cingulāta garozā jauktās stratēģijas spēles laikā. J Neurosci. 2007; 27: 8366 – 8377. [PMC bezmaksas raksts] [PubMed]
215. Šabels SJ, Janaks PH. Būtiska amigdala neironu aktivitātes līdzība kondicionētas ēstgribas un aversīvas emocionālās uzbudinājuma laikā. Amerikas Savienoto Valstu Nacionālās zinātņu akadēmijas raksti. 2009; 106: 15031 – 15036. [PMC bezmaksas raksts] [PubMed]
216. Shadmehr R, Smith MA, Krakauer JW. Kļūdu labošana, maņu prognozēšana un pielāgošana motora vadībā. Gada neirozinātnes apskats. 2010 [PubMed]
217. Shen W, Flajolet M, Greengard P, Surmeier DJ. Striatīvas sinaptiskās plastikas divdomīga dopamīnerģiska kontrole. Zinātne. 2008; 321: 848 – 851. [PMC bezmaksas raksts] [PubMed]
218. Shimo Y, Wichmann T. Neironu aktivitāte subtalāmā kodolā modulē dopamīna izdalīšanos pērtiķu striatumā. Eiropas neirozinātnes žurnāls. 2009; 29: 104 – 113. [PMC bezmaksas raksts] [PubMed]
219. Shippenberg TS, Bals-Kubik R, Huber A, Herz A. Neiroanatomiskie substrāti, kas meditē D-1 dopamīna receptoru antagonistu negatīvo iedarbību. Psihofarmakoloģija (Berl) 1991; 103: 209 – 214. [PubMed]
220. Šumake J, Ilango A, Scheich H, Wetzel W, Ohl FW. Diferenciālā neiromodulācija izvairīšanās no mācīšanās iegūšanai un iegūšanai pa sānu habenulu un ventrālo tegmentālo zonu. J Neurosci. 2010; 30: 5876 – 5883. [PubMed]
221. Mazs DM, Gregorijs MD, Mak YE, Gitelmans D, Mesulama MM, Pariss T. T. Neitralitātes intensitātes un emocionālās vērtēšanas neironu attēlojuma disociācija cilvēka uzmundrināšanā. Neirons. 2003; 39: 701 – 711. [PubMed]
222. Stefani MR, Moghaddam B. Noteikumu apguve un atalgojuma iespējamība ir saistīta ar atšķirīgiem dopamīna aktivēšanas modeļiem žurku prefrontālajā garozā, nucleus carrbens un muguras striatum. J Neurosci. 2006; 26: 8810 – 8818. [PMC bezmaksas raksts] [PubMed]
223. Steinfels GF, Heym J, Strecker RE, Jacobs BL. Kaķu dopamīnerģisko neironu reakcija uz dzirdes stimuliem, kas parādās miega nomoda ciklā. Brain Res. 1983; 277: 150 – 154. [PubMed]
224. Strecker RE, Jacobs BL. Substantia nigra dopamīnerģiskā aktivitāte kaķu uzvedībā: uzbudinājuma ietekme uz spontānu izdalīšanos un maņu izraisīta aktivitāte. Brain Res. 1985; 361: 339 – 350. [PubMed]
225. Stubers GD, Hnasko TS, Britt JP, Edvards RH, Bonci A. Dopamīnerģiskie termināli uzkrātajā kodolā, bet ne muguras striatuma kodolieroču glutamāts. Neirozinātnes žurnāls. 2010; 30: 8229 – 8233. [PMC bezmaksas raksts] [PubMed]
226. Stuber GD, Wightman RM, Carelli RM. Kokaīna pašpārvaldes izzušana funkcionāli un īslaicīgi atklāj atšķirīgus dopamīnerģiskos signālus uzkrāšanās kodolā. Neirons. 2005; 46: 661 – 669. [PubMed]
227. Sul JH, Kim H, Huh N, Lee D, Jung MW. Grauzēju orbitofrontālā un mediālā prefrontāla garozas atšķirīgās lomas lēmumu pieņemšanā. Neirons. 2010; 66: 449 – 460. [PMC bezmaksas raksts] [PubMed]
228. Surmeier DJ, Ding J, Day M, Wang Z, Shen W. D1 un D2 dopamīna-receptoru modulācija striatālās glutamāterģiskās signalizācijas jomā striatālās vidējās spininga neironos. Tendences neirozinātnēs. 2007; 30: 228 – 235. [PubMed]
229. Surmeier DJ, Shen W, Day M, Gertler T, Chan S, Tian X, Plotkin JL. Dopamīna loma striatūru ķēžu struktūras un funkcijas modulēšanā. Smadzeņu izpētes progress. 2010; 183C: 148 – 167. [PubMed]
230. Sutton RS, Barto AG. Ceļā uz modernu adaptīvo tīklu teoriju: cerības un prognozes. Psychol rev. 1981; 88: 135 – 170. [PubMed]
231. Takahashi YK, Roesch MR, Stalnaker TA, Haney RZ, Calu DJ, Taylor AR, Burke KA, Schoenbaum G. Orbitofrontālais garozs un ventrālā tegmentālā zona ir nepieciešami, lai mācītos no negaidītiem rezultātiem. Neirons. 2009; 62: 269 – 280. [PMC bezmaksas raksts] [PubMed]
232. Takikawa Y, Kawagoe R, Hikosaka O. Vidējā smadzeņu dopamīna neironu iespējamā loma saccades īsā un ilgtermiņa adaptācijā pozīcijas un ieguvuma kartēšanai. J neirofiziols. 2004; 92: 2520 – 2529. [PubMed]
233. Tecuapetla F, Patel JC, Xenias H, English D, Tadros I, Shah F, Berlin J, Deisseroth K, Rice ME, Tepper JM, Koos T. Glutamatergiskā signalizēšana ar mezolimbisko dopamīna neironu starpniecību kodolos. J Neurosci. 2010; 30: 7105 – 7110. [PMC bezmaksas raksts] [PubMed]
234. Thierry AM, Tassin JP, Blanc G, Glowinski J. Mezokortikālās DA sistēmas selektīva aktivizēšana stresa ietekmē. Daba. 1976; 263: 242 – 244. [PubMed]
235. Toblera PN, Dikinsons A, Šulcs W. Dopamīna neironu paredzamās atalgojuma kodēšana kondicionētas inhibīcijas paradigmā. J Neurosci. 2003; 23: 10402 – 10410. [PubMed]
236. Tobler PN, Fiorillo CD, Schultz W. Atalgojuma vērtības adaptīvā kodēšana ar dopamīna neironiem. Zinātne. 2005: 307: 1642 – 1645. [PubMed]
237. Tsai HC, Zhang F, Adamantidis A, Stuber GD, Bonci A, de Lecea L, Deisseroth K. Faziska dedzināšana dopamīnerģiskos neironos ir pietiekama uzvedības kondicionēšanai. Zinātne. 2009 [PubMed]
238. Ullspergers M. Veiktspējas monitoringa un atgriezeniskās saites mācīšanās ģenētiskās asociācijas pētījumi: dopamīna un serotonīna loma. Neirozinātnes un biheiviorālās apskates. 2010; 34: 649 – 659. [PubMed]
239. Ja vien nav MA. Dopamīns: svarīgākais jautājums. Tendences neirozinātnēs. 2004; 27: 702 – 706. [PubMed]
240. Uylings HB, Groenewegen HJ, Kolb B. Vai žurkām ir prefrontāls garozs? Uzvedības smadzeņu izpēte. 2003; 146: 3 – 17. [PubMed]
241. Ventura R, Cabib S, Puglisi-Allegra S. Pretējā genotipa atkarīgā mezokortikolimbiskā dopamīna reakcija uz stresu. Neirozinātne. 2001; 104: 627 – 631. [PubMed]
242. Ventura R, Latagliata EC, Morrone C, La Mela I, Puglisi-Allegra S. Prefrontālais norepinefrīns nosaka “augstas” motivācijas uzmanības loku. PLOS VIENS. 2008; 3: e3044. [PMC bezmaksas raksts] [PubMed]
243. Ventura R, Morrone C, Puglisi-Allegra S. Prefrontālā / akumulārā kateholamīna sistēma nosaka motivācijas pievilcību gan stimuliem, kas saistīti ar atlīdzību, gan nepatiku. Amerikas Savienoto Valstu Nacionālās zinātņu akadēmijas raksti. 2007; 104: 5181 – 5186. [PMC bezmaksas raksts] [PubMed]
244. Vogt BA. Sāpju un emociju mijiedarbība cingulate gyrus apakšreģionos. Nat Rev Neurosci. 2005; 6: 533 – 544. [PMC bezmaksas raksts] [PubMed]
245. Voon V, Pessiglione M, Brezing C, Gallea C, Fernandez HH, Dolan RJ, Hallett M. Mehānismi, kas ir pamatā dopamīna starpniecības atalgojuma ias piespiedu uzvedībā. Neirons. 2010; 65: 135 – 142. [PMC bezmaksas raksts] [PubMed]
246. Waelti P, Dickinson A, Schultz W. Dopamīna atbildes atbilst formālās mācīšanās teorijas pamatprincipiem. Daba. 2001: 412: 43 – 48. [PubMed]
247. Voliss JD, Kennerli SW. Heterogēni atlīdzības signāli prefrontālajā garozā. Pašreizējais viedoklis neirobioloģijā. 2010; 20: 191 – 198. [PMC bezmaksas raksts] [PubMed]
248. Walton ME, Behrens TE, Buckley MJ, Rudebeck PH, Rushworth MF. Atdalāmas mācīšanās sistēmas makaku smadzenēs un orbitofrontālā garozas loma kontingenta apguvē. Neirons. 2010; 65: 927 – 939. [PMC bezmaksas raksts] [PubMed]
249. Wheeler RA, Twining RC, Jones JL, Slater JM, Grigson PS, Carelli RM. Negatīvās ietekmes uzvedības un elektrofizioloģiskie rādītāji prognozē kokaīna pašpārvaldi. Neirons. 2008: 57: 774 – 785. [PubMed]
250. Wightman RM, Heien MLAV, Wassum KM, Sombers LA, Aragona BJ, Khan AS, Ariansen JL, Cheer JF, Phillips PE, Carelli RM. Dopamīna izdalīšanās ir neviendabīga žurku kodola akumulācijas mikrovidē. Eiropas neirozinātnes žurnāls. 2007; 26: 2046 – 2054. [PubMed]
251. Williams GV, Castner SA. Zem līknes: kritiski jautājumi D1 receptoru funkcijas noskaidrošanai darba atmiņā. Neirozinātne. 2006; 139: 263 – 276. [PubMed]
252. Viljamss SM, Goldman-Rakic ​​PS. Plaši izplatīta primātu mezofrontālā dopamīna sistēma. Cereb Cortex. 1998; 8: 321 – 345. [PubMed]
253. Winn P. Kā vislabāk apsvērt pedunculopontine tegmental kodola struktūru un funkcijas: pierādījumi no pētījumiem ar dzīvniekiem. Neiroloģisko zinātņu žurnāls. 2006; 248: 234 – 250. [PubMed]
254. Gudrs RA. Dopamīns, mācīšanās un motivācija. Nat Rev Neurosci. 2004; 5: 483 – 494. [PubMed]
255. Gudrs RA. Priekšlaicīgas atlīdzības un motivācijas substrāti. Salīdzinošās neiroloģijas žurnāls. 2005; 493: 115 – 121. [PMC bezmaksas raksts] [PubMed]
256. Gudrs SP. Priekšējie frontālie lauki: filoģenēze un pamatfunkcija. Tendences neirozinātnēs. 2008; 31: 599 – 608. [PMC bezmaksas raksts] [PubMed]
257. Yamada H, Matsumoto N, Kimura M. Toniski aktīvi neironi primāta caudate kodolā un putameni diferencēti kodē instruētus darbības motivācijas rezultātus. J Neurosci. 2004; 24: 3500 – 3510. [PubMed]
258. Yamada H, Matsumoto N, Kimura M. Vēsture un pašreizējie norādījumi, kas balstīti uz gaidāmajiem uzvedības rezultātiem striatumā. J neirofiziols. 2007; 98: 3557 – 3567. [PubMed]
259. Yin HH, Knowlton BJ. Bazālo gangliju loma ieradumu veidošanā. Nat Rev Neurosci. 2006; 7: 464 – 476. [PubMed]
260. Jaunais AM, Morāna premjerministrs, Džozefs MH. Dopamīna loma kondicionēšanā un latentajā inhibīcijā: kas, kad, kur un kā? Neirozinātnes un biheiviorālās apskates. 2005; 29: 963 – 976. [PubMed]
261. Zaghloul KA, Blanco JA, Weidemann CT, McGill K, Jaggi JL, Baltuch GH, Kahana MJ. Cilvēka nederīgie neironi kodē negaidītu finansiālu labumu. Zinātne. 2009; 323: 1496 – 1499. [PMC bezmaksas raksts] [PubMed]
262. Zahniser NR, Sorkin A. Dopamīna transportētāja ātra regulēšana: loma stimulantu atkarībā? Neirofarmakoloģija. 2004; 47 piederumi 1: 80 – 91. [PubMed]
263. Zhang L, Doyon WM, Clark JJ, Phillips PE, Dani JA. Tonizējoša un fāziska dopamīna pārnešanas kontrole muguras un ventrālajā striatumā. Molekulārā farmakoloģija. 2009; 76: 396 – 404. [PMC bezmaksas raksts] [PubMed]
264. Cinks CF, Pagnoni G, Martins ME, Dhamala M, Berns GS. Cilvēka striatālā reakcija uz ievērojamiem neatgriezeniskiem stimuliem. Neirozinātnes žurnāls. 2003; 23: 8092 – 8097. [PubMed]
265. Zweifel LS, Argilli E, Bonci A, Palmiter RD. NMDA receptoru loma dopamīna neironos attiecībā uz plastiskumu un atkarību izraisošu uzvedību. Neirons. 2008; 59: 486 – 496. [PMC bezmaksas raksts] [PubMed]
266. Zweifel LS, Parker JG, Lobb CJ, Rainwater A, Wall VZ, Fadok JP, Darvas M, Kim MJ, Mizumori SJ, Paladini CA et al. Ja no dopamīna neironiem tiek pārtraukta NMDAR atkarīgā eksplozija, tas nodrošina selektīvu fāziskās dopamīna atkarīgās izturēšanās novērtējumu. Amerikas Savienoto Valstu Nacionālās zinātņu akadēmijas raksti. 2009; 106: 7281 – 7288. [PMC bezmaksas raksts] [PubMed]