Dopamín v motivačnej kontrole: odmeňovanie, odpor a upozornenie (2010)

Pozri ďalšie články v PMC to citát publikovaný článok.

Dopamínové neuróny stredného mozgu sú dobre známe svojou silnou odozvou na odmeny a ich kritickou úlohou v pozitívnej motivácii. Je však čoraz jasnejšie, že dopamínové neuróny tiež prenášajú signály súvisiace s výraznými, ale nie odmeňujúcimi skúsenosťami, ako sú napríklad averzívne a varovné udalosti. Tu sa pozrieme na nedávne pokroky v chápaní odmeny a non-odmeny funkcie dopamínu. Na základe týchto údajov navrhujeme, aby sa dopamínové neuróny vyskytovali vo viacerých typoch, ktoré sú spojené s odlišnými mozgovými sieťami a majú odlišné úlohy v motivačnej kontrole. Niektoré dopamínové neuróny kódujú motivačnú hodnotu, podporujú mozgové siete pre hľadanie, hodnotenie a hodnotové učenie. Iní kódujú motivačnú dôležitosť, podporujú mozgové siete pre orientáciu, poznávanie a všeobecnú motiváciu. Oba typy dopamínových neurónov sú zosilnené výstražným signálom, ktorý sa podieľa na rýchlej detekcii potenciálne dôležitých senzorických podnetov. Predpokladáme, že tieto dopaminergné cesty pre hodnotu, význam a varovanie spolupracujú pri podpore adaptívneho správania.

Dopamín v motivácii akcií, ktoré hľadajú odmenu

Dopamín je už dlho známe, že je dôležitý pre posilnenie a motiváciu činností. Lieky, ktoré interferujú s transmisiou DA, narúšajú učenie posilňovania, zatiaľ čo manipulácia, ktorá zvyšuje prenos DA, ako je stimulácia mozgu a návykové drogy, často pôsobí ako zosilňovač (Wise, 2004). Prevod DA je rozhodujúci pre vytvorenie motivačného stavu na získanie odmien (Berridge a Robinson, 1998; Salamone a kol., 2007) a na vytvorenie spomienok na združenia odmeňovania (Dalley a kol., 2005). Vydanie DA nie je potrebné pre všetky formy učenia sa odmeňovania a nemusí byť vždy „milované“ v tom zmysle, že spôsobuje potešenie, ale je rozhodujúce, aby sa ciele stali „hľadanými“ v zmysle motivačných činností na ich dosiahnutie (Berridge a Robinson, 1998; Palmiter, 2008).

Jedna hypotéza o tom, ako dopamín podporuje posilnenie učenia, spočíva v tom, že upravuje silu synaptických spojení medzi neurónmi. Najviac priamočiara verzia tejto hypotézy je, že dopamín kontroluje synaptickú plasticitu podľa modifikovaného Hebbovho pravidla, ktoré môže byť zhruba vyjadrené ako „neuróny, ktoré spolu zapália drôt, pokiaľ dostanú dopamín“. Inými slovami, ak bunka A aktivuje bunku B a bunka B spôsobí behaviorálnu činnosť, ktorá má za následok odmenu, potom sa dopamín uvoľní a spojenie A → B by sa posilnilo (Montague a kol., 1996; Schultz, 1998). Tento mechanizmus by umožnil organizmu naučiť sa optimálnu voľbu činností na získanie odmien, s dostatočnou skúsenosťou s pokusmi a chybami. V súlade s touto hypotézou má dopamín silný vplyv na synaptickú plasticitu v mnohých oblastiach mozgu (Surmeier a kol., 2010; Goto a kol., 2010; Molina-Luna a kol., 2009; Marowsky a kol., 2005; Lisman a Grace, 2005). V niektorých prípadoch dopamín umožňuje synaptickú plasticitu v súlade s Hebbovským pravidlom opísaným vyššie, a to spôsobom, ktorý súvisí so správaním, ktoré hľadá odmenu (Reynolds a kol., 2001). Okrem jeho účinkov na dlhodobú synaptickú plasticitu môže dopamín tiež vykonávať okamžitú kontrolu nad nervovými obvodmi modulovaním aktivity nervového spikingu a synaptických spojení medzi neurónmi (Surmeier a kol., 2007; Robbins a Arnsten, 2009), v niektorých prípadoch tak, aby sa podporili okamžité opatrenia na získanie odmeny (\ tFrank, 2005).

Dopamínové neurónové odmeny signály

Aby sa motivovali akcie, ktoré vedú k odmenám, dopamín by sa mal uvoľniť počas odmeňovania skúseností. Väčšina DA neurónov je skutočne silne aktivovaná neočakávanými primárnymi odmenami, ako sú potraviny a voda, čo často spôsobuje fázové „prasknutia“ aktivity (Schultz, 1998(fázové excitácie vrátane viacerých hrotov (Grace a Bunney, 1983)). Priekopnícke štúdie Wolframa Schultza však ukázali, že tieto reakcie DA neurónov nie sú spúšťané spotrebou odmeny sama o sebe, Namiesto toho sa podobajú na chybu „predikcie odmeny“, ktorá vykazuje rozdiel medzi prijatou odmenou a očakávanou odmenou (Schultz a kol., 1997) (Obrázok 1A). Ak je teda odmena väčšia, ako sa predpokladalo, DA neuróny sú silne excitované (pozitívna chyba predikcie, Obrázok 1E, červená); ak je odmena menšia, ako sa predpokladalo, alebo ak nenastane v určenom čase, neuróny DA sú fázovo inhibované (záporná chyba predikcie, Obrázok 1E, Modrá); a ak je odmena vopred stanovená tak, že jej veľkosť je plne predvídateľná, DA neuróny majú malú alebo žiadnu odozvu (nulová chyba predikcie, Obrázok 1C, čierna). Rovnaký princíp platí pre odpovede DA na zmyslové podnety, ktoré poskytujú nové informácie o budúcich odmenách. DA neuróny sú vzrušené, keď tágo indikuje zvýšenie hodnoty budúcej odmeny (Obrázok 1C, červená), zablokované, keď tágo indikuje zníženie hodnoty budúcej odmeny (Obrázok 1C, modrá), a vo všeobecnosti majú malú odozvu na podnety, ktoré neposkytujú žiadne nové informácie o odmene (Obrázok 1E, čierna). Tieto DA odpovede sa podobajú špecifickému typu chyby predikcie odplaty nazývanej chyba časového rozdielu alebo „TD chyba“, ktorá bola navrhnutá tak, aby pôsobila ako zosilňovací signál pre učenie hodnoty činností a stavov prostredia (Houk a kol., 1995; Montague a kol., 1996; Schultz a kol., 1997). Výpočtové modely využívajúce zosilňovací signál podobný TD môžu vysvetliť mnohé aspekty výučby posilňovania u ľudí, zvierat a samotných neurónov DA (Sutton a Barto, 1981; Waelti a kol., 2001; Montague a Berns, 2002; Dayan a Niv, 2008).

 

Obrázok 1

Dopamínové kódovanie chýb predikcie a preferencie prediktívnych informácií

Impozantný rad experimentov ukázal, že DA signály predstavujú predpovede odmeňovania spôsobom, ktorý úzko zodpovedá preferenciám správania, vrátane preferencie veľkých odmien v porovnaní s malými (Tobler a kol., 2005) pravdepodobné odmeny nad nepravdepodobnými (Fiorillo a kol., 2003; Satoh a kol., 2003; Morris a kol., 2004) a okamžité odmeny nad oneskorenými (\ tRoesch a kol., 2007; Fiorillo a kol., 2008; Kobayashi a Schultz, 2008). Existujú dokonca dôkazy, že neuróny DA u ľudí kódujú hodnotu odmeny peňazí (Zaghloul a kol., 2009). Okrem toho sa počas učenia objavujú DA signály s podobným časovým priebehom ako behaviorálne miery predikcie odmien (Hollerman a Schultz, 1998; Satoh a kol., 2003; Takikawa a kol., 2004; Day a kol., 2007) a sú korelované so subjektívnymi opatreniami preferencie odmeňovania (Morris a kol., 2006). Tieto zistenia stanovili DA neuróny ako jeden z najlepšie pochopených a najviac replikovaných príkladov kódovania odmeny v mozgu. Výsledkom je, že nedávne štúdie podrobili DA neuróny intenzívnemu preskúmaniu, aby zistili, ako vytvárajú predpovede odmien a ako ich signály pôsobia na nadväzujúce štruktúry na kontrolu správania.

Dopamínové neurónové odmeny signály

Nedávne pokroky v porozumení signálom odmeňovania DA pochádzajú z troch širokých otázok: Ako sa DA neuróny učia predpovede odmien? Ako presné sú ich predpovede? A čo s nimi zaobchádza ako s odmenou?

Ako sa DA neuróny učia predpovede odmien? Klasické teórie naznačujú, že predpovede odmien sa učia prostredníctvom postupného posilňovacieho procesu, ktorý vyžaduje opakované párovanie stimulov a odmien (Rescorla a Wagner, 1972; Montague a kol., 1996). Za každým časovým stimulom A nasleduje neočakávaná odmena, odhadovaná hodnota A sa zvyšuje. Nedávne údaje však ukazujú, že DA neuróny idú nad rámec jednoduchého učenia sa odmeňovania a robia predpovede založené na sofistikovaných presvedčeniach o štruktúre sveta. DA neuróny môžu správne predpovedať odmeny aj v nekonvenčných prostrediach, kde odmeny spojené s podnetom spôsobujú a zníženie hodnoty tohto stimulu (Satoh a kol., 2003; Nakahara a kol., 2004; Bromberg-Martin a kol., 2010c) alebo spôsobiť zmenu hodnoty úplne iného stimulu (Bromberg-Martin a kol., 2010b). DA neuróny môžu tiež prispôsobiť svoje signály odmien na základe štatistík vyššieho rádu distribúcie odmien, ako sú napríklad signály predikčných chýb v závislosti od ich očakávanej odchýlky (Tobler a kol., 2005) a „spontánne zotavenie“ ich reakcií na zhasnuté podnety odmien (Pan a kol., 2008). Všetky tieto javy tvoria pozoruhodnú paralelu s podobnými účinkami pozorovanými v zmyslovej a motorickej adaptácii (Braun a kol., 2010; Fairhall a kol., 2001; Shadmehr a kol., 2010), čo naznačuje, že môžu odrážať všeobecný nervový mechanizmus pre prediktívne učenie.

Ako presné sú predpovede odmien DA? Nedávne štúdie ukázali, že DA neuróny verne nastavujú svoje signály odmien tak, aby zodpovedali trom zdrojom neistoty predpovede. Po prvé, ľudia a zvieratá trpia vnútorným hlukom načasovania, ktorý im bráni spoľahlivo predpovedať časové intervaly s dlhou odozvou (Gallistel a Gibbon, 2000). Ak sú teda oneskorenia pri cue-pay krátke (1 – 2 sekúnd), predpovede časovania sú presné a doručenie odmien spúšťa malú odozvu DA, ale pre dlhšie oneskorenia odozvy na cue sa odmeny časovania predpovedajú menej spoľahlivo a odmeny evokujú jasné zhluky DA (Kobayashi a Schultz, 2008; Fiorillo a kol., 2008). Po druhé, mnohé podnety v každodennom živote sú nepresné a špecifikujú širokú distribúciu dodacích lehôt. DA neuróny opäť odrážajú túto formu časovej neistoty: sú postupne inhibované počas premenlivých odkladov odmien, ako keby signalizovali čoraz negatívne chyby predikcie predikcie odmeny v každom okamihu, keď sa odmena neobjaví (Fiorillo a kol., 2008; Bromberg-Martin a kol., 2010a; Nomoto a kol., 2010). Nakoniec, mnohé podnety sú percepčne zložité a vyžadujú si podrobnú inšpekciu na dosiahnutie pevného záveru o hodnote ich odmien. V takýchto situáciách sa DA odmenné signály objavujú na dlhé latencie a postupným spôsobom, pričom sa javí, že odrážajú postupný tok informácií o vnímaní, keď sa hodnota stimulu dekóduje (Nomoto a kol., 2010).

Aké udalosti robia DA neuróny ako hodnotné? Konvenčné teórie odmeňovania naznačujú, že DA neuróny prideľujú hodnotu na základe očakávanej sumy budúcej primárnej odmeny (Montague a kol., 1996). Aj keď sa miera primárnej odmeny udržiava konštantná, ľudia a zvieratá často vyjadrujú ďalšie preferencie pre prostredia, v ktorých sa dá predvídať, kde veľkosť, pravdepodobnosť a časovanie každej odmeny môžu byť známe vopred (Daly, 1992; Chew a Ho, 1994; Ahlbrecht a Weber, 1996). Nedávna štúdia u opíc zistila, že DA neuróny signalizujú túto preferenciu (Bromberg-Martin a Hikosaka, 2009). Opice vyjadrili silnú preferenciu pre zobrazenie informatívnych vizuálnych podnetov, ktoré by im umožnili predpovedať veľkosť budúcej odmeny, a nie neinformačné podnety, ktoré neposkytovali žiadne nové informácie. Súbežne s tým boli DA neuróny nadšení možnosťou vidieť informatívne podnety spôsobom, ktorý koreloval s preferenciou správania zvierat (Obrázok 1B, D). To naznačuje, že DA neuróny nielen motivujú k získaniu odmien, ale aj motivujú k presným predpovediam o týchto odmenách, aby sa zabezpečilo, že odmeny sa dajú riadne predvídať a vopred pripraviť.

Celkovo vzaté, tieto zistenia ukazujú, že DA signály predikcie chyby sú citlivé na sofistikované faktory, ktoré informujú o ľudských a živočíšnych odmenách predpovede, vrátane adaptácie na high-order štatistiky odmien, neistota odmien a preferencie prediktívne informácie.

Účinky fázového dopamínového odmeňovania signálov na nadväzujúcich štruktúrach

Reakcie odmien DA sa vyskytujú v synchrónnych fázových zhlukoch (Joshua a kol., 2009b), vzor odozvy, ktorý formuje uvoľňovanie DA v cieľových štruktúrach (Gonon, 1988; Zhang a kol., 2009; Tsai a kol., 2009). Už dlho sa predpokladalo, že tieto fázové impulzy ovplyvňujú učenie a motiváciu odlišným spôsobom od tonickej aktivity DA (Grace, 1991; Grace a kol., 2007; Schultz, 2007; Lapish a kol., 2007). Nedávno vyvinutá technológia umožnila potvrdiť túto hypotézu kontrolou aktivity DA neurónov s jemnou priestorovou a časovou presnosťou. Optogenetická stimulácia neurónov VTA DA indukuje silnú preferenciu podmieneného miesta, ktorá sa vyskytuje len vtedy, keď sa stimulácia aplikuje v roztrhnutom vzore (Tsai a kol., 2009). Naopak, genetický knockout NMDA receptorov z DA neurónov, ktorý narúša prasknutie, pričom zanecháva tonickú aktivitu do značnej miery neporušený, spôsobuje selektívne poškodenie v špecifických formách učenia sa odmeňovania (Zweifel a kol., 2009; Parker a kol., 2010(aj keď si všimnite, že tento knockout tiež zhoršuje synaptickú plasticitu DA neurónov (Zweifel a kol., 2008)). DA impulzy môžu zlepšiť učenie odmeňovania rekonfiguráciou lokálnych nervových obvodov. Pozoruhodne, prediktívne DA impulzy sú zasielané do špecifických oblastí nucleus accumbens a tieto regióny majú obzvlášť vysokú úroveň prediktívnej neurálnej aktivity odmeny (Cheer a spol., 2007; Owesson-White a kol., 2009).

V porovnaní s fázovými prasknutiami je menej známe o význame fázových pauz pri spikingovej aktivite pre chyby predikcie negatívnej odmeny. Tieto pauzy spôsobujú menšie zmeny v rýchlosti spike, sú menej modulované očakávaním odmien (Bayer a Glimcher, 2005; Joshua a kol., 2009a; Nomoto a kol., 2010) a môže mať menší vplyv na učenie (Rutledge a kol., 2009). Niektoré typy negatívnych predikčných chýb však vyžadujú VTA (Takahashi a kol., 2009), čo naznačuje, že fázové pauzy môžu byť ešte dekódované následnými štruktúrami.

Pretože zhluky a pauzy spôsobujú veľmi odlišné vzory uvoľňovania DA, pravdepodobne ovplyvňujú štruktúry v smere toku prostredníctvom odlišných mechanizmov. Nedávno existujú dôkazy pre túto hypotézu v jednom hlavnom cieli DA neurónov, dorzálneho striata. Dorsálne striatum projekčné neuróny sa vyskytujú v dvoch typoch, ktoré exprimujú rôzne DA receptory. Jeden typ exprimuje receptory D1 a projekty na priamu dráhu bazálneho ganglia na uľahčenie pohybov tela; druhý typ exprimuje D2 receptory a projekty na „nepriamu dráhu“ na potlačenie telesných pohybov (Obrázok 2) (Albin a kol., 1989; Gerfen a kol., 1990; Kravitz a kol., 2010; Hikida a kol., 2010). Na základe vlastností týchto dráh a receptorov sa predpokladalo, že DA zhluky vytvárajú podmienky vysokého DA, aktivujú receptory D1 a spôsobujú priamu cestu na výber pohybov s vysokou hodnotou (Obrázok 2A), zatiaľ čo DA pauzy spôsobujú stavy nízkeho DA, inhibujú receptory D2 a spôsobujú nepriamu cestu na potlačenie pohybov s nízkou hodnotou (Obrázok 2B) (Frank, 2005; Hikosaka, 2007). V súlade s touto hypotézou, vysoká aktivácia DA receptora podporuje potenciáciu kortiko-striatálnych synapsií na priamu cestu (Shen et al., 2008) a učenie sa z pozitívnych výsledkov (\ tFrank et al., 2004; Voon a kol., 2010), zatiaľ čo striatálna blokáda receptora D1 selektívne narúša pohyb k odmeňovaným cieľom (Nakamura a Hikosaka, 2006). Analogickým spôsobom nízka aktivácia DA receptora podporuje potenciáciu kortiko-striatálnych synapsií na nepriamu cestu (Shen et al., 2008) a učenie sa z negatívnych výsledkov (Frank et al., 2004; Voon a kol., 2010), zatiaľ čo striatálna blokáda receptora D2 selektívne potláča pohyby k neodmeňovaným cieľom (Nakamura a Hikosaka, 2006). Toto rozdelenie funkcií D1 a D2 receptorov v motivačnej kontrole vysvetľuje mnohé účinky génov súvisiacich s DA na ľudské správanie (Ullsperger, 2010; Frank a Fossella, 2010) a môže presahovať chrbtovú striatum, pretože existuje dôkaz o podobnom rozdelení práce vo ventrálnom striate (Grace a kol., 2007; Lobo a kol., 2010).

 

Obrázok 2

Dopamínová kontrola pozitívnej a negatívnej motivácie v dorzálnom striate

Zatiaľ čo vyššie uvedená schéma zobrazuje jednoduchý obraz fázového DA riadenia správania prostredníctvom jeho účinkov na striatum, úplný obraz je oveľa zložitejší. DA ovplyvňuje správanie súvisiace s odmenou tým, že pôsobí v mnohých oblastiach mozgu vrátane prefrontálneho kortexu (Hitchcott a kol., 2007), rinálnej kôry (Liu a kol., 2004), hippocampus (Packard a White, 1991; Grecksch a Matties, 1981) a amygdala (Phillips a kol., 2010). Účinky DA sa budú medzi týmito regiónmi veľmi líšiť kvôli zmenám v hustote DA inervácie, DA transportérov, metabolických enzýmov, autoreceptorov, receptorov a receptorovej väzby na intracelulárne signálne dráhy (Neve a kol., 2004; Bentivoglio a Morelli, 2005; Frank a Fossella, 2010). Okrem toho aspoň vo VTA môžu mať DA neuróny odlišné bunkové vlastnosti v závislosti od svojich projekčných cieľov (Lammel a kol., 2008; Margolis a kol., 2008) a niektoré majú pozoruhodnú schopnosť prenášať glutamát, ako aj dopamín (Descarries a kol., 2008; Chuhma a kol., 2009; Hnasko a kol., 2010; Tecuapetla a kol., 2010; Stuber a kol., 2010; Birgner a kol., 2010). Takže sa v plnej miere začína prejavovať úplný rozsah kontroly neurónov DA nad neurálnym spracovaním.

Rôzne dopamínové reakcie na averzívne udalosti

Reakcia neurónu na averzívne udalosti je rozhodujúcim testom jeho funkcií v motivačnej kontrole (Schultz, 1998; Berridge a Robinson, 1998; Redgrave a kol., 1999; Horvitz, 2000; Joseph a kol., 2003). V mnohých ohľadoch pristupujeme k odmeňujúcim a averzívnym udalostiam opačným spôsobom, čo odráža ich opak motivačná hodnota, Hľadáme odmeny a priraďujeme im pozitívnu hodnotu, zatiaľ čo my sa vyhneme averzívnym udalostiam a priradíme im zápornú hodnotu. V iných ohľadoch pristupujeme k odmeňovaniu a averzívnym udalostiam podobným spôsobom, čo odráža ich podobnosť motivácia [FOOTNOTE1]. Odmeňovanie a averzívne udalosti spúšťajú orientáciu pozornosti, kognitívne spracovanie a zvyšovanie všeobecnej motivácie.

Ktoré z týchto funkcií podporujú neuróny DA? Dlho je známe, že stresujúce a averzívne skúsenosti spôsobujú veľké zmeny v koncentráciách DA v mozgových štruktúrach v smere toku a že reakcie na tieto skúsenosti dramaticky menia DA agonisti, antagonisti a lézie (Salamone, 1994; Di Chiara, 2002; Pezze a Feldon, 2004; Young a kol., 2005). Tieto štúdie však priniesli pozoruhodnú rôznorodosť výsledkov (Levita a kol., 2002; Di Chiara, 2002; Young a kol., 2005). Mnohé štúdie sú konzistentné s DA neurónmi kódujúcimi motivačnú salienciu. Uvádzajú, že averzívne udalosti zvyšujú hladiny DA a že behaviorálna averzia je podporovaná vysokými úrovňami prenosu DA (Salamone, 1994; Joseph a kol., 2003; Ventura a kol., 2007; Barr a kol., 2009; Fadok a kol., 2009) vrátane fázových zhlukov DA (Zweifel a kol., 2009). Ale iné štúdie sú konzistentnejšie s motivačnou hodnotou kódovania DA neurónov. Uvádzajú, že averzívne udalosti znižujú hladiny DA a že behaviorálna averzia je podporovaná nízkymi úrovňami prenosu DA (Mark et al., 1991; Shippenberg a spol., 1991; Liu a kol., 2008; Roitman a kol., 2008). V mnohých prípadoch boli tieto zmiešané výsledky zistené v jednotlivých štúdiách, čo naznačuje, že averzívne skúsenosti spôsobujú rôzne vzory uvoľňovania DA v rôznych mozgových štruktúrach (Thierry a kol., 1976; Besson a Louilot, 1995; Ventura a kol., 2001; Jeanblanc a kol., 2002; Bassareo a kol., 2002; Pascucci a kol., 2007) a že lieky súvisiace s DA môžu produkovať zmes nervových a behaviorálnych účinkov podobných tým, ktoré sú výsledkom odmeňovania a averzívnych skúseností (Ettenberg, 2004; Wheeler a kol., 2008).

Túto diverzitu vzorcov a funkcií uvoľňovania DA je ťažké zosúladiť s myšlienkou, že DA neuróny prenášajú jednotný motivačný signál do všetkých štruktúr mozgu. Tieto rôzne odpovede by sa však dali vysvetliť, ak sú DA neuróny samy o sebe rôznorodé - zložené z viacerých nervových populácií, ktoré podporujú rôzne aspekty averzívneho spracovania. Tento názor je podporený štúdiami neurálneho záznamu u anestetizovaných zvierat. Tieto štúdie ukázali, že škodlivé stimuly vyvolávajú excitáciu u niektorých DA neurónov, ale inhibíciu v iných DA neurónoch (Chiodo a kol., 1980; Maeda a Mogenson, 1982; Schultz a Romo, 1987; Mantz a kol., 1989; Gao a kol., 1990; Coizet a kol., 2006). Dôležité je, že excitačné aj inhibičné reakcie sa vyskytujú v neurónoch, ktoré sa potvrdili ako dopaminergné s použitím juxtacelulárneho značenia (Brischoux a kol., 2009) (Obrázok 3). Podobná diverzita averzívnych reakcií sa vyskytuje počas aktívneho správania. Rôzne skupiny neurónov DA sú fázovo excitované alebo inhibované averzívnymi udalosťami vrátane škodlivej stimulácie kože (Kiyatkin, 1988a; Kiyatkin, 1988b), senzorické podnety predpovedajúce averzívne šoky (Guarraci a Kapp, 1999), averzívne airpuffs (Matsumoto a Hikosaka, 2009b), a senzorické podnety predpovedajúce averzívne airpuffs (Matsumoto a Hikosaka, 2009b; Joshua a kol., 2009a). Okrem toho, keď sú súčasne zaznamenané dva DA neuróny, ich averzívne reakcie majú vo všeobecnosti malý vzájomný vzťah medzi skúškami (Joshua a kol., 2009b), čo naznačuje, že averzívne reakcie nie sú koordinované v celej populácii DA ako celku.

 

Obrázok 3

Rôzne reakcie dopamínových neurónov na averzívne udalosti

Aby sme pochopili funkcie týchto rozličných averzívnych reakcií, potrebujeme vedieť, ako sú kombinované s odmenami odozvy, aby vytvorili zmysluplný motivačný signál. Nedávna štúdia skúmala túto tému a odhalila, že DA neuróny sú rozdelené do viacerých populácií s odlišnými motivačnými signálmi (Matsumoto a Hikosaka, 2009b). Jedna populácia je vzrušená tým, že odmeňuje udalosti a je inhibovaná averzívnymi udalosťami, ako keby kódovala motivačná hodnota (Obrázok 4A). Druhá populácia je nadšená tak odmeňovaním, ako aj averzívnymi udalosťami podobným spôsobom, ako by to bolo kódovanie motivácia (Obrázok 4B). V obidvoch týchto populáciách je mnoho neurónov citlivých na odmeňovanie a averzívne predpovede: reagujú, keď odmeňovanie podujatí je viac odmeňované, ako sa predpokladalo, a keď sú averzívne udalosti averzívnejšie ako sa predpokladalo (Matsumoto a Hikosaka, 2009b). To dokazuje, že ich averzívne reakcie sú skutočne spôsobené predpovediami o averzívnych udalostiach, vylučujúc možnosť, že by mohli byť spôsobené nešpecifickými faktormi, ako sú vstupy surového smyslového vnímania alebo všeobecné asociácie s odmenou (Schultz, 2010). Tieto dve populácie sa však líšia v podrobnom charaktere svojho prediktívneho kódu. Kódovanie motivačnej hodnoty DA neuróny kódujú presný chybový signál predikcie, vrátane silnej inhibície vynechaním odmien a miernou excitáciou vynechaním averzívnych udalostí (Obrázok 4A, správny). Naproti tomu, motivačné saliencie kódujúce DA neuróny reagujú, keď sú prítomné výrazné udalosti, ale nie, keď nie sú prítomné (Obrázok 4B, vpravo), v súlade s teoretickými pojmami vzrušenia (Lang a Davis, 2006) [FOOTNOTE2]. Dôkazy o týchto dvoch populáciách DA neurónov sa pozorovali aj vtedy, keď sa neurálna aktivita skúmala spriemerovaným spôsobom. Štúdie zamerané na rôzne časti DA systému zistili fázové DA signály kódujúce averzívne udalosti s inhibíciou (Roitman a kol., 2008), podobné kódovaniu motivačnej hodnoty alebo excitácii (Joshua a kol., 2008; Anstrom a kol., 2009), podobne ako kódovanie motivačnej závažnosti.

 

Obrázok 4

Odlišné populácie dopamínových neurónov kódujúce motivačnú hodnotu a význam

Zdá sa, že tieto nedávne zistenia odporujú skorej správe, že DA neuróny reagujú prednostne na odmeňovanie podnetov namiesto averzívnych podnetov (Mirenowicz a Schultz, 1996). Pri podrobnom skúmaní je však aj táto štúdia plne v súlade s kódovaním hodnoty DA a výraznosti. V tejto štúdii viedli odmeňovacie signály k výsledkom s vysokou pravdepodobnosťou odmeňovania (> 90%), zatiaľ čo averzné signály viedli k averzívnym výsledkom s nízkou pravdepodobnosťou (<10%). Preto by DA a neuróny kódujúce salienciu mali malú odozvu na averzné signály, čo by presne kódovalo ich nízku úroveň averzivity.

Funkčná úloha motivačných hodnôt a signálov saliencie

Celkovo vzaté, vyššie uvedené zistenia naznačujú, že DA neuróny sú rozdelené do viacerých populácií vhodných pre odlišné úlohy v motivačnej kontrole. Kódovanie motivačných hodnôt DA neurónov dobre zapadá do súčasných teórií dopamínových neurónov a spracovania odmien (Schultz a kol., 1997; Berridge a Robinson, 1998; Wise, 2004). Tieto neuróny kódujú kompletný signál chyby predikcie a kódujú odmeny a averzívne udalosti v opačných smeroch. Tieto neuróny teda poskytujú vhodný inštruktážny signál na vyhľadávanie, hodnotenie a učenie hodnoty (Obrázok 5). Ak podnet spôsobí, že hodnota kódujúca DA neuróny bude vzrušená, potom by sme k nej mali pristúpiť, priradiť ju vysokej hodnote a naučiť sa akcie, aby sme ju v budúcnosti opäť hľadali. Ak podnet spôsobí inhibíciu hodnoty kódujúcej DA neuróny, mali by sme sa jej vyhnúť, priradiť mu nízku hodnotu a naučiť sa akcie, aby sa v budúcnosti opäť vyhli.

 

Obrázok 5

Hypotézne funkcie motivačnej hodnoty, významnosti a varovných signálov

Na rozdiel od toho, motivačná saliencia kódujúca DA neuróny dobre zapadá do teórií dopamínových neurónov a spracovania významných udalostí (Redgrave a kol., 1999; Horvitz, 2000; Joseph a kol., 2003; Kapur, 2003). Tieto neuróny sú excitované tak odmeňujúcimi, ako aj averzívnymi udalosťami a majú slabšie odozvy na neutrálne udalosti, poskytujúce vhodný inštruktážny signál pre nervové obvody, aby sa naučili detekovať, predpovedať a reagovať na situácie, ktoré majú veľký význam. Tu zvážime tri takéto mozgové systémy (Obrázok 5). Po prvé, neurónové obvody pre vizuálnu a pozornú orientáciu sú kalibrované, aby sa zistili informácie o všetkých typoch udalostí, odmeňovaných aj averzívnych. Napríklad odmeňovanie aj averzívne podnety priťahujú orientačné reakcie efektívnejšie ako neutrálne podnety (Lang a Davis, 2006; Matsumoto a Hikosaka, 2009b; Austin a Duka, 2010). Po druhé, obohacujúce aj averzné situácie využívajú nervové systémy na kognitívnu kontrolu a výber akcie - musíme zapojiť pracovnú pamäť, aby sme mali na pamäti informácie, riešenie konfliktov pri rozhodovaní o ďalšom postupe a dlhodobú pamäť, aby sme si pamätali výsledný výsledok (Bradley a kol., 1992; Botvinick a kol., 2001; Savine a kol., 2010). Po tretie, odmeňovanie a averzívne situácie si vyžadujú zvýšenie všeobecnej motivácie podnietiť akcie a zabezpečiť ich správne vykonávanie. DA neuróny sú rozhodujúce pri motivačnom úsilí o dosiahnutie vysokohodnotných cieľov a pri prekladaní vedomostí o úlohách do spoľahlivého výkonu motora (Berridge a Robinson, 1998; Mazzoni a kol., 2007; Niv a kol., 2007; Salamone a kol., 2007).

Dopamínová excitácia varovaním zmyslových podnetov

Okrem svojich signálov kódujúcich motivačnú hodnotu a význam, väčšina DA neurónov má tiež reakcie na niekoľko typov zmyslových udalostí, ktoré nie sú priamo spojené s odmeňovaním alebo averzívnymi skúsenosťami. Tieto odpovede boli teoreticky závislé od množstva nervových a psychologických faktorov, vrátane priameho zmyslového vstupu, prekvapenia, novosti, vzrušenia, pozornosti, významu, zovšeobecnenia a pseudo-kondicionovania (Schultz, 1998; Redgrave a kol., 1999; Horvitz, 2000; Lisman a Grace, 2005; Redgrave a Gurney, 2006; Joshua a kol., 2009a; Schultz, 2010).

Tu sa pokúsime syntetizovať tieto myšlienky a vysvetliť tieto DA reakcie v zmysle jedného základného signálu, a výstražný signál (Obrázok 5). Termín „varovanie“ používal Schultz (Schultz, 1998) ako všeobecný pojem pre udalosti, ktoré priťahujú pozornosť. Tu ho budeme používať v špecifickejšom zmysle. Výstražnou udalosťou rozumieme nečakanú zmyslovú podnet, ktorá zachytáva pozornosť na základe rýchleho posúdenia jej potenciálnej dôležitosti pomocou jednoduchých funkcií, ako je jej poloha, veľkosť a zmyslová modalita. Takéto varovné udalosti často spúšťajú okamžité reakcie správania, ktoré ich vyšetrujú a určujú ich presný význam. Signály signalizujúce DA sa typicky vyskytujú pri krátkych latenciách, sú založené na hrubých vlastnostiach stimulu a najlepšie korelujú s okamžitými reakciami, ako sú orientačné reakcie (Schultz a Romo, 1990; Joshua a kol., 2009a; Schultz, 2010). To je v protiklade s inými motivačnými signálmi v DA neurónoch, ktoré sa typicky vyskytujú pri dlhších latenciách, berú do úvahy presnú identitu stimulu a najlepšie korelujú s uvažovanými behaviorálnymi akciami, ako sú rozhodnutia o prístupe alebo vyhnutí sa (Schultz a Romo, 1990; Joshua a kol., 2009a; Schultz, 2010).

Reakcie upozorňujúce na DA môžu byť vyvolané prekvapujúcimi zmyslovými udalosťami, ako sú neočakávané svetelné záblesky a zvukové kliknutia, ktoré vyvolávajú výrazné vzplanutia v 60 – 90% DA neurónov v SNc a VTA (Strecker a Jacobs, 1985; Horvitz a kol., 1997; Horvitz, 2000) (Obrázok 6A). Zdá sa, že tieto varovné reakcie odrážajú mieru, do akej je podnet prekvapivý a zachytáva pozornosť; sú znížené, ak sa stimuluje v predvídateľných časoch, ak sa pozornosť venuje inde alebo počas spánku (Schultz, 1998; Takikawa a kol., 2004; Strecker a Jacobs, 1985; Steinfels a kol., 1983). Napríklad neočakávaný zvuk kliknutia evokuje prominentnú explóziu DA, keď sa mačka nachádza v pasívnom stave tichého bdenia, ale nemá žiadny účinok, keď sa mačka zúčastňuje na náročných aktivitách, ako je lov potkanov, kŕmenie, starostlivosť, maznanie. experimentátor a tak ďalej (Strecker a Jacobs, 1985) (Obrázok 6A). Podobne, reakcie DA prasknutia sú spúšťané zmyslovými udalosťami, ktoré sú fyzicky slabé, ale upozorňujú na ich novosť (Ljungberg a kol., 1992; Schultz, 1998). Tieto reakcie sa zvyknú, ako sa nový stimul stane známym, súbežne s návykom orientačných reakcií (Obrázok 6B). V súlade s týmito zisteniami prekvapujúce a nové udalosti vyvolávajú uvoľňovanie DA v následných štruktúrach (Lisman a Grace, 2005) a aktivovať okruhy mozgu súvisiace s DA spôsobom, ktorý tvaruje spracovanie odmien (Zink a kol., 2003; Davidson a kol., 2004; Duzel a kol., 2010).

 

Obrázok 6

Dopamínové neurónové excitačné reakcie na varovné príhody

Reakcie upozorňujúce na DA sú tiež spúšťané neočakávanými senzorickými pokynmi, ktoré majú potenciál poskytovať nové informácie o motivačných udalostiach. Ako sa očakávalo pre signál upozorňujúci na krátkodobú latenciu, tieto reakcie sú skôr neselektívne: sú spúšťané akýmkoľvek stimulom, ktorý iba podobá motivačne výrazný pokyn, aj keď je podobnosť veľmi malá (jav nazývaný zovšeobecnenie) (Schultz, 1998). Výsledkom je, že DA neuróny často reagujú na podnet zmesou dvoch signálov: signál rýchleho varovania kódujúci skutočnosť, že podnet je potenciálne a druhý kódujúci signál aktuálne odmeňujúci alebo averzívny význam (Schultz a Romo, 1990; Waelti a kol., 2001; Tobler a kol., 2003; Day a kol., 2007; Kobayashi a Schultz, 2008; Fiorillo a kol., 2008; Nomoto a kol., 2010) (pozrite (Kakade a Dayan, 2002; Joshua a kol., 2009a; Schultz, 2010) na preskúmanie). Príklad možno vidieť v súbore motivačných saliencií kódujúcich DA neuróny uvedené v Obrázok 6C (Bromberg-Martin a kol., 2010a). Tieto neuróny boli nadšené odmenou a averzívnymi narážkami, ale boli tiež nadšení neutrálnou narážkou. Neutrálna tága nebola nikdy spárovaná s motivačnými výsledkami, ale mala (veľmi miernu) fyzickú podobnosť s odmenou a averzívnymi podnetmi.

Tieto varovné reakcie sa zdajú byť úzko späté so schopnosťou senzorickej cue spúšťať orientačné reakcie, aby ju ďalej skúmali a objavili jej význam. To možno vidieť v troch významných vlastnostiach. Po prvé, varovné reakcie sa vyskytujú len pre senzorické podnety, ktoré sa musia skúmať, aby sa určil ich význam, nie pre skutočne odmeňujúce alebo averzívne udalosti, ako je dodávanie šťavy alebo airpuffs (Schultz, 2010). Po druhé, varovné reakcie sa vyskytujú len vtedy, keď je tágo potenciálne dôležité a má schopnosť spúšťať orientačné reakcie, nie keď je tágo irelevantné pre danú úlohu a nespustí orientačné reakcie (Schultz a Romo, 1990). Po tretie, varovné reakcie sa zlepšujú v situáciách, keď podnety spustia náhly posun pozornosti - keď sa objavia v neočakávanom čase alebo ďaleko od stredu pohľadu (Bromberg-Martin a kol., 2010a). Keď sú teda motivačné podnety prezentované s nepredvídateľným načasovaním, spúšťajú okamžité reakcie a generalizovanú DA výstražnú reakciu - excitáciu všetkými podnetmi vrátane neutrálnych podnetov (Obrázok 6C, čierna). Ak je však ich načasovanie predvídateľné - napr. Varovaním subjektov s „pokusom o začatí pokusu“, ktoré boli prezentované jednu sekundu pred objavením podnetov, narážky už nevyvolávajú varovnú odpoveď (Obrázok 6D, sivá). Namiesto toho sa varovná reakcia presunie do štartovacieho tábora - prvej udalosti skúšky, ktorá má nepredvídateľné načasovanie a vyvoláva orientačné reakcie (Obrázok 6D, čierna).

Aký je základný mechanizmus, ktorý generuje výstražné signály DA neurónov? Jedna hypotéza je, že výstražné reakcie sú jednoducho konvenčné signály predpovede chýb, ktoré sa vyskytujú pri krátkych latenciách, pričom kódujú očakávanú hodnotu odmeny stimulu predtým, ako bola úplne diskriminovaná (Kakade a Dayan, 2002). Nedávnejšie dôkazy však naznačujú, že výstražné signály môžu byť generované odlišným mechanizmom z konvenčných signálov odmeňovania DA (Satoh a kol., 2003; Bayer a Glimcher, 2005; Bromberg-Martin a kol., 2010a; Bromberg-Martin a kol., 2010c; Nomoto a kol., 2010). Najpozoruhodnejšie je, že výstražná reakcia na štartovací tábor nie je obmedzená na odmeňovanie úloh; môže mať rovnakú silu počas averzívnej úlohy, v ktorej nie sú poskytované žiadne odmeny (Obrázok 6C, D, dole, „averzívna úloha“). K tomu dochádza, aj keď konvenčné signály DA odmeny v tých istých neurónoch správne signalizujú, že úloha odmeňovania má oveľa vyššiu očakávanú hodnotu ako averzívna úloha (Bromberg-Martin a kol., 2010a). Tieto výstražné signály nie sú čisto formou kódovania hodnoty alebo čisto formy kódovania saliencie, pretože sa vyskytujú vo väčšine motivačných hodnôt a kódovaní sálencie DA neurónov (Bromberg-Martin a kol., 2010a). Druhá disociácia môže byť videná v spôsobe, akým DA neuróny predpovedajú budúce odmeny na základe výsledkov minulých odmien (Satoh a kol., 2003; Bayer a Glimcher, 2005). Zatiaľ čo konvenčné signály odmeňovania DA sú riadené dlhou dobou sledovania pamäte optimalizovanou pre presnú predikciu odmeňovania, upozorňujúce reakcie na štartovací tábor sú kontrolované samostatnou pamäťovou stopou podobnou tej, ktorá sa pozorovala v reakciách s okamžitou orientáciou (Bromberg-Martin a kol., 2010c). Tretiu disociáciu možno vidieť spôsobom, že tieto signály sú distribuované v populácii DA neurónov. Zatiaľ čo konvenčné signály DA odmeny sú najsilnejšie vo ventromediálnom SNc, varovné reakcie na štartovací štartovací pokus (a na iné neočakávane načasované narážky) sa vysielajú v celom SNc (Nomoto a kol., 2010).

Na rozdiel od týchto disociácií z konvenčných signálov odmeňovania sú signály upozorňujúce na DA korelované s rýchlosťou orientácie a približujú sa reakcie na výstražnú udalosť (Satoh a kol., 2003; Bromberg-Martin a kol., 2010a; Bromberg-Martin a kol., 2010c). To naznačuje, že výstražné signály sú generované nervovým procesom, ktorý motivuje rýchle reakcie na vyšetrenie potenciálne dôležitých udalostí. V súčasnosti je, bohužiaľ, relatívne málo známe presne o tom, aké udalosti tento proces považuje za „dôležité“. Sú napríklad varovné reakcie rovnako citlivé na odmeňovanie a averzívne udalosti? Je známe, že varovné reakcie sa vyskytujú pri stimuloch, ktoré sa podobajú na podnety odmien, alebo ktoré sa podobajú odmene a averzívnym podnetom (napr. Zdieľaním rovnakej zmyslovej modality). Zatiaľ však nie je známe, či sa vyskytujú varovné reakcie pre podnety, ktoré sa len podobajú averzívnym podnetom.

Funkčná úloha signálov upozorňujúcich na dopamín

Ako sme videli, výstražné signály budú pravdepodobne generované odlišným mechanizmom od motivačnej hodnoty a signálov saliencie. Výstražné signály sa však posielajú do motivačnej hodnoty aj do kódovania závažnosti DA neurónov, a preto pravdepodobne regulujú spracovanie a správanie mozgu podobným spôsobom ako hodnoty a signály sálencie (Obrázok 5).

Výstražné signály poslané na motivačné salience kódujúce DA neuróny by podporili orientáciu pozornosti na podnet varovania, zapojenie kognitívnych zdrojov, aby zistili jeho význam a rozhodovali o pláne činnosti a zvýšili úrovne motivácie na efektívne vykonávanie tohto plánu (Obrázok 5). Tieto účinky by sa mohli vyskytnúť prostredníctvom okamžitých účinkov na nervové spracovanie alebo posilnením činností, ktoré viedli k detekcii výstražnej udalosti. Táto funkčná úloha dobre zapadá do korelácie medzi reakciami na upozornenie na DA a rýchlymi reakciami na reakcie na podnet na varovanie a teóriami, že reakcie neurónov s krátkou latenciou sú zapojené do orientácie pozornosti, vzrušenia, zlepšenia kognitívneho spracovania a okamžitých behaviorálnych reakcií (Redgrave a kol., 1999; Horvitz, 2000; Joseph a kol., 2003; Lisman a Grace, 2005; Redgrave a Gurney, 2006; Joshua a kol., 2009a).

Prítomnosť výstražných signálov v kódovaní hodnoty DA neurónov je ťažšie vysvetliť. Tieto neuróny prenášajú signály motivačnej hodnoty, ktoré sú ideálne pre hľadanie, hodnotenie výsledkov a hodnotové učenie; ale môžu byť tiež nadšení varovaním udalostí, ako sú neočakávané kliknutia a nástup averzívnych skúšok. Podľa našej predpokladanej cesty (Obrázok 5), to by spôsobilo, že výstražné udalosti budú priradené kladnej hodnote a budú vyhľadávané spôsobom podobným odmene! Hoci je na prvý pohľad prekvapujúci, existuje dôvod na podozrenie, že výstražné udalosti možno považovať za pozitívne ciele. Výstražné signály poskytujú prvé upozornenie, že sa môže vyskytnúť potenciálne dôležitá udalosť, a preto poskytujú prvú príležitosť na prijatie opatrení na kontrolu tejto udalosti. Ak sú k dispozícii výstražné signály, je možné odhaliť, predvídať a vopred pripraviť motivačne významné udalosti; ak chýbajú výstražné signály, motivačné výrazné udalosti sa vždy vyskytujú ako neočakávané prekvapenie. Ľudia a zvieratá často vyjadrujú preferencie pre prostredia, kde je možné pozorovať a predvídať vopred odmeňovanie, averzívne a dokonca aj motivačne neutrálne senzorické udalosti (Badia a kol., 1979; Herry a kol., 2007; Daly, 1992; Chew a Ho, 1994) a mnoho DA neurónov signalizuje preferenciu správania na zobrazenie informácií prediktívnych odmien (Bromberg-Martin a Hikosaka, 2009). Signály upozorňujúce na DA môžu tieto preferencie podporovať tým, že priradí pozitívnu hodnotu prostrediu, kde možno vopred predpokladať potenciálne dôležité senzorické podnety.

Anatomické polohy hodnôt a významnosti kódujúce neuróny

Nedávna štúdia mapovala umiestnenie DA odmien a averzívnych signálov v bočnom strednom mozgu vrátane SNC a laterálnej časti VTA (Matsumoto a Hikosaka, 2009b). Signály motivačnej hodnoty a motivačnej saliencie boli rozložené v tejto oblasti v anatomickom gradiente. Signály motivačnej hodnoty sa našli častejšie v neurónoch v ventriediálnom SNc a laterálnom VTA, zatiaľ čo signály motivačnej saliencie sa našli častejšie u neurónov v dorsolaterálnom SNc (Obrázok 7B). Toto je konzistentné so správami, že kódovanie hodnoty odmeňovania DA je najsilnejšie vo ventromediálnom SNc (Nomoto a kol., 2010), zatiaľ čo averzívne excitácie majú tendenciu byť najsilnejšie \ tMirenowicz a Schultz, 1996). Ďalšie štúdie skúmali stredný stredný mozog. Tieto štúdie zistili zmes excitačných a inhibičných averzívnych odpovedí bez výrazného rozdielu v ich umiestneniach, aj keď s tendenciou lokalizovať averzívne excitácie viac ventrálne (Guarraci a Kapp, 1999; Brischoux a kol., 2009) (Obrázok 7C).

Destinácie signálov motivačnej hodnoty

Podľa našej hypotézy by kódovanie motivačných hodnôt DA neurónov malo premietnuť do oblastí mozgu zapojených do akcií zameraných na prístup a vyhýbanie sa, hodnotenie výsledkov a hodnotové učenie (Obrázok 5). Projekt Ventromedial SNc a VTA na ventromediálny prefrontálny kortex (Williams a Goldman-Rakic, 1998) vrátane orbitofrontálneho kortexu (OFC) (\ tPorrino a Goldman-Rakic, 1982) (Obrázok 7A). OFC bola dôsledne zapojená do kódovania hodnôt vo funkčných zobrazovacích štúdiách (Anderson a kol., 2003; Small et al., 2003; Jensen a kol., 2007; Litt a kol., 2010a jednotlivé záznamy neurónov (Morrison a Salzman, 2009; Roesch a Olson, 2004). OFC má zvážiť možnosti voľby (Padoa-Schioppa, 2007; Kable a Glimcher, 2009), kódujú očakávania výsledkov (Schoenbaum a spol., 2009) a aktualizovať tieto očakávania počas \ tWalton a kol., 2010). OFC sa okrem toho podieľa na učení sa z chýb predikcie negatívnej odmeny (Takahashi a kol., 2009), ktoré sú najsilnejšie v DA neurónoch kódujúcich hodnoty (Obrázok 4).

Okrem toho, stredná časť dopaminergného stredného mozgu vyúsťuje do ventrálnej striatum vrátane jadra nucleus accumbens (NAc shell) (Haber a kol., 2000) (Obrázok 7A). Nedávna štúdia ukázala, že NAc shell prijíma fázové DA signály kódujúce motivačnú hodnotu chuťových výsledkov (Roitman a kol., 2008). Tieto signály pravdepodobne spôsobia učenie hodnoty, pretože priama infúzia liekov DA do škrupiny NAc silne posilňuje (Ikemoto, 2010), zatiaľ čo liečby, ktoré znižujú vstup DA do shellu, môžu indukovať averzie (Liu a kol., 2008). Jedným z varovaní je, že štúdie NAc shell DA uvoľnenie na dlhé časové úseky (minúty) priniesli zmiešané výsledky, niektoré konzistentné s kódovaním hodnôt a iné s kódovaním saliencie (napr. (Bassareo a kol., 2002; Ventura a kol., 2007)). To naznačuje, že hodnoty signálov môžu byť obmedzené na špecifické miesta v rámci NAc shell. Najmä, rôzne oblasti NAc shell sa špecializujú na kontrolu chuťového a averzívneho správania (Reynolds a Berridge, 2002), ktoré vyžadujú vstup od DA neurónov (Faure et al., 2008).

Nakoniec, DA neuróny v celom rozsahu SNc vysielajú ťažké projekcie do chrbtového striata (Haber a kol., 2000), čo poukazuje na to, že dorzálne striatum môže dostať ako motivačné hodnoty, tak aj signály saliencie kódujúce DA signály (Obrázok 7A). Kódovanie motivačnej hodnoty DA neuróny by poskytli ideálny inštruktívny signál pre striatálne obvody zapojené do hodnotového učenia, ako je učenie sa návykov odozvy na podnety (Faure et al., 2005; Yin a Knowlton, 2006; Balleine a O'Doherty, 2010). Keď tieto DA neuróny praskli, zapojili sa do priamej cesty, aby sa naučili získavať výsledky odmien; keď sa zastavia, zapojia sa do nepriamej cesty, aby sa naučili vyhnúť sa averzívnym výsledkom (Obrázok 2). Skutočne existujú nedávne dôkazy, že striatálne dráhy presne sledujú toto rozdelenie práce pre odmeňovanie a averzívne spracovanie (Hikida a kol., 2010). Stále však nie je známe, ako neuróny v týchto cestách reagujú na odmeňovanie a averzívne udalosti počas správania. Aspoň v dorzálnom striate ako celku, podmnožina neurónov reaguje na určité odmeňujúce a averzívne udalosti v odlišných spôsoboch (Ravel a kol., 2003; Yamada a kol., 2004, 2007; Joshua a kol., 2008).

Destinácie signálov motivačnej saliencie

Podľa našej hypotézy by motivačný salience kódujúci DA neuróny mal premietnuť do oblastí mozgu zapojených do orientácie, kognitívneho spracovania a všeobecnej motivácie (Obrázok 5). Skutočne, DA neuróny v dorzolaterálnom strednom mozgu vysielajú projekcie do dorzálnej a laterálnej frontálnej kôry (Williams a Goldman-Rakic, 1998) (Obrázok 7A), región, ktorý sa podieľa na kognitívnych funkciách, ako je vyhľadávanie pozornosti, pracovná pamäť, kognitívna kontrola a rozhodovanie medzi motivačnými výsledkami (Williams a Castner, 2006; Lee a Seo, 2007; Wise, 2008; Kable a Glimcher, 2009; Wallis a Kennerley, 2010). Dorsolaterálne prefrontálne kognitívne funkcie sú prísne regulované hladinami DA (Robbins a Arnsten, 2009) a sú teoreticky závislé od fázovej aktivácie DA neurónov (Cohen a spol., 2002; Lapish a kol., 2007). Predovšetkým podmnožina laterálnych prefrontálnych neurónov reaguje na odmeňovanie a averzívne vizuálne podnety a veľká väčšina odpovedá v rovnakom smere, ktorý pripomína kódovanie motivačnej saliencie (Kobayashi a kol., 2006). Okrem toho aktivita týchto neurónov koreluje s úspechom pri vykonávaní úloh pracovnej pamäte (Kobayashi a kol., 2006). Hoci sa táto dorsolaterálna DA → dorsolaterálna frontálna kortexová cesta javí ako špecifická pre primáty (Williams a Goldman-Rakic, 1998), funkčne podobná dráha môže existovať u iných druhov. Najmä mnohé z kognitívnych funkcií primátového dorsolaterálneho prefrontálneho kortexu sa uskutočňujú mediálnym prefrontálnym kortexom hlodavcov (Uylings a kol., 2003), a existuje dôkaz, že tento región dostáva signály motivácie motivácie DA a kontroluje správanie súvisiace s \ tMantz a kol., 1989; Di Chiara, 2002; Joseph a kol., 2003; Ventura a kol., 2007; Ventura a kol., 2008).

Vzhľadom na dôkazy, že VTA obsahuje neuróny kódujúce hodnotu aj hodnotu, a že signály kódujúce hodnotu sa odosielajú do shellu NAc, signály saliencie by sa mohli odoslať do jadra NAc (Obrázok 7A). Jadro NAc (ale nie shell) je rozhodujúce pre umožnenie motivácie prekonať náklady na reakciu, ako je fyzická námaha; na plnenie úloh s posunom, ktoré si vyžadujú kognitívnu flexibilitu; a umožnenie odmeňovacích podnetov spôsobiť zvýšenie všeobecnej motivácie (Ghods-Sharifi a Floresco, 2010; Floresco a kol., 2006; Hall a kol., 2001; Kardinál, 2006). V súlade s kódovaním motivačnej sálencie, jadro NAc prijíma fázové výboje DA počas oboch odmeňujúcich skúseností (Day a kol., 2007a averzívne skúsenosti (Anstrom a kol., 2009).

Nakoniec, ako bolo uvedené vyššie, niektoré významové kódovanie DA neurónov môže premietať do chrbtového striata (Obrázok 7A). Zatiaľ čo niektoré oblasti chrbtového striata sa podieľajú na funkciách súvisiacich s hodnotami vzdelávacích akcií, dorzálne striatum sa tiež podieľa na funkciách, ktoré by mali byť použité pre všetky významné udalosti, ako je orientácia, pozornosť, pracovná pamäť a všeobecná motivácia (Hikosaka a kol., 2000; Klingberg, 2010; Palmiter, 2008). V skutočnosti podmnožina dorzálnych striatálnych neurónov silnejšie reaguje na odmeňovanie a averzívne udalosti ako na neutrálne udalosti (Ravel a kol., 1999; Blazquez a kol., 2002; Yamada a kol., 2004, 2007), hoci ich príčinná úloha v motivovanom správaní ešte nie je známa.

Zdroje signálov motivačnej hodnoty

Nedávna séria štúdií naznačuje, že DA neuróny dostávajú signály motivačnej hodnoty z malého jadra epithalamu, laterálneho habenula (LHb) (Hikosaka, 2010) (Obrázok 8). LHb vykazuje silnú negatívnu kontrolu nad DA neurónmi: LHb stimulácia inhibuje DA neuróny pri krátkych latenciách (Christoph a kol., 1986) a môže regulovať učenie opačným spôsobom ako stimulácia VTA (\ tShumake a kol., 2010). V súlade s negatívnym kontrolným signálom má mnoho neurónov LHb zrkadlovo inverznú fázovú odozvu na neuróny DA: neuróny LHb sú inhibuje chyby predikcie pozitívnej odmeny a vzrušený podľa chýb predikcie negatívnej odmeny (Matsumoto a Hikosaka, 2007, 2009; Bromberg-Martin a kol., 2010a; Bromberg-Martin a kol., 2010c). V niekoľkých prípadoch sa tieto signály vyskytujú pri kratších latenciách v LHb, čo je v súlade s prenosom LHb → DA (Matsumoto a Hikosaka, 2007; Bromberg-Martin a kol., 2010a).

 

Obrázok 8

Hypotézne zdroje motivačnej hodnoty, významnosti a varovných signálov

LHb je schopný kontrolovať DA neuróny v celom strednom mozgu, ale niekoľko dôkazov naznačuje, že má preferenčnú kontrolu nad motivačnou hodnotou kódujúcou DA neuróny. Po prvé, LHb neuróny kódujú motivačnú hodnotu spôsobom, ktorý úzko zrkadlí hodnoty neurónov kódujúcich hodnoty - kódujú pozitívne aj negatívne chyby predikcie a odpovedajú opačným smerom na odmeňovanie a averzívne udalosti (Matsumoto a Hikosaka, 2009a; Bromberg-Martin a kol., 2010a). Po druhé, stimulácia LHb má svoje najúčinnejšie účinky na neuróny DA, ktorých vlastnosti sú v súlade s kódovaním hodnôt, vrátane inhibície necitlivých podnetov a anatomického umiestnenia vo ventromediálnom SNc (Matsumoto a Hikosaka, 2007, 2009b). Po tretie, poškodenia LHb zhoršujú inhibičné reakcie DA neurónov na averzívne udalosti, čo naznačuje kauzálnu úlohu LHb pri generovaní signálov hodnoty DA (Gao a kol., 1990).

LHb je súčasťou rozsiahlejšej neurálnej dráhy, ktorou môžu byť DA neuróny kontrolované bazálnymi gangliami (Obrázok 8). LHb prijíma signály pripomínajúce chyby predikcie odmien prostredníctvom projekcie z populácie neurónov nachádzajúcich sa okolo hranice globus pallidus (GPb) (Hong a Hikosaka, 2008). Akonáhle sa tieto signály dostanú do LHb, budú pravdepodobne odoslané do neurónov DA prostredníctvom disynaptickej dráhy, v ktorej LHb excituje neuróny GABA stredného mozgu, ktoré zase inhibujú DA neuróny (Ji a Shepard, 2007; Omelchenko a kol., 2009; Brinschwitz a kol., 2010). To by mohlo nastať prostredníctvom LHb projekcií interneurónov vo VTA a susedného GABA-ergického jadra nazývaného rostromediálne tegmentálne jadro (RMTg) (Jhou a kol., 2009b(tiež nazývaný „chvost chvosta VTA“ (Kaufling a kol., 2009)). Pozoruhodne, RMTg neuróny majú vlastnosti odozvy podobné LHb neurónom, kódujú motivačnú hodnotu a majú silnú inhibičnú projekciu do dopaminergného stredného mozgu (Jhou a kol., 2009a). Takže úplná dráha bazálneho ganglia na vysielanie signálov motivačnej hodnoty do DA neurónov môže byť GPb → LHb → RMTg → DA (Hikosaka, 2010).

Dôležitou otázkou pre budúci výskum je, či signály motivačnej hodnoty sú smerované výlučne cez LHb alebo či sú prenášané viacerými vstupnými cestami. Pozoruhodné je, že inhibície DA pomocou averzívnych šošoviek sú kontrolované aktivitou v mezopontínovom parabrachiálnom jadre (PBN) (Coizet a kol., 2010) (Obrázok 8). Toto jadro obsahuje neuróny, ktoré dostávajú priamy vstup z miechy kódujúce škodlivé pocity a mohli by inhibovať DA neuróny prostredníctvom excitačných projekcií do RMTg (Coizet a kol., 2010; Gauriau a Bernard, 2002). To naznačuje, že LHb posiela signály motivačných hodnôt DA neurónov pre odmeňovanie a averzívne podnety a výsledky, zatiaľ čo PBN poskytuje zložku hodnotového signálu špecificky súvisiacu s averzívnymi výsledkami.

Zdroje motivačných signálov saliencie

Menej je známe o zdroji motivačných signálov saliencie v DA neurónoch. Jedným zaujímavým kandidátom je centrálne jadro amygdaly (CeA), ktoré sa dôsledne podieľa na orientácii, pozornosti a všeobecných motivačných reakciách počas odmeňovania a averzívnych udalostí (Holandsko a Gallagher, 1999; Baxter a Murray, 2002; Merali a kol., 2003; Balleine a Killcross, 2006) (Obrázok 8). CeA a iné amygdala jadrá obsahujú mnoho neurónov, ktorých signály sú v súlade s motivačnou dôležitosťou: signalizujú odmeňovanie a averzívne udalosti v rovnakom smere, sú zosilnené, keď sa udalosti neočakávane vyskytujú, a sú korelované s mierou správania vzrušenia (Nishijo a kol., 1988; Belova a kol., 2007; Shabel a Janak, 2009). Tieto signály môžu byť odoslané do neurónov DA, pretože CeA má zostupné projekcie do mozgového kmeňa, ktoré nesú odmeňujúce a averzívne informácie (Lee et al., 2005; Pascoe a Kapp, 1985) a CeA je potrebné na vydanie DA počas podujatí súvisiacich s odmenou (Phillips a kol., 2003a). Okrem toho sa CeA zúčastňuje s DA neurónmi v dráhach, ktoré sú v súlade s našimi navrhovanými anatomickými a funkčnými sieťami pre motivačnú dôležitosť. Pre naučené orientovanie sa na potravinové podnety je potrebná dráha zahŕňajúca CeA, SNc a dorzálne striatum (Han et al., 1997; Lee et al., 2005; El-Amamy a Holandsko, 2007). V súlade s naším rozdelením signálov medzi hodnotami a hodnotami je táto cesta potrebná na to, aby sa učenie orientovalo na podnety k potravinám, ale nie na učenie sa k prístupu k výsledkom potravy (Han et al., 1997). Druhá cesta, vrátane jadra CeA, SNc, VTA a NAc, je nevyhnutná pre odmeňovanie podnetov, ktoré spôsobujú zvýšenie všeobecnej motivácie vykonávať akcie hľadajúce odmenu (Hall a kol., 2001; Corbit a Balleine, 2005; El-Amamy a Holandsko, 2007).

Okrem CeA by DA neuróny mohli prijímať signály motivačných saliencií z iných zdrojov, ako sú napríklad neuróny kódujúce salienciu v bazálnom prednom mozgu (Lin a Nicolelis, 2008; Richardson a DeLong, 1991) a neurónov v PBN (Coizet a kol., 2010), aj keď tieto cesty treba ešte preskúmať.

Zdroje výstražných signálov

Existuje niekoľko dobrých kandidátov na poskytovanie neurónov DA s varovnými signálmi. Snáď najatraktívnejším kandidátom je superior colliculus (SC), jadro stredného mozgu, ktoré dostáva zmyslové vplyvy krátkej latencie z viacerých senzorických modalít a kontroluje orientačné reakcie a pozornosť (Redgrave a Gurney, 2006) (Obrázok 8). SC má priamu projekciu na SNc a VTA (May a kol., 2009; Comoli a kol., 2003). U anestetizovaných zvierat je SC vitálnym potrubím pre krátkodobé vizuálne signály na dosiahnutie DA neurónov a spúšťanie uvoľňovania DA v následných štruktúrach (Comoli a kol., 2003; Dommett a kol., 2005). Cesta SC-DA je najvhodnejšia na sprostredkovanie výstražných signálov namiesto signálov odmeňovania a averzie, pretože SC neuróny majú malú odozvu na odmeňovanie a majú len mierny vplyv na averzívne reakcie DA (Coizet a kol., 2006). To naznačuje, že sekvencia udalostí, pri ktorých SC neuróny (1) detegujú stimul, (2) ho vyberie ako potenciálne dôležitú, (3) spúšťa orientačnú reakciu na skúmanie stimulu a (4) súčasne spúšťa reakciu na upozornenie DA, ktorá spôsobuje výbuch DA v nadväzujúcich štruktúrach (Redgrave a Gurney, 2006).

Druhým kandidátom na zasielanie výstražných signálov DA neurónom je LHb (Obrázok 8). Neočakávaný začiatok štartovacieho štartovacieho pokusu inhibuje mnoho LHb neurónov inverzne k signálu upozorňujúcemu na DA neuróny a táto reakcia sa vyskytuje pri kratšej latencii v LHb v súlade s LHb → DA smerom prenosu (Bromberg-Martin a kol., 2010a; Bromberg-Martin a kol., 2010c). Tiež sme anekdoticky pozorovali, že neuróny LHb sú bežne inhibované neočakávanými vizuálnymi obrazmi a zvukmi inverzne k DA excitáciám (MM, ESB-M. A OH, nepublikované pozorovania), hoci toto čaká na systematickejšie vyšetrovanie.

Tretím kandidátom na zasielanie výstražných signálov do neurónov DA je pedunculopontínové tegmentálne jadro (PPTg), ktoré projektuje SNC aj VTA a zúčastňuje sa na motivačnom spracovaní (Winn, 2006) (Obrázok 8). PPTg je dôležitý na to, aby umožnil VTA DA neurónovým zhlukom (Grace a kol., 2007) vrátane odoziev na prerušení odmien (Pan a Hyland, 2005). V súlade s varovným signálom majú PPTg neuróny krátkodobú reakciu na viaceré senzorické modality a sú aktívne počas orientačných reakcií (Winn, 2006). Existujú dôkazy, že PPTg senzorické reakcie sú ovplyvnené hodnotou odmeny a požiadavkami na okamžité konanie (Dormont a kol., 1998; Okada a kol., 2009) (ale pozrite (Pan a Hyland, 2005)). Niektoré PPTg neuróny tiež reagujú na odmeňovanie alebo averzívne výsledky samy (Dormont a kol., 1998; Kobayashi a kol., 2002; Ivlieva a Timofeeva, 2003b, a). Bude dôležité otestovať, či signály, ktoré PPTg posiela do neurónov DA, súvisia špecificky s upozornením alebo či obsahujú iné motivačné signály, ako je hodnota a význam.

Táto práca bola podporená intramurálnym výskumným programom Národného očného inštitútu. Ďakujeme aj Amy Arnsten za hodnotné diskusie.

Zrieknutie sa zodpovednosti vydavateľa: Toto je súbor PDF s neupraveným rukopisom, ktorý bol prijatý na uverejnenie. Ako službu pre našich zákazníkov poskytujeme túto skoršiu verziu rukopisu. Rukopis sa podrobí kopírovaniu, sádzaniu a preskúmaniu výsledného dôkazu skôr, ako sa uverejní vo svojej konečnej podobe. Upozorňujeme, že počas výrobného procesu môžu byť zistené chyby, ktoré by mohli mať vplyv na obsah, a všetky právne zrieknutia sa zodpovednosti, ktoré sa vzťahujú na časopis.

^FOOTNOTE1By motivácia máme na mysli množstvo, ktoré je vysoké ako pre odmeňovanie, tak aj pre averzívne udalosti a je nízke pre motivačne neutrálne (neodmeňujúce a netrpezlivé) udalosti. Je to podobné definícii (Berridge a Robinson, 1998). Všimnite si, že motivačná sálencia je odlišná od iných predstav o význame, ktorý sa používa v neurovedách, ako je napríklad stimulačná dôležitosť (ktorá sa vzťahuje len na žiaduce udalosti;Berridge a Robinson, 1998) a vnímavosť (čo sa týka motivačne neutrálnych udalostí, ako sú pohybujúce sa objekty a farebné svetlá;Bisley a Goldberg, 2010))].

^FOOTNOTE2Všimnite si, že motivačné salience kódujúce DA neurónové signály sú odlišné od klasických pojmov „asociácia“ a „zmena v asociačnosti“, ktoré boli navrhnuté na reguláciu rýchlosti posilňovacieho učenia (napr. (Pearce a Hall, 1980)). Tieto teórie uvádzajú, že zvieratá sa učia (a upravujú mieru učenia) z pozitívnych aj negatívnych predikčných chýb. Hoci tieto DA neuróny môžu prispieť k učeniu sa z pozitívnych predikčných chýb, počas ktorých môžu mať silnú odozvu (napr. Na neočakávanú dodávku odmeny), nemusia prispievať k učeniu sa z negatívnych predikčných chýb, počas ktorých môžu mať malú alebo žiadnu odpoveď ( napr. k neočakávanému opomenutiu odmeny) (Obrázok 4B).

1. Ahlbrecht M, Weber M. Riešenie neistoty: experimentálna štúdia. Časopis inštitucionálnej a teoretickej ekonómie. 1996, 152: 593-607.
2. Albin RL, Young AB, Penney JB. Funkčná anatómia bazálnych ganglií. Trendy v oblasti neurovied. 1989, 12: 366-375. [PubMed]
3. Anderson AK, Christoff K, Stappen I, Panitz D, Ghahremani DG, Glover G, Gabrieli JD, Sobel N. Disociované neurálne reprezentácie intenzity a valencie v ľudskom čreve. Nat Neurosci. 2003, 6: 196-202. [PubMed]
4. Anstrom KK, Miczek KA, Budygin EA. Zvýšená fázová dopamínová signalizácia v mezolimbickej dráhe počas sociálnej porážky u potkanov. Neuroscience. 2009, 161: 3-12. [PubMed]
5. Aragona BJ, Day JJ, Roitman MF, Cleaveland NA, Wightman RM, Carelli RM. Regionálna špecifickosť vývoja v reálnom čase fázového prenosu dopamínu počas získavania asociácie cue-kokaínu u potkanov. Európsky časopis neurovedy. 2009, 30: 1889-1899. [Článok bez PMC] [PubMed]
6. Austin AJ, Duka T. Mechanizmy pozornosti pre chutné a averzívne výsledky v Pavlovianskej úprave. Behaviorálny výskum mozgu. 2010, 213: 19-26. [PubMed]
7. Badia P, Harsh J, Abbott B. Výber medzi predpokladateľnými a nepredvídateľnými šokovými podmienkami: údaje a teória. Psychologický bulletin. 1979, 86: 1107-1131.
8. Balleine BW, Killcross S. Paralelné spracovanie stimulov: integrovaný pohľad na funkciu amygdala. Trendy v oblasti neurovied. 2006, 29: 272-279. [PubMed]
9. Balleine BW, O'Doherty JP. Homológie človeka a hlodavca pri kontrole činnosti: kortikostriatálne determinanty cieleného a obvyklého pôsobenia. Neuropsychofarmakológia. 2010; 35: 48–69. [Článok bez PMC] [PubMed]
10. Barr GA, Moriceau S, Shionoya K, Muzny K, Gao P, Wang S, Sullivan RM. Prechody v detskom vzdelávaní sú modulované dopamínom v amygdale. Nat Neurosci. 2009, 12: 1364-1366. [Článok bez PMC] [PubMed]
11. Bassareo V, De Luca MA, Di Chiara G. Diferenciálna expresia motivačných stimulačných vlastností pomocou dopamínu v Nucleus Accumbens Shell verzus Core a Prefrontal Cortex. J Neurosci. 2002, 22: 4709-4719. [PubMed]
12. Bassareo V, Di Chiara G. Diferenciálna citlivosť prenosu dopamínu na potravinové stimuly v kompartmentoch nucleus accumbens. Neuroscience. 1999, 89: 637-641. [PubMed]
13. Baxter MG, Murray EA. Amygdala a odmena. Nat Rev Neurosci. 2002, 3: 563-573. [PubMed]
14. Bayer HM, Glimcher PW. Dopamínové neuróny stredného mozgu kódujú kvantitatívny signál o predikcii predikcie. Neurón. 2005, 47: 129-141. [Článok bez PMC] [PubMed]
15. Belova MA, Paton JJ, Morrison SE, Salzman CD. Očakávania modulujú nervové reakcie na príjemné a averzívne podnety v amygdale primátov. Neurón. 2007, 55: 970-984. [Článok bez PMC] [PubMed]
16. Bentivoglio M, Morelli M. Organizácia a obvody mesencefalických dopaminergných neurónov a distribúcia dopamínových receptorov v mozgu. Príručka Chemical Neuroanatomy. 2005: 1-107.
17. Berridge KC, Robinson TE. Aká je úloha dopamínu v odmene: hedonický dopad, odmeňovanie učenia alebo motivácia? Výskum mozgu. 1998, 28: 309-369. [PubMed]
18. Besson C, Louilot A. Asymetrické zapojenie mezolimbických dopaminergných neurónov do afektívneho vnímania. Neuroscience. 1995, 68: 963-968. [PubMed]
19. Birgner C, Nordenankar K, Lundblad M., Mendez JA, Smith C, le Greves M, Galter D, Olson L, Fredriksson A, Trudeau LE, et al. VGLUT2 v dopamínových neurónoch je potrebný pre psychostimulačné indukovanú behaviorálnu aktiváciu. Zborník Národnej akadémie vied Spojených štátov amerických. 2010, 107: 389-394. [Článok bez PMC] [PubMed]
20. Bisley JW, Goldberg ME. Pozornosť, zámer a priorita v parietálnom laloku. Ročný prehľad neurovedy. 2010, 33: 1-21. [Článok bez PMC] [PubMed]
21. Bjorklund A, Dunnett SB. Dopamínové neurónové systémy v mozgu: aktualizácia. Trendy v oblasti neurovied. 2007, 30: 194-202. [PubMed]
22. Blazquez PM, Fujii N, Kojima J, Graybiel AM. Sieťová reprezentácia pravdepodobnosti odozvy v striate. Neurón. 2002, 33: 973-982. [PubMed]
23. Botvinick MM, Braver TS, Barch DM, Carter CS, Cohen JD. Monitorovanie konfliktov a kognitívna kontrola. 2001, 108: 624 – 652. [PubMed]
24. Bradley MM, Greenwald MK, Petry MC, Lang PJ. Zapamätanie obrázkov: potešenie a vzrušenie v pamäti. J Exp Psychol Learn Mem Cogn. 1992, 18: 379-390. [PubMed]
25. Braun DA, Mehring C, Wolpert DM. Štrukturálne vzdelávanie v akcii. Behaviorálny výskum mozgu. 2010, 206: 157-165. [Článok bez PMC] [PubMed]
26. Brinschwitz K, Dittgen A, Madai VI, Lommel R, Geisler S, Veh RW. Glutamatergické axóny z laterálneho habenula končia hlavne na GABAergných neurónoch ventrálneho stredného mozgu. Neuroscience. 2010, 168: 463-476. [PubMed]
27. Brischoux F, Chakraborty S, Brierley DI, Ungless MA. Fázová excitácia dopamínových neurónov vo ventrálnej VTA škodlivými stimulmi. Zborník Národnej akadémie vied Spojených štátov amerických. 2009, 106: 4894-4899. [Článok bez PMC] [PubMed]
28. Bromberg-Martin ES, Hikosaka O. Stredný mozog dopamínových neurónov signalizuje preferenciu pre predbežné informácie o pripravovaných odmenách. Neurón. 2009, 63: 119-126. [Článok bez PMC] [PubMed]
29. Bromberg-Martin ES, Matsumoto M, Hikosaka O. Odlišná tonická a fázová predpovedná aktivita v laterálnych habenulových a dopamínových neurónoch. Neurón. 2010; 67: 144-155. [Článok bez PMC] [PubMed]
30. Bromberg-Martin ES, Matsumoto M, Hong S, Hikosaka O. Cesta pallidus-habenula-dopamín signalizuje odvodené hodnoty stimulu. J. Neurophysiol. 2010b; 104: 1068-1076. [Článok bez PMC] [PubMed]
31. Bromberg-Martin ES, Matsumoto M, Nakahara H, Hikosaka O. Viacnásobné časy pamäte v laterálnych habenulových a dopamínových neurónoch. Neurón. 2010c; 67: 499-510. [Článok bez PMC] [PubMed]
32. Brown MTC, Henny P, Bolam JP, Magill PJ. Aktivita neurochemicky heterogénnych dopaminergných neurónov v substantia nigra počas spontánnych a riadených zmien v mozgovom stave. J Neurosci. 2009, 29: 2915-2925. [PubMed]
33. Kardinál RN. Neurónové systémy zapojené do oneskoreného a pravdepodobnostného zosilnenia. Neural Netw. 2006, 19: 1277-1301. [PubMed]
34. Cheer JF, Aragona BJ, Heien ML, Seipel AT, Carelli RM, Wightman RM. Koordinované uvoľňovanie dopamínu a neurálnej aktivity poháňa cielené správanie. Neurón. 2007, 54: 237-244. [PubMed]
35. Cheramy A, Kemel ML, Gauchy C, Desce JM, Galli T, Barbeito L, Glowinski J. Úloha excitačných aminokyselín pri priamej a nepriamej presynaptickej regulácii uvoľňovania dopamínu z nervových zakončení nigrostriatálnych dopamínových neurónov. Aminokyseliny. 1991, 1: 351-363. [PubMed]
36. Chew SH, Ho JL. Nádej: empirická štúdia postoja k načasovaniu riešenia neistoty. Časopis o rizikách a neistote. 1994, 8: 267-288.
37. Chiodo LA, Antelman SM, Caggiula AR, Lineberry CG. Senzorické podnety menia rýchlosť výtoku dopamínových (DA) neurónov: dôkaz dvoch funkčných typov DA buniek v substantia nigra. Brain Res. 1980, 189: 544-549. [PubMed]
38. Christoph GR, Leonzio RJ, Wilcox KS. Stimulácia laterálneho habenula inhibuje neuróny obsahujúce dopamín v substantia nigra a ventrálnej tegmentálnej oblasti potkana. J Neurosci. 1986, 6: 613-619. [PubMed]
39. Chuhma N, Choi WY, Mingote S, Rayport S. Dopamínová neurónová glutamátová kotransmisia: frekvenčne závislá modulácia v mesoventromediálnej projekcii. Neuroscience. 2009, 164: 1068-1083. [Článok bez PMC] [PubMed]
40. Cohen JD, Braver TS, Brown JW. Výpočtové perspektívy funkcie dopamínu v prefrontálnom kortexe. Súčasný názor na neurobiológiu. 2002, 12: 223-229. [PubMed]
41. Coizet V, Dommett EJ, Klop EM, Redgrave P, Overton PG. Parabrachiálne jadro je kritickým článkom v prenose krátko-latentných nociceptívnych informácií do dopaminergných neurónov stredného mozgu. Neuroscience. 2010, 168: 263-272. [Článok bez PMC] [PubMed]
42. Coizet V, Dommett EJ, Redgrave P, Overton PG. Nociceptívne reakcie dopaminergných neurónov stredného mozgu sú modulované superior colliculus u potkanov. Neuroscience. 2006, 139: 1479-1493. [PubMed]
43. Comoli E, Coizet V, Boyes J, Bolam JP, Canteras NS, Quirk RH, Overton PG, Redgrave P. Priama projekcia z superior colliculus do substantia nigra na detekciu významných vizuálnych udalostí. Nat Neurosci. 2003, 6: 974-980. [PubMed]
44. Corbit LH, Balleine BW. Dvojitá disociácia bazolaterálnych a centrálnych amygdala lézií na všeobecné a na výsledky špecifické formy pavloviansko-inštrumentálneho prenosu. J Neurosci. 2005, 25: 962-970. [PubMed]
45. Dalley JW, Laane K, Theobald DE, Armstrong HC, Corlett PR, Chudasama Y, Robbins TW. Časovo obmedzená modulácia apetitívnej Pavlovianovej pamäte pomocou D1 a NMDA receptorov v nucleus accumbens. Zborník Národnej akadémie vied Spojených štátov amerických. 2005, 102: 6189-6194. [Článok bez PMC] [PubMed]
46. Daly HB. Preferencia pre nepredvídateľnosť sa zvráti, keď je nepredvídateľná nonrewardová averzívna: procedúry, dáta a teórie apetítnej reakcie na získanie pozorovania. In: Gormezano I, Wasserman EA, redaktori. Učenie a pamäť: Behaviorálne a biologické substráty. LE Associates; 1992. s. 81 – 104.
47. Davidson MC, Horvitz JC, Tottenham N, Fossella JA, Watts R, Ulug AM, Casey BJ. Diferenciálna aktivácia kaudátu a cingulácie po neočakávaných nepodmienených stimuloch. Neuroimage. 2004, 23: 1039-1045. [PubMed]
48. Day JJ, Roitman MF, Wightman RM, Carelli RM. Asociatívne učenie sprostredkováva dynamické posuny v dopamínovej signalizácii v nucleus accumbens. Nat Neurosci. 2007, 10: 1020-1028. [PubMed]
49. Dayan P, Niv Y. Posilnenie učenia: dobré, zlé a škaredé. Súčasný názor na neurobiológiu. 2008, 18: 185-196. [PubMed]
50. Descarries L, Berube-Carriere N, Riad M, Bo GD, Mendez JA, Trudeau LE. Glutamát v neurónoch dopamínu: synaptický versus difúzny prenos. Recenzia výskumu mozgu. 2008, 58: 290-302. [PubMed]
51. Di Chiara G. Nucleus accumbens shell a jadro dopamínu: diferenciálna úloha v správaní a závislosti. Behaviorálny výskum mozgu. 2002, 137: 75-114. [PubMed]
52. Dommett E, Coizet V, Blaha CD, Martindale J, Lefebvre V, Walton N, Mayhew JE, Overton PG, Redgrave P. Ako vizuálne stimuly aktivujú dopaminergné neuróny v krátkej latencii. Science. 2005, 307: 1476-1479. [PubMed]
53. Dormont JF, Conde H, Farin D. Úloha pedunculopontínového tegmentálneho jadra vo vzťahu k podmienenému motorickému výkonu u mačky. I. Činnosť jednotlivých jednotiek závislá od kontextu a posilnená. Experimentálny výskum mozgu. Experimentelle Hirnforschung. 1998, 121: 401-410. [PubMed]
54. Duzel E, Bunzeck N, Guitart-Masip M, Duzel S. Motivácia očakávania a skúmania dopamínom (NOMAD) súvisiaca s zdravým starnutím. Neurovedy a biologické správanie. 2010, 34: 660-669. [PubMed]
55. El-Amamy H, Holandsko PC. Disociovateľné účinky odpojenia centrálneho jadra amygdaly od ventrálnej tegmentálnej oblasti alebo substantia nigra na naučenú orientáciu a motivačnú motiváciu. Európsky časopis neurovedy. 2007, 25: 1557-1567. [Článok bez PMC] [PubMed]
56. Ettenberg A. Vlastnosti protichodného procesu kokaínu. Neurovedy a biologické správanie. 2004, 27: 721-728. [PubMed]
57. Fadok JP, Dickerson TM, Palmiter RD. Dopamín je nevyhnutný pre podmieňovanie strachu závislé od cue. J Neurosci. 2009, 29: 11089-11097. [Článok bez PMC] [PubMed]
58. Fairhall AL, Lewen GD, Bialek W, de Ruyter Van Steveninck RR. Účinnosť a nejednoznačnosť v adaptívnom neurálnom kóde. Nature. 2001, 412: 787-792. [PubMed]
59. Faure A, Haberland U, Conde F, El Massioui N. Lézia na nigrostriatálny dopamínový systém narúša tvorbu návykov a reakcií. J Neurosci. 2005, 25: 2771-2780. [PubMed]
60. Faure A, Reynolds SM, Richard JM, Berridge KC. Mesolimbický dopamín v túžbe a hneve: umožňuje, aby bola motivácia generovaná lokalizovanými poruchami glutamátu v nucleus accumbens. J Neurosci. 2008, 28: 7184-7192. [Článok bez PMC] [PubMed]
61. Fiorillo CD, Newsome WT, Schultz W. Časová presnosť predikcie odmeny v dopamínových neurónoch. Nat Neurosci. 2008, 11: 966-973. [PubMed]
62. Fiorillo CD, Tobler PN, Schultz W. Diskrétne kódovanie pravdepodobnosti a neistoty odmien dopamínovými neurónmi. Science. 2003, 299: 1898-1902. [PubMed]
63. Floresco SB, Ghods-Sharifi S, Vexelman C, Magyar O. Disociovateľné úlohy pre jadro nucleus accumbens a shell v regulácii posunu množiny. J Neurosci. 2006, 26: 2449-2457. [PubMed]
64. Ford CP, Gantz SC, Phillips PE, Williams JT. Kontrola extracelulárneho dopamínu na dendritových a axónových termináloch. J Neurosci. 2010, 30: 6975-6983. [Článok bez PMC] [PubMed]
65. Frank MJ. Dynamická modulácia dopamínu v bazálnych gangliách: neuropočítačový opis kognitívnych deficitov v medikamentóznom a neliečenom parkinsonizme. Časopis kognitívnych neurovied. 2005, 17: 51-72. [PubMed]
66. Frank MJ, Fossella JA. Neurogenetika a farmakológia učenia, motivácie a poznávania. Neuropsychofarmakologie. 2010 [Článok bez PMC] [PubMed]
67. Frank MJ, Seeberger LC, O'Reilly RC. Mrkvou alebo tyčinkou: učenie kognitívneho zosilnenia pri parkinsonizme. Science. 2004, 306: 1940-1943. [PubMed]
68. Gallistel CR, Gibbon J. Čas, rýchlosť a kondicionovanie. 2000, 107: 289 – 344. [PubMed]
69. Gao DM, Jeaugey L, Pollak P, Benabid AL. Nociceptívne odozvy závislé od intenzity predpokladaných dopaminergných neurónov substantia nigra, pars compacta u potkanov a ich modifikácia laterálnymi vstupmi habenula. Brain Res. 1990, 529: 315-319. [PubMed]
70. Gauriau C, Bernard JF. Cesty bolesti a parabrachiálne okruhy u potkanov. Experimentálna fyziológia. 2002, 87: 251-258. [PubMed]
71. Geisler S, Zahm DS. Prechody ventrálnej tegmentálnej oblasti v krysovo-anatomickom substráte pre integračné funkcie. Časopis komparatívnej neurológie. 2005, 490: 270-294. [PubMed]
72. Gerfen CR, Engber TM, Mahan LC, Susel Z, Chase TN, Monsma FJ, Jr, Sibley DR. D1 a D2 génovú expresiu striatonigrálnych a striatopallidálnych neurónov regulovanú dopamínovým receptorom. Science. 1990, 250: 1429-1432. [PubMed]
73. Ghods-Sharifi S, Floresco SB. Diferenciálne vplyvy na diskontovanie úsilia vyvolané inaktiváciou jadra core alebo shell jadra. Behaviorálna neuroveda. 2010, 124: 179-191. [PubMed]
74. Gonon FG. Nelineárny vzťah medzi prúdom impulzov a dopamínom uvoľňovaným dopaminergnými neurónmi potkanov stredného mozgu, ako sa študovalo in vivo elektrochémiou. Neuroscience. 1988, 24: 19-28. [PubMed]
75. Goto Y, Yang CR, Otani S. Funkčná a dysfunkčná synaptická plasticita v prefrontálnom kortexe: úlohy v psychiatrických poruchách. Biologická psychiatria. 2010, 67: 199-207. [PubMed]
76. Grace AA. Fázové a tonické uvoľňovanie dopamínu a modulácia citlivosti dopamínového systému: hypotéza pre etiológiu schizofrénie. Neuroscience. 1991, 41: 1-24. [PubMed]
77. Grace AA, Bunney BS. Intracelulárna a extracelulárna elektrofyziológia nigrálnych dopaminergných neurónov – 1. Identifikácia a charakterizácia. Neuroveda. 1983; 10: 301–315. [PubMed]
78. Grace AA, Floresco SB, Goto Y, Lodge DJ. Regulácia vypaľovania dopaminergných neurónov a kontrola cieleného správania. Trendy v oblasti neurovied. 2007, 30: 220-227. [PubMed]
79. Grecksch G, Matties H. Úloha dopaminergných mechanizmov v hipokampuse potkanov na konsolidáciu pri jasnej diskriminácii. Psychofarmakológia (Berl) 1981, 75: 165 – 168. [PubMed]
80. Guarraci FA, Kapp BS. Elektrofyziologická charakterizácia dopaminergných neurónov ventrálnej tegmentálnej oblasti počas diferenciálnej úpravy pavloviánskeho strachu v bdelom králiku. Behaviorálny výskum mozgu. 1999, 99: 169-179. [PubMed]
81. Haber SN, Fudge JL, McFarland NR. Striatonigrostriatálne dráhy v primátoch tvoria vzostupnú špirálu od škrupiny k dorsolaterálnemu striatu. J Neurosci. 2000, 20: 2369-2382. [PubMed]
82. Hall J, Parkinson JA, Connor TM, Dickinson A, Everitt BJ. Zapojenie centrálneho jadra amygdaly a jadra accumbens do sprostredkovania Pavlovovských vplyvov na inštrumentálne správanie. Európsky časopis neurovedy. 2001, 13: 1984-1992. [PubMed]
83. Han JS, McMahan RW, Holland P, Gallagher M. Úloha amygdalo-nigrostriatálnej dráhy v asociatívnom učení. J Neurosci. 1997, 17: 3913-3919. [PubMed]
84. Harris GC, Aston-Jones G. Vzrušenie a odmena: dichotómia vo funkcii orexínu. Trendy v oblasti neurovied. 2006, 29: 571-577. [PubMed]
85. Herry C, Bach DR, Esposito F, Di Salle F, Perrig WJ, Scheffler K, Luthi A, Seifritz E. Spracovanie časovej nepredvídateľnosti v ľudskej a zvieracej amygdale. J Neurosci. 2007, 27: 5958-5966. [PubMed]
86. Hikida T, Kimura K, Wada N, Funabiki K, Nakanishi S. Výrazné úlohy synaptického prenosu v priamych a nepriamych striatálnych dráhach na odmeňovanie a averzívne správanie. Neurón. 2010, 66: 896-907. [PubMed]
87. Hikosaka O. Bazálne gangliá mechanizmy pohybov očí orientovaných na odmenu. Annals of New York Academy of Sciences. 2007, 1104: 229-249. [PubMed]
88. Hikosaka O. Habenula: od stresového úniku k hodnotovému rozhodovaniu. Nat Rev Neurosci. 2010, 11: 503-513. [Článok bez PMC] [PubMed]
89. Hikosaka O, Takikawa Y, Kawagoe R. Úloha bazálnych ganglií pri kontrole úmyselných sakadických očných pohybov. Fyziologické recenzie. 2000, 80: 953-978. [PubMed]
90. Hitchcott PK, Quinn JJ, Taylor JR. Obojsmerná modulácia cielených akcií prefrontálnym kortikálnym dopamínom. Cereb Cortex. 2007, 17: 2820-2827. [PubMed]
91. Hnasko TS, Chuhma N, Zhang H, Goh GY, Sulzer D, Palmiter RD, Rayport S, Edwards RH. Transport vezikulárneho glutamátu podporuje ukladanie dopamínu a koreláciu glutamátu in vivo. Neurón. 2010, 65: 643-656. [Článok bez PMC] [PubMed]
92. Holland PC, Gallagher M. Amygdala obvody v pozornosti a reprezentačné procesy. Trendy v kognitívnych vedách. 1999, 3: 65-73. [PubMed]
93. Hollerman JR, Schultz W. Dopamínové neuróny hlásia chybu v časovej predikcii odmeny počas učenia. Nat Neurosci. 1998, 1: 304-309. [PubMed]
94. Holroyd CB, Coles MG. Neurónový základ spracovania ľudských chýb: učenie zosilnenia, dopamín a negativita súvisiaca s chybami. 2002, 109: 679 – 709. [PubMed]
95. Hong S, Hikosaka O. Globus pallidus vysiela signály súvisiace s odmenou do laterálneho habenula. Neurón. 2008, 60: 720-729. [Článok bez PMC] [PubMed]
96. Horvitz JC. Mezolimbokokortikálne a nigrostriatálne dopamínové reakcie na výrazné non-odmeny udalosti. Neuroscience. 2000, 96: 651-656. [PubMed]
97. Horvitz JC, Stewart T, Jacobs BL. Aktivita roztrhnutia ventrálnych tegmentálnych dopamínových neurónov je vyvolaná zmyslovými stimulmi v bdelej mačke. Brain Res. 1997, 759: 251-258. [PubMed]
98. Houk JC, Adams JL, Barto AG. Model, ako bazálne ganglie generuje a využíva neurónové signály, ktoré predpovedajú zosilnenie. In: Houk JC, Davis JL, Beiser DG, redaktori. Modely spracovania informácií v Basal Ganglia. Cambridge, MA: MIT Press; 1995. s. 249 – 274.
99. Ikemoto S. Obvody odmeňovania mozgu mimo mezolimbického dopamínového systému: neurobiologická teória. Neurovedy a biologické správanie. 2010 [Článok bez PMC] [PubMed]
100. Ito R, Dalley JW, Howes SR, Robbins TW, Everitt BJ. Disociácia v kondicionovanom uvoľňovaní dopamínu v jadre Accumbens Core a Shell v reakcii na kokaínové podnety a počas kokaín-hľadajúceho správania u potkanov. J Neurosci. 2000, 20: 7489-7495. [PubMed]
101. Ivlieva NY, Timofeeva NO. Aktivita neurónu v jadre pedunkulopontínu počas operatívne podmieneného reflexu súvisiaceho s jedlom. Neurovedy a behaviorálna fyziológia. 2003; 33: 919-928. [PubMed]
102. Ivlieva NY, Timofeeva NO. Aktivita neurónu v jadre pedunkulopontínu počas operatívneho podmieneného reflexu. Neurovedy a behaviorálna fyziológia. 2003b; 33: 499-506. [PubMed]
103. Jalabert M, Aston-Jones G, Herzog E, Manzoni O, Georges F. Úloha lôžkového jadra stria terminalis pri kontrole dopamínových neurónov ventrálnej tegmentálnej oblasti. Pokrok v neuropsychofarmakológii a biologickej psychiatrii. 2009; 33: 1336–1346. [Článok bez PMC] [PubMed]
104. Jeanblanc J, Hoeltzel A, Louilot A. Disociácia pri zapájaní dopaminergných neurónov inervujúcich jadro a shell subregiónov nucleus accumbens v latentnej inhibícii a afektívnom vnímaní. Neuroscience. 2002, 111: 315-323. [PubMed]
105. Jensen J, Smith AJ, Willeit M, Crawley AP, Mikulis DJ, Vitcu I, Kapur S. Oddelené oblasti mozgu kódujú salienciu vs. valenciu počas predikcie odmeny u ľudí. Mapovanie ľudského mozgu. 2007, 28: 294-302. [PubMed]
106. Jhou TC, Fields HL, Baxter MG, Saper CB, Holandsko PC. Rastromediálne tegmentálne jadro (RMTg), GABAergný aferentný k dopamínovým neurónom stredného mozgu, kóduje averzívne stimuly a inhibuje motorické reakcie. Neurón. 2009; 61: 786-800. [Článok bez PMC] [PubMed]
107. Jhou TC, Geisler S, Marinelli M, Degarmo BA, Zahm DS. Mesopontine rostromedial tegmental nucleus: Štruktúra cielená laterálnym habenula, ktorá premieta do ventrálnej tegmentálnej oblasti Tsai a substantia nigra compacta. Časopis komparatívnej neurológie. 2009b; 513: 566-596. [Článok bez PMC] [PubMed]
108. Ji H, Shepard PD. Stimulácia laterálneho habenula inhibuje dopamínové neuróny potkana stredného mozgu prostredníctvom mechanizmu sprostredkovaného receptorom GABA (A). J Neurosci. 2007, 27: 6923-6930. [PubMed]
109. Jin X, Costa RM. Počas sekvenčného učenia sa v nigrostriatálnych okruhoch objavujú signály štart / stop. Nature. 2010, 466: 457-462. [Článok bez PMC] [PubMed]
110. Johansen JP, Fields HL. Glutamatergická aktivácia predného cingulárneho kortexu vytvára averzívny vyučovací signál. Nat Neurosci. 2004, 7: 398-403. [PubMed]
111. Joseph MH, Datla K, Young AM. Interpretácia merania nucleus accumbens dopamínu dialýzou in vivo: kop, túžba alebo kognícia? Neurovedy a biologické správanie. 2003, 27: 527-541. [PubMed]
112. Joshua M, Adler A, Bergman H. Dynamika dopamínu pri kontrole motorického správania. Súčasný názor na neurobiológiu. 2009; 19: 615-620. [PubMed]
113. Joshua M, Adler A, Mitelman R, Vaadia E, Bergman H. Stredné mozgové dopamínergné neuróny a striatálne cholinergné interneuróny kódujú rozdiel medzi odmenou a averzívnymi udalosťami v rôznych epochách pravdepodobnostných klasických pokusov o kondicionovaní. J Neurosci. 2008, 28: 11673-11684. [PubMed]
114. Joshua M, Adler A, Prut Y, Vaadia E, Wickens JR, Bergman H. Synchronizácia dopaminergných neurónov stredného mozgu je posilnená odmeňovaním udalostí. Neurón. 2009b; 62: 695-704. [PubMed]
115. Kable JW, Glimcher PW. Neurobiológia rozhodnutia: konsenzus a kontroverzia. Neurón. 2009, 63: 733-745. [Článok bez PMC] [PubMed]
116. Kakade S, Dayan P. Dopamine: zovšeobecnenie a bonusy. Neurálne siete. 2002, 15: 549-559. [PubMed]
117. Kapur S. Psychóza ako stav aberantnej saliencie: rámec spájajúci biológiu, fenomenológiu a farmakológiu schizofrénie. Americký časopis psychiatrie. 2003, 160: 13-23. [PubMed]
118. Kaufling J., Veinante P, Pawlowski SA, Freund-Mercier MJ, Barrot M. Afferents GABAergický chvost ventrálnej tegmentálnej oblasti u potkanov. Časopis komparatívnej neurológie. 2009, 513: 597-621. [PubMed]
119. Kennerley SW, Wallis JD. Vyhodnotenie možností jednotlivými neurónmi v prednom laloku: výsledná hodnota kódovaná cez viaceré rozhodovacie premenné. Európsky časopis neurovedy. 2009, 29: 2061-2073. [Článok bez PMC] [PubMed]
120. Kim H, Sul JH, Huh N, Lee D, Jung MW. Úloha striatum pri aktualizácii hodnôt vybraných akcií. J Neurosci. 2009, 29: 14701-14712. [PubMed]
121. Kiyatkin EA. Funkčné vlastnosti predpokladaných neurónov obsahujúcich dopamín a iných ventrálnych tegmentálnych oblastí u potkanov pri vedomí. Int J Neurosci. 1988; 42: 21-43. [PubMed]
122. Kiyatkin EA. Morfínom indukovaná modifikácia funkčných vlastností neurónov ventrálnej tegmentálnej oblasti u potkanov pri vedomí. Intern J Neuroscience. 1988b; 41: 57-70. [PubMed]
123. Klingberg T. Školenie a plasticita pracovnej pamäte. Trendy v kognitívnych vedách. 2010, 14: 317-324. [PubMed]
124. Kobayashi S, Nomoto K, Watanabe M, Hikosaka O, Schultz W, Sakagami M. Vplyv odmeňovania a averzívnych výsledkov na aktivitu v laterálnom prefrontálnom kortexe makakov. Neurón. 2006, 51: 861-870. [PubMed]
125. Kobayashi S, Schultz W. Vplyv oneskorenia odmien na odpovede neurónov dopamínu. J Neurosci. 2008, 28: 7837-7846. [Článok bez PMC] [PubMed]
126. Kobayashi Y, Inoue Y, Yamamoto M, Isa T, Aizawa H. Príspevok neurónov pedunculopontínového tegmentálneho jadra k uskutočneniu vizuálne vedených sakádových úloh u opíc. J. Neurophysiol. 2002, 88: 715-731. [PubMed]
127. Koyama T, Tanaka YZ, Mikami A. Nociceptívne neuróny v makak prednej cingulate aktivovať počas očakávania bolesti. Neuroreport. 1998, 9: 2663-2667. [PubMed]
128. Kravitz AV, Freeze BS, Parker PR, Kay K, Thwin MT, Deisseroth K, Kreitzer AC. Regulácia parkinsonovského motorického správania optogenetickou kontrolou bazálneho ganglia. Nature. 2010 [Článok bez PMC] [PubMed]
129. Lammel S, Hetzel A, Hackel O, Jones I, Liss B, Roeper J. Unikátne vlastnosti mezoprefrontálnych neurónov v duálnom mezokortikolimbickom dopamínovom systéme. Neurón. 2008, 57: 760-773. [PubMed]
130. Lang PJ, Davis M. Emócie, motivácia a mozog: reflexné základy vo výskume zvierat a ľudí. Pokrok vo výskume mozgu. 2006, 156: 3-29. [PubMed]
131. Lapish CC, Kroener S, Durstewitz D, Lavin A, Seamans JK. Schopnosť mezokortikálneho dopamínového systému pracovať v odlišných časových režimoch. Psychofarmakológia (Berl) 2007, 191: 609 – 625. [PubMed]
132. Lee D, Seo H. Mechanizmy posilňovacieho učenia a rozhodovania v primátnom dorsolaterálnom prefrontálnom kortexe. Annals of New York Academy of Sciences. 2007, 1104: 108-122. [PubMed]
133. Lee HJ, Groshek F, Petrovich GD, Cantalini JP, Gallagher M, Holandsko PC. Úloha amygdalográdnych obvodov pri kondicionovaní vizuálneho stimulu spárovaného s jedlom. J Neurosci. 2005, 25: 3881-3888. [Článok bez PMC] [PubMed]
134. Levita L, Dalley JW, Robbins TW. Nucleus accumbens dopamín a prehodnotený strach: prehľad a niektoré nové zistenia. Behaviorálny výskum mozgu. 2002, 137: 115-127. [PubMed]
135. Lin SC, Nicolelis MA. Neuronálny súbor prasknutia v bazálnom prednom mozgu Zakrýva Salience Nehľadiac na Valence. Neurón. 2008, 59: 138-149. [Článok bez PMC] [PubMed]
136. Lisman JE, Grace AA. Hippocampal-VTA loop: riadenie vstupu informácií do dlhodobej pamäte. Neurón. 2005, 46: 703-713. [PubMed]
137. Litt A, Plassmann H, Shiv B, Rangel A. Oddelenie oceňovania a signálov saliencie počas rozhodovania. Cereb Cortex. 2010 v tlači. [PubMed]
138. Liu Z, Richmond BJ, Murray EA, Saunders RC, Steenrod S, Stubblefield BK, Montague DM, Ginns EI. Zacielenie DNA rinálneho kortexu D2 receptorový proteín reverzibilne blokuje učenie podnetov, ktoré predpovedajú odmenu. Zborník Národnej akadémie vied Spojených štátov amerických. 2004, 101: 12336-12341. [Článok bez PMC] [PubMed]
139. Liu ZH, Shin R, Ikemoto S. Duálna úloha mediálnych dopamínových neurónov A10 v afektívnom kódovaní. Neuropsychofarmakologie. 2008, 33: 3010-3020. [Článok bez PMC] [PubMed]
140. Ljungberg T, Apicella P, Schultz W. Reakcie opičích dopamínových neurónov počas štúdia behaviorálnych reakcií. J Neurophysiol. 1992, 67: 145-163. [PubMed]
141. Lobo MK, Covington HE, 3rd, Chaudhury D, Friedman AK, Sun H, Damez-Werno D, Dietz DM, Zaman S, Koo JW, Kennedy PJ a kol. Strata BDNF špecifickej pre bunkový typ napodobňuje optogenetickú kontrolu odmeňovania kokaínu. Science. 2010, 330: 385-390. [Článok bez PMC] [PubMed]
142. Maeda H, Mogenson GJ. Účinky periférnej stimulácie na aktivitu neurónov vo ventrálnej tegmentálnej oblasti, substantia nigra a retikulárna tvorba stredného mozgu potkanov. Bulletin výskumu mozgu. 1982, 8: 7-14. [PubMed]
143. Mantz J, Thierry AM, Glowinski J. Vplyv škodlivého chvostového štipnutia na rýchlosť výtoku mezokortikálnych a mezolimbických dopamínových neurónov: selektívna aktivácia mezokortikálneho systému. Brain Res. 1989, 476: 377-381. [PubMed]
144. Margolis EB, Lock H, Hjelmstad GO, Fields HL. Prehodnotená ventrálna tegmentálna oblasť: je elektrofyziologický marker dopaminergných neurónov? Denník fyziológie. 2006, 577: 907-924. [Článok bez PMC] [PubMed]
145. Margolis EB, Mitchell JM, Ishikawa J, Hjelmstad GO, Fields HL. Dopamínové neuróny stredného mozgu: projekčný cieľ určuje trvanie akčného potenciálu a inhibíciu receptora dopamínu D (2). J Neurosci. 2008, 28: 8908-8913. [PubMed]
146. Mark GP, Blander DS, Hoebel BG. Podmienený stimul znižuje extracelulárny dopamín v nucleus accumbens po vývoji naučnej chuťovej averzie. Brain Res. 1991, 551: 308-310. [PubMed]
147. Marowsky A, Yanagawa Y, Obata K, Vogt KE. Špecializovaná podtrieda interneurónov sprostredkováva dopaminergné uľahčenie funkcie amygdaly. Neurón. 2005, 48: 1025-1037. [PubMed]
148. Matsumoto M, Hikosaka O. Laterálny habenula ako zdroj negatívnych signálov odmien v neurónoch dopamínu. Nature. 2007, 447: 1111-1115. [PubMed]
149. Matsumoto M, Hikosaka O. Znázornenie negatívnej motivačnej hodnoty v laterálnom habenule primáta. Nat Neurosci. 2009; 12: 77-84. [Článok bez PMC] [PubMed]
150. Matsumoto M, Hikosaka O. Dva typy dopamínového neurónu zreteľne prenášajú pozitívne a negatívne motivačné signály. Nature. 2009b; 459: 837-841. [Článok bez PMC] [PubMed]
151. Matsumoto M, Matsumoto K, Abe H, Tanaka K. Mediálne prefrontálne chyby signalizácie predaktívnej bunkovej aktivity akčných hodnôt. Nat Neurosci. 2007, 10: 647-656. [PubMed]
152. May PJ, McHaffie JG, Stanford TR, Jiang H, Costello MG, Coizet V., Hayes LM, Haber SN, Redgrave P. Tectonigral projekcie v primáte: cesta pre predpozorný senzorický vstup do dopaminergných neurónov stredného mozgu. Európsky časopis neurovedy. 2009, 29: 575-587. [Článok bez PMC] [PubMed]
153. Mazzoni P, Hristova A, Krakauer JW. Prečo sa nepohybujeme rýchlejšie? Parkinsonova choroba, energický pohyb a implicitná motivácia. J Neurosci. 2007; 27: 7105–7116. [PubMed]
154. Merali Z, Michaud D, McIntosh J, Kent P, Anisman H. Diferenciálne zapojenie amygdaloidného systému (systémov) CRH do význačnosti a valencie stimulov. Pokrok v neuropsychofarmakológii a biologickej psychiatrii. 2003; 27: 1201–1212. [PubMed]
155. Mirenowicz J, Schultz W. Prednostná aktivácia dopamínových neurónov stredného mozgu skôr apetitívnymi ako averzívnymi stimulmi. Nature. 1996, 379: 449-451. [PubMed]
156. Molina-Luna K, Pekanovic A, Rohrich S, Hertler B, Schubring-Giese M, Rioult-Pedotti MS, Luft AR. Dopamín v motorickej kôre je nevyhnutný pre učenie zručností a synaptickú plasticitu. PLoS ONE. 2009, 4: e7082. [Článok bez PMC] [PubMed]
157. Montague PR, Berns GS. Neurónová ekonomika a biologické substráty oceňovania. Neurón. 2002, 36: 265-284. [PubMed]
158. Montague PR, Dayan P, Sejnowski TJ. Rámec pre mesencefalické dopamínové systémy založený na prediktívnom hebbovskom učení. J Neurosci. 1996, 16: 1936-1947. [PubMed]
159. Morris G, Arkadir D, Nevet A, Vaadia E, Bergman H. Súčasné, ale zreteľné správy o dopamíne a striatálnom tonicky aktívnom neuróne stredného mozgu. Neurón. 2004, 43: 133-143. [PubMed]
160. Morris G, Nevet A, Arkadir D, Vaadia E, Bergman H. Stredné mozgy dopamínových neurónov kódujú rozhodnutia pre budúcu činnosť. Nat Neurosci. 2006, 9: 1057-1063. [PubMed]
161. CD Morrison SE, Salzman. Konvergencia informácií o odmeňovaní a averzívnych stimuloch v jednotlivých neurónoch. J Neurosci. 2009, 29: 11471-11483. [Článok bez PMC] [PubMed]
162. Nakahara H, Itoh H, Kawagoe R, Takikawa Y, Hikosaka O. Dopamínové neuróny môžu predstavovať kontextovo závislú predikčnú chybu. Neurón. 2004, 41: 269-280. [PubMed]
163. Nakamura K, Hikosaka O. Úloha dopamínu v jadre primátov v kaudáte v odmeňovaní modulácie sakád. J Neurosci. 2006, 26: 5360-5369. [PubMed]
164. Neve KA, Seamans JK, Trantham-Davidson H. Signalizácia receptora dopamínu. Časopis výskumu receptorov a signálnych transdukcií. 2004, 24: 165-205. [PubMed]
165. Nishijo H, Ono T, Nishino H. Jednorazové reakcie neurónov v amygdale výstražnej opice počas komplexnej senzorickej stimulácie s afektívnym významom. J Neurosci. 1988, 8: 3570-3583. [PubMed]
166. Niv Y, Daw ND, Joel D, dayan P. Tonic dopamín: náklady príležitostí a kontrola intenzity reakcie. Psychopharmacology. 2007, 191: 507-520. [PubMed]
167. Nomoto K, Schultz W, Watanabe T, Sakagami M. Dočasne rozšírené dopamínové reakcie na percepčne náročné prediktívne stimuly. J Neurosci. 2010, 30: 10692-10702. [Článok bez PMC] [PubMed]
168. Okada K, Toyama K, Inoue Y, Isa T, Kobayashi Y. Rôzne pedunculopontínové tegmentálne neuróny signalizujú predpovedané a skutočné úlohy. J Neurosci. 2009, 29: 4858-4870. [PubMed]
169. Omelchenko N, Bell R, Sesack SR. Bočné habenula projekcie dopamínu a GABA neurónov v potkanej ventrálnej tegmentálnej oblasti. Európsky časopis neurovedy. 2009, 30: 1239-1250. [Článok bez PMC] [PubMed]
170. Owesson-White CA, Ariansen J, Stuber GD, Cleaveland NA, Cheer JF, Wightman RM, Carelli RM. Neurálne kódovanie správania, ktoré hľadá kokaín, je zhodné s fázovým uvoľňovaním dopamínu v jadre a shelde accumbens. Európsky časopis neurovedy. 2009, 30: 1117-1127. [Článok bez PMC] [PubMed]
171. Oyama K, Hernadi I, Iijima T, Tsutsui K. Odchýlka predikčná chyba kódovania v dorzálnych striatálnych neurónoch. J Neurosci. 2010, 30: 11447-11457. [PubMed]
172. Packard MG, biela NM. Disociácia hipokampu a pamäťových systémov s kaudátovým jadrom posttrainingovou intracerebrálnou injekciou agonistov dopamínu. Behaviorálna neuroveda. 1991, 105: 295-306. [PubMed]
173. Padoa-Schioppa C. Orbitofrontálna kôra a výpočet ekonomickej hodnoty. Annals of New York Academy of Sciences. 2007, 1121: 232-253. [PubMed]
174. Palmiter RD. Dopamínová signalizácia v dorzálnom striate je nevyhnutná pre motivované správanie: lekcie od myší s nedostatkom dopamínu. Annals of New York Academy of Sciences. 2008, 1129: 35-46. [Článok bez PMC] [PubMed]
175. Pan WX, Hyland BI. Pedunculopontínové tegmentálne jadro kontroluje podmienené reakcie dopamínových neurónov stredného mozgu pri chovaní potkanov. J Neurosci. 2005, 25: 4725-4732. [PubMed]
176. Pan WX, Schmidt R, Wickens JR, Hyland BI. Trojstranný mechanizmus extinkcie navrhnutý aktivitou dopamínových neurónov a časovým rozdielom. J Neurosci. 2008, 28: 9619-9631. [PubMed]
177. Parker JG, Zweifel LS, Clark JJ, Evans SB, Phillips PE, Palmiter RD. Absencia NMDA receptorov v dopamínových neurónoch zoslabuje uvoľňovanie dopamínu, ale nie podmienený prístup počas Pavlovianovej úpravy. Zborník Národnej akadémie vied Spojených štátov amerických. 2010 [Článok bez PMC] [PubMed]
178. Pascoe JP, Kapp BS. Elektrofyziologické charakteristiky neurónov amygdaloidných centrálnych jadier počas Pavlovovho strachu v králikovi. Behaviorálny výskum mozgu. 1985, 16: 117-133. [PubMed]
179. Pascucci T, Ventura R, Latagliata EC, Cabib S, Puglisi-Allegra S. Mediálny prefrontálny kortex determinuje akumulovanú dopamínovú odpoveď na stres prostredníctvom protichodných vplyvov norepinefrínu a dopamínu. Cereb Cortex. 2007, 17: 2796-2804. [PubMed]
180. Pearce JM, Hall G. Model Pavlovovského učenia: variácie v účinnosti podmienených, ale nie nepodmienených podnetov. 1980, 87: 532 – 552. [PubMed]
181. Pezze MA, Feldon J. Mesolimbické dopamínergické dráhy v kondicionovaní strachu. Pokrok v neurobiológii. 2004, 74: 301-320. [PubMed]
182. Phillips AG, Ahn S, Howland JG. Amygdalarová kontrola mezokortikolimbického dopamínového systému: paralelné cesty k motivovanému správaniu. Neurovedy a biologické správanie. 2003; 27: 543-554. [PubMed]
183. Phillips GD, Salussolia E, Hitchcott PK. Úloha mesoamygdaloidnej dopamínovej projekcie v emocionálnom učení. Psychopharmacology. 2010 [PubMed]
184. Phillips PE, Stuber GD, Heien ML, Wightman RM, Carelli RM. Subsekundové uvoľňovanie dopamínu podporuje hľadanie kokaínu. Nature. 2003b; 422: 614-618. [PubMed]
185. Porrino LJ, Goldman-Rakic ​​PS. Inervácia mozgového kmeňa prefrontálneho a predného cingulárneho kortexu v opici rhesus odhalená retrográdnym transportom HRP. Časopis komparatívnej neurológie. 1982, 205: 63-76. [PubMed]
186. Puryear CB, Kim MJ, Mizumori SJ. Konjunktívne kódovanie pohybu a odmeny neurónmi ventrálnej tegmentálnej oblasti vo voľne sa pohybujúcom hlodavcovi. Behaviorálna neuroveda. 2010, 124: 234-247. [Článok bez PMC] [PubMed]
187. Ravel S, Legallet E, Apicella P. Tonicky aktívne neuróny v opici striatum nereagujú prednostne na chuťové podnety. Experimentálny výskum mozgu. Experimentelle Hirnforschung. 1999, 128: 531-534. [PubMed]
188. Ravel S, Legallet E, Apicella P. Reakcie tonicky aktívnych neurónov v striatum opice rozlišujú medzi motivačne opačnými stimulmi. J Neurosci. 2003, 23: 8489-8497. [PubMed]
189. Ravel S, Richmond BJ. Dopamínové neuronálne reakcie u opíc, ktoré uskutočňovali vizuálne merané režimy odmeňovania. Európsky časopis neurovedy. 2006, 24: 277-290. [PubMed]
190. Redgrave P, Gurney K. Krátkodobý dopamínový signál: úloha pri objavovaní nových akcií? Nat Rev Neurosci. 2006, 7: 967-975. [PubMed]
191. Redgrave P, Prescott TJ, Gurney K. Je krátkodobá dopamínová odpoveď príliš krátka na to, aby signalizovala chybu? Trendy v oblasti neurovied. 1999, 12: 146-151. [PubMed]
192. Rescorla RA, Wagner AR. Teória Pavlovovského kondicionovania: variácie účinnosti zosilnenia a nevynucovania. In: Black AH, Prokasy WF, redaktori. Klasická kondícia II: Súčasný výskum a teória. New York, New York: Appleton Century Crofts; 1972. s. 64 – 99.
193. Reynolds JNJ, Hyland BI, Wickens JR. Bunkový mechanizmus učenia súvisiaceho s odmenou. Nature. 2001, 413: 67-70. [PubMed]
194. Reynolds SM, Berridge KC. Pozitívna a negatívna motivácia v jadre nucleus accumbens: bivalentné rostrokaudálne gradienty pre stravovanie vyvolané GABA, chuťové „lajky“ / „nelásky“ reakcií, preferencia / vyhýbanie sa miestu a strach. J Neurosci. 2002; 22: 7308–7320. [PubMed]
195. Richardson RT, DeLong MR. Elektrofyziologické štúdie funkcie jadra basalis u primátov. Pokroky v experimentálnej medicíne a biológii. 1991, 295: 233-252. [PubMed]
196. Robbins TW, Arnsten AF. Neuropsychofarmakológia fronto-executive funkcie: monoaminergná modulácia. Ročný prehľad neurovedy. 2009, 32: 267-287. [Článok bez PMC] [PubMed]
197. Robinson DL, Hermans A, Seipel AT, Wightman RM. Monitorovanie rýchlej chemickej komunikácie v mozgu. Chemické prehľady. 2008, 108: 2554-2584. [Článok bez PMC] [PubMed]
198. Roesch MR, Calu DJ, Schoenbaum G. Dopamínové neuróny kódujú lepšiu možnosť u potkanov, ktorí rozhodujú medzi rozdielne oneskorenými alebo veľkými odmenami. Nat Neurosci. 2007, 10: 1615-1624. [Článok bez PMC] [PubMed]
199. Roesch MR, Olson CR. Neuronálna aktivita súvisí s odmenou a motiváciou v frontálnom kortexe primátov. Science. 2004, 304: 307-310. [PubMed]
200. Roitman MF, Wheeler RA, Wightman RM, Carelli RM. Chemické reakcie v reálnom čase v nucleus accumbens rozlišujú odmeňovanie a averzívne podnety. Nat Neurosci. 2008, 11: 1376-1377. [Článok bez PMC] [PubMed]
201. Rutledge RB, Lazzaro SC, Lau B, Myers CE, Gluck MA, Glimcher PW. Dopaminergné lieky modulujú rýchlosť učenia a vytrvalosť u Parkinsonových pacientov pri dynamickom hľadaní potravy. J Neurosci. 2009; 29: 15104–15114. [Článok bez PMC] [PubMed]
202. Salamone JD. Zapojenie nucleus accumbens dopamínu v chutnej a averzívnej motivácii. Behaviorálny výskum mozgu. 1994, 61: 117-133. [PubMed]
203. Salamone JD, Correa M, Farrar A, Mingote SM. Funkcie nukleusu accumbens súvisiace s intenzitou dopamínu as tým spojenými obvodmi predného mozgu. Psychofarmakológia (Berl) 2007, 191: 461 – 482. [PubMed]
204. Satoh T, Nakai S, Sato T, Kimura M. Súvisiace kódovanie motivácie a výsledku rozhodnutia dopamínovými neurónmi. J Neurosci. 2003, 23: 9913-9923. [PubMed]
205. Savine AC, Beck SM, Edwards BG, Chiew KS, Braver TS. Posilnenie kognitívnej kontroly prístupom a vyhýbaním sa motivačným stavom. Poznanie a emócie. 2010; 24: 338–356. [Článok bez PMC] [PubMed]
206. Schoenbaum G, Roesch MR, Stalnaker TA, Takahashi YK. Nový pohľad na úlohu orbitofrontálneho kortexu v adaptívnom správaní. Nat Rev Neurosci. 2009, 10: 885-892. [Článok bez PMC] [PubMed]
207. Schultz W. Reakcie dopamínových neurónov stredného mozgu na stimuly spúšťania správania v opici. J. Neurophysiol. 1986, 56: 1439-1461. [PubMed]
208. Schultz W. Prediktívny signál odmien dopamínových neurónov. J. Neurophysiol. 1998, 80: 1-27. [PubMed]
209. Schultz W. Viacnásobné dopamínové funkcie v rôznych časových úsekoch. Ročný prehľad neurovedy. 2007, 30: 259-288. [PubMed]
210. Schultz W. Dopamín signalizuje hodnotu odmeny a riziko: základné a nedávne údaje. Behav Brain Funct. 2010, 6: 24. [Článok bez PMC] [PubMed]
211. Schultz W, Dayan P, Montague PR. Nervový substrát predikcie a odmeny. Science. 1997, 275: 1593-1599. [PubMed]
212. Schultz W, Romo R. Reakcie nigrostriatálnych dopamínových neurónov na somatosenzorickú stimuláciu s vysokou intenzitou v anestetizovaných opiciach. J. Neurophysiol. 1987, 57: 201-217. [PubMed]
213. Schultz W, Romo R. Dopamínové neuróny stredného mozgu opíc: nepredvídané reakcie na stimuly vyvolávajúce okamžité reakcie správania. J. Neurophysiol. 1990, 63: 607-624. [PubMed]
214. Seo H, Lee D. Časové filtrovanie signálov odmien v chrbtovej prednej cingulárnej kôre počas hry so zmiešanou stratégiou. J Neurosci. 2007, 27: 8366-8377. [Článok bez PMC] [PubMed]
215. Shabel SJ, Janak PH. Podstatná podobnosť v neuronálnej aktivite amygdaly počas podmieneného apetitívneho a averzívneho emocionálneho vzrušenia. Zborník Národnej akadémie vied Spojených štátov amerických. 2009, 106: 15031-15036. [Článok bez PMC] [PubMed]
216. Shadmehr R, Smith MA, Krakauer JW. Korekcia chýb, senzorická predikcia a adaptácia v riadení motora. Ročný prehľad neurovedy. 2010 [PubMed]
217. Shen W, Flajolet M, Greengard P, Surmeier DJ. Dichotomická dopaminergná kontrola striatálnej synaptickej plasticity. Science. 2008, 321: 848-851. [Článok bez PMC] [PubMed]
218. Shimo Y, Wichmann T. Neuronálna aktivita v subtalamickom jadre moduluje uvoľňovanie dopamínu v opičom striatum. Európsky časopis neurovedy. 2009, 29: 104-113. [Článok bez PMC] [PubMed]
219. Shippenberg TS, Bals-Kubik R, Huber A, Herz A. Neuroanatomické substráty sprostredkujúce averzívne účinky antagonistov dopamínových receptorov D-1. Psychofarmakológia (Berl) 1991, 103: 209 – 214. [PubMed]
220. Shumake J, Ilango A, Scheich H, Wetzel W, Ohl FW. Diferenciálna neuromodulácia získavania a získavania vyhýbavého učenia laterálnou habenulou a ventrálnou tegmentálnou oblasťou. J Neurosci. 2010, 30: 5876-5883. [PubMed]
221. Malé DM, Gregory MD, Mak YE, Gitelman D, Mesulam MM, Parrish T. Disociácia neurálnej reprezentácie intenzity a afektívneho hodnotenia v ľudskej nálade. Neurón. 2003, 39: 701-711. [PubMed]
222. Stefani MR, Moghaddam B. Pravidlá učenia a odmeňovania sú spojené s disociovateľnými vzormi aktivácie dopamínu v prefrontálnom kortexe potkanov, nucleus accumbens a dorzálnom striate. J Neurosci. 2006, 26: 8810-8818. [Článok bez PMC] [PubMed]
223. Steinfels GF, Heym J, Strecker RE, Jacobs BL. Odozva dopaminergných neurónov u mačiek na sluchové podnety prezentovaná počas cyklu spánku a bdenia. Brain Res. 1983, 277: 150-154. [PubMed]
224. Strecker RE, Jacobs BL. Aktivita dopaminergnej jednotky substantia nigra pri chovaní mačiek: účinok vzrušenia na spontánny výtok a zmyslovo vyvolaná aktivita. Brain Res. 1985, 361: 339-350. [PubMed]
225. Stuber GD, Hnasko TS, Britt JP, Edwards RH, Bonci A. Dopaminergné terminály v nucleus accumbens, ale nie glutamát dorzálneho striatum corelease. Journal of Neuroscience. 2010, 30: 8229-8233. [Článok bez PMC] [PubMed]
226. Stuber GD, Wightman RM, Carelli RM. Zánik kokaínového vlastného podávania odhalí funkčne a časovo odlišné dopaminergné signály v nucleus accumbens. Neurón. 2005, 46: 661-669. [PubMed]
227. Sul JH, Kim H, Huh N, Lee D, Jung MW. Odlišné úlohy orbitofrontálneho a mediálneho prefrontálneho kortexu hlodavcov pri rozhodovaní. Neurón. 2010, 66: 449-460. [Článok bez PMC] [PubMed]
228. Surmeier DJ, Ding J, deň M, Wang Z, Shen W. D1 a D2 modulácia dopamínového receptora striatálneho glutamátergického signalizovania v striatálnych stredných ostnatých neurónoch. Trendy v oblasti neurovied. 2007, 30: 228-235. [PubMed]
229. Surmeier DJ, Shen W, Day M, Gertler T, Chan S, Tian X, Plotkin JL. Úloha dopamínu pri modulácii štruktúry a funkcie striatálnych obvodov. Pokrok vo výskume mozgu. 2010; 183C: 148-167. [PubMed]
230. Sutton RS, Barto AG. K modernej teórii adaptívnych sietí: očakávania a predikcie. 1981, 88: 135 – 170. [PubMed]
231. Takahashi YK, Roesch MR, Stalnaker TA, Haney RZ, Calu DJ, Taylor AR, Burke KA, Schoenbaum G. Orbitofrontálna kôra a ventrálna tegmentálna oblasť sú nevyhnutné pre učenie sa z neočakávaných výsledkov. Neurón. 2009, 62: 269-280. [Článok bez PMC] [PubMed]
232. Takikawa Y, Kawagoe R, Hikosaka O. Možná úloha dopamínových neurónov stredného mozgu pri krátkodobej a dlhodobej adaptácii sakád na mapovanie pozícií. J. Neurophysiol. 2004, 92: 2520-2529. [PubMed]
233. Tecuapetla F, Patel JC, Xenias H, angličtina D, Tadros I, Shah F, Berlin J, Deisseroth K, Rice ME, Tepper JM, Koos T. Glutamátergická signalizácia mezolimbickými dopamínovými neurónmi v nucleus accumbens. J Neurosci. 2010, 30: 7105-7110. [Článok bez PMC] [PubMed]
234. Thierry AM, Tassin JP, Blanc G, Glowinski J. Selektívna aktivácia mezokortikálneho DA systému stresom. Nature. 1976, 263: 242-244. [PubMed]
235. Tobler PN, Dickinson A, Schultz W. Kódovanie predpokladaného odmeňovania odmien dopamínovými neurónmi v upravenom paradigme inhibície. J Neurosci. 2003, 23: 10402-10410. [PubMed]
236. Tobler PN, Fiorillo CD, Schultz W. Adaptívne kódovanie hodnoty odmeny dopamínovými neurónmi. Science. 2005, 307: 1642-1645. [PubMed]
237. Tsai HC, Zhang F, Adamantidis A, Stuber GD, Bonci A, de Lecea L, Deisseroth K. Fázové pálenie v dopaminergných neurónoch je postačujúce pre behaviorálne kondicionovanie. Science. 2009 [PubMed]
238. Ullsperger M. Genetické asociačné štúdie monitorovania výkonnosti a učenia sa zo spätnej väzby: úloha dopamínu a serotonínu. Neurovedy a biologické správanie. 2010, 34: 649-659. [PubMed]
239. Bezmocný MA. Dopamín: hlavná otázka. Trendy v oblasti neurovied. 2004, 27: 702-706. [PubMed]
240. Uylings HB, Groenewegen HJ, Kolb B. Majú krysy prefrontálny kortex? Behaviorálny výskum mozgu. 2003, 146: 3-17. [PubMed]
241. Ventura R, Cabib S, Puglisi-Allegra S. Opačná genotypovo závislá mezokortikolimická dopamínová odpoveď na stres. Neuroscience. 2001, 104: 627-631. [PubMed]
242. Ventura R, Latagliata EC, Morrone C, La Mela I, Puglisi-Allegra S. Prefrontálny noradrenalín určuje atribút „vysokého“ motivačného výhľadu. MÁ JEDEN. 2008; 3: e3044. [Článok bez PMC] [PubMed]
243. Ventura R, Morrone C, Puglisi-Allegra S. Prefrontálny / akumulačný katecholamínový systém určuje motivačné priradenie k stimulom, ktoré súvisia s odmenou, ako aj s averziou. Zborník Národnej akadémie vied Spojených štátov amerických. 2007, 104: 5181-5186. [Článok bez PMC] [PubMed]
244. Vogt BA. Interakcie bolesti a emócií v subregiónoch cingulárneho gyrusu. Nat Rev Neurosci. 2005, 6: 533-544. [Článok bez PMC] [PubMed]
245. Voon V, Pessiglione M, Brezing C, Gallea C, Fernandez HH, Dolan RJ, Hallett M. Mechanizmy, ktoré sú základom dopamínom sprostredkovanej odmeny pri kompulzívnom správaní. Neurón. 2010, 65: 135-142. [Článok bez PMC] [PubMed]
246. Waelti P, Dickinson A, Schultz W. Reakcie dopamínu sú v súlade so základnými predpokladmi formálnej teórie učenia. Nature. 2001, 412: 43-48. [PubMed]
247. Wallis JD, Kennerley SW. Heterogénne signály odmeňovania v prefrontálnom kortexe. Súčasný názor na neurobiológiu. 2010, 20: 191-198. [Článok bez PMC] [PubMed]
248. Walton ME, Behrens TE, Buckley MJ, Rudebeck PH, Rushworth MF. Oddeliteľné vzdelávacie systémy v mozgu makakov a úloha orbitofrontálnej kôry v kontingentnom učení. Neurón. 2010, 65: 927-939. [Článok bez PMC] [PubMed]
249. Wheeler RA, Twining RC, Jones JL, Slater JM, Grigson PS, Carelli RM. Behaviorálne a elektrofyziologické indexy negatívneho vplyvu predpovedajú autokomunikáciu kokaínu. Neurón. 2008, 57: 774-785. [PubMed]
250. Wightman RM, Heien MLAV, Wassum KM, Sombers LA, Aragona BJ, Khan AS, Ariansen JL, Cheer JF, Phillips PE, Carelli RM. Uvoľňovanie dopamínu je heterogénne v mikroprostredí jadra nucleus accumbens potkana. Európsky časopis neurovedy. 2007, 26: 2046-2054. [PubMed]
251. Williams GV, Castner SA. Pod krivkou: kritické otázky na objasnenie funkcie D1 receptora v pracovnej pamäti. Neuroscience. 2006, 139: 263-276. [PubMed]
252. Williams SM, Goldman-Rakic ​​PS. Rozšírený pôvod systému mezofrontálneho dopamínu primátov. Cereb Cortex. 1998, 8: 321-345. [PubMed]
253. Winn P. Ako najlepšie zvážiť štruktúru a funkciu pedunculopontínového tegmentálneho jadra: dôkazy zo štúdií na zvieratách. Journal of Neurological Sciences. 2006, 248: 234-250. [PubMed]
254. Wise RA. Dopamín, učenie a motivácia. Nat Rev Neurosci. 2004, 5: 483-494. [PubMed]
255. Wise RA. Predné podnety odmeny a motivácie. Časopis komparatívnej neurológie. 2005, 493: 115-121. [Článok bez PMC] [PubMed]
256. Wise SP. Predné frontálne polia: fylogenéza a základná funkcia. Trendy v oblasti neurovied. 2008, 31: 599-608. [Článok bez PMC] [PubMed]
257. Yamada H, Matsumoto N, Kimura M. Tonicky aktívne neuróny v jadre primáta caudate a putamen odlišne kódujú inštruované motivačné výsledky pôsobenia. J Neurosci. 2004, 24: 3500-3510. [PubMed]
258. Yamada H, Matsumoto N, Kimura M. História - a aktuálne inštruktážne kódovanie nadchádzajúcich výsledkov správania v striate. J. Neurophysiol. 2007, 98: 3557-3567. [PubMed]
259. Yin HH, Knowlton BJ. Úloha bazálnych ganglií pri tvorbe zvykov. Nat Rev Neurosci. 2006, 7: 464-476. [PubMed]
260. Young AM, Moran PM, Joseph MH. Úloha dopamínu pri kondicionovaní a latentnej inhibícii: čo, kedy, kde a ako? Neurovedy a biologické správanie. 2005, 29: 963-976. [PubMed]
261. Zaghloul KA, Blanco JA, Weidemann CT, McGill K, Jaggi JL, Baltuch GH, Kahana MJ. Ľudské substantia nigra neuróny kódujú neočakávané finančné odmeny. Science. 2009, 323: 1496-1499. [Článok bez PMC] [PubMed]
262. Zahniser NR, Sorkin A. Rýchla regulácia transportéra dopamínu: úloha pri závislosti od stimulancií? Neuropharmacology. 2004; 47 Suppl 1: 80 – 91. [PubMed]
263. Zhang L, Doyon WM, Clark JJ, Phillips PE, Dani JA. Kontrola tonického a fázového prenosu dopamínu v dorzálnom a ventrálnom striate. Molekulárna farmakológia. 2009, 76: 396-404. [Článok bez PMC] [PubMed]
264. Zink CF, Pagnoni G, Martin ME, Dhamala M, Berns GS. Ľudská striatálna odozva na výrazné nepodstatné stimuly. Journal of Neuroscience. 2003, 23: 8092-8097. [PubMed]
265. Zweifel LS, Argilli E, Bonci A, Palmiter RD. Úloha NMDA receptorov v neurónoch dopamínu pre plasticitu a návykové správanie. Neurón. 2008, 59: 486-496. [Článok bez PMC] [PubMed]
266. Zweifel LS, Parker JG, Lobb CJ, Rainwater A, Wall VZ, Fadok JP, Darvas M, Kim MJ, Mizumori SJ, Paladini CA, et al. Narušenie NMDAR-dependentného vypaľovania pomocou dopamínových neurónov poskytuje selektívne hodnotenie fázového správania závislého od dopamínu. Zborník Národnej akadémie vied Spojených štátov amerických. 2009, 106: 7281-7288. [Článok bez PMC] [PubMed]