Dopamino en motiviga kontrolo: rekompencanta, aversiva kaj atentanta (2010)

Vidu aliajn artikolojn en PMC tio citas La artikolo eldonita.

Midbrain-dopaminaj neŭronoj estas bone konataj pro siaj fortaj respondoj al rekompencoj kaj sia kritika rolo en pozitiva instigo. Iĝis ĉiam pli klare, ke dopaminaj neŭronoj ankaŭ elsendas signalojn rilatajn al elstaraj sed ne rekompencaj spertoj kiel aversaj kaj atentigaj eventoj. Ĉi tie ni revizias lastatempajn progresojn pri komprenado de la rekompenco kaj ne-rekompencaj funkcioj de dopamino. Surbaze de ĉi tiuj datumoj, ni proponas, ke dopaminaj neŭronoj venu en multoblaj specoj, kiuj estas konektitaj kun apartaj cerbaj retoj kaj havas apartajn rolojn en instiga kontrolo. Iuj dopaminaj neŭronoj kodas motivan valoron, subtenante cerbajn retojn por serĉado, taksado, kaj valora lernado. Aliaj kodas motivan salecon, subtenante cerbajn retojn por orientiĝo, kogno kaj ĝenerala instigo. Ambaŭ specoj de dopaminaj neŭronoj estas pliigitaj per atentiga signalo implikita en rapida detekto de potenciale gravaj sentemaj spuroj. Ni hipotezas, ke ĉi tiuj dopaminergiaj vojoj por valoro, saleco kaj atentigo kunlaboras por subteni adaptan konduton.

Dopamino en instigo de rekompencaj agoj

Oni sciis, ke dopamina estas grava por plifortigo kaj instigo de agoj. Drogoj, kiuj enmiksiĝas en DA-transdono, interbatalas kun plifortiga lernado, dum manipuladoj plibonigantaj DA-transdonon, kiel cerba stimulado kaj toksomaniuloj, ofte funkcias kiel plifortigiloj (Saĝa, 2004). DA transdono estas kerna por krei staton de instigo por serĉi rekompencojn (Berridge kaj Robinson, 1998; Salamone et al., 2007) kaj por establi memorojn pri asociaj rekompencoj (Dalley et al., 2005). La liberigo de DA ne estas necesa por ĉiuj formoj de rekompenco-lernado kaj eble ne ĉiam "plaĉas" en la senco de kaŭzi plezuron, sed ĝi estas kritika por kaŭzi celojn fariĝi "dezirataj" en la senco motivigi agojn por atingi ilin (Berridge kaj Robinson, 1998; Palmiter, .uste).

Unu hipotezo pri kiel dopamino subtenas plifortigan lernadon estas, ke ĝi ĝustigas la forton de sinaptaj rilatoj inter neŭronoj. La plej rekta versio de ĉi tiu hipotezo estas, ke dopamino regas sinaptikan plastikecon laŭ modifita Hebba regulo, kiu povas esti dirita proksimume kiel "neŭronoj, kiuj kunfluas, kunfluas, tiel se ili eksplodas dopaminon". Alivorte, se ĉelo A aktivigas ĉelon B, kaj ĉelo B kaŭzas kondutan agon, kiu rezultigas rekompencon, tiam dopamino liberiĝus kaj la rilato A → B plifortigus (Montague et al., 1996; Schultz, 1998). Ĉi tiu mekanismo permesus al organismo lerni la optimuman elekton de agoj por akiri rekompencojn, donita sufiĉan provon kaj eraran sperton. Konsentite kun ĉi tiu hipotezo, dopamino havas potencan influon sur sinaptika plastikeco en multaj cerbaj regionoj (Surmeier et al., 2010; Goto et al., 2010; Molina-Luna et al., 2009; Marowsky et al., 2005; Lisman kaj Grace, 2005). En iuj kazoj dopamino ebligas sinaptikan plastikecon laŭ la linioj de la reguloj de Hebbian priskribitaj supre, en maniero kunrilata al konduto serĉanta rekompencon (Reynolds et al., 2001). Aldone al ĝiaj efikoj al longdaŭra sinaptika plastikeco, dopamino ankaŭ povas praktiki tujan kontrolon pri neŭralaj cirkvitoj per modulado de neŭra spikada agado kaj sinaptaj rilatoj inter neŭronoj (Surmeier et al., 2007; Robbins kaj Arnsten, 2009), en iuj kazoj farante tion en maniero kiu antaŭenigus tujan agadon por rekompenco (Frank, 2005).

Signaloj de rekompenco de neŭromo Dopamine

Por motivi agojn, kiuj kondukas al rekompenco, dopamino devas esti liberigita dum rekompencaj spertoj. Efektive, plej multaj DA-neŭronoj estas forte aktivigitaj per neatenditaj primaraj rekompencoj kiel manĝo kaj akvo, ofte produktante fazajn 'eksplodojn' de aktiveco (Schultz, 1998) (fazaj ekscitoj inkluzive de multnombraj pikiloj (Grace and Bunney, 1983)). Tamen, la pioniraj studoj de Wolfram Schultz montris, ke ĉi tiuj DA-neŭronaj respondoj ne estas deĉenigitaj de rekompenco-konsumo en si mem. Anstataŭe ili similas al "erara prognoza eraro", raportante la diferencon inter la rekompenco ricevita kaj la rekompenco antaŭvidita okazi (Schultz et al., 1997) (Figuro 1A). Tiel, se rekompenco estas pli granda ol antaŭvidita, DA-neŭronoj forte ekscitas (pozitiva prognoza eraro, Figuro 1E, ruĝa); se rekompenco estas pli malgranda ol antaŭvidita aŭ malsukcesas okazi en ĝia difinita tempo, DA neŭronoj estas faze inhibiciitaj (erara prognozo negativa, Figuro 1E, blua); kaj se rekompenco estas anticipe tiel ke ĝia grandeco plene antaŭvideblas, DA neŭronoj havas malmultan aŭ neniun respondon (nula antaŭdira eraro, Figuro 1C, nigra). La sama principo validas por respondoj de DA al sentemaj indikoj, kiuj liveras novajn informojn pri estontaj rekompencoj. DA neŭronoj ekscitas kiam signo indikas kreskon de estonta rekompenca valoro (Figuro 1C, ruĝa), inhibita kiam kvino indikas malpliiĝon de estonta rekompenca valoro (Figuro 1C, blua), kaj ĝenerale havas malmultan respondon al klaboj, kiuj ne donas novajn informojn pri rekompenco (Figuro 1E, nigra). Ĉi tiuj respondoj de DA similas al specifa speco de antaŭdiro de rekompenco nomata erara tempodiferenco aŭ "TD-eraro", kiu estis proponita agi kiel plifortiga signalo por lernado de la valoro de agoj kaj mediaj statoj (Houk et al., 1995; Montague et al., 1996; Schultz et al., 1997). Komputilaj modeloj uzantaj TD-similan plifortigan signalon povas klarigi multajn aspektojn de plifortiga lernado en homoj, bestoj kaj DA neŭronoj mem (Sutton kaj Barto, 1981; Waelti et al., 2001; Montague kaj Berns, 2002; Dayan kaj Niv, 2008).

 

figuro 1

Dopamina kodado de rekomendaj prognozaj eraroj kaj prefero por prognozaj informoj

Impresa gamo da eksperimentoj montris, ke DA-signaloj reprezentas rekompencajn prognozojn laŭ maniero tre proksime al kondutaj preferoj, inkluzive de la prefero por grandaj rekompencoj super malgrandaj (Tobler et al., 2005) probablaj rekompencoj super neprobablaj (Fiorillo et al., 2003; Satoh et al., 2003; Morris et al., 2004) kaj tuja rekompenco super malfruaj (Roesch et al., 2007; Fiorillo et al., 2008; Kobayashi kaj Schultz, 2008). Ekzistas eĉ evidenteco, ke DA-neŭronoj en homoj kodas la rekompencan valoron de mono (Zaghloul et al., 2009). Plue, DA-signaloj aperas dum lernado kun simila tempodaŭro al kondutaj mezuroj de rekompenca antaŭdiro (Hollerman kaj Schultz, 1998; Satoh et al., 2003; Takikawa et al., 2004; Day et al., 2007) kaj estas korelaciitaj kun subjektivaj mezuroj pri rekompenca prefero (Morris et al., 2006). Ĉi tiuj trovoj establis neŭronojn de DA kiel unu el la plej bone komprenitaj kaj plej replikitaj ekzemploj de rekompenca kodado en la cerbo. Kiel rezulto, lastatempaj studoj submetis DA-neŭronojn al intensa skrutinio por malkovri kiel ili generas rekompencajn antaŭdirojn kaj kiel iliaj signaloj agas sur malkaŝaj strukturoj por regi konduton.

Signaloj de rekompenco de neŭromo Dopamine

Lastatempaj progresoj en komprenado de DA-rekompencaj signaloj venas de konsideri tri ampleksajn demandojn: Kiel DA neŭronoj lernas rekompencajn prognozojn? Kiel precizaj estas iliaj prognozoj? Kaj nur kion ili traktas rekompencaj?

Kiel DA neŭronoj lernas rekompencajn prognozojn? Klasikaj teorioj sugestas, ke rekompencaj antaŭdiroj estas lernataj per laŭgrada plifortiga procezo postulanta ripetajn parigitajn stimulojn-rekompencojn (Rescorla kaj Wagner, 1972; Montague et al., 1996). Ĉiufoje kiam stimulo A estas sekvita de neatendita rekompenco, la taksita valoro de A estas pliigita. Lastatempaj datumoj tamen montras, ke DA-neŭronoj preterpasas simplan stimulon-rekompencan lernadon kaj faras antaŭdirojn bazitajn sur sofistikaj kredoj pri la strukturo de la mondo. DA neŭronoj povas antaŭdiri rekompencojn ĝuste eĉ en nekonvenciaj medioj, kie rekompencoj kunigitaj kun stimulo kaŭzas a malgrandiĝi en la valoro de tiu stimulo (Satoh et al., 2003; Nakahara et al., 2004; Bromberg-Martin et al., 2010c) aŭ kaŭzi ŝanĝon en la valoro de tute alia stimulo (Bromberg-Martin et al., 2010b). DA neŭronoj ankaŭ povas adapti siajn rekompencajn signalojn surbaze de pli alt-ordaj statistikoj de la rekompenca distribuo, kiel skalaj prognozaj eraraj signaloj bazitaj sur ilia atendata varieco (Tobler et al., 2005) kaj 'spontanee reakiri' iliajn respondojn al estingitaj rekompencaj rimedoj (Pan et al., 2008). Ĉiuj ĉi tiuj fenomenoj formas konsiderindan paralelon al similaj efikoj viditaj en sensora kaj motora adaptado (Braun et al., 2010; Fairhall et al., 2001; Shadmehr et al., 2010), sugestante ke ili eble reflektas ĝeneralan neŭra mekanismo por prognoza lernado.

Kiel precizaj estas antaŭdiroj de DA-rekompenco? Lastatempaj studoj montris, ke neŭronoj DA fidele alĝustigas siajn rekompencajn signalojn por kalkuli tri fontojn de antaŭdiro necerteco. Unue, homoj kaj bestoj suferas internan timigan bruon, kiu malebligas al ili fari fidindajn prognozojn pri longaj temp-rekompencaj intertempoj (Gallistel kaj Gibbon, 2000). Tiel, se prokrastaj prokrastaj prokrastoj estas mallongaj (1-2-sekundoj) tempaj antaŭdiroj estas precizaj kaj rekompenca liverado eligas malmultan DA-respondon, sed dum pli longaj prokrastaj prokrastaj prognozoj fariĝas malpli fidindaj kaj rekompencas elvokajn klarajn DA-eksplodojn (Kobayashi kaj Schultz, 2008; Fiorillo et al., 2008). Due, multaj monbiletoj en la ĉiutaga vivo estas malprecizaj, specifante larĝan distribuon de rekompencaj liveraj tempoj. DA neŭronoj denove reflektas ĉi tiun formon de tempa necerteco: ili estas iom post iom malhelpitaj dum variaj malfruaj rekompencoj, ĉar kvankam signalado de ĉiam pli negativaj prognozaj eraroj antaŭ ĉiu momento la rekompenco ne aperas (Fiorillo et al., 2008; Bromberg-Martin et al., 2010a; Nomoto kaj aliaj, 2010). Fine, multaj signoj estas percepteme kompleksaj, postulante detalan inspektadon por atingi firman konkludon pri sia rekompenca valoro. En tiaj situacioj, DA-rekompencaj signaloj okazas ĉe longaj latencoj kaj laŭgrada, ŝajnante reflekti la laŭgradan fluon de perceptaj informoj dum la stimula valoro estas dekodigita (Nomoto kaj aliaj, 2010).

Nur kiaj eventoj traktas DA-neŭronoj kiel rekompencaj? Konvenciaj teorioj pri rekompenco-lernado sugestas, ke neŭronoj de DA atribuas valoron bazitan sur la atendata kvanto de estonta primara rekompenco (Montague et al., 1996). Tamen eĉ kiam la indico de primara rekompenco estas konstanta, homoj kaj bestoj ofte esprimas aldonan preferon por antaŭvidebleco - serĉante mediojn kie la grandeco, probablo kaj tempigo de ĉiu rekompenco povas esti konataj anticipe (Daly, 1992; Chew kaj Ho, 1994; Ahlbrecht kaj Weber, 1996). Lastatempa studo en simioj trovis, ke neŭronoj DA signalas ĉi tiun preferon (Bromberg-Martin kaj Hikosaka, 2009). Simioj esprimis fortan preferon vidi informajn vidajn indikojn, kiuj permesus al ili antaŭdiri la grandecon de estonta rekompenco, prefere ol neinformaj indikoj, kiuj ne donis novajn informojn. Paralele, DA neŭronoj estis entuziasmigitaj de la ŝanco vidi la informojn, laŭ maniero kunrilata al la konduta prefero de la besto (Figuro 1B, D). Ĉi tio sugestas, ke neŭronoj de DA ne nur motivas agojn por akiri rekompencojn, sed ankaŭ motivigas agojn fari precizajn prognozojn pri tiuj rekompencoj, por certigi, ke rekompencoj povas esti adekvate antaŭviditaj kaj preparitaj.

Kunigitaj, ĉi tiuj trovoj montras, ke signaloj de antaŭdiro de rekompenco de DA estas sentemaj al kompleksaj faktoroj, kiuj informas pri antaŭdiroj de homaj kaj bestaj rekompencoj, inkluzive de adapto al statistikaj rekompencoj de alta ordo, rekompenco pri rekompenco kaj preferoj por prognozaj informoj.

Efikoj de fazaj dopaminaj rekompencaj signaloj sur malsuprenaj strukturoj

DA-respondaj respondoj okazas en sinkronaj fazaj eksplodoj (Joshua et al., 2009b), responda mastro, kiu formas DA-liberigon en celaj strukturoj (Gonon, 1988; Zhang et al., 2009; Tsai et al., 2009). Jam delonge teoriis, ke ĉi tiuj fazaj eksplodoj influas lernadon kaj motivadon en malsama maniero de tonika DA-agado (Graco, 1991; Grace et al., 2007; Schultz, 2007; Lapish et al., 2007). Lastatempe evoluinta teknologio ebligis konfirmi ĉi tiun hipotezon kontrolante DA-neŭronan agadon kun fajna spaca kaj tempa precizeco. Optogenetika stimulo de VTA DA neŭronoj induktas fortan kondiĉitan lokan preferon, kiu okazas nur kiam stimulo estas aplikata en kreviga mastro (Tsai et al., 2009). Aliflanke, genetika frapado de NMDA-riceviloj de DA-neŭronoj, kiuj malhelpas krevi dum lasado de tona aktiveco plejparte sendifekta, kaŭzas selekteman difekton en specifaj formoj de rekompenco-lernado (Zweifel et al., 2009; Parker et al., 2010) (kvankam rimarku, ke ĉi tiu frapado ankaŭ malhelpas DA-neŭronan sinaptikan plasticecon (Zweifel et al., 2008)). DA eksplodoj eble plibonigos rekompencan lernadon rekonfigurante lokajn neŭrajn cirkvitojn. Rimarkinde, rekompenco-antaŭdiraj DA-eksplodoj estas senditaj al specifaj regionoj de la kerno accumbens, kaj ĉi tiuj regionoj havas precipe altajn nivelojn de rekompenca antaŭdira neŭra aktivecoCheer et al., 2007; Owesson-White et al., 2009).

Kompare kun fazaj eksplodoj, oni scias malpli pri la graveco de fazaj paŭzoj en spikada agado pro eraraj prognozaj negativaj rekompencoj. Ĉi tiuj paŭzoj kaŭzas pli malgrandajn ŝanĝojn en spico-ritmo, estas malpli modulitaj laŭ rekompenca atendo (Bayer kaj Glimcher, 2005; Joshua et al., 2009a; Nomoto kaj aliaj, 2010), kaj povas havi pli malgrandajn efikojn pri lernado (Rutledge et al., 2009). Tamen, iuj specoj de negativaj prognozaj eraraj lernado postulas la VTA (Takahashi et al., 2009), sugestante, ke fazaj paŭzoj povus ankoraŭ esti malkodigitaj de subaj strukturoj.

Ĉar eksplodoj kaj paŭzoj kaŭzas tre malsamajn padronojn de DA-liberigo, ili verŝajne influas malsuprenstrukturojn per distingaj mekanismoj. Estas lastatempaj provoj por ĉi tiu hipotezo en unu ĉefa celo de DA-neŭronoj, la dorsa striatumo. La neŭronoj de projekcia dorso striatum venas en du tipoj, kiuj esprimas malsamajn DA-ricevilojn. Unu speco esprimas D1-receptorojn kaj projektojn al la "rekta vojo" de la ganglioj bazaj por faciligi korpajn movadojn; la dua tipo esprimas D2-receptorojn kaj projektas al la 'nerekta vojo' por subpremi korpajn movadojn (figuro 2) (Albin et al., 1989; Gerfen et al., 1990; Kravitz et al., 2010; Hikida et al., 2010). Surbaze de la ecoj de ĉi tiuj vojoj kaj riceviloj, oni teoriadis, ke DA-krevoj produktas kondiĉojn de alta DA, aktivigas D1-receptorojn kaj kaŭzas, ke la rekta vojo elektas altajn valorajn movadojn (Figuro 2A), dum DA paŭzoj produktas kondiĉojn de malalta DA, malhelpas D2-receptorojn, kaj kaŭzas la nerektan vojon subpremi malaltajn valorojn (Figuro 2B) (Frank, 2005; Hikosaka, 2007). Konsentite kun ĉi tiu hipotezo, alta DA-ricevilo aktivigas potencon de kortico-striataj sinapsoj sur la rekta vojo (Shen et al., 2008) kaj lernado de pozitivaj rezultoj (Frank kaj aliaj, 2004; Voon et al., 2010), dum striata D1-ricevilo blokas selekte malhelpas movadojn al rekompencaj celoj (Nakamura kaj Hikosaka, 2006). Analoga maniero, malalta DA-receptoro-aktivigo antaŭenigas potencon de kortico-striataj sinapsoj sur la nerektan vojon (Shen et al., 2008) kaj lernado de negativaj rezultoj (Frank kaj aliaj, 2004; Voon et al., 2010), dum stria D2-ricevilo blokas selekte subpremas movadojn al ne-rekompencitaj celoj (Nakamura kaj Hikosaka, 2006). Ĉi tiu divido de D1 kaj D2-receptoroj funkcias en instiga kontrolo klarigas multajn el la efikoj de DA-rilataj genoj sur homa konduto (Ullsperger, 2010; Frank and Fossella, 2010) kaj eble etendiĝos preter la dorsal striatumo, ĉar estas evidenteco por simila divido de laboro en la ventra striatumo (Grace et al., 2007; Lobo et al., 2010).

 

figuro 2

Dopamina kontrolo de pozitiva kaj negativa instigo en la dorsal striatumo

Dum ĉi-supra skemo pentras simplan bildon de fazo DA kontrolo de konduto per ĝiaj efikoj sur la striatumo, la plena bildo estas multe pli kompleksa. DA influas rekompencon-konduton agante sur multaj cerbaj regionoj inkluzive de la antaŭfrontal-kortekso (Hitchcott et al., 2007), kortika rejno (Liu et al., 2004), hipokampo (Packard kaj White, 1991; Grecksch kaj Matties, 1981) kaj amigdala (Phillips et al., 2010). La efikoj de DA verŝajne diferencas vaste inter ĉi tiuj regionoj pro variaĵoj en la denseco de innervado de DA, transportiloj de DA, metabolaj enzimoj, aŭtoreceptoroj, riceviloj kaj kuplilo de riceviloj al vojoj de signaloj intracelulares (Neve et al., 2004; Bentivoglio kaj Morelli, 2005; Frank and Fossella, 2010). Plue, almenaŭ en la VTA, DA neŭronoj povas havi malsamajn ĉelajn proprietojn depende de iliaj projekciaj celoj (Lammel et al., 2008; Margolis et al., 2008), kaj iuj havas la rimarkindan kapablon transdoni glutamaton same kiel dopaminon (Descarries et al., 2008; Chuhma et al., 2009; Hnasko et al., 2010; Tecuapetla et al., 2010; Stuber et al., 2010; Birgner et al., 2010). Tiel, la tuta amplekso de DA-neŭronokontrolo pri neŭra prilaborado nur komencas esti rivelita.

Diversaj dopaminaj respondoj al avversaj eventoj

La respondo de neŭrono al avversaj eventoj disponigas kernan teston de siaj funkcioj en instiga kontrolo (Schultz, 1998; Berridge kaj Robinson, 1998; Redgrave et al., 1999; Horvitz, 2000; Joseph et al., 2003). Multrilate ni traktas rekompencajn kaj aversajn okazaĵojn laŭ kontraŭaj manieroj, reflektante ilian kontraŭon motiva valoro. Ni serĉas rekompencojn kaj atribuas al ili pozitivan valoron, dum ni evitas aversajn eventojn kaj donas al ili negativan valoron. Alimaniere ni traktas rekompencajn kaj aversajn okazaĵojn laŭ similaj manieroj, reflektante iliajn similajn motiva saleco [FOOTNOTE1]. Ambaŭ rekompencaj kaj avaraj okazaĵoj ekigas orientiĝon de la atento, kognan prilaboradon kaj pliiĝas en ĝenerala instigo.

Kiujn el ĉi tiuj funkcioj subtenas DA-neŭronoj? Oni delonge sciis, ke streĉaj kaj avivaj spertoj kaŭzas grandajn ŝanĝojn en koncentriĝoj de DA en mallaŭtaj cerbaj strukturoj, kaj ke kondutaj reagoj al ĉi tiuj spertoj draste ŝanĝas per DA agonistoj, antagonistoj kaj lezoj (Salamono, 1994; Di Chiara, 2002; Pezze kaj Feldon, 2004; Young et al., 2005). Ĉi tiuj studoj produktis frapan diversecon de rezultoj, tamen (Levita et al., 2002; Di Chiara, 2002; Young et al., 2005). Multaj studoj estas konformaj al DA-neŭronoj kodantaj motivan salecon. Ili raportas, ke aversaj eventoj pliigas DA-nivelojn kaj ke konduta aversio estas subtenata de altaj niveloj de DA-transdono (Salamono, 1994; Joseph et al., 2003; Ventura et al., 2007; Barr et al., 2009; Fadok et al., 2009) inkluzive de fazaj DA-krevigoj (Zweifel et al., 2009). Sed aliaj studoj pli konformas al DA-neŭronoj kodantaj motivan valoron. Ili raportas, ke aversaj eventoj reduktas DA-nivelojn kaj ke konduta aversio estas subtenata de malaltaj niveloj de DA-transdono (Mark et al., 1991; Shippenberg et al., 1991; Liu et al., 2008; Roitman et al., 2008). En multaj kazoj ĉi tiuj miksitaj rezultoj estis trovitaj en unuopaj studoj, indikante, ke aversaj spertoj kaŭzas malsamajn padronojn de liberigo de DA en malsamaj cerbaj strukturoj (Thierry et al., 1976; Besson kaj Louilot, 1995; Ventura et al., 2001; Jeanblanc et al., 2002; Bassareo et al., 2002; Pascucci et al., 2007), kaj ke DA-rilataj drogoj povas produkti miksaĵon de neŭraj kaj kondutaj efikoj similaj al tiuj kaŭzitaj de kaj rekompencaj kaj avaraj spertoj (Ettenberg, 2004; Wheeler et al., 2008).

Ĉi tiu diverseco de DA-ŝablonoj kaj funkcioj malfacilas akordigi kun la ideo, ke DA-neŭronoj transdonas unuforman motivan signalon al ĉiuj cerbaj strukturoj. Ĉi tiuj diversaj respondoj povus tamen esti klarigitaj, se DA neŭronoj estas mem diversaj - kunmetitaj de multnombraj neŭralaj populacioj, kiuj subtenas malsamajn aspektojn de perversa prilaborado. Ĉi tiu vido estas subtenata de studoj pri neŭra registrado en bestoj anestezitaj. Ĉi tiuj studoj montris, ke bruaj stimuloj elvokas ekscitiĝon en iuj DA-neŭronoj sed inhibicio en aliaj DA-neŭronoj (Chiodo et al., 1980; Maeda kaj Mogenson, 1982; Schultz kaj Romo, 1987; Mantz et al., 1989; Gao et al., 1990; Coizet et al., 2006). Grave, ambaŭ ekscitaj kaj inhibitivaj respondoj okazas en neŭronoj konfirmitaj esti dopaminergikaj uzante juksakulan etikedadon (Brischoux et al., 2009) (figuro 3). Simila diverseco de avancaj respondoj okazas dum aktiva konduto. Malsamaj grupoj de DA-neŭronoj estas foje ekscititaj aŭ inhibiciitaj de avversaj eventoj, inkluzive de malutila stimulado de la haŭto (Kiyatkin, 1988a; Kiyatkin, 1988b), sentemaj signoj antaŭdirantaj perversajn skuojn (Guarraci kaj Kapp, 1999), aversaj aerpumpiloj (Matsumoto kaj Hikosaka, 2009b), kaj sensoraj signoj antaŭdirantaj avversajn akvofluojn (Matsumoto kaj Hikosaka, 2009b; Joshua et al., 2009a). Plue, kiam du DA-neŭronoj estas registritaj samtempe, iliaj avidaj respondoj ĝenerale havas malmultan interrompan interrilaton inter si (Joshua et al., 2009b), sugestante, ke aversaj respondoj ne estas kunordigitaj tra la DA-loĝantaro entute.

 

figuro 3

Diversaj dopaminaj neŭronaj respondoj al avversaj eventoj

Por kompreni la funkciojn de ĉi tiuj diversaj avaraj respondoj, ni bezonas scii kiel ili estas kombinitaj kun rekompencaj respondoj por generi signifan motivan signalon. Lastatempa studo esploris ĉi tiun temon kaj malkaŝis, ke DA-neŭronoj estas dividitaj en multoblajn popolojn kun distingaj motivaj signaloj (Matsumoto kaj Hikosaka, 2009b). Unu el la homoj ekscitas rekompencajn eventojn kaj inhibitajn de avaraj eventoj, kvazaŭ kodado motiva valoro (Figuro 4A). Dua loĝantaro ekscitiĝas tiel pri rekompencaj kaj avaraj okazaĵoj laŭ similaj manieroj, kvazaŭ kodado motiva saleco (Figuro 4B). En ambaŭ de ĉi tiuj loĝantaroj multaj neŭronoj estas sentemaj al rekompenco kaj aversaj antaŭdiroj: ili respondas kiam rekompencaj eventoj estas pli rekompencaj ol antaŭviditaj kaj kiam aversaj eventoj estas pli avaraj ol antaŭviditaj (Matsumoto kaj Hikosaka, 2009b). Ĉi tio montras, ke iliaj avidaj respondoj vere kaŭzas prognozojn pri avidaj eventoj, forĵetante la eblecon, ke ili povus esti kaŭzitaj de nespecifaj faktoroj kiel kruda sensa enigo aŭ ĝeneraligitaj asocioj kun rekompenco (Schultz, 2010). Ĉi tiuj du loĝantaroj malsamas, tamen, en la detala naturo de sia antaŭdira kodo. Motiva valoro kodanta DA neŭronoj kodas precizan prognozan eraran signalon, inkluzive de forta malhelpo per preterlaso de rekompencoj kaj milda ekscitiĝo per preterlaso de aversaj eventoj (Figuro 4A, ĉu ne) En kontrasto, motivaj malhelpaj kodaj neŭronoj DA respondas kiam elstaraj eventoj ĉeestas sed ne kiam forestas (Figuro 4B, ĝuste), konforme al teoriaj nocioj de ekscitiĝo (Lang kaj Davis, 2006) [FOOTNOTE2]. Evidenteco por ĉi tiuj du DA-neŭronaj populacioj estis observita eĉ kiam neŭra aktiveco estis ekzamenita averaĝe. Tiel, studoj celantaj malsamajn partojn de la DA-sistemo trovis fazajn DA-signalojn kodantajn aversajn eventojn kun inhibo (Roitman et al., 2008), simile al kodado de motiva valoro, aŭ kun ekscito (Joshua et al., 2008; Anstrom et al., 2009), simila al kodado de instiga saleco.

 

figuro 4

Distingaj dopaminaj neŭronaj populacioj kodantaj motivan valoron kaj salecon

Ĉi tiuj freŝaj trovoj povus ŝajni kontraŭdiri fruan raporton, ke DA-neŭronoj respondas prefere al rekompenco al malhelpoj, ol al perversaj signoj (Mirenowicz kaj Schultz, 1996). Se ekzamenite atente, tamen eĉ tiu studo plene kongruas kun DA-valora kaj elstara kodigo. En tiu studo rekompencaj signalvortoj kondukis al rekompenci rezultojn kun alta probablo (> 90%) dum aversivaj signaloj kondukis al aversivaj rezultoj kun malalta probablo (<10%). Sekve valoraj kaj elstaraj kodaj DA-neŭronoj havus malmultan respondon al la aversivaj signaloj, precize kodante sian malaltan nivelon de aversemo.

Funkcia rolo de motivaj valoroj kaj signaloj

Kunigitaj, la supraj trovoj indikas, ke DA-neŭronoj estas dividitaj en multoblajn popolojn taŭgajn por apartaj roloj en instiga kontrolo. Motiviga valoro kodanta DA neŭronoj kongruas bone kun aktualaj teorioj de dopaminaj neŭronoj kaj rekompencas prilaboron (Schultz et al., 1997; Berridge kaj Robinson, 1998; Saĝa, 2004). Ĉi tiuj neŭronoj kodas kompletan prognozan eraran signalon kaj kodas rekompencajn kaj aversajn okazaĵojn en kontraŭaj direktoj. Tiel ĉi tiuj neŭronoj provizas taŭgan instruan signalon por serĉado, taksado, kaj valora lernado (figuro 5). Se stimulo kaŭzas ekscitiĝon de valoroj de DA-neŭronoj, ni devas alproksimiĝi al ĝi, atribui al ĝi altan valoron kaj lerni agojn por serĉi ĝin denove en la estonteco. Se stimulo kaŭzas malhelpadon de neŭronaj valoroj de kodanta DA, ni devas eviti ĝin, atribui al ĝi malaltan valoron, kaj lerni agojn por eviti ĝin denove en la estonteco.

 

figuro 5

Hipotizitaj funkcioj de instiga valoro, saleco kaj atentigaj signaloj

En kontrasto, instiga sinesprimado de DA-neŭronoj kongruas bone kun teorioj de dopaminaj neŭronoj kaj prilaborado de elstaraj eventoj (Redgrave et al., 1999; Horvitz, 2000; Joseph et al., 2003; Kapur, 2003). Ĉi tiuj neŭronoj ekscitas ambaŭ rekompencajn kaj avarajn okazaĵojn kaj havas pli malfortajn respondojn al neŭtralaj eventoj, provizante taŭgan instruan signalon por neŭra cirkvitado por lerni detekti, antaŭdiri kaj respondi al situacioj de alta graveco. Ĉi tie ni pripensos tri tiajn cerbajn sistemojn (figuro 5). Unue, neŭralaj cirkvitoj por vida kaj atentema orientiĝo estas kalibritaj por malkovri informojn pri ĉiuj specoj de eventoj, tiel rekompencaj kiel avaraj. Ekzemple, ambaŭ rekompenco kaj aversiveco montras altiri reagojn pli efike ol neŭtralajLang kaj Davis, 2006; Matsumoto kaj Hikosaka, 2009b; Austin kaj Duka, 2010). Due, ambaŭ rekompencaj kaj aversiaj situacioj okupas neŭralajn sistemojn por kogna kontrolo kaj agado - ni bezonas okupi laboran memoron por memori informojn, konfliktan solvon por decidi pri agmaniero kaj longtempa memoro por memori la rezultan rezulton (Bradley et al., 1992; Botvinick et al., 2001; Savine et al., 2010). Trie, ambaŭ rekompencaj kaj avindaj situacioj postulas pliigon de ĝenerala instigo por energii agojn kaj certigi, ke ili plenumas ĝuste. Efektive, DA-neŭronoj estas kritikaj por instigi penadon por atingi altvalorajn celojn kaj en tradukado de scio pri taskoj en fidindan motoron (Berridge kaj Robinson, 1998; Mazzoni et al., 2007; Niv et al., 2007; Salamone et al., 2007).

Dopamina ekscitiĝo atentigante sensignivojn

Aldone al iliaj signaloj kodantaj motivan valoron kaj saĝecon, la plimulto de DA-neŭronoj ankaŭ havas krevajn respondojn al pluraj specoj de sensaj eventoj, kiuj ne rekte rilatas al rekompencaj aŭ aversaj spertoj. Ĉi tiuj respondoj teoriadis ke ili dependas de kelkaj neŭralaj kaj psikologiaj faktoroj, inkluzive de rekta senta enigo, surprizo, noveco, ekscitiĝo, atento, saleco, ĝeneraligado, kaj pseŭdo-kondiĉado (Schultz, 1998; Redgrave et al., 1999; Horvitz, 2000; Lisman kaj Grace, 2005; Redgrave kaj Gurney, 2006; Joshua et al., 2009a; Schultz, 2010).

Ĉi tie ni provos sintezi ĉi tiujn ideojn kaj raporti pri ĉi tiuj DA-respondoj koncerne ununuran suban signalon, an atentiga signalo (figuro 5). Schultz uzis la esprimon "atentigi"Schultz, 1998) kiel ĝenerala termino por eventoj, kiuj altiras atenton. Ĉi tie ni uzos ĝin en pli specifa senco. Per atentiga okazaĵo, ni celas neatenditan sensan kverelon, kiu kaptas atenton surbaze de rapida takso de ĝia ebla graveco, uzante simplajn funkciojn kiel ĝia loko, grandeco kaj sensa modeco. Tiaj atentigaj eventoj ofte ekigas tujan kondutan reagon por esplori ilin kaj determini ĝian precizan signifon. Tiel DA signalaj signaloj tipe okazas ĉe mallongaj latencoj, baziĝas sur la malglataj ecoj de stimulo, kaj plej bone rilatas al tujaj reagoj kiel orientaj reagoj (Schultz kaj Romo, 1990; Joshua et al., 2009a; Schultz, 2010). Ĉi tiu kontraste al aliaj motivaj signaloj en DA-neŭronoj, kiuj tipe okazas ĉe pli longaj latencoj, enkalkulas la precizan identecon de la stimulo kaj plej korektas kun pripensitaj kondutaj agoj kiel ekzemple decidoj alproksimiĝi aŭ eviti (Schultz kaj Romo, 1990; Joshua et al., 2009a; Schultz, 2010).

La respondoj de alarmoj de DA povas esti ekigitaj per surprizaj sensaj eventoj kiel neatenditaj lumaj ekbriloj kaj aŭdaj klakoj, kiuj elvokas eminentajn eksplodajn ekscitojn en 60-90% de DA-neŭronoj tra la SNc kaj VTA (Strecker kaj Jacobs, 1985; Horvitz et al., 1997; Horvitz, 2000) (Figuro 6A). Ĉi tiuj atentaj respondoj ŝajnas reflekti la gradon, ke la stimulo surprizas nin kaj kaptas la atenton; ili reduktas se stimulo okazas en antaŭvideblaj tempoj, se atento okupiĝas aliloke, aŭ dum dormo (Schultz, 1998; Takikawa et al., 2004; Strecker kaj Jacobs, 1985; Steinfels et al., 1983). Ekzemple, neatendita klakada sono elvokas eminentan DA-eksplodon kiam kato estas en pasiva stato de kvieta vekiĝo, sed havas nenian efikon kiam la kato okupiĝas pri atencaj agadoj kiel ĉasado de rato, manĝado, prizorgado. de la eksperimentanto, kaj tiel plu (Strecker kaj Jacobs, 1985) (Figuro 6A). Simile, DA-respondoj de eksplodoj estas deĉenigitaj de sensaj eventoj, kiuj estas fizike malfortaj sed atentindaj pro sia noveco (Ljungberg et al., 1992; Schultz, 1998). Ĉi tiuj respondoj kutimiĝas dum la nova stimulo iĝas familiara, paralele kun la kutimo de orientaj reagoj (Figuro 6B). Konsentite kun ĉi tiuj trovoj, mirindaj kaj novaj eventoj elvokas liberigon de DA en mallaŭtaj strukturoj (Lisman kaj Grace, 2005) kaj aktivigi cerbajn cirkvitojn ligitajn al DA laŭ maniero, kiu formas rekompencan prilaboron (Zink et al., 2003; Davidson et al., 2004; Duzel et al., 2010).

 

figuro 6

Respondecaj ekscitaj respondoj de dopamina neŭro

La respondoj de alarmoj de DA ankaŭ estas deĉenigitaj de neatenditaj sensaj spuroj, kiuj povas provizi novajn informojn pri motivaj elstaraj eventoj. Kiel atendite por atentiga signalo pri mallonga latencia, ĉi tiuj respondoj estas iomete ne selektemaj: ili ekigas per ia stimulo simple similas motivisme elstara signo, eĉ se la simileco estas tre malgrava (fenomeno nomata ĝeneraligo) (Schultz, 1998). Rezulte, DA neŭronoj ofte respondas al stimulo kun miksaĵo de du signaloj: rapida atentiga signalo kodanta la fakton, ke la stimulo estas potenciale grava, kaj dua signalo kodanta sian fakta rekompencanta aŭ aversa signifo (Schultz kaj Romo, 1990; Waelti et al., 2001; Tobler et al., 2003; Day et al., 2007; Kobayashi kaj Schultz, 2008; Fiorillo et al., 2008; Nomoto kaj aliaj, 2010) (vidu (Kakade kaj Dayan, 2002; Joshua et al., 2009a; Schultz, 2010) por revizio). Ekzemplo videblas en aro da motivaj salecoj kodigantaj DA-neŭronoj Figuro 6C (Bromberg-Martin et al., 2010a). Ĉi tiuj neŭronoj estis ekscititaj de rekompenco kaj avaraj sentoj, sed ili ankaŭ estis ekscititaj de neŭtrala signo. La neŭtrala signo neniam estis kombinita kun motivaj rezultoj, sed havis tre (tre malgravan) fizikan similecon kun la rekompenco kaj avaraj indikoj.

Ĉi tiuj atentigaj respondoj ŝajnas proksime ligitaj al la sentema kapablo ekigi orientajn reagojn por ekzameni ĝin plu kaj malkovri ĝian signifon. Ĉi tio videblas en tri rimarkindaj propraĵoj. Unue, atentigaj respondoj okazas nur por sensignifoj, kiuj devas esti ekzamenitaj por determini sian signifon, ne por intrinsekte rekompencaj aŭ aversaj eventoj kiel liverado de suko aŭ akvofluoj (Schultz, 2010). Due, atentigaj respondoj nur okazas, kiam kapablo estas gravega kaj havas la kapablon ekigi orientiĝajn reagojn, ne kiam la signo estas senrilata al la tasko ĉe la mano kaj malsukcesas ekigi orientajn reagojn (Schultz kaj Romo, 1990). Trie, atentigaj respondoj estas plibonigitaj en situacioj, kiam signaloj ekigos subitan movon de atento - kiam ili aperas en neatendita tempo aŭ for de la centro de rigardo (Bromberg-Martin et al., 2010a). Tiel, kiam motivaj spuroj estas prezentitaj per neprobabla temparado, ili deĉenigas tujajn orientiĝajn reagojn kaj ĝeneraligitan averton de DA-respondo - ekscitiĝo de ĉiuj signoj, inkluzive de neŭtralaj aŭdilojFiguro 6C, nigra). Sed se ilia tempolimo estas antaŭvidebla - ekzemple, antaŭvidante la subjektojn per "prova komenco-provo" prezentita unu sekundon antaŭ ol aperu la signaloj - la signoj ne plu elvokas atentigan respondon (Figuro 6D, griza). Anstataŭe, la atentiga respondo turniĝas al la komenco de la proceso - la unua okazaĵo de la proceso, kiu havas neantaŭvideblan tempigon kaj elvokas orientajn reagojn (Figuro 6D, nigra).

Kio estas la suba mekanismo kiu generas signalojn de atentigo pri neuron DA? Unu hipotezo estas, ke atentigaj respondoj estas simple konvenciaj antaŭdiroj de eraraj signaloj, kiuj okazas ĉe mallongaj latencoj, kodantaj la atendatan rekompencan valoron de stimulo antaŭ ol ĝi plene diskriminacias (Kakade kaj Dayan, 2002). Pli lastatempaj evidentecoj tamen sugestas, ke avertaj signaloj povas esti generitaj per aparta mekanismo de konvenciaj DA-rekompencaj signaloj (Satoh et al., 2003; Bayer kaj Glimcher, 2005; Bromberg-Martin et al., 2010a; Bromberg-Martin et al., 2010c; Nomoto kaj aliaj, 2010). Plej okulfrape, la atentiga respondo al la provludo komenci ne estas limigita al rekompencaj taskoj; ĝi povas havi egalan forton dum malavara tasko, en kiu oni ne donas rekompencon (Figuro 6C, D, malsupre, "avantaĝa tasko"). Ĉi tio okazas kvankam konvenciaj DA-rekompencaj signaloj en la samaj neŭronoj ĝuste signalas, ke la rekompenca tasko havas multe pli altan atendatan valoron ol la avantaĝa tasko (Bromberg-Martin et al., 2010a). Ĉi tiuj atentigaj signaloj ne estas nur formo de valoriga kodado aŭ simple formo de malkodiga kodado, ĉar ili okazas en la plimulto de ambaŭ motivaj valoroj kaj sage kodantaj neŭronoj DA (Bromberg-Martin et al., 2010a). Dua disiĝo videblas laŭ la maniero, ke neŭronoj de DA antaŭdiras estontajn rekompencojn bazitajn sur la memoro pri pasintaj rekompencoj (Satoh et al., 2003; Bayer kaj Glimcher, 2005). Dum konvenciaj DA-rekompencaj signaloj estas kontrolitaj per longtempa memora spuro optimumigita por preciza rekompenco-antaŭdiro, atentigaj respondoj al la prov-komenca signo estas kontrolitaj per aparta memora spuro simila al tiu vidita en tujaj orientiĝaj reagoj (Bromberg-Martin et al., 2010c). Tria disdivido videblas laŭ la maniero, ke ĉi tiuj signaloj estas disdonitaj tra la loĝantaro de neŭronoj DA. Dum konvenciaj DA-rekompencaj signaloj estas plej fortaj en la ventromedia SNc, atentigaj respondoj al la provaj komencaj signaloj (kaj al aliaj neatendite tempigitaj signoj) estas elsenditaj tra la SNc (Nomoto kaj aliaj, 2010).

Kontraste al ĉi tiuj disiĝoj de konvenciaj rekompencaj signaloj, DA-signalaj signaloj estas korelaciitaj kun la rapideco por orienti kaj alproksimiĝi al la alerta evento (Satoh et al., 2003; Bromberg-Martin et al., 2010a; Bromberg-Martin et al., 2010c). Ĉi tio sugestas, ke atentigaj signaloj estas generitaj de neŭra procezo, kiu motivigas rapidajn reagojn esplori pri eventuale gravaj eventoj. Nuntempe, bedaŭrinde, relative malmulte oni scias pri precizaj eventoj, kiujn ĉi tiu procezo traktas kiel 'gravajn'. Ekzemple, ĉu atentigaj respondoj estas same sentemaj al rekompencaj kaj avaraj eventoj? Oni scias, ke atentaj respondoj okazas por stimuloj, kiuj similas al rekompencaj aŭdoj, aŭ similas al rekompenco kaj aversaj aŭtoj, ekz. Por dividi la saman senteman modon. Sed oni ankoraŭ ne scias, ĉu atentigaj respondoj okazas por stimuloj, kiuj similas nur al avaraj spuroj.

Funkcia rolo de dopaminaj signaloj

Kiel ni vidis, atentigaj signaloj verŝajne estas generitaj de aparta mekanismo disde motiviga valoro kaj signaloj. Tamen, atentigaj signaloj estas senditaj al kaj motiva valoro kaj saga kodanta neŭronojn DA, kaj tial verŝajne reguligas cerban prilaboron kaj konduton simile al valoroj kaj malaltiĝaj signaloj (figuro 5).

Alertaj signaloj senditaj al instiga saga kodado de neŭronoj DA subtenus orienti atenton al la atentiga stimulo, engaĝiĝo de kognaj rimedoj por malkovri ĝian signifon kaj decidi pri plano por agado, kaj pliigi instigajn nivelojn por efektivigi ĉi tiun planon efike (figuro 5). Ĉi tiuj efikoj povus okazi per tuja efiko al neŭra prilaborado aŭ plifortigi agojn, kiuj kondukis al detekto de la atentiga evento. Ĉi tiu funkcia rolo kongruas bone kun la korelacio inter DA-avertaj respondoj kaj rapidaj kondutaj reagoj al la atentiga stimulo, kaj kun teorioj, ke mallongaj latencaj DA-neŭronaj respondoj okupiĝas pri orientado de atento, ekscitiĝo, plibonigo de kognitiva prilaborado kaj tujaj kondutaj reagoj (Redgrave et al., 1999; Horvitz, 2000; Joseph et al., 2003; Lisman kaj Grace, 2005; Redgrave kaj Gurney, 2006; Joshua et al., 2009a).

La ĉeesto de atentigaj signaloj en motiva valoro kodanta DA neŭronoj estas pli malfacile klarigebla. Ĉi tiuj neŭronoj elsendas motivajn valor-signalojn, kiuj estas idealaj por serĉado, taksado de rezultoj kaj valora lernado; tamen ili povas ankaŭ entuziasmiĝi per atentigo pri eventoj kiel neatenditaj klakaj sonoj kaj la apero de perversaj provoj. Laŭ nia hipotezita vojo (figuro 5), tio kaŭzus, ke atentigaj eventoj estu pozitivaj kaj serĉeblaj en maniero simila al rekompencoj! Dum surpriza komenco, estas kialo suspekti, ke atentigaj eventoj povas esti traktataj kiel pozitivaj celoj. Alertaj signaloj donas la unuan averton, ke eble grava evento estas okazonta, kaj tial donas la unuan ŝancon ekagi por regi tiun eventon. Se atentigiloj estas disponeblaj, motivaj elstaraj eventoj povas esti detektitaj, antaŭviditaj, kaj preparitaj anticipe; se atentigiloj forestas, motivaj elstaraj eventoj ĉiam okazas kiel neatendita surprizo. Efektive, homoj kaj bestoj ofte esprimas preferon por medioj, kie avancaj, avaraj kaj eĉ motivate neŭtralaj sensaj eventoj povas esti antaŭviditaj kaj antaŭdiritaj antaŭ (Badia et al., 1979; Herry et al., 2007; Daly, 1992; Chew kaj Ho, 1994) kaj multaj DA neŭronoj signalas la kondutan preferon por vidi rekompenc-antaŭdiritajn informojn (Bromberg-Martin kaj Hikosaka, 2009). Signaloj pri avertaj DA eble subtenas ĉi tiujn preferojn atribuante pozitivan valoron al medioj, kie oni povas antaŭvidi anticipe gravajn sensaciajn signalojn.

Anatomiaj lokoj pri valoro kaj saŭco kodanta neŭronojn

Lastatempa studo mapis la lokojn de DA-rekompenco kaj avversaj signaloj en la laterala duoncirklo inkluzive de la SNc kaj flanka parto de la VTA (Matsumoto kaj Hikosaka, 2009b). Motivaj valoroj kaj motivaj saĝaj signaloj estis disdonitaj tra ĉi tiu regiono en anatomia gradiento. Motivaj valor-signaloj estis trovitaj pli ofte en neŭronoj en la ventromeda SNc kaj laterala VTA, dum motivaj salaj signaloj estis trovitaj pli ofte en neŭronoj en la dorsolatera SNc (Figuro 7B). Ĉi tio konformas al raportoj, ke koda valoro de DA-rekompenco estas plej forta en la ventromedia SNc (Nomoto kaj aliaj, 2010) dum avaraj ekscitiĝoj tendencas esti plej fortaj pli flankaj (Mirenowicz kaj Schultz, 1996). Aliaj studoj esploris la pli median cerbon. Ĉi tiuj studoj trovis miksaĵon de ekscitaj kaj inhibitivaj aversive respondoj kun neniu signifa diferenco en iliaj lokoj, kvankam kun tendenco por aversaj ekscitiĝoj situi pli ventrale (Guarraci kaj Kapp, 1999; Brischoux et al., 2009) (Figuro 7C).

Destinoj de motivaj valor-signaloj

Laŭ nia hipotezo, motiva valoro kodanta DA-neŭronoj devas projekti al cerbaj regionoj implikitaj en agado kaj evitado, taksado de rezultoj, kaj valora lernado (figuro 5). Efektive, la ventromedia SNc kaj VTA projektas al la ventromedia antaŭfrontal-kortekso (Williams kaj Goldman-Rakic, 1998) inkluzive la orbitofrontan kortekson (OFC) (Porrino kaj Goldman-Rakic, 1982) (Figuro 7A). La OFC estis konstante implikita en valoro-kodado en funkciaj bildaj studoj (Anderson et al., 2003; Malgranda et al., 2003; Jensen et al., 2007; Litt et al., 2010) kaj unuj neŭronaj registradoj (Morrison kaj Salzman, 2009; Roesch kaj Olson, 2004). Oni pensas, ke la OFC taksu elektajn elektojn (Padoa-Schioppa, 2007; Kable kaj Glimcher, 2009), kodi rezultajn atendojn (Schoenbaum et al., 2009), kaj ĝisdatigi ĉi tiujn atendojn dum lernado (Walton et al., 2010). Plue, la OFC okupiĝas pri lernado de eraroj pri negativaj antaŭdiroj de rekompenco (Takahashi et al., 2009) kiuj estas plej fortaj en valor-kodantaj DA neŭronoj (figuro 4).

Krome, la mezaj porcioj de la dopaminergika mezkrura projekto al la ventrala striatumo inkluzive de la nukleo accumbens-ŝelo (NAc-ŝelo) (Haber et al., 2000) (Figuro 7A). Lastatempa studo pruvis, ke la NAc-ŝelo ricevas fazajn DA-signalojn kodantajn la motivan valoron de gustaj rezultoj (Roitman et al., 2008). Ĉi tiuj signaloj probable kaŭzas valoron lernado ĉar rekta infuzado de DA-drogoj en la NAc-ŝelon forte plifortigas (Ikemoto, 2010) dum traktadoj kiuj reduktas DA-enigon al la ŝelo povas indukti aversiojn (Liu et al., 2008). Unu avizo estas, ke studoj pri liberigo de NAc-ŝelo dum longaj tempoj (minutoj) produktis miksitajn rezultojn, kelkaj konformaj al valor-kodado kaj aliaj kun saleca kodado (ekz.Bassareo et al., 2002; Ventura et al., 2007)). Ĉi tio sugestas, ke valorvaloroj povus esti limigitaj al specifaj lokoj ene de la ŝelo de NAc. Notinde, malsamaj regionoj de la NAc-ŝelo estas specialigitaj por regi apetitivan kaj aversan konduton (Reynolds kaj Berridge, 2002), kiuj ambaŭ postulas enigon de DA-neŭronoj (Faure et al., 2008).

Fine, DA neŭronoj tra la amplekso de la SNc sendas pezajn projekciojn al la dorsal striatumo (Haber et al., 2000), sugestante, ke la dorsa striatumo povus ricevi ambaŭ motivan valoron kaj salian kodigan DA-signalojn (Figuro 7A). Motiva valoro kodanta DA neŭronoj provizus idealan instruan signalon por striaj cirkvitoj implikitaj en valor-lernado, kiel lernado de stimulo-respondaj kutimoj (Faure et al., 2005; Yin kaj Knowlton, 2006; Balleine kaj O'Doherty, 2010). Kiam ĉi tiuj neŭronoj DA eksplodos, ili entreprenos la rektan vojon por lerni akiri rekompencajn rezultojn; kiam ili paŭzas, ili entreprenos la nerektan vojon por lerni eviti aversajn rezultojn (figuro 2). Efektive, estas lastatempaj evidentecoj, ke la striktaj vojoj sekvas ĝuste ĉi tiun dividadon de laboro por rekompenco kaj senpova prilaborado (Hikida et al., 2010). Ankoraŭ ne scias, tamen, kiel neŭronoj en ĉi tiuj vojoj respondas al rekompencaj kaj avaraj okazaĵoj dum konduto. Almenaŭ en la dorsal striatumo entute, subaro de neŭronoj respondas al certaj rekompencaj kaj avaraj okazaĵoj laŭ malsamaj manieroj (Ravel et al., 2003; Yamada et al., 2004, 2007; Joshua et al., 2008).

Cellokoj de motivaj salutaj signaloj

Laŭ nia hipotezo, motiviga saga kodigo de neŭronoj DA devas projekti al cerbaj regionoj implikitaj en orientado, kognitiva prilaborado kaj ĝenerala instigo (figuro 5). Efektive, neŭronoj de DA en la dorsolatera cerbo sendas projekciojn al dorsal kaj flanka frontala kortekso (Williams kaj Goldman-Rakic, 1998) (Figuro 7A) regiono kiu estis implikita en kognaj funkcioj kiel ekzemple atenta serĉo, labora memoro, kognitiva kontrolo kaj decidado inter motivaj rezultoj (Williams kaj Castner, 2006; Lee kaj Seo, 2007; Saĝa, 2008; Kable kaj Glimcher, 2009; Wallis kaj Kennerley, 2010). Dorsolateral prefrontalaj kognaj funkcioj estas strikte reguligitaj per DA-niveloj (Robbins kaj Arnsten, 2009) kaj estas teoriaditaj por dependi de fazo neurona aktivigo de DA (Cohen et al., 2002; Lapish et al., 2007). Notinde, subaro de flankaj antaŭfrontaj neŭronoj respondas al kaj rekompencaj kaj aversaj vidaj indikoj, kaj la granda plimulto respondas en la sama direkto simile al kodado de instiga saleco (Kobayashi et al., 2006). Plue, la agado de ĉi tiuj neŭronoj estas korelaciita kun kondutisma sukceso ĉe plenumado de labor-memoraj taskoj (Kobayashi et al., 2006). Kvankam ĉi tiu dorsolateral DA → dorsolaterala antaŭa korteksa vojo ŝajnas esti specifa por primatoj (Williams kaj Goldman-Rakic, 1998), funkcie simila vojo povas ekzisti en aliaj specioj. En aparta, multaj el la kognaj funkcioj de la primata dorsolateral prefrontal-kortekso estas plenumataj de la ronĝulaj mediaj antaŭfrontalaj korteksaĵoj (Uylings et al., 2003), kaj estas evidenteco, ke ĉi tiu regiono ricevas signalojn de motiviga saleco de DA kaj kontrolas saĝan rilatan konduton (Mantz et al., 1989; Di Chiara, 2002; Joseph et al., 2003; Ventura et al., 2007; Ventura et al., 2008).

Etkubo, ke la VTA enhavas ambaŭ neŭtronojn de sintenado kaj valoro, kaj ke signaloj de valoro estas senditaj al la NAc-ŝelo, signaloj de saleco povus esti senditaj al la kerno de NAc (Figuro 7A). Efektive, la NAc-kerno (sed ne ŝelo) estas kerna por ebligi instigon superi respondajn kostojn kiel fizika penado; por plenumado de agord-ŝovaj taskoj postulantaj kognan flekseblecon; kaj por ebligi rekompencajn signalojn kaŭzi plibonigon de ĝenerala instigo (Ghods-Sharifi kaj Floresco, 2010; Floresco et al., 2006; Salono et al., 2001; Kardinalo, 2006). Konsentite pri kodado de instiga saleco, la NAc-kerno ricevas fazajn eksplodojn de DA dum ambaŭ rekompencaj spertoj (Day et al., 2007) kaj aversaj spertoj (Anstrom et al., 2009).

Finfine, kiel diskutite pli supre, iuj elstaraj kodigantaj DA-neŭronoj povus projekti al la dorsal striatumo (Figuro 7A). Dum iuj regionoj de la dorsa striatumo okupiĝas pri funkcioj rilataj al lernado de valoroj de agado, la dorsal-striatumo ankaŭ okupiĝas pri funkcioj, kiuj devas okupiĝi pri ĉiuj elstaraj eventoj, kiel orientado, atento, labora memoro kaj ĝenerala instigo (Hikosaka et al., 2000; Klingberg, 2010; Palmiter, .uste). Efektive, subaro de dorsaj striaj neŭronoj pli forte respondas al rekompencaj kaj avaraj okazaĵoj ol al neŭtralaj eventoj (Ravel et al., 1999; Blazquez et al., 2002; Yamada et al., 2004, 2007), kvankam ilia kaŭza rolo en instigita konduto ankoraŭ ne estas konata.

Fontoj de motivaj valor-signaloj

Lastatempa serio de studoj sugestas, ke DA-neŭronoj ricevas motivajn valor-signalojn de malgranda kerno en la epitamo, la flanka habenula (LHb) (Hikosaka, 2010) (figuro 8). La LHb praktikas potencan negativan kontrolon kontraŭ DA-neŭronoj: LHb-stimulado inhibicias DA-neŭronojn ĉe mallongaj latencoj (Christoph et al., 1986) kaj povas reguligi lernadon en kontraŭa maniero al VTA-stimulado (Shumake et al., 2010). Konsentite kun negativa kontrolsignalo, multaj LHb-neŭronoj havas spegul-inversigitajn fazajn respondojn al DA-neŭronoj: LHb-neŭronoj estas detenis per pozitivaj rekompenco-prognozaj eraroj kaj ekscitita per negativaj rekompencaj prognozaj eraroj (Matsumoto kaj Hikosaka, 2007, 2009a; Bromberg-Martin et al., 2010a; Bromberg-Martin et al., 2010c). En pluraj kazoj ĉi tiuj signaloj okazas ĉe pli mallongaj latencoj en la LHb, konformaj al transdono de LHb → DA (Matsumoto kaj Hikosaka, 2007; Bromberg-Martin et al., 2010a).

 

figuro 8

Hipotizitaj fontoj de instiga valoro, saleco kaj atentigaj signaloj

La LHb kapablas regi DA-neŭronojn tra la tuta cerbo, sed pluraj linioj de evidenteco sugestas, ke ĝi praktikas preferentan kontrolon pri instiga valoro kodanta DA-neŭronojn. Unue, LHb-neŭronoj kodas motivan valoron tiel spegule spegulante DA-neŭronojn de valoro-kodado - ili kodas ambaŭ pozitivajn kaj negativajn rekompencajn prognozajn erarojn kaj respondas en kontraŭaj direktoj al rekompencaj kaj avaraj eventoj (Matsumoto kaj Hikosaka, 2009a; Bromberg-Martin et al., 2010a). Due, LHb-stimulado havas ĝiajn plej potencajn efikojn sur DA-neŭronoj, kies proprecoj kongruas kun valoro-kodado, inkluzive de inhibo per senrefendaj signoj kaj anatomia loko en la ventromedia SNc (Matsumoto kaj Hikosaka, 2007, 2009b). Trie, lezoj al la LHb malhelpas DA-neŭronajn inhibiciojn de DA al neatendaj eventoj, sugestante kaŭzan rolon por la LHb en la generado de signaloj de DA-valoro (Gao et al., 1990).

La LHb estas parto de pli vasta neŭra vojo per kiu DA neŭronoj povas esti kontrolataj de la basaj ganglioj (figuro 8). La LHb ricevas signalojn similajn al rekompencaj prognozaj eraroj per projekcio de loĝantaro de neŭronoj situantaj ĉirkaŭ la limo de globus pallidus (GPb) (Hong kaj Hikosaka, 2008). Post kiam ĉi tiuj signaloj atingas la LHb, ili verŝajne estos senditaj al DA-neŭronoj tra vojo disinaptika, en kiu la LHb ekscitas nebulajn GABA-neŭronojn, kiuj siavice inhibicias DA-neŭronojn (Ji kaj Shepard, 2007; Omelchenko et al., 2009; Brinschwitz et al., 2010). Ĉi tio povus okazi per LHb-projekcioj al interneuronoj en la VTA kaj al apuda GABA-ergika kerno nomata rostromeda tegmenta kerno (RMTg) (Jhou et al., 2009b) (ankaŭ nomata la "karesa vosto de VTA" (Kaufling et al., 2009)). Notinde, RMTg-neŭronoj havas respondajn proprietojn similajn al LHb-neŭronoj, kodas motivan valoron, kaj havas pezan inhibician projekcion al dopaminergia mezkerno (Jhou et al., 2009a). Tiel, la kompleta vojo de basaj ganglioj por sendi motivajn valorojn al DA-neŭronoj eble estas GPb → LHb → RMTg → DA (Hikosaka, 2010).

Grava demando por estonta esplorado estas ĉu motivaj valorosignaloj estas enkanaligitaj nur tra la LHb aŭ ĉu ili estas portataj de multnombraj enirejaj vojoj. Notinde, DA-inhibicioj de avancaj piedfrapoj estas kontrolitaj per aktiveco en la mezopontina parabraka kerno (PBN) (Coizet et al., 2010) (figuro 8). Ĉi tiu kerno enhavas neŭronojn, kiuj ricevas rektan enigon de la medolo espinal kodanta malutilajn sentojn kaj povus malhelpi DA-neŭronojn per ekscitaj projekcioj al la RMTg (Coizet et al., 2010; Gauriau kaj Bernard, 2002). Ĉi tio sugestas, ke la LHb sendas DA-neŭronajn motivajn valor-signalojn por kaj rekompencaj kaj avaraj indikoj kaj rezultoj, dum la PBN provizas komponenton de la valoro-signalo specife rilata al avversaj rezultoj.

Fontoj de instigaj signaloj

Malpli estas sciate pri la fonto de motivaj saĝaj signaloj en DA-neŭronoj. Unu intriga kandidato estas la centra kerno de la amigdala (CeA), kiu estis konstante implikita en orientado, atento, kaj ĝeneralaj motivaj respondoj dum kaj rekompencaj kaj avaraj eventoj (Holando kaj Gallagher, 1999; Baxter kaj Murray, 2002; Merali et al., 2003; Balleine kaj Killcross, 2006) (figuro 8). La CeA kaj aliaj amigdaj kernoj enhavas multajn neŭronojn, kies signaloj kongruas kun motiviga saleco: ili signalas rekompencajn kaj aversajn okazaĵojn en la sama direkto, plifortiĝas kiam eventoj neatendite okazas, kaj rilatas al kondutaj mezuroj de ekscitiĝo (Nishijo et al., 1988; Belova et al., 2007; Shabel kaj Janak, 2009). Ĉi tiuj signaloj eble sendiĝos al DA-neŭronoj ĉar la CeA havas projekciajn projektojn al la cerbo, kiuj portas rekompencajn kaj avarajn informojn (Lee et al., 2005; Pascoe kaj Kapp, 1985) kaj la CeA estas necesa por liberigo de DA dum eventoj rilataj al rekompenco (Phillips et al., 2003a). Plue, la CeA partoprenas kun DA-neŭronoj en vojoj konformaj al niaj proponitaj anatomiaj kaj funkciaj retoj por instiga saleco. Vojo inkluzivanta la CeA, SNc, kaj dorsan striatum estas necesa por lernitaj orientiĝi al manĝaĵoj.Han et al., 1997; Lee et al., 2005; El-Amamy kaj Holando, 2007). Konsentite kun nia disdivido de saleco kaj valorvaloroj, ĉi tiu vojo necesas por lerni orientiĝi al manĝaĵoj kaj ne por lerni alproksimiĝi al manĝaj rezultoj (Han et al., 1997). Dua vojo, inkluzive de la kerno CeA, SNc, VTA, kaj NAc, estas necesa por rekompencaj kazoj kaŭzi pliigon de ĝenerala instigo por plenumi rekompencajn agojn (Salono et al., 2001; Korbono kaj Balleino, 2005; El-Amamy kaj Holando, 2007).

Aldone al la CeA, DA-neŭronoj povus ricevi motivajn salajn signalojn de aliaj fontoj kiel ekzemple saŭc-kodaj neŭronoj en la funda antaŭbrako (Lin kaj Nicolelis, 2008; Richardson kaj DeLong, 1991) kaj neŭronoj en la PBN (Coizet et al., 2010), kvankam ĉi tiuj vojoj restas esploreblaj.

Fontoj de atentigaj signaloj

Estas multaj bonaj kandidatoj por provizi DA-neŭronojn per avertaj signaloj. Eble la plej alloga kandidato estas la supera kolikulo (SC), mez-cerba kerno, kiu ricevas mallongan latentan sensan enigon el multnombraj sensaj modalecoj kaj kontrolas orientajn reagojn kaj atentonRedgrave kaj Gurney, 2006) (figuro 8). La SC havas rektan projekcion al la SNc kaj VTA (Majo et al., 2009; Comoli et al., 2003). En anestezitaj bestoj, la SC estas esenca konduko por mallongaj latencaj vidaj signaloj por atingi DA-neŭronojn kaj deĉenigi DA-liberigon en subaj strukturoj (Comoli et al., 2003; Dommett et al., 2005). La SC-DA-vojo estas plej taŭga por transdoni atentigajn signalojn anstataŭ rekompenco kaj aversion signaloj, ĉar SC-neŭronoj havas malmultan respondon por rekompenci liveradon kaj havas nur mildan influon sur DA-respondaj respondoj (Coizet et al., 2006). Ĉi tio sugestas sekvencon de eventoj, en kiuj SC neŭronoj (1) detektas stimulon, (2) elektu ĝin kiel eble gravan, (3) ekigas orientan reagon por ekzameni la stimulon, kaj (4) samtempe ekigas DA-atentigan respondon, kiu kaŭzas eksplodo de DA en mallevitaj strukturoj (Redgrave kaj Gurney, 2006).

Dua kandidato por sendi atentigajn signalojn al DA-neŭronoj estas la LHb (figuro 8). Notinde, la neatendita ekapero de provludo komenciĝas malhelpi multajn LHb-neŭronojn inverse al la avertanta signo de neuron DA, kaj ĉi tiu respondo okazas ĉe pli mallonga latento en la LHb konforme al direkto de transdono de LHb → DA (Bromberg-Martin et al., 2010a; Bromberg-Martin et al., 2010c). Ni ankaŭ anekdotike observis, ke neŭronoj de LHb estas ofte malhelpitaj de neatenditaj vidaj bildoj kaj sonoj kontraŭe al DA-ekscitoj (MM, ESB-M., Kaj OH, nepublikigitaj rimarkoj) kvankam ĉi tio atendas pli sisteman esploron.

Fine, tria kandidato por sendi atentigajn signalojn al DA-neŭronoj estas la pedunculopontina tegmenta kerno (PPTg), kiu projektas al la SNc kaj VTA kaj okupiĝas pri instiga prilaborado (Winn, 2006) (figuro 8). La PPTg gravas por ebligi eksplodojn de neŭronoj de VTA DA (Grace et al., 2007) inkluzive de eksplodemaj respondoj por rekompenci signojn (Pan and Hyland, 2005). Konsentite kun atentiga signalo, PPTg-neŭronoj havas mallongajn latentajn respondojn al multoblaj sensaj modalecoj kaj aktivas dum orientiĝaj reagoj (Winn, 2006). Estas evidenteco, ke PPTg-sensaj respondoj estas influitaj de rekompenca valoro kaj de postuloj por tuja agado (Dormont et al., 1998; Okada et al., 2009) (sed vidu (Pan and Hyland, 2005)). Iuj PPTg-neŭronoj ankaŭ respondas al rekompencaj aŭ aversaj rezultoj mem (Dormont et al., 1998; Kobayashi et al., 2002; Ivlieva kaj Timofeeva, 2003b, a). Estos grave testi, ĉu la signaloj, kiujn la PPTg sendas al DA-neŭronoj, rilatas specife al atentigo aŭ ĉu ili enhavas aliajn motivajn signalojn kiel valoro kaj saleco.

Ĉi tiu laboro estis subtenita de la intramural esplora programo ĉe la Nacia Okula Instituto. Ni dankas ankaŭ Amy Arnsten pro valoraj diskutoj.

Malgarantio de Eldonisto: Ĉi tio estas PDF-dosiero de unita manuskripto, kiu estis akceptita por publikigado. Kiel servo al niaj klientoj ni provizas ĉi tiun fruan version de la manuskripto. La manuskripto suferas kopion, kompostadon kaj revizion de la rezultanta pruvo antaŭ ol ĝi estas publikigita en ĝia fina maniero. Bonvolu noti, ke dum la procezo de produktado povas malkovri erarojn, kiuj povus influi la enhavon, kaj ĉiujn laŭleĝajn malvirtojn, kiuj aplikeblas al la ĵurnalo.

^FOOTNOTE1By motiva saleco ni signifas kvanton altan por rekompencaj kaj avaraj eventoj kaj malalte pro motivaj neŭtralaj (ne rekompencaj kaj ne avindaj) eventoj. Ĉi tiu similas al la difino donita de (Berridge kaj Robinson, 1998). Notu, ke motiviga saleco diferencas de aliaj nocioj de saleco uzataj en neŭroscienco, kiel incita saleco (kiu validas nur por dezirindaj eventoj;Berridge kaj Robinson, 1998)) kaj perceptaj elstaraĵoj (kiuj validas por motivaj neŭtralaj eventoj kiel movaj objektoj kaj koloraj lumoj;)Bisley kaj Goldberg, 2010)).]

^FOOTNOTE2Rimarku, ke instiga fripona kodado de DA-neŭronaj signaloj diferencas de la klasikaj nocioj de "asocio" kaj "ŝanĝo de asociiĝo" proponitaj por reguligi la indicon de plifortiga lernado (ekz.Pearce kaj Hall, 1980)). Tiaj teorioj konstatas, ke bestoj lernas (kaj ĝustigas lernokostojn) de kaj pozitivaj kaj negativaj prognozaj eraroj. Kvankam ĉi tiuj neŭronoj de DA povas kontribui al lernado de pozitivaj prognozaj eraroj, dum kiuj ili povas havi fortan respondon (ekz. Al neatendita rekompenco), ili eble ne kontribuas al lernado de negativaj prognozaj eraroj, dum kiuj ili povas havi malmultan aŭ neniun respondon ( ekz. al neatendita rekompenco-preterlaso) (Fig. 4B).

1. Ahlbrecht M, Weber M. La rezolucio de necerteco: eksperimenta studo. Revuo pri institucia kaj teoria ekonomiko. 1996; 152: 593 – 607.
2. Albin RL, Juna AB, Penney JB. La funkcia anatomio de bazaj ganglioj-malordoj. Tendencoj en neŭrosciencoj. 1989; 12: 366 – 375. [PubMed]
3. Anderson AK, Christoff K, Stappen I, Panitz D, Ghahremani DG, Glover G, Gabrieli JD, Sobel N. Disaj neŭralaj reprezentadoj de intenseco kaj valenco en homa olfakto. Nat Neurosci. 2003; 6: 196 – 202. [PubMed]
4. Anstrom KK, Miczek KA, Budygin EA. Pliigita fazo dopamina signalado en la mezolimbia vojo dum socia malvenko en ratoj. Neŭroscienco. 2009; 161: 3 – 12. [PubMed]
5. Aragona BJ, Tago JJ, Roitman MF, Cleaveland NA, Wightman RM, Carelli RM. Regiona specifeco en la realtempa disvolviĝo de fazaj dopaminaj transmisioj dum akiro de cue-kokaina asocio en ratoj. La eŭropa gazeto pri neŭroscienco. 2009; 30: 1889 – 1899. [PMC libera artikolo] [PubMed]
6. Austin AJ, Duka T. Mekanismoj de atento por avidaj kaj avaraj rezultoj en Pavloviana kondiĉado. Konduta cerba esplorado. 2010; 213: 19 – 26. [PubMed]
7. Badia P, Harsh J, Abbott B. Elekto Inter Antaŭvideblaj kaj Neantaŭvideblaj Koliziokondiĉoj: Datumoj kaj Teorio. Psikologia Bulteno. 1979; 86: 1107 – 1131.
8. Balleine BW, Killcross S. Paralela stimula pretigo: integra vido de amigdala funkcio. Tendencoj en neŭrosciencoj. 2006; 29: 272 – 279. [PubMed]
9. Balleine BW, O'Doherty JP. Homaj kaj ronĝulaj homologioj en agadkontrolo: kortikostriaj determinantoj de cel-direktita kaj kutima ago. Neŭropsikofarmakologio. 2010; 35: 48-69. [PMC libera artikolo] [PubMed]
10. Barr GA, Moriceau S, Shionoya K, Muzny K, Gao P, Wang S, Sullivan RM. Transiroj en infanlernado estas modulitaj per dopamino en la amigdala. Nat Neurosci. 2009; 12: 1364 – 1366. [PMC libera artikolo] [PubMed]
11. Bassareo V, De Luca MA, Di Chiara G. Diferenciala Esprimo de Motivaj Stimulaj Proprietoj de Dopamina en Nucleus Accumbens Shell kontraŭ Kerno kaj Prefrontal Cortex. J Neŭroscio. 2002; 22: 4709 – 4719. [PubMed]
12. Bassareo V, Di Chiara G. Diferencia respondeco de dopamina transdono al manĝaĵ-stimuloj en nukleaj akcipecaj konkoj / kernaj kupeoj. Neŭroscienco. 1999; 89: 637 – 641. [PubMed]
13. Baxter MG, Murray EA. La amigdala kaj rekompenco. Nat Rev Neurosci. 2002; 3: 563 – 573. [PubMed]
14. Bayer HM, Glimcher PW. Midbrain-dopamino-neŭronoj kodas kvantan premian antaŭdiron erarmosignalon. Neŭrono. 2005: 47: 129-141. [PMC libera artikolo] [PubMed]
15. Belova MA, Paton JJ, Morrison SE, Salzman KD. Atendo modulas neŭrajn respondojn al plaĉaj kaj avaraj stimuloj en primata amigdala. Neŭrono. 2007; 55: 970 – 984. [PMC libera artikolo] [PubMed]
16. Bentivoglio M, Morelli M. La organizado kaj cirkvitoj de mezencefikaj dopaminergiaj neŭronoj kaj la dissendo de dopaminaj riceviloj en la cerbo. Manlibro pri Kemia Neŭroanatomio. 2005: 1 – 107.
17. Berridge KC, Robinson TE. Kio estas la rolo de dopamino en rekompenco: hedonan efikon, rekompencan lernadon aŭ stimulan salecon? Esploro pri cerbo. 1998; 28: 309 – 369. [PubMed]
18. Besson C, Louilot A. Asimetria implikiĝo de mezolimbaj dopaminergiaj neŭronoj en afekta percepto. Neŭroscienco. 1995; 68: 963 – 968. [PubMed]
19. Birgner C, Nordenankar K, Lundblad M, Mendez JA, Smith C, le Greves M, Galter D, Olson L, Fredriksson A, Trudeau LE, et al. VGLUT2 en dopaminaj neŭronoj estas bezonata por psikostimulant-induktita konduta aktivado. Procedoj de la Nacia Akademio de Sciencoj de Usono de Ameriko. 2010; 107: 389 – 394. [PMC libera artikolo] [PubMed]
20. Bisley JW, Goldberg ME. Atento, intenco kaj prioritato en la parietia lobo. Ĉiujara revizio de neŭroscienco. 2010; 33: 1 – 21. [PMC libera artikolo] [PubMed]
21. Bjorklund A, Dunnett SB. Dopaminaj neŭronaj sistemoj en la cerbo: ĝisdatigo. Tendencoj en neŭrosciencoj. 2007; 30: 194 – 202. [PubMed]
22. Blazquez PM, Fujii N, Kojima J, Graybiel AM. Reto-reprezentado de respondproblemo en la striatumo. Neŭrono. 2002; 33: 973 – 982. [PubMed]
23. Botvinick MM, Braver TS, Barch DM, Carter CS, Cohen JD. Konflikta monitorado kaj kognitiva kontrolo. Psychol Rev. 2001; 108: 624 – 652. [PubMed]
24. Bradley MM, Greenwald MK, Petry MC, Lang PJ. Memori bildojn: plezuro kaj ekscitiĝo en memoro. J Exp Psychol Learn Mem Cogn. 1992; 18: 379 – 390. [PubMed]
25. Braun DA, Mehring C, Wolpert DM. Strukturas lernadon en ago. Konduta cerba esplorado. 2010; 206: 157 – 165. [PMC libera artikolo] [PubMed]
26. Brinschwitz K, Dittgen A, Madai VI, Lommel R, Geisler S, Veh RW. Glutamatergaj axonoj de la flankaj habenuloj plejparte finiĝas sur GABAergic-neŭronoj de la ventra mezkerno. Neŭroscienco. 2010; 168: 463 – 476. [PubMed]
27. Brischoux F, Chakraborty S, Brierley DI, Ungless MA. Faza ekscitiĝo de dopaminaj neŭronoj en ventralaj VTA per malutilaj stimuloj. Procedoj de la Nacia Akademio de Sciencoj de Usono de Ameriko. 2009; 106: 4894 – 4899. [PMC libera artikolo] [PubMed]
28. Bromberg-Martin ES, Hikosaka O. Midbrain-dopaminaj neŭronoj signalas preferon por anticipe informoj pri venontaj rekompencoj. Neŭrono. 2009; 63: 119 – 126. [PMC libera artikolo] [PubMed]
29. Bromberg-Martin ES, Matsumoto M, Hikosaka O. Distingta antaŭtona toniko kaj fazaj antaŭvidaj agadoj en flankaj habenulaj kaj dopaminaj neŭronoj. Neŭrono. 2010a; 67: 144 – 155. [PMC libera artikolo] [PubMed]
30. Bromberg-Martin ES, Matsumoto M, Hong S, Hikosaka O. A-signaloj de pallidus-habenula-dopamina inferigis valorojn de stimulo. J Neŭrofiziol. 2010b; 104: 1068 – 1076. [PMC libera artikolo] [PubMed]
31. Bromberg-Martin ES, Matsumoto M, Nakahara H, Hikosaka O. Multoblaj tempodaŭroj de memoro en flankaj habenula kaj dopamina neŭronoj. Neŭrono. 2010c; 67: 499 – 510. [PMC libera artikolo] [PubMed]
32. Bruna MTC, Henny P, Bolam JP, Magill PJ. Aktiveco de neŭrokemie heterogenaj dopaminergiaj neŭronoj en la substantia nigra dum spontaneaj kaj kaŭzitaj ŝanĝoj en cerba stato. J Neŭroscio. 2009; 29: 2915 – 2925. [PubMed]
33. Kardinalo RN. Neŭralaj sistemoj implikitaj en malfrua kaj probabilisma plifortigo. Neŭra Reto. 2006; 19: 1277 – 1301. [PubMed]
34. Gaja JF, Aragona BJ, Heien ML, Seipel AT, Carelli RM, Wightman RM. Kunordigita akuma dopamina liberigo kaj neŭra aktiveco veturas cel-direktitan konduton. Neŭrono. 2007; 54: 237 – 244. [PubMed]
35. Cheramy A, Kemel ML, Gauchy C, Desce JM, Galli T, Barbeito L, Glowinski J. Rolo de ekscitaj aminoacidoj en la rekta kaj nerekta presinaptika regulado de dopamina liberigo el nervaj fina stacioj de nigrostriataj dopaminaj neŭronoj. Aminoacidoj. 1991; 1: 351 – 363. [PubMed]
36. Maĉi SH, Ho JL. Espero: empiria studo de sinteno al la tempolimo de necerta rezolucio. Revuo pri Risko kaj Necerteco. 1994; 8: 267 – 288.
37. Chiodo LA, Antelman SM, Caggiula AR, Lineberry CG. Sensaj stimuloj ŝanĝas la ellasan indicon de dopamine (DA) neŭronoj: evidenteco por du funkciaj tipoj de DA-ĉeloj en la substantia nigra. Cerbo Res. 1980; 189: 544 – 549. [PubMed]
38. Christoph GR, Leonzio RJ, Wilcox KS. Stimuli la flankajn habenulojn inhibicias dopamin-enhavantajn neŭronojn en la substantia nigra kaj ventrala tegmenta areo de la rato. J Neŭroscio. 1986; 6: 613 – 619. [PubMed]
39. Chuhma N, Choi WY, Mingote S, Rayport S. Dopamina neŭrona glutamata cotransmisio: frekvenca dependado de modulado en la mezoventromedia projekcio. Neŭroscienco. 2009; 164: 1068 – 1083. [PMC libera artikolo] [PubMed]
40. Cohen JD, Braver TS, Brown JW. Komputadaj perspektivoj pri dopamina funkcio en prefrontal kortekso. Aktuala opinio en neurobiologio. 2002; 12: 223 – 229. [PubMed]
41. Coizet V, Dommett EJ, Klop EM, Redgrave P, Overton PG. La parabraka kerno estas maltrankviliga ligo en la transdono de informoj nociceptivaj de mallonga latenteco al dopaminergiaj neŭronoj. Neŭroscienco. 2010; 168: 263 – 272. [PMC libera artikolo] [PubMed]
42. Coizet V, Dommett EJ, Redgrave P, Overton PG. Nociceptivaj respondoj de dubonaj dopaminergiaj neŭronoj estas modulitaj de la supera kolikulo en la rato. Neŭroscienco. 2006; 139: 1479 – 1493. [PubMed]
43. Comoli E, Coizet V, Boyes J, Bolam JP, Canteras NS, Quirk RH, Overton PG, Redgrave P. Rekta projekcio de supera kolikulo ĝis substanca nigra por detekto de elstaraj vidaj eventoj. Nat Neurosci. 2003; 6: 974 – 980. [PubMed]
44. Korbitan LH, Balleine BW. Duobla dispartigo de bazolateralaj kaj centraj amigdaj lezoj sur la ĝeneralaj kaj rezultaj specifaj formoj de pavloviana-instrumenta translokigo. J Neŭroscio. 2005; 25: 962 – 970. [PubMed]
45. Dalley JW, Laane K, Theobald DE, Armstrong HC, Corlett PR, Chudasama Y, Robbins TW. Temp-limigita modulado de apetita Pavloviana memoro per D1 kaj NMDA-receptoroj en la kerno accumbens. Procedoj de la Nacia Akademio de Sciencoj de Usono de Ameriko. 2005; 102: 6189 – 6194. [PMC libera artikolo] [PubMed]
46. Daly HB. Prefero por neantaŭvidebleco estas inversigita, kiam neantaŭvidebla nerevena estas aversiva: procedoj, datumoj kaj teorioj de apeteca observado de responda akiro. En: Gormezano I, Wasserman EA, redaktoroj. Lernado kaj Memoro: La Kondutismaj kaj Biologiaj Substratoj. Asocioj de LE; 1992 pp 81 – 104.
47. Davidson MC, Horvitz JC, Tottenham N, Fossella JA, Watts R, Ulug AM, Casey BJ. Diferencaj kaŭdaj kaj cingulaj aktivadoj post neatenditaj nerevenantaj stimuloj. NeŭroImage. 2004; 23: 1039 – 1045. [PubMed]
48. Tago JJ, Roitman MF, Wightman RM, Carelli RM. Asocia lernado mezuras dinamikajn ŝanĝojn en dopamina signalado en la kerno accumbens. Nat Neurosci. 2007; 10: 1020 – 1028. [PubMed]
49. Dayan P, Niv Y. Plifortiga lernado: la bono, la malbonulo kaj la malbela. Aktuala opinio en neurobiologio. 2008; 18: 185 – 196. [PubMed]
50. Descarries L, Berube-Carriere N, Riad M, Bo GD, Mendez JA, Trudeau LE. Glutamato en dopaminaj neŭronoj: sinaptika kontraŭ disvastiga transdono. Recenzoj pri cerbaj esploroj. 2008; 58: 290 – 302. [PubMed]
51. Di Chiara G. Nucleus accumbens shell kaj kerna dopamino: diferenca rolo en konduto kaj toksomanio. Konduta cerba esplorado. 2002; 137: 75 – 114. [PubMed]
52. Dommett E, Coizet V, Blaha CD, Martindale J, Lefebvre V, Walton N, Mayhew JE, Overton PG, Redgrave P. Kiel vidaj stimuloj aktivigas dopaminergiajn neŭronojn je mallonga latenco. Scienco. 2005; 307: 1476 – 1479. [PubMed]
53. Dormont JF, Conde H, Farin D. La rolo de la pedunculopontina tegmenta kerno rilate al kondiĉita motora agado en la kato. I. Kunteksta-dependa kaj plifortikig-rilata ununura agado. Eksperimenta cerba esplorado. Experimentelle Hirnforschung. 1998; 121: 401 – 410. [PubMed]
54. Duzel E, Bunzeck N, Guitart-Masip M, Duzel S. NOvelty-rilataj instigo de antaŭĝojo kaj esplorado de dopamino (NOMAD): implicoj por sana maljuniĝo. Neŭroscienco kaj bio-kondutaj recenzoj. 2010; 34: 660 – 669. [PubMed]
55. El-Amamy H, Holanda komputilo. Disocieblaj efikoj de malkonektado de amigdala centra kerno de la ventra tegmenta areo aŭ substantia nigra pri lernita orientiĝado kaj instiga instigo. La eŭropa gazeto pri neŭroscienco. 2007; 25: 1557 – 1567. [PMC libera artikolo] [PubMed]
56. Ettenberg A. Kontraŭprocesaj proprietoj de mem-administrita kokaino. Neŭroscienco kaj bio-kondutaj recenzoj. 2004; 27: 721 – 728. [PubMed]
57. Fadok JP, Dickerson TM, Palmiter RD. Dopamino estas necesa por kviet-dependa timkondiĉo. J Neŭroscio. 2009; 29: 11089 – 11097. [PMC libera artikolo] [PubMed]
58. Fairhall AL, Lewen GD, Bialek W, de Ruyter Van Steveninck RR. Efikeco kaj ambigueco en adapta neŭra kodo. Naturo. 2001; 412: 787 – 792. [PubMed]
59. Faure A, Haberland U, Conde F, El Massioui N. Lesio al la nigrostriatala dopamina sistemo perturbas stimul-respondan kutiman formadon. J Neŭroscio. 2005; 25: 2771 – 2780. [PubMed]
60. Faure A, Reynolds SM, Richard JM, Berridge KC. Mezolimbika dopamino en deziro kaj timo: ebligante motivon esti generita de lokalizitaj glutamataj interrompoj en la kerno accumbens. J Neŭroscio. 2008; 28: 7184 – 7192. [PMC libera artikolo] [PubMed]
61. Fiorillo KD, Newsome WT, Schultz W. La tempa precizeco de rekompenca prognozo en dopaminaj neŭronoj. Nat Neurosci. 2008; 11: 966 – 973. [PubMed]
62. Fiorillo KD, Tobler PN, Schultz W. Diskreta kodigo de rekompenco kaj necerteco de dopamina-neŭronoj. Scienco. 2003; 299: 1898-1902. [PubMed]
63. Floresco SB, Ghods-Sharifi S, Vexelman C, Magyar O. Disigeblaj roloj por la kerno kaj akcento en la reguligo de ŝovŝovado. J Neŭroscio. 2006; 26: 2449 – 2457. [PubMed]
64. Ford CP, Gantz SC, Phillips PE, Williams JT. Kontrolo de eksterĉelaj dopaminoj ĉe dendritaj kaj axonaj fina stacioj. J Neŭroscio. 2010; 30: 6975 – 6983. [PMC libera artikolo] [PubMed]
65. Frank MJ. Dinamika dopamina modulado en la bazaj ganglioj: neurokomputila konto pri kognaj deficitoj en medicinita kaj nemedikita parkinsismo. Revuo pri kognitiva neŭroscienco. 2005; 17: 51 – 72. [PubMed]
66. Frank MJ, Fossella JA. Neŭrogenetiko kaj farmakologio de lernado, instigo kaj kogno. Neuropsikofarmakologio. 2010 [PMC libera artikolo] [PubMed]
67. Frank MJ, Seeberger LC, O'Reilly RC. Per karoto aŭ per bastono: kognitiva plifortiga lernado en parkinsonismo. Scienco. 2004; 306: 1940 – 1943. [PubMed]
68. Gallistel CR, Gibbon J. Tempo, prezo kaj kondiĉado. Psychol Rev. 2000; 107: 289 – 344. [PubMed]
69. Gao DM, Jeaugey L, Pollak P, Benabid AL. Nociceptivaj respondoj de laŭtempaj respondoj de supozitaj dopaminergiaj neŭronoj de la substantia nigra, pars kompakta en la rato kaj ilia modifo per flankaj enoj. Cerbo Res. 1990; 529: 315 – 319. [PubMed]
70. Gauriau C, Bernard JF. Doloraj vojoj kaj parabrachaj cirkvitoj en la rato. Eksperimenta fiziologio. 2002; 87: 251 – 258. [PubMed]
71. Geisler S, Zahm DS. Aferentoj de la ventra tegmenta areo en la rato-anatomia substrato por integraj funkcioj. The Journal of comparative neurology. 2005; 490: 270 – 294. [PubMed]
72. Gerfen CR, Engber TM, Mahan LC, Susel Z, Chase TN, Monsma FJ, Jr, Sibley DR. D1 kaj D2 dopamina receptoro-reguligita gena esprimo de striatonigraj kaj striatopallidalaj neŭronoj. Scienco. 1990; 250: 1429 – 1432. [PubMed]
73. Ghods-Sharifi S, Floresco SB. Malsamaj efikoj al rabatado de penado induktitaj de inaktivigoj de la kerno aŭ akcento. Konduta neŭroscienco. 2010; 124: 179 – 191. [PubMed]
74. Gonon FG. Netlinia rilato inter impulsa fluo kaj dopamino liberigita de rataj cerbaj dopaminergiaj neŭronoj kiel studitaj de in vivo elektrokemio. Neŭroscienco. 1988; 24: 19 – 28. [PubMed]
75. Goto Y, Yang CR, Otani S. Funkcia kaj disfunkcia sinaptika plastikeco en prefrontal-kortekso: roloj en psikiatriaj malordoj. Biologia psikiatrio. 2010; 67: 199 – 207. [PubMed]
76. Grace AA. Liberigo de fazo kontraŭ tonika dopamino kaj la modulado de respektiveco de dopamina sistemo: hipotezo por la etiologio de skizofrenio. Neŭroscienco. 1991: 41: 1-24. [PubMed]
77. Grace AA, Bunney BS. Intraĉela kaj eksterĉela elektrofiziologio de nigraj dopaminergiaj neŭronoj – 1. Identigo kaj karakterizado. Neŭroscienco. 1983; 10: 301-315. [PubMed]
78. Grace AA, Floresco SB, Goto Y, Lodge DJ. Reguligo de pafo de dopaminergiaj neŭronoj kaj kontrolo de cel-direktitaj kondutoj. Tendencoj en neŭrosciencoj. 2007; 30: 220 – 227. [PubMed]
79. Grecksch G, Matties H. La rolo de dopaminergiaj mekanismoj en la rato hipokampo por la solidigo en brila diskriminacio. Psikofarmakologio (Berl) 1981; 75: 165 – 168. [PubMed]
80. Guarraci FA, Kapp BS. Elektrofisiologia karaktero de ventralaj tegmentaj areaj dopaminergiaj neŭronoj dum diferenca pavloviana timkondiĉo en la veka kuniklo. Konduta cerba esplorado. 1999; 99: 169 – 179. [PubMed]
81. Haber SN, Fudge JL, McFarland NR. Striatonigrostriataj vojoj en primatoj formas ascendan spiralon de la ŝelo ĝis la dorsolatera striato. J Neŭroscio. 2000; 20: 2369 – 2382. [PubMed]
82. Halo J, Parkinson JA, Connor TM, Dickinson A, Everitt BJ. Partopreno de la centra kerno de la amigdala kaj kerno akcenta kerno en mediado de Pavloviaj influoj sur instrumenta konduto. La eŭropa gazeto pri neŭroscienco. 2001; 13: 1984 – 1992. [PubMed]
83. Han JS, McMahan RW, Holland P, Gallagher M. La rolo de amigdalo-nigrostriatala vojo en asocieca lernado. J Neŭroscio. 1997; 17: 3913 – 3919. [PubMed]
84. Harris GC, Aston-Jones G. Ekscitiĝo kaj rekompenco: dikotomio en orexinfunkcio. Tendencoj en neŭrosciencoj. 2006; 29: 571 – 577. [PubMed]
85. Herry C, Bach DR, Esposito F, Di Salle F, Perrig WJ, Scheffler K, Luthi A, Seifritz E. Procesado de tempa impredecibleco en homa kaj besta amigdalo. J Neŭroscio. 2007; 27: 5958 – 5966. [PubMed]
86. Hikida T, Kimura K, Wada N, Funabiki K, Nakanishi S. Distingitaj roloj de sinapsa transdono en rektaj kaj nerektaj striaj vojoj al rekompenco kaj avara konduto. Neŭrono. 2010; 66: 896 – 907. [PubMed]
87. Hikosaka O. Basalaj ganglioj-mekanismoj de rekompenco-orientita okula movado. Analoj de la Novjorka Akademio de Sciencoj. 2007; 1104: 229 – 249. [PubMed]
88. Hikosaka O. La habenula: de streĉiteco al valor-bazita decidiĝo. Nat Rev Neurosci. 2010; 11: 503 – 513. [PMC libera artikolo] [PubMed]
89. Hikosaka O, Takikawa Y, Kawagoe R. Rolo de la basaj ganglioj en la kontrolo de intencaj sakadaj okulaj movadoj. Fiziologiaj recenzoj. 2000; 80: 953 – 978. [PubMed]
90. Hitchcott PK, Quinn JJ, Taylor JR. Bidirekcia modulado de cel-direktitaj agoj de prefrontal-kortika dopamino. Cereba kortekso. 2007; 17: 2820 – 2827. [PubMed]
91. Hnasko TS, Chuhma N, Zhang H, Goh GY, Sulzer D, Palmiter RD, Rayport S, Edwards RH. Vesikala glutamata transporto antaŭenigas dopaminan stokadon kaj glutamatan klozon en vivo. Neŭrono. 2010; 65: 643 – 656. [PMC libera artikolo] [PubMed]
92. Holland PC, Gallagher M. Amygdala cirkvito en atentaj kaj reprezentaj procezoj. Tendencoj en kognaj sciencoj. 1999; 3: 65 – 73. [PubMed]
93. Hollerman JR, Schultz W. Dopamine-neŭronoj raportas eraron pri la tempa antaŭdiro de rekompenco dum lernado. Nat Neurosci. 1998; 1: 304 – 309. [PubMed]
94. Holroyd CB, Coles MG. La neŭra bazo de homa erara prilaborado: plifortiga lernado, dopamino kaj la erara rilata negativeco. Psychol Rev. 2002; 109: 679 – 709. [PubMed]
95. Hong S, Hikosaka O. La globus pallidus sendas rekompenc-rilatajn signalojn al la flanka habenula. Neŭrono. 2008; 60: 720 – 729. [PMC libera artikolo] [PubMed]
96. Horvitz JC. Respondoj al mesolimbocortical kaj nigrostriatal dopaminoj al elstaraj eventoj. Neŭroscienco. 2000: 96: 651-656. [PubMed]
97. Horvitz JC, Stewart T, Jacobs BL. Eksploda agado de ventralaj tegmentaj dopaminaj neŭronoj estas instigita de sensaj stimuloj en la maldorma kato. Cerbo Res. 1997; 759: 251 – 258. [PubMed]
98. Houk JC, Adams JL, Barto AG. Modelo de kiel la bazaj ganglioj generas kaj uzas neŭrajn signalojn, kiuj antaŭdiras plifortigon. En: Houk JC, Davis JL, DG Beiser, redaktoroj. Modeloj de Informprocesado en Basalaj Gangloj. Kembriĝo, MA: MIT Press; 1995 pp 249 – 274.
99. Ikemoto S. Cerbo-rekompenco-cirkvitoj preter la mezolimbia dopamina sistemo: neurobiologia teorio. Neŭroscienco kaj bio-kondutaj recenzoj. 2010 [PMC libera artikolo] [PubMed]
100. Ito R, Dalley JW, Howes SR, Robbins TW, Everitt BJ. Dissociado en Kondiĉita Dopamina Liberigo en la Kerno de Nucleus Accumbens kaj Shell en Respondo al Kokaino-Kvereloj kaj dum Koka-serĉanta Konduto en Ratoj. J Neŭroscio. 2000; 20: 7489 – 7495. [PubMed]
101. Ivlieva NY, Timofeeva NE. Neŭra agado en la pedunculopontina kerno dum manĝaĵ-rilata operant-kondiĉita reflekso. Neŭroscienco kaj Konduta Fiziologio. 2003a; 33: 919 – 928. [PubMed]
102. Ivlieva NY, Timofeeva NE. Neŭra agado en la pedunculopontina kerno dum operanta kondiĉita reflekto. Neŭroscienco kaj Konduta Fiziologio. 2003b; 33: 499 – 506. [PubMed]
103. Jalabert M, Aston-Jones G, Herzog E, Manzoni O, Georges F. Rolo de la lita kerno de la stria terminalo en la kontrolo de ventraj tegmentaj areoj dopaminaj neŭronoj. Progreso en neŭro-psikofarmacologio kaj biologia psikiatrio. 2009; 33: 1336-1346. [PMC libera artikolo] [PubMed]
104. Jeanblanc J, Hoeltzel A, Louilot A. Disparto en la implikiĝo de dopaminergiaj neŭronoj malkaŝantaj la kernajn kaj ŝelajn subregionojn de la kerno akuzaj en latenta inhibicio kaj kortuŝa percepto. Neŭroscienco. 2002; 111: 315 – 323. [PubMed]
105. Jensen J, Smith AJ, Willeit M, Crawley AP, Mikulis DJ, Vitcu I, Kapur S. Kodoj por apartaj cerbaj regionoj por saleco vs. valenco dum antaŭdiro de rekompenco en homoj. Mapado de homa cerbo. 2007; 28: 294 – 302. [PubMed]
106. Jhou TC, Kampoj HL, Baxter MG, Saper CB, Holland PC. La rostromeda tegmenta kerno (RMTg), GABAergic-aferulo al dubonaj dopaminaj neŭronoj, kodas aversajn stimulojn kaj inhibas motorajn respondojn. Neŭrono. 2009a; 61: 786 – 800. [PMC libera artikolo] [PubMed]
107. Jhou TC, Geisler S, Marinelli M, Degarmo BA, Zahm DS. La mezopontina rostromedia tegmentala kerno: Strukturo celata de la laterala habenula kiu projektas al la ventra tegmenta areo de Tsai kaj substantia nigra compacta. The Journal of comparative neurology. 2009b; 513: 566 – 596. [PMC libera artikolo] [PubMed]
108. Ji H, Shepard PD. Flankaj habenula stimulo inhibas raton midrobrainajn dopaminajn neŭronojn per GABA (A) ricevil-mediaciita mekanismo. J Neŭroscio. 2007; 27: 6923 – 6930. [PubMed]
109. Jin X, Costa RM. Komencoj / haltaj signaloj aperas en nigrostriaj cirkvitoj dum sekvenca lernado. Naturo. 2010; 466: 457 – 462. [PMC libera artikolo] [PubMed]
110. Johansen JP, Kampoj HL. Glutamatergic-aktivigo de antaŭa cingula kortekso produktas avancan instruan signalon. Nat Neurosci. 2004; 7: 398 – 403. [PubMed]
111. Joseph MH, Datla K, Juna AM. La interpreto de la mezurado de nukleo accumbens dopamine per in vivo dializo: la piedbato, la avido aŭ la kogno? Neŭroscienco kaj bio-kondutaj recenzoj. 2003; 27: 527 – 541. [PubMed]
112. Joshua M, Adler A, Bergman H. La dinamiko de dopamino en kontrolo de motora konduto. Aktuala opinio en neurobiologio. 2009a; 19: 615 – 620. [PubMed]
113. Joshua M, Adler A, Mitelman R, Vaadia E, Bergman H. Midbrain dopaminergic-neŭronoj kaj striaj kolinergiaj interneŭronoj kodas la diferencon inter rekompenco kaj aversaj okazaĵoj ĉe malsamaj epokoj de probabilistaj klasikaj kondiĉaj provoj. J Neŭroscio. 2008; 28: 11673 – 11684. [PubMed]
114. Joshua M, Adler A, Prut Y, Vaadia E, Wickens JR, Bergman H. Sinkronigado de dubonaj dopaminergiaj neŭronoj estas plibonigita rekompencante eventojn. Neŭrono. 2009b; 62: 695 – 704. [PubMed]
115. Kable JW, Glimcher PW. La neurobiologio de decido: konsento kaj diskutado. Neŭrono. 2009; 63: 733 – 745. [PMC libera artikolo] [PubMed]
116. Kakade S, Dayan P. Dopamine: ĝeneraligo kaj gratifikoj. Neŭralaj Retoj. 2002; 15: 549 – 559. [PubMed]
117. Kapur S. Psikozo kiel stato de aberiga saleco: kadro liganta biologion, fenomenologion, kaj farmakologion en skizofrenio. La usona revuo pri psikiatrio. 2003; 160: 13 – 23. [PubMed]
118. Kaufling J, Veinante P, Pawlowski SA, Freund-Mercier MJ, Barrot M. Aferentoj al la GABAergic vosto de la ventrala tegmentala areo en la rato. The Journal of comparative neurology. 2009; 513: 597 – 621. [PubMed]
119. Kennerley SW, Wallis JD. Taksi elektojn de unuopaj neŭronoj en la frontala lobo: rezulta valoro kodita tra multoblaj decidaj variabloj. La eŭropa gazeto pri neŭroscienco. 2009; 29: 2061 – 2073. [PMC libera artikolo] [PubMed]
120. Kim H, Sul JH, Huh N, Lee D, Jung MW. Rolo de striatumo en ĝisdatigo de valoroj de elektitaj agoj. J Neŭroscio. 2009; 29: 14701 – 14712. [PubMed]
121. Kiyatkin EA. Funkciaj ecoj de supozataj dopaminoj kaj aliaj ventraj tegmentaj areaj neŭronoj en konsciaj ratoj. Int J Neŭrosci. 1988a; 42: 21 – 43. [PubMed]
122. Kiyatkin EA. Morfino-induktita modifo de la funkciaj ecoj de ventraj tegmentaj areaj neŭronoj en konscia rato. Intern J Neŭroscienco. 1988b; 41: 57 – 70. [PubMed]
123. Klingberg T. Trejnado kaj plastikeco de laboranta memoro. Tendencoj en kognaj sciencoj. 2010; 14: 317 – 324. [PubMed]
124. Kobayashi S, Nomoto K, Watanabe M, Hikosaka O, Schultz W, Sakagami M. Influoj de rekompencaj kaj aversaj rezultoj sur aktiveco en makako flanka antaŭkorpa kortekso. Neŭrono. 2006; 51: 861 – 870. [PubMed]
125. Kobayashi S, Schultz W. Influo de rekompenco prokrastas respondojn de dopaminaj neŭronoj. J Neŭroscio. 2008; 28: 7837 – 7846. [PMC libera artikolo] [PubMed]
126. Kobayashi Y, Inoue Y, Yamamoto M, Isa T, Aizawa H. Kontribuo de pedunculopontinaj tegmentaj kernaj neŭronoj al plenumado de vide gviditaj sakraj taskoj en simioj. J Neŭrofiziol. 2002; 88: 715 – 731. [PubMed]
127. Koyama T, Tanaka YZ, Mikami A. Nociceptivaj neŭronoj en la makako antaŭa cingulato aktivigas dum antaŭvido de doloro. Neuroreporto. 1998; 9: 2663 – 2667. [PubMed]
128. Kravitz AV, Freeze BS, Parker PR, Kay K, Thwin MT, Deisseroth K, Kreitzer AC. Reguligo de parkinsonianaj motoraj kondutoj per optogenetika kontrolo de bazaj ganglioj. Naturo. 2010 [PMC libera artikolo] [PubMed]
129. Lammel S, Hetzel A, Hackel O, Jones I, Liss B, Roeper J. Unikaj ecoj de mesoprefrontalaj neŭronoj ene de duala mezocorticolimbia dopamina sistemo. Neŭrono. 2008; 57: 760 – 773. [PubMed]
130. Lang PJ, Davis M. Emocio, instigo, kaj la cerbo: reflektaj fundamentoj en homa kaj homa esplorado. Progreso en cerba esplorado. 2006; 156: 3 – 29. [PubMed]
131. Lapish CC, Kroener S, Durstewitz D, Lavin A, Seamans JK. La kapablo de la mezocortika dopamina sistemo funkcii en malsamaj tempaj reĝimoj. Psikofarmakologio (Berl) 2007; 191: 609 – 625. [PubMed]
132. Lee D, Seo H. Mekanismoj de plifortiga lernado kaj decidiĝo en la primata dorsolatera antaŭfronta kortekso. Analoj de la Akademio de Sciencoj de Novjorko. 2007; 1104: 108 – 122. [PubMed]
133. Lee HJ, Groshek F, Petrovich GD, Cantalini JP, Gallagher M, Holland PC. Rolo de amigdalo-nigra cirkvitado en kondiĉado de vida stimulo parigita kun manĝaĵo. J Neŭroscio. 2005; 25: 3881 – 3888. [PMC libera artikolo] [PubMed]
134. Levita L, Dalley JW, Robbins TW. Kerno akuzas dopaminon kaj lernis timon reviziita: revizio kaj iuj novaj trovoj. Konduta cerba esplorado. 2002; 137: 115 – 127. [PubMed]
135. Lin SC, Nicolelis MA. Neŭrala Ensemblo Eksplodanta en la Basal Antaŭkombro Kodigas Saliancon Sendepende de Valenco. Neŭrono. 2008; 59: 138 – 149. [PMC libera artikolo] [PubMed]
136. Lisman JE, Grace AA. La hipokampo-VTA buklo: kontrolo de eniro de informoj en longtempan memoron. Neŭrono. 2005; 46: 703 – 713. [PubMed]
137. Litt A, Plassmann H, Shiv B, Rangel A. Dissociante taksojn kaj baldaŭajn signalojn dum decidado. Cereba kortekso. 2010 en gazetaro. [PubMed]
138. Liu Z, Richmond BJ, Murray EA, Saunders RC, Steenrod S, Stubblefield BK, Montague DM, Ginns EI. DNA-celado de rejna kortekso D2-receptoro-proteino reverte blokas lernadon de signoj, kiuj antaŭdiras rekompencon. Procedoj de la Nacia Akademio de Sciencoj de Usono de Ameriko. 2004; 101: 12336 – 12341. [PMC libera artikolo] [PubMed]
139. Liu ZH, Shin R, Ikemoto S. Duala rolo de dopaj neŭronoj de mediaj A10 en afekcia kodado. Neuropsikofarmakologio. 2008; 33: 3010 – 3020. [PMC libera artikolo] [PubMed]
140. Ljungberg T, Apicella P, Schultz W. Respondoj de simio-dopamino-neŭronoj dum lernado de kondutaj reagoj. J Neurophysiol. 1992: 67: 145-163. [PubMed]
141. Lobo MK, Covington HE, 3rd, Chaudhury D, Friedman AK, Sun H, Damez-Werno D, Dietz DM, Zaman S, Koo JW, Kennedy PJ, et al. Ĉela tipo-specifa perdo de BDNF-signalado imitas optogenetikan kontrolon de kokainaj rekompencoj. Scienco. 2010; 330: 385 – 390. [PMC libera artikolo] [PubMed]
142. Maeda H, Mogenson GJ. Efikoj de ekstercentra stimulo sur la agado de neŭronoj en la ventra tegmenta areo, substantia nigra kaj midbrain-retikula formado de ratoj. Bultena esplorado. 1982; 8: 7 – 14. [PubMed]
143. Mantz J, Thierry AM, Glowinski J. Efekto de noĉa vosto pinĉas sur la senŝarĝa indico de mezocortikaj kaj mezolimbaj dopaminaj neŭronoj: selektiva aktivado de la mezokortika sistemo. Cerbo Res. 1989; 476: 377 – 381. [PubMed]
144. Margolis EB, Lock H, Hjelmstad GO, Kampoj HL. La ventrala tegmenta areo reviziita: ĉu estas elektrofisiologia markilo por dopaminergiaj neŭronoj? La Revuo pri fiziologio. 2006; 577: 907 – 924. [PMC libera artikolo] [PubMed]
145. Margolis EB, Mitchell JM, Ishikawa J, Hjelmstad GO, Kampoj HL. Midbrain-dopaminaj neŭronoj: projekcia celo determinas agadon potenciala daŭro kaj dopamina D (2) receptoro-inhibicio. J Neŭroscio. 2008; 28: 8908 – 8913. [PubMed]
146. Mark GP, Blander DS, Hoebel BG. Kondiĉita stimulo malpliigas eksterĉelan dopaminon en la kerno accumbens post la disvolviĝo de klera sensoproblemo. Brain Res. 1991: 551: 308-310. [PubMed]
147. Marowsky A, Yanagawa Y, Obata K, Vogt KE. Speciala subklaso de interneŭronoj mediacias dopaminergian faciligon de amigdala funkcio. Neŭrono. 2005; 48: 1025 – 1037. [PubMed]
148. Matsumoto M, Hikosaka O. Lateral habenula kiel fonto de negativaj rekompencaj signaloj en dopaminaj neŭronoj. Naturo. 2007; 447: 1111 – 1115. [PubMed]
149. Matsumoto M, Hikosaka O. Reprezento de negativa motiviga valoro en la primata flanka habenula. Nat Neurosci. 2009a; 12: 77 – 84. [PMC libera artikolo] [PubMed]
150. Matsumoto M, Hikosaka O. Du specoj de dopamina neŭro distingas distinge pozitivajn kaj negativajn motivajn signalojn. Naturo. 2009b; 459: 837 – 841. [PMC libera artikolo] [PubMed]
151. Matsumoto M, Matsumoto K, Abe H, Tanaka K. Meza antaŭfrontalĉela agado signalanta prognozajn erarojn de agaj valoroj. Nat Neurosci. 2007; 10: 647 – 656. [PubMed]
152. May PJ, McHaffie JG, Stanford TR, Jiang H, Costello MG, Coizet V, Hayes LM, Haber SN, Redgrave P. Tectonigral-projekcioj en la primato: vojo por antaŭ-atentema sensa enigo al dubrainaj dopaminergiaj neŭronoj. La eŭropa gazeto pri neŭroscienco. 2009; 29: 575 – 587. [PMC libera artikolo] [PubMed]
153. Mazzoni P, Hristova A, Krakauer JW. Kial ni ne moviĝas pli rapide? Parkinson-malsano, moviĝemo kaj implica instigo. J Neŭrosci. 2007; 27: 7105-7116. [PubMed]
154. Merali Z, Michaud D, McIntosh J, Kent P, Anisman H. Diferenca partopreno de amigdaloidaj CRH-sistemoj en la elstaraĵo kaj valento de la stimuloj. Progreso en neŭro-psikofarmacologio kaj biologia psikiatrio. 2003; 27: 1201-1212. [PubMed]
155. Mirenowicz J, Schultz W. Preferebla aktivado de dubonaj dopaminaj neŭronoj per apetito anstataŭ avversaj stimuloj. Naturo. 1996; 379: 449 – 451. [PubMed]
156. Molina-Luna K, Pekanovic A, Rohrich S, Hertler B, Schubring-Giese M, Rioult-Pedotti MS, Luft AR. Dopamino en motora kortekso estas necesa por lerta lernado kaj sinaptika plastikeco. PLOS UNU. 2009; 4: e7082. [PMC libera artikolo] [PubMed]
157. Montague PR, Berns GS. Neŭtrala ekonomiko kaj la biologiaj substratoj de taksado. Neŭrono. 2002; 36: 265 – 284. [PubMed]
158. Montague PR, Dayan P, Sejnowski TJ. Kadro por mesencefikaj dopaminaj sistemoj bazitaj sur antaŭdira hebba lernado. J Neŭroscio. 1996; 16: 1936 – 1947. [PubMed]
159. Morris G, Arkadir D, Nevet A, Vaadia E, Bergman H. Koincidaj sed distingaj mesaĝoj de cerba dopamino kaj striaj tonike aktivaj neŭronoj. Neŭrono. 2004; 43: 133 – 143. [PubMed]
160. Morris G, Nevet A, Arkadir D, Vaadia E, Bergman H. Midbrain-dopaminaj neŭronoj kodas decidojn por estonta agado. Nat Neurosci. 2006; 9: 1057 – 1063. [PubMed]
161. Morrison SE, Salzman KD. La konverĝo de informoj pri rekompencaj kaj avaraj stimuloj en unuopaj neŭronoj. J Neŭroscio. 2009; 29: 11471 – 11483. [PMC libera artikolo] [PubMed]
162. Nakahara H, Itoh H, Kawagoe R, Takikawa Y, Hikosaka O. Dopamineaj neŭronoj povas reprezenti kuntekston-dependa eraro. Neŭrono. 2004; 41: 269 – 280. [PubMed]
163. Nakamura K, Hikosaka O. Rolo de dopamino en la primata caudata kerno en rekompenca modulado de sakadoj. J Neŭroscio. 2006; 26: 5360 – 5369. [PubMed]
164. Neve KA, Seamans JK, Trantham-Davidson H. Dopamina ricevilo. Ofurnalo de enketo de signaloj kaj transdona signalado. 2004; 24: 165 – 205. [PubMed]
165. Nishijo H, Ono T, Nishino H. Ununuraj neŭronaj respondoj en amigdalo de garde simio dum kompleksa sensa stimulado kun afekta signifo. J Neŭroscio. 1988; 8: 3570 – 3583. [PubMed]
166. Niv Y, Daw ND, Joel D, dayan P. Tonic dopamine: ŝanco-kostoj kaj kontrolo de respondo-vigleco. Psikofarmakologio. 2007; 191: 507 – 520. [PubMed]
167. Nomoto K, Schultz W, Watanabe T, Sakagami M. Intertempe etendis dopaminajn respondojn al perceptive postulantaj rekompenco-prognozaj stimuloj. J Neŭroscio. 2010; 30: 10692 – 10702. [PMC libera artikolo] [PubMed]
168. Okada K, Toyama K, Inoue Y, Isa T, Kobayashi Y. Diversaj pedunculopontinaj tegmentaj neŭronoj signalas antaŭdiritan kaj efektivan taskon rekompencas. J Neŭroscio. 2009; 29: 4858 – 4870. [PubMed]
169. Omelchenko N, Bell R, Sesack SR. Flankaj habenulaj projekcioj al dopamino kaj GABA-neŭronoj en la rat-ventrala tegmenta areo. La eŭropa gazeto pri neŭroscienco. 2009; 30: 1239 – 1250. [PMC libera artikolo] [PubMed]
170. Owesson-White CA, Ariansen J, Stuber GD, Cleaveland NA, Cheer JF, Wightman RM, Carelli RM. Neŭtrala kodado de kokaina serĉa konduto koincidas kun fazo de dopamina liberigo en la akcipa kerno kaj ŝelo. La eŭropa gazeto pri neŭroscienco. 2009; 30: 1117 – 1127. [PMC libera artikolo] [PubMed]
171. Oyama K, Hernadi I, Iijima T, Tsutsui K. Rekompensa erara prognozo kodanta en dorsajn striatajn neŭronojn. J Neŭroscio. 2010; 30: 11447 – 11457. [PubMed]
172. Packard MG, Blanka NM. Dissocia hipokampo kaj kaŭdaj kernaj memorosistemoj posttrajnado de intracerebra injekto de dopaminaj agonistoj. Konduta neŭroscienco. 1991; 105: 295 – 306. [PubMed]
173. Padoa-Schioppa C. Orbitofrontala kortekso kaj la kalkulado de ekonomia valoro. Analoj de la Akademio de Sciencoj de Novjorko. 2007; 1121: 232 – 253. [PubMed]
174. Palmiter RD. Dopamina signalado en la dorsa striatumo estas esenca por motivitaj kondutoj: lecionoj de dopamina-manka musoj. Analoj de la Akademio de Sciencoj de Novjorko. 2008; 1129: 35 – 46. [PMC libera artikolo] [PubMed]
175. Pan WX, Hyland BI. Pedunculopontine tegmental kerno kontrolas kondiĉigitajn respondojn de dubonaj dopaminaj neŭronoj en kondutaj ratoj. J Neŭroscio. 2005; 25: 4725 – 4732. [PubMed]
176. Pan WX, Schmidt R, Wickens JR, Hyland BI. Triparta mekanismo de formorto sugestita de dopamina neŭrona aktiveco kaj temporal diferenca modelo. J Neŭroscio. 2008; 28: 9619 – 9631. [PubMed]
177. Parker JG, Zweifel LS, Clark JJ, Evans SB, Phillips PE, Palmiter RD. Foresto de NMDA-riceviloj en dopaminaj neŭronoj mildigas dopamin-liberigon sed ne kondiĉitan aliron dum Pavloviana kondiĉado. Procedoj de la Nacia Akademio de Sciencoj de Usono de Ameriko. 2010 [PMC libera artikolo] [PubMed]
178. Pascoe JP, Kapp BS. Elektrofiziologiaj trajtoj de neŭgdaloidaj neŭronoj de centra kerno dum pavloviaj timkondiĉoj en la kuniklo. Konduta cerba esplorado. 1985; 16: 117 – 133. [PubMed]
179. Pascucci T, Ventura R, Latagliata EC, Cabib S, Puglisi-Allegra S. La media prefrontal-kortekso determinas la akcensan dopaminan respondon al streso per la kontraŭaj influoj de noradrenalino kaj dopamino. Cereba kortekso. 2007; 17: 2796 – 2804. [PubMed]
180. Pearce JM, Hall G. Modelo por Pavloviana lernado: variadoj en la efikeco de kondiĉitaj sed ne de senkondiĉaj stimuloj. Psychol Rev. 1980; 87: 532 – 552. [PubMed]
181. Pezze MA, Feldon J. Mezolimbaj dopaminergiaj vojoj en timkondiĉo. Progreso en neurobiologio. 2004; 74: 301 – 320. [PubMed]
182. Phillips AG, Ahn S, Howland JG. Amigdala kontrolo de la mezocorticolimbic dopamina sistemo: paralelaj vojoj al instigita konduto. Neŭroscienco kaj bio-kondutaj recenzoj. 2003a; 27: 543 – 554. [PubMed]
183. Phillips GD, Salussolia E, Hitchcott PK. Rolo de la mezoamigdaloida dopamina projekcio en emocia lernado. Psikofarmakologio. 2010 [PubMed]
184. Phillips PE, Stuber GD, Heien ML, Wightman RM, Carelli RM. Subsekunda dopamina liberigo antaŭenigas serĉadon de kokaino. Naturo. 2003b; 422: 614 – 618. [PubMed]
185. Porrino LJ, Goldman-Rakic ​​PS. Cerbo-konservado de prefrontal kaj antaŭa cingulada kortekso en la simio de rizo rivelita per retrograda transporto de HRP. The Journal of comparative neurology. 1982; 205: 63 – 76. [PubMed]
186. Puryear CB, Kim MJ, Mizumori SJ. Konjunkcia kodado de movado kaj rekompenco per ventraj tegmentaj areaj neŭronoj en la libere naviganta ronĝulo. Konduta neŭroscienco. 2010; 124: 234 – 247. [PMC libera artikolo] [PubMed]
187. Ravel S, Legallet E, Apicella P. Tonike aktivaj neŭronoj en la simia striatumo ne prefere respondas al apetitaj stimuloj. Eksperimenta cerba esplorado. Experimentelle Hirnforschung. 1999; 128: 531 – 534. [PubMed]
188. Ravel S, Legallet E, Apicella P. La respondoj de tonike aktivaj neŭronoj en la simia striatumo diskriminaciiĝas inter motivaj kontraŭstaraj stimuloj. J Neŭroscio. 2003; 23: 8489 – 8497. [PubMed]
189. Ravel S, Richmond BJ. Dopamaj neŭronaj respondoj en simioj plenumantaj videblan rekompencan horaron. La eŭropa gazeto pri neŭroscienco. 2006; 24: 277 – 290. [PubMed]
190. Redgrave P, Gurney K. La mallong-latenta dopamina signalo: rolo por malkovri novajn agojn? Nat Rev Neurosci. 2006; 7: 967 – 975. [PubMed]
191. Redgrave P, Prescott TJ, Gurney K. Ĉu la respondo de dopamina de mallonga latenco estas tro mallonga por signali eraran rekompencon? Tendencoj en neŭrosciencoj. 1999; 12: 146 – 151. [PubMed]
192. Rescorla RA, Wagner AR. Teorio de Pavloviana kondiĉado: variaĵoj en la efikeco de plifortigo kaj nereformo. En: Nigra AH, Prokasy WF, redaktistoj. Klasika Kondiĉado II: Aktuala Esploro kaj Teorio. New York, New York: Appleton Century Crofts; 1972 pp 64 – 99.
193. Reynolds JNJ, Hyland BI, Wickens JR. Ĉela mekanismo de rekompenca rilata lernado. Naturo. 2001; 413: 67 – 70. [PubMed]
194. Reynolds SM, Berridge KC. Pozitiva kaj negativa instigo en ŝelo de kerno accumbens: duvalentaj rostrokaŭdaj gradientoj por GABA-ellogita manĝado, gustas "ŝati" / "malŝati" reagojn, preferon / evitadon kaj timon. J Neŭrosci. 2002; 22: 7308-7320. [PubMed]
195. Richardson RT, DeLong MR. Elektrofisiologiaj studoj pri la funkcioj de la kerno bazalis en primatoj. Antaŭenigoj en eksperimenta medicino kaj biologio. 1991; 295: 233 – 252. [PubMed]
196. Robbins TW, Arnsten AF. La neuropsikofarmakologio de front-ekzekutiva funkcio: modulado de monoaminergic. Ĉiujara revizio de neŭroscienco. 2009; 32: 267 – 287. [PMC libera artikolo] [PubMed]
197. Robinson DL, Hermans A, Seipel AT, Wightman RM. Monitoranta rapidan kemian komunikadon en la cerbo. Kemiaj recenzoj. 2008; 108: 2554 – 2584. [PMC libera artikolo] [PubMed]
198. Roesch MR, Calu DJ, Schoenbaum G. Dopamine-neŭronoj kodas la pli bonan eblon ĉe ratoj, decidantaj inter malsama prokrasto aŭ grandeco. Nat Neurosci. 2007; 10: 1615 – 1624. [PMC libera artikolo] [PubMed]
199. Roesch MR, Olson CR. Neŭrona agado rilata al rekompenco de valoro kaj motivado en primato frontala kortekso. Scienco. 2004: 304: 307-310. [PubMed]
200. Roitman MF, Wheeler RA, Wightman RM, Carelli RM. Realtempaj kemiaj respondoj en la kerno akcentas diferencajn rekompencajn kaj aversajn stimulojn. Nat Neurosci. 2008; 11: 1376 – 1377. [PMC libera artikolo] [PubMed]
201. Rutledge RB, Lazzaro SC, Lau B, Myers CE, Gluck MA, Glimcher PW. Dopaminergiaj drogoj modulas lernajn rapidojn kaj persistadon ĉe Parkinson-pacientoj en dinamika furaĝa tasko. J Neŭrosci. 2009; 29: 15104-15114. [PMC libera artikolo] [PubMed]
202. Salamone JD. La implikiĝo de kerno akuzas dopaminon en avida kaj aversiva instigo. Konduta cerba esplorado. 1994; 61: 117 – 133. [PubMed]
203. Salamone JD, Correa M, Farrar A, Mingote SM. Funkcia-ligitaj funkcioj de kerno accumbens dopamine kaj rilataj cerbo-cirkvitoj. Psikofarmacologio (Berl) 2007; 191: 461-482. [PubMed]
204. Satoh T, Nakai S, Sato T, Kimura M. Korelacia kodado de instigo kaj rezulto de decido de dopaminaj neŭronoj. J Neŭroscio. 2003; 23: 9913 – 9923. [PubMed]
205. Savine AC, Beck SM, Edwards BG, Chiew KS, Braver TS. Plibonigo de kogna kontrolo per alproksimiĝo kaj evitado de motivaj statoj. Kono kaj emocio. 2010; 24: 338-356. [PMC libera artikolo] [PubMed]
206. Schoenbaum G, Roesch MR, Stalnaker TA, Takahashi YK. Nova perspektivo pri la rolo de la orbitofronta kortekso en adapta konduto. Nat Rev Neurosci. 2009; 10: 885 – 892. [PMC libera artikolo] [PubMed]
207. Schultz W. Respondoj de dubonaj dopaminaj neŭronoj al kondutaj ellasaj stimuloj en simio. J Neŭrofiziol. 1986; 56: 1439 – 1461. [PubMed]
208. Schultz W. Signalo de prognozaj rekompencoj de dopaminaj neŭronoj. J Neurophysiol. 1998: 80: 1-27. [PubMed]
209. Schultz W. Multoblaj dopaminfunkcioj ĉe malsamaj tempokursoj. Ĉiujara revizio de neŭroscienco. 2007; 30: 259 – 288. [PubMed]
210. Schultz W. Dopamina signalas pri rekompenca valoro kaj risko: bazaj kaj lastatempaj datumoj. Behav-Cerbo-Funkcio. 2010; 6: 24. [PMC libera artikolo] [PubMed]
211. Schultz W, Dayan P, Montague PR. Substara neŭtrala antaŭdiro kaj rekompenco. Scienco. 1997; 275: 1593-1599. [PubMed]
212. Schultz W, Romo R. Respondoj de nigrostriatalaj dopaminaj neŭronoj al alt-intensa somatosensoria stimulado en la anestezita simio. J Neŭrofiziol. 1987; 57: 201 – 217. [PubMed]
213. Schultz W, Romo R. Dopamineaj neŭronoj de la simia mezkerno: kontingentoj de respondoj al stimuloj provokantaj tujajn kondutajn reagojn. J Neŭrofiziol. 1990; 63: 607 – 624. [PubMed]
214. Seo H, Lee D. Tempa filtrado de rekomendaj signaloj en la dorsala antaŭa cingulada kortekso dum miksita strategia ludo. J Neŭroscio. 2007; 27: 8366 – 8377. [PMC libera artikolo] [PubMed]
215. Shabel SJ, Janak PH. Substanta simileco en amigdala neuronal aktiveco dum kondiĉita apetito kaj aversiva emocia ekscitiĝo. Procedoj de la Nacia Akademio de Sciencoj de Usono de Ameriko. 2009; 106: 15031 – 15036. [PMC libera artikolo] [PubMed]
216. Shadmehr R, Smith MA, Krakauer JW. Erara Korektado, Sensa Antaŭdiro kaj Adapto en Motorregilo. Ĉiujara revizio de neŭroscienco. 2010 [PubMed]
217. Shen W, Flajolet M, Greengard P, Surmeier DJ. Dikotomaj dopaminergiaj kontroloj de striat-sinaptika plastikeco. Scienco. 2008; 321: 848 – 851. [PMC libera artikolo] [PubMed]
218. Ŝimo Y, Wichmann T. Neŭrona agado en la subtalamika kerno modulas la liberigon de dopamino en la simia striatumo. La eŭropa gazeto pri neŭroscienco. 2009; 29: 104 – 113. [PMC libera artikolo] [PubMed]
219. Shippenberg TS, Bals-Kubik R, Huber A, Herz A. Neŭraŭtomataj substratoj mediaciantaj la aversajn efikojn de antagonistoj de dopamina ricevilo D-1. Psikofarmakologio (Berl) 1991; 103: 209 – 214. [PubMed]
220. Shumake J, Ilango A, Scheich H, Wetzel W, Ohl FW. Malsama neuromodulado de akiro kaj eltiro de evitado de lernado de la flanka habenula kaj ventrala tegmentala areo. J Neŭroscio. 2010; 30: 5876 – 5883. [PubMed]
221. Malgranda DM, Gregory MD, Mak YE, Gitelman D, Mesulam MM, Parrish T. Dispartigo de neŭra reprezentado de intenseco kaj afekcia taksado en homa gusto. Neŭrono. 2003; 39: 701 – 711. [PubMed]
222. Stefani MR, Moghaddam B. Regula lernado kaj rekompenco-kontenteco estas asociitaj kun disigeblaj ŝablonoj de dopamina aktivado en la rato antaŭfronta kortekso, nucleus accumbens, kaj dorsal striatum. J Neŭroscio. 2006; 26: 8810 – 8818. [PMC libera artikolo] [PubMed]
223. Steinfels GF, Heym J, Strecker RE, Jacobs BL. Respondo de dopaminergiaj neŭronoj en kato al aŭdaj stimuloj prezentitaj tra la ciklo de dormo-vekiĝo. Cerbo Res. 1983; 277: 150 – 154. [PubMed]
224. Strecker RE, Jacobs BL. Substantia nigra dopaminergia unueca aktiveco en kondutaj katoj: efiko de ekscitiĝo sur spontanea senŝargiĝo kaj sensa elvokita aktiveco. Cerbo Res. 1985; 361: 339 – 350. [PubMed]
225. Stuber GD, Hnasko TS, Britt JP, Edwards RH, Bonci A. Dopaminergaj fina stacioj en la kerno acumbens sed ne dorsal striatum corelease glutamato. Revuo por Neŭroscienco. 2010; 30: 8229 – 8233. [PMC libera artikolo] [PubMed]
226. Stuber GD, Wightman RM, Carelli RM. Estingo de kokain-memadministrado rivelas funkcie kaj tempe distingajn dopaminergiajn signalojn en la kerno accumbens. Neŭrono. 2005; 46: 661 – 669. [PubMed]
227. Sul JH, Kim H, Huh N, Lee D, Jung MW. Distingitaj roloj de ronĝuloj orbitofrontal kaj media prefrontal-kortekso en decidiĝo. Neŭrono. 2010; 66: 449 – 460. [PMC libera artikolo] [PubMed]
228. Surmeier DJ, Ding J, Tago M, Wang Z, Shen W. D1 kaj D2 dopamina-ricevilo-modulado de striatala glutamatergic-signalado en striatal-mezaj spinaj neŭronoj. Tendencoj en neŭrosciencoj. 2007; 30: 228 – 235. [PubMed]
229. Surmeier DJ, Shen W, Tago M, Gertler T, Chan S, Tian X, Plotkin JL. La rolo de dopamino en modulado de la strukturo kaj funkcio de striaj cirkvitoj. Progreso en cerba esplorado. 2010; 183C: 148 – 167. [PubMed]
230. Sutton RS, Barto AG. Al moderna teorio de adaptaj retoj: atendo kaj prognozo. Psychol Rev. 1981; 88: 135 – 170. [PubMed]
231. Takahashi YK, Roesch MR, Stalnaker TA, Haney RZ, Calu DJ, Taylor AR, Burke KA, Schoenbaum G. La orbitofrontala kortekso kaj ventrala tegmenta areo estas necesaj por lernado de neatenditaj rezultoj. Neŭrono. 2009; 62: 269 – 280. [PMC libera artikolo] [PubMed]
232. Takikawa Y, Kawagoe R, Hikosaka O. Ebla rolo de dubonaj dopaminaj neŭronoj en mallonga kaj longtempa adaptado de saksoj al pozici-rekompenca mapado. J Neŭrofiziol. 2004; 92: 2520 – 2529. [PubMed]
233. Tecuapetla F, Patel JC, Xenias H, angla D, Tadros I, Shah F, Berlin J, Deisseroth K, Rice ME, Tepper JM, Koos T. Glutamatergic signalado de mezolimbaj dopaminaj neŭronoj en la kerno acumbens. J Neŭroscio. 2010; 30: 7105 – 7110. [PMC libera artikolo] [PubMed]
234. Thierry AM, Tassin JP, Blanc G, Glowinski J. Selektiva aktivigo de mezokortika DA-sistemo per streĉado. Naturo. 1976; 263: 242 – 244. [PubMed]
235. Tobler PN, Dickinson A, Schultz W. Kodigo de Antaŭdirita Rekompenca Omisiigo de Dopaminaj Neŭronoj en Kondiĉa Inhibicia Paradigmo. J Neŭroscio. 2003; 23: 10402 – 10410. [PubMed]
236. Tobler PN, Fiorillo KD, Schultz W. Adapta kodado de rekompenca valoro de dopaminaj neŭronoj. Scienco. 2005; 307: 1642 – 1645. [PubMed]
237. Tsai HC, Zhang F, Adamantidis A, Stuber GD, Bonci A, de Lecea L, Deisseroth K. Phasic Firing in Dopaminergic Neurons is enough for Behavioral Conditioning. Scienco. 2009 [PubMed]
238. Ullsperger M. Genetikaj asociaj studoj pri monitorado de agado kaj lernado de retrosciigo: la rolo de dopamino kaj serotonino. Neŭroscienco kaj bio-kondutaj recenzoj. 2010; 34: 649 – 659. [PubMed]
239. Malhonesta MA. Dopamina: la elstara afero. Tendencoj en neŭrosciencoj. 2004; 27: 702 – 706. [PubMed]
240. Uylings HB, Groenewegen HJ, Kolb B. Ĉu la ratoj havas antaŭfrontalan kortekson? Konduta cerba esplorado. 2003; 146: 3 – 17. [PubMed]
241. Ventura R, Cabib S, Puglisi-Allegra S. Kontraŭas genotip-dependajn mezocorticolimbajn dopaminajn respondojn al streso. Neŭroscienco. 2001; 104: 627 – 631. [PubMed]
242. Ventura R, Latagliata EC, Morrone C, La Mela I, Puglisi-Allegra S. Prefronta norepinefrino determinas atribuon de "alta" instiga elstaraĵo. PLOS UNU. 2008; 3: e3044. [PMC libera artikolo] [PubMed]
243. Ventura R, Morrone C, Puglisi-Allegra S. Prefrontal / akciza katekolamina sistemo determinas motivan salan atributon al rekompenco kaj aversion-rilataj stimuloj. Procedoj de la Nacia Akademio de Sciencoj de Usono de Ameriko. 2007; 104: 5181 – 5186. [PMC libera artikolo] [PubMed]
244. Vogt BA. Doloro kaj emocio interagas en subregionoj de la cingulada giro. Nat Rev Neurosci. 2005; 6: 533 – 544. [PMC libera artikolo] [PubMed]
245. Voon V, Pessiglione M, Brezing C, Gallea C, Fernandez HH, Dolan RJ, Hallett M. Mekanismoj subirantaj al dopamin-mediaciaj rekompencoj en devigaj kondutoj. Neŭrono. 2010; 65: 135 – 142. [PMC libera artikolo] [PubMed]
246. Waelti P, Dickinson A, Schultz W. Respondoj pri dopaminoj plenumas bazajn supozojn de formala lernado teorio. Naturo. 2001: 412: 43-48. [PubMed]
247. Wallis JD, Kennerley SW. Heterogena rekompenco signalas en antaŭfrontal-kortekso. Aktuala opinio en neurobiologio. 2010; 20: 191 – 198. [PMC libera artikolo] [PubMed]
248. Walton ME, Behrens TE, Buckley MJ, Rudebeck PH, Rushworth MF. Disigeblaj lernadaj sistemoj en la makaka cerbo kaj la rolo de orbitofronta kortekso en kontingenta lernado. Neŭrono. 2010; 65: 927 – 939. [PMC libera artikolo] [PubMed]
249. Wheeler RA, Twining RC, Jones JL, Slater JM, Grigson PS, Carelli RM. Kondutaj kaj elektrofiziologiaj indeksoj de negativa efiko antaŭdiras mem-administradon de kokaino. Neŭrono. 2008: 57: 774-785. [PubMed]
250. Wightman RM, Heien MLAV, Wassum KM, Sombers LA, Aragona BJ, Khan AS, Ariansen JL, Cheer JF, Phillips PE, Carelli RM. Dopamina liberigo estas heterogena en mikroambientoj de la rato-kerno accumbens. La eŭropa gazeto pri neŭroscienco. 2007; 26: 2046 – 2054. [PubMed]
251. Williams GV, Castner SA. Sub la kurbo: maltrankviligaj problemoj por elĉerpi D1-receptorfunkcion en laboranta memoro. Neŭroscienco. 2006; 139: 263 – 276. [PubMed]
252. Williams SM, Goldman-Rakic ​​PS. Vastigita deveno de la primata mezofronta dopamina sistemo. Cereba kortekso. 1998; 8: 321 – 345. [PubMed]
253. Winn P. Kiel plej bone konsideri la strukturon kaj funkcion de la pedunculopontina tegmenta kerno: evidenteco de bestaj studoj. Revuo pri la Neŭrologiaj Sciencoj. 2006; 248: 234 – 250. [PubMed]
254. Saĝa RA. Dopamino, lernado kaj instigo. Nat Rev Neurosci. 2004; 5: 483 – 494. [PubMed]
255. Saĝa RA. Ĉefaj substratoj de rekompenco kaj instigo. The Journal of comparative neurology. 2005; 493: 115 – 121. [PMC libera artikolo] [PubMed]
256. Saĝa SP. Antaŭen frontaj kampoj: filogenia kaj fundamenta funkcio. Tendencoj en neŭrosciencoj. 2008; 31: 599 – 608. [PMC libera artikolo] [PubMed]
257. Yamada H, Matsumoto N, Kimura M. Tonike aktivaj neŭronoj en la primata caŭda kerno kaj putamen diferencaj kodas instruitajn motivajn rezultojn de ago. J Neŭroscio. 2004; 24: 3500 – 3510. [PubMed]
258. Yamada H, Matsumoto N, Kimura M. Historio- kaj aktuala instru-bazita kodigo de venontaj kondutismaj rezultoj en la striatumo. J Neŭrofiziol. 2007; 98: 3557 – 3567. [PubMed]
259. Yin HH, Knowlton BJ. La rolo de la bazaj ganglioj en kutima formado. Nat Rev Neurosci. 2006; 7: 464 – 476. [PubMed]
260. Juna AM, Moran PM, Joseph MH. La rolo de dopamino en kondiĉado kaj latenta inhibo: kio, kiam, kie kaj kiel? Neŭroscienco kaj bio-kondutaj recenzoj. 2005; 29: 963 – 976. [PubMed]
261. Zaghloul KA, Blanco JA, Weidemann CT, McGill K, Jaggi JL, Baltuch GH, Kahana MJ. Homaj substantivaj nigra neŭronoj kodas neatenditajn financajn rekompencojn. Scienco. 2009; 323: 1496 – 1499. [PMC libera artikolo] [PubMed]
262. Zahniser NR, Sorkin A. Rapida regulado de la dopamina transportilo: rolo en stimulanta toksomanio? Neŭrofarmakologio. 2004; 47 Suppl 1: 80 – 91. [PubMed]
263. Zhang L, Doyon WM, Clark JJ, Phillips PE, Dani JA. Kontroloj de tona kaj fazo dopamina transdono en la dorsala kaj ventra striatumo. Molekula farmakologio. 2009; 76: 396 – 404. [PMC libera artikolo] [PubMed]
264. Zink CF, Pagnoni G, Martin ME, Dhamala M, Berns GS. Homa striatala respondo al elstaraj nereprezentaj stimuloj. Revuo por Neŭroscienco. 2003; 23: 8092 – 8097. [PubMed]
265. Zweifel LS, Argilli E, Bonci A, Palmiter RD. Rolo de NMDA-riceviloj en dopaminaj neŭronoj pro plasticeco kaj toksomaniuloj. Neŭrono. 2008; 59: 486 – 496. [PMC libera artikolo] [PubMed]
266. Zweifel LS, Parker JG, Lobb CJ, Rainwater A, Wall VZ, Fadok JP, Darvas M, Kim MJ, Mizumori SJ, Paladini CA, et al. Interrompo de eksplodo de eksplodo de NMDAR-dependigo de dopaminaj neŭronoj donas selekteman taksadon de fazo-dopamina-dependa konduto. Procedoj de la Nacia Akademio de Sciencoj de Usono de Ameriko. 2009; 106: 7281 – 7288. [PMC libera artikolo] [PubMed]