Dopaminas motyvacinėje kontrolėje: apdovanojimas, aversyvumas ir įspėjimas (2010)

Neuronas. Autoriaus rankraštis; galima įsigyti „PMC Dec 9“, „2011“.

Paskelbta galutine redaguota forma:

PMCID: PMC3032992

NIHMSID: NIHMS253484

Žr. Kitus PMC straipsnius citata paskelbtas straipsnis.

Eiti į:

SANTRAUKA

Vidutinio smegenų dopamino neuronai yra gerai žinomi dėl stiprios reakcijos į atlygį ir jų svarbų vaidmenį pozityvioje motyvacijoje. Vis dėlto vis labiau aišku, kad dopamino neuronai taip pat perduoda signalus, susijusius su svarbia, bet ne naudinga patirtimi, pavyzdžiui, aversyviais ir įspėjimo įvykiais. Čia apžvelgiama naujausia pažanga, padedanti suprasti dopamino atlygio ir ne atlygio funkcijas. Remiantis šiais duomenimis, siūlome, kad dopamino neuronai būna įvairių tipų, kurie yra susiję su skirtingais smegenų tinklais ir turintys skirtingus vaidmenis motyvacinėje kontrolėje. Kai kurie dopamino neuronai koduoja motyvacinę vertę, remdami smegenų tinklus ieškant, vertinant ir vertinant mokymąsi. Kiti šifruoja motyvacinį pagarbą, remia smegenų tinklus orientavimui, pažinimui ir bendrai motyvacijai. Abu dopamino neuronų tipai yra papildomi įspėjamuoju signalu, susijusiu su greitu potencialiai svarbių sensorinių užuominų aptikimu. Mes hipotezuojame, kad šie dopaminerginiai keliai, skirti vertingumui, dėmesiui ir įspėjimui, bendradarbiauja, kad palaikytų prisitaikantį elgesį.

Įvadas

Neurotransmiteris dopaminas (DA) turi lemiamą vaidmenį motyvacinėje kontrolėje - mokantis, kas pasaulyje yra gera ir bloga, ir pasirenkant veiksmus, kuriais siekiama įgyti gerų dalykų ir išvengti blogų dalykų. Pagrindiniai DA smegenų žievės ir daugelio subkortikinių sričių šaltiniai yra DA-atpalaiduojantys ventralinio smegenų neuronai, esantys „substan nigra pars compacta“ (SNc) ir ventralinio tegmental srityje (VTA) (Bjorklund ir Dunnett, 2007). Šie neuronai perduoda DA dviem režimais: „tonikas“ ir „fazinis“ (Grace, 1991; Grace ir kt., 2007). Savo tonikos režimu DA neuronai palaiko nuolatinį DA lygį žemutinėje nervų struktūroje, kuri yra būtina norint normalias neuronų grandinių funkcijas (Schultz, 2007). Fazinio režimo metu DA neuronai smarkiai padidina arba mažina 100 – 500 milisekundžių šaudymo spartą, sukeldami didelius DA koncentracijų pokyčius pasroviui keliose sekundėse (Schultz, 1998; Schultz, 2007).

Šiuos fazinius DA atsakymus sukelia daugelio tipų atlygio ir su jutimu susijusių sensorinių užuominų tipai (Schultz, 1998) ir idealiai tinka atlikti DA vaidmenį motyvacinėje kontrolėje, įskaitant jos, kaip mokymosi signalo, stiprinančio mokymąsi, vaidmenį;Schultz ir kt., 1997; Išminčius, 2005) ir skatinamasis signalas, skatinantis nedelsiant gauti atlygį (\ tBerridge ir Robinson, 1998). Dėl to šie faziniai DA atlygio signalai užėmė svarbų vaidmenį teorijos apie žievės ir subkortikos grandines funkcijose ir tapo intensyvaus neurologijos tyrimo objektu. Pirmojoje šios apžvalgos dalyje pristatysime įprastą fazinių DA atlygio signalų teoriją ir apžvelgsime naujausius pasiekimus suvokiant jų pobūdį ir jų kontrolę dėl nervų apdorojimo ir elgesio.

Priešingai nei priimtas DA vaidmuo apdovanojimų apdorojimo srityje, vyko didelės diskusijos dėl fazinės DA veiklos vaidmens apdorojant nepagrįstus įvykius. Kai kurios teorijos rodo, kad DA neuronų faziniai atsakai visų pirma koduoja su atlygiu susijusius įvykius (Schultz, 1998; Nenaudingas, 2004; Schultz, 2007), tuo tarpu kiti rodo, kad DA neuronai perduoda papildomus ne atlygio signalus, susijusius su nustebinančia, naujovišku, ryškiu ir netgi bauginančiu patyrimu (Redgrave ir kt., 1999; Horvitz, 2000; Di Chiara, 2002; Joseph et al., 2003; Pezze ir Feldon, 2004; Lismanas ir Grace, 2005; Redgrave ir Gurney, 2006). Antroje šios apžvalgos dalyje aptarsime keletą tyrimų, kurių metu šios teorijos buvo išbandytos ir atskleidė daug apie ne pelno signalų pobūdį DA neuronuose. Visų pirma, šie tyrimai rodo, kad DA neuronai yra įvairesni, nei buvo manoma. Užuot kodavusi vieną homogenišką motyvacinį signalą, DA neuronai būna įvairių tipų, kurie įvairiais būdais koduoja atlygio ir ne atlygio įvykius. Tai kelia problemų bendroms teorijoms, kuriomis siekiama nustatyti dopaminą su vienu nerviniu signalu arba motyvaciniu mechanizmu.

Siekiant išspręsti šią dilemą, per paskutinę šios apžvalgos dalį siūlome naują hipotezę, kad paaiškintume daugelio DA neuronų tipų buvimą, jų neuronų signalų pobūdį ir jų integraciją į skirtingus smegenų tinklus motyvacinei kontrolei. Mūsų pagrindinis pasiūlymas yra toks. Vieno tipo DA neuronai koduoja motyvacinė vertė, susijaudinęs už renginius ir slopinančius aversinius įvykius. Šie neuronai palaiko smegenų sistemas siekdami tikslų, vertindami rezultatus ir mokydamiesi vertės. Antrasis DA neuronų tipas koduoja motyvacinį pagarbą, džiaugiamės tiek naudingais, tiek neramiais įvykiais. Šie neuronai palaiko smegenų sistemas orientavimui, pažinimo procesui ir motyvaciniam vairavimui. Be savo vertės ir savybių kodavimo, abu DA neuronų tipai taip pat perduoda įspėjimo signalas, kuriuos sukelia netikėtai didelės potencialiai svarbios jutimo užuominos. Kartu mes hipotezuojame, kad šios vertės, dėmesys ir įspėjamieji signalai bendradarbiauja koordinuodami smegenų struktūrą ir kontroliuoja motyvuotą elgesį.

Dopamino premija: įprastinė teorija

Dopaminas motyvuojant atlygį ieškančiais veiksmais

Dopaminas jau seniai žinomas kaip svarbus veiksmo stiprinimui ir motyvavimui. Vaistai, trukdantys DA transmisijai, trukdo sustiprinti mokymąsi, o manipuliacijos, kurios skatina DA perdavimą, pvz., Smegenų stimuliavimas ir priklausomybę sukeliantys vaistai, dažnai veikia kaip stiprintuvai (Išminčius, 2004). DA perdavimas yra labai svarbus siekiant sukurti motyvacijos būseną ieškoti atlygio (Berridge ir Robinson, 1998; Salamone ir kt., 2007) ir už prisiminimų apie bičiulius atlyginimų asociacijas (Dalley ir kt., 2005). DA išleidimas nėra būtinas visiems mokymosi už atlygį formoms ir ne visada gali būti „patinka“, nes tai sukelia malonumą, tačiau labai svarbu, kad tikslai taptų „norimi“, siekiant motyvuoti veiksmus siekiant jų pasiekti (Berridge ir Robinson, 1998; Palmiter, 2008).

Viena hipotezė apie tai, kaip dopaminas palaiko stiprinimo mokymąsi, yra tai, kad ji koreguoja sinchroninių ryšių tarp neuronų stiprumą. Paprastiausia šios hipotezės versija yra ta, kad dopaminas kontroliuoja sinaptinį plastiškumą pagal modifikuotą Hebbian taisyklę, kuri gali būti apytiksliai nurodyta kaip „neuronai, kurie kartu sujungia vielą kartu, kol jie gauna dopamino sprogimą“. Kitaip tariant, jei A ląstelė aktyvina ląstelę B, o B ląstelė sukelia elgesio veiksmą, dėl kurio gaunamas atlygis, tuomet dopaminas bus paleistas ir A → B ryšys būtų sustiprintas (Montague ir kt., 1996; Schultz, 1998). Šis mechanizmas leistų organizmui išmokti optimalų veiksmų pasirinkimą, kad gautų atlygį, turint pakankamai patirties ir klaidų. Atsižvelgiant į šią hipotezę, dopaminas turi daug įtakos smegenų plitimui daugelyje smegenų regionų (Surmeier ir kt., 2010; Goto ir kt., 2010; Molina-Luna ir kt., 2009; Marowsky ir kt., 2005; Lismanas ir Grace, 2005). Kai kuriais atvejais dopaminas leidžia sinaptinį plastiškumą pagal pirmiau aprašytą Hebbijos taisyklę tokiu būdu, kuris yra susijęs su atlygio ieškančiu elgesiu (Reynolds ir kt., 2001). Be savo poveikio ilgalaikiam sinaptiniam plastiškumui, dopaminas taip pat gali nedelsiant kontroliuoti neuronines grandines, moduliuodamas neuroninių spindulių aktyvumą ir sinchroninius ryšius tarp neuronų (Surmeier ir kt., 2007; Robbins ir Arnsten, 2009), kai kuriais atvejais tai daroma taip, kad būtų skatinami neatidėliotini \ tFrank, 2005).

Dopamino neuronų premijos signalai

Norint motyvuoti veiksmus, kurie lemia atlygį, dopaminas turėtų būti išleistas naudingo darbo metu. Iš tiesų, daugelis DA neuronų yra aktyviai veikiami netikėtų pirminių pranašumų, pvz., Maisto ir vandens, dėka, dažnai atsiradusiems faziniams „sprogimams“ (Schultz, 1998) (faziniai sužadinimai, įskaitant kelis šuolius (Grace ir Bunney, 1983)). Vis dėlto pirmieji Wolframo Schultzo tyrimai parodė, kad šie DA neuronų atsakai nėra gaunami iš atlygio vartojimo Rep. Vietoj to jie primena „atlyginimų prognozavimo klaidą“, nurodydami skirtumą tarp gauto atlygio ir numatomo atlygio (Schultz ir kt., 1997) (Pav. 1A). Taigi, jei atlygis yra didesnis nei prognozuota, DA neuronai yra labai sužadinti (teigiama prognozavimo klaida, 1E pav, raudona); jei atlygis yra mažesnis už numatytą ar neįvykusiu nustatytu laiku, DA neuronai yra faziškai slopinami (neigiama prognozavimo klaida, 1E pav, mėlyna); ir jei atlygis yra iš anksto sumokėtas, kad jo dydis būtų visiškai nuspėjamas, DA neuronai turi mažai atsakymo (nulio prognozavimo klaida, Pav. 1C, juoda). Tas pats principas taikomas ir DA atsakymams į jutimo užuominas, kurios suteikia naują informaciją apie būsimus atlyginimus. DA neuronai yra susijaudinę, kai užuomina rodo būsimos atlygio vertės padidėjimą (Pav. 1C, raudona), uždrausta, kai užuomina rodo būsimos atlygio vertės sumažėjimą (Pav. 1C, mėlynos spalvos), ir paprastai turi mažai atsakymų į užuominas, kurios nesuteikia jokios naujos1E pav, juoda). Šie DA atsakymai yra panašūs į tam tikrą atlygio prognozavimo klaidos tipą, vadinamą laiko skirtumo klaida arba „TD klaida“, kuri buvo pasiūlyta veikti kaip sustiprinimo signalas mokantis veiksmų ir aplinkos būklės vertę (Houk ir kt., 1995; Montague ir kt., 1996; Schultz ir kt., 1997). Skaičiuojantys modeliai, naudojantys TD tipo sustiprinimo signalą, gali paaiškinti daugelį žmonių, gyvūnų ir DA neuronų stiprinimo mokymosi aspektų (Sutton ir Barto, 1981; Waelti ir kt., 2001; Montague ir Berns, 2002; Dayanas ir Nivas, 2008).

1 pav 

Atlygio prognozavimo klaidų ir nuspėjamosios informacijos pirmenybės dopamino kodavimas

Įspūdingi eksperimentai parodė, kad DA signalai yra atlygio prognozės tokiu būdu, kuris glaudžiai atitinka elgesio nuostatas, įskaitant pirmenybę dideliems atlygiams už mažus (Tobler ir kt., 2005) tikėtinas atlygis už neįtikėtinus (Fiorillo ir kt., 2003; Satoh ir kt., 2003; Morris ir kt., 2004) ir neatidėliotinas atlygis už vėluojamus (Roesch ir kt., 2007; Fiorillo ir kt., 2008; Kobayashi ir Schultz, 2008). Yra netgi įrodymų, kad DA neuronai žmogui koduoja pinigų atlygio vertę (Zaghloul et al., 2009). Be to, mokymosi metu atsiranda DA signalai su panašiu elgsenos prognozavimo elgsenos matavimu (Hollerman ir Schultz, 1998; Satoh ir kt., 2003; Takikawa ir kt., 2004; Day et al., 2007) ir yra susieti su subjektyviais atlygio lengvatų \ tMorris ir kt., 2006). Šie atradimai nustatė DA neuronus kaip vieną iš geriausiai suprantamų ir daugiausiai replikuotų atlygio kodavimo smegenyse pavyzdžių. Kaip rezultatas, neseniai atlikti tyrimai sukėlė DA neuronų intensyvią kontrolę, kad sužinotų, kaip jie generuoja atlyginimų prognozes ir kaip jų signalai veikia žemyn esančias struktūras, kad galėtų kontroliuoti elgesį.

Dopamino premija: naujausi avansai

Dopamino neuronų premijos signalai

Naujausi pasiekimai, susiję su DA atlygio signalų supratimu, yra susiję su trimis plačiais klausimais: kaip DA neuronai mokosi atlygio prognozes? Kaip tikslios jų prognozės? Ir ką jie vertina kaip naudingus?

Kaip DA neuronai išmoksta premijų prognozes? Klasikinės teorijos rodo, kad atlygio prognozės išmokamos palaipsniui stiprinant procesą, kuriam reikia pakartotinių stimulų ir atlygio porų (Rescorla ir Wagner, 1972; Montague ir kt., 1996). Kiekvienam laiko stimului A seka netikėtas atlygis, padidinta A apskaičiuota vertė. Tačiau naujausi duomenys rodo, kad DA neuronai peržengia paprastą stimulų ir mokymosi mokymąsi ir pateikia prognozes, pagrįstas sudėtingais įsitikinimais apie pasaulio struktūrą. DA neuronai gali prognozuoti teisingą atlygį net netradicinėje aplinkoje, kur atlygis, susietas su stimuliu, sukelia a sumažinti šios paskatos vertę (Satoh ir kt., 2003; Nakahara ir kt., 2004; Bromberg-Martin ir kt., 2010c) arba sukelti visiškai kitokio stimulo vertės pasikeitimą (Bromberg-Martin ir kt., 2010b). DA neuronai taip pat gali pritaikyti savo atlygio signalus, remdamiesi aukštesnės eilės atlygio paskirstymo statistiniais duomenimis, pvz., Skalės prognozavimo klaidų signalais pagal jų numatomą dispersiją (Tobler ir kt., 2005) ir „spontaniškai susigrąžina“ savo atsakymus į išnyktus atlygio \ tPan ir kt., 2008). Visi šie reiškiniai yra nepaprastai panašūs į panašų poveikį, pastebėtą jutimo ir variklio adaptacijoje (Braun ir kt., 2010; Fairhall ir kt., 2001; Shadmehr ir kt., 2010), rodo, kad jie gali atspindėti bendrą neuroninį mechanizmą, skirtą prognozuoti mokymąsi.

Kokios yra DA premijų prognozės? Naujausi tyrimai parodė, kad DA neuronai tiksliai koreguoja savo atlygio signalus ir sudaro tris prognozavimo neapibrėžties šaltinius. Pirma, žmonės ir gyvūnai kenčia nuo vidinio laiko triukšmo, kuris neleidžia jiems atlikti patikimų prognozių apie ilgus trukmės atlyginimus (Gallistel ir Gibbon, 2000). Taigi, jei delsos atlygio vėlavimai yra trumpi (1 – 2 sekundės), laiko prognozės yra tikslios, o atlygio pristatymas sukelia mažą DA atsaką, bet ilgesniems už atlygį užlaikymo laiko prognozėms prognozės tampa mažiau patikimos ir atlygiai sukelia aiškius DA sprogimus (Kobayashi ir Schultz, 2008; Fiorillo ir kt., 2008). Antra, daugelis kasdieniame gyvenime esančių ženklų yra netikslūs, nurodant platų atlyginimų pristatymo laiko pasiskirstymą. DA neuronai vėl atspindi tokią laiko neapibrėžties formą: jie palaipsniui slopinami kintamojo atlyginimo vėlavimų metu, tarsi signalizuojant vis labiau neigiamą atlygio prognozavimo klaidą kiekvienu momentu, kai atlygis nepasirodo (Fiorillo ir kt., 2008; Bromberg-Martin ir kt., 2010a; Nomoto ir kt., 2010). Galiausiai daugelis užuominų yra suprantamai sudėtingi, todėl reikia atlikti išsamų patikrinimą, kad būtų galima padaryti tvirtą išvadą apie jų atlygio vertę. Tokiais atvejais DA atlygio signalai atsiranda ilgomis latentinėmis ir laipsniškai, atrodo, kad atspindi laipsnišką suvokimo informacijos srautą, nes stimulo vertė dekoduojama (Nomoto ir kt., 2010).

Tiesiog kokie įvykiai DA neuronai vertinami kaip naudingi? Tradicinės atlygio mokymosi teorijos rodo, kad DA neuronai priskiria vertę pagal numatomą būsimo pirminio atlygio dydį (Montague ir kt., 1996). Tačiau net ir tada, kai laikoma pirminio atlygio norma, žmonės ir gyvūnai dažnai išreiškia papildomą pirmenybę nuspėjamumo paieškai, kurioje kiekvienas atlygio dydis, tikimybė ir laikas gali būti žinomi iš anksto (Daly, 1992; Kramtyti ir Ho, 1994; Ahlbrecht ir Weber, 1996). Neseniai atliktas tyrimas su beždžionėmis nustatė, kad DA neuronai rodo šį pirmenybę (Bromberg-Martin ir Hikosaka, 2009). Beždžionės išreiškė tvirtą pirmenybę peržiūrėti informatyvius vizualinius ženklus, kurie leistų jiems prognozuoti būsimo atlygio dydį, o ne neinformacinius ženklus, kurie nepateikė naujos informacijos. Tuo pačiu metu DA neuronai buvo sužavėti galimybe peržiūrėti informacinius užrašus tokiu būdu, kuris buvo susijęs su gyvūno elgesio nuostatomis (1B, D pav). Tai rodo, kad DA neuronai ne tik motyvuoja veiksmus gauti atlygį, bet ir motyvuoja veiksmus, kad būtų galima tiksliai prognozuoti šiuos atlygius, siekiant užtikrinti, kad atlygiai būtų tinkamai numatyti ir paruošti iš anksto.

Apskritai šie rezultatai rodo, kad DA atlygio prognozavimo klaidų signalai yra jautrūs sudėtingiems veiksniams, kurie informuoja apie žmonių ir gyvūnų atlygio prognozes, įskaitant prisitaikymą prie aukšto rango atlygio statistikos, atlygio už neapibrėžtumą ir numatomosios informacijos nuostatas.

Fazinio dopamino atlygio signalų poveikis pasroviui

DA atlygio atsakymai atsiranda sinchroniniuose faziniuose sprogimuose (Joshua ir kt., 2009b), atsako modelis, kuris formuoja DA išleidimą tikslinėse struktūrose (Gononas, 1988; Zhang ir kt., 2009; Tsai ir kt., 2009). Jau seniai teoriškai matyti, kad šie faziniai pertrūkiai daro įtaką mokymuisi ir motyvacijai atskirai nuo toninio DA aktyvumo (Grace, 1991; Grace ir kt., 2007; Schultz, 2007; Lapish ir kt., 2007). Neseniai sukurta technologija leido patvirtinti šią hipotezę kontroliuojant DA neuronų aktyvumą su tiksliu erdviniu ir laiko tikslumu. Optogenetinė VTA DA neuronų stimuliacija skatina stiprią kondicionuojamą vietą, kuri atsiranda tik tada, kai stimuliacija taikoma perplanavimo būdu (Tsai ir kt., 2009). Atvirkščiai, DA neuronų NMDA receptorių genetinis išstūmimas, kuris silpnina sprogimą, paliekant toninį aktyvumą iš esmės nepažeistas, sukelia specifinį atlygio mokymosi formų selektyvų sutrikimą.Zweifel ir kt., 2009; Parker ir kt., 2010) (nors ir atkreipkite dėmesį, kad šis iškritimas taip pat mažina DA neuronų sinaptinį plastiškumą (Zweifel ir kt., 2008)). DA sprogimai gali sustiprinti mokymąsi už atlygį, pertvarkydami vietines nervų grandines. Pažymėtina, kad atlygio nuspėjamieji DA sprogimai siunčiami į konkrečius branduolio accumbens regionus, ir šie regionai turi ypač aukštą atlygio ir nuspėjamojo neuroninio aktyvumo lygį (Cheer ir kt., 2007; Owesson-White ir kt., 2009).

Palyginti su faziniais sprogimais, mažiau žinoma apie fazinių pauzių svarbą spiksuojant aktyvumą neigiamo atlygio prognozavimo klaidoms. Šios pauzės sukelia mažesnius spygio pokyčius, yra mažiau moduliuojami pagal atlygio lūkesčius („Bayer“ ir „Glimcher“, „2005“; Joshua ir kt., 2009a; Nomoto ir kt., 2010) ir gali turėti mažesnį poveikį mokymuisi (Rutledge ir kt., 2009). Tačiau tam tikros rūšies neigiamų prognozių klaidų mokymuisi reikia VTA (Takahashi ir kt., 2009), rodo, kad fazinės pauzės vis dar gali būti dekoduojamos pasroviui.

Kadangi sprogimai ir pauzės sukelia labai skirtingus DA išsiskyrimo modelius, jie gali paveikti pasroviui kylančias struktūras per skirtingus mechanizmus. Naujausias DA neuronų, dorsalinės stiatos, tikslas yra naujausi šio hipotezės įrodymai. Nugaros striatų projekcijos neuronai yra dviejų tipų, kurie išreiškia skirtingus DA receptorius. Viena rūšis išreiškia D1 receptorius ir projektus prie bazinio ganglio „tiesioginio kelio“, kad palengvintų kūno judesius; antrasis tipas išreiškia D2 receptorius ir projektus prie „netiesioginio kelio“, kad slopintų kūno judesius (2 pav) (Albin ir kt., 1989; Gerfen ir kt., 1990; Kravitz ir kt., 2010; Hikida ir kt., 2010). Remiantis šių takų ir receptorių savybėmis, teoriškai matyti, kad DA sprogimai sukuria aukšto DA sąlygas, aktyvuoja D1 receptorius ir sukelia tiesioginį kelią pasirinkti didelės vertės judesius (Pav. 2A), o DA pauzės sukuria žemos DA sąlygas, slopina D2 receptorius ir netiesioginį kelią slopina mažos vertės judesius (Pav. 2B) (Frank, 2005; Hikosaka, 2007). Atsižvelgiant į šią hipotezę, didelis DA receptorių aktyvavimas skatina cortico-striatalo sinapsių potencialą tiesioginiam keliui (Shen ir kt., 2008) ir mokytis iš teigiamų rezultatų (Frank ir kt., 2004; Voon ir kt., 2010), o striatalo D1 receptorių blokada selektyviai slopina judesius už atlygį.Nakamura ir Hikosaka, 2006). Analogiškai mažas DA receptorių aktyvavimas skatina kortikosstriatų sinapsių potencialą netiesioginiame kelyje (Shen ir kt., 2008) ir mokytis iš neigiamų rezultatų (Frank ir kt., 2004; Voon ir kt., 2010), tuo tarpu striatalo D2 receptorių blokada selektyviai slopina judesius, kurie nėra apdovanoti \ tNakamura ir Hikosaka, 2006). Šis D1 ir D2 receptorių funkcijų pasiskirstymas motyvacinėje kontrolėje paaiškina daugelį DA susijusių genų poveikio žmogaus elgesiui (Ullsperger, 2010; Frank ir Fossella, 2010) ir gali išeiti už nugaros striatumo, nes yra įrodymų, kad panašus darbo pasiskirstymas ventralinėjeGrace ir kt., 2007; Lobo ir kt., 2010).

2 pav 

Dopamino kontrolė teigiama ir neigiama motyvacija nugaros striatume

Nors pirmiau minėta schema atspindi paprastą fazinio DA elgsenos kontrolės vaizdą, kuris daro įtaką striatumui, visas vaizdas yra daug sudėtingesnis. DA įtakoja su elgesiu susijusį elgesį, veikdama daugelyje smegenų regionų, įskaitant prefrontalinę žievę (Hitchcott ir kt., 2007), rhinal cortex (Liu ir kt., 2004), hipokampas („Packard“ ir „White“, „1991“; Grecksch ir Matties, 1981) ir amygdala (Phillips ir kt., 2010). DA poveikis šiuose regionuose gali labai skirtis dėl DA inervacijos tankumo, DA transporterių, metabolinių fermentų, autoreceptorių, receptorių ir receptorių sujungimo su intraceluliniais signalizacijos keliais pokyčių (Neve et al., 2004; Bentivoglio ir Morelli, 2005; Frank ir Fossella, 2010). Be to, bent jau VTA, DA neuronai gali turėti skirtingas ląstelių savybes, priklausomai nuo jų projekcijos tikslų (Lammel ir kt., 2008; Margolis ir kt., 2008), o kai kurie turi didelį gebėjimą perduoti glutamatą ir dopaminą (\ tDescarries ir kt., 2008; Chuhma ir kt., 2009; Hnasko ir kt., 2010; Tecuapetla ir kt., 2010; Stuber ir kt., 2010; Birgner ir kt., 2010). Taigi, visas neuronų apdorojimo DA neuronų kontrolės mastas pradedamas atskleisti.

Dopaminas: už atlygį

Iki šiol aptarėme DA neuronų vaidmenį už atlygį susijusį elgesį, pagrįstą dopamino atsakais, panašiais į atlygio prognozavimo klaidas. Vis dėlto vis labiau aišku, kad DA neuronai faziškai reaguoja į kelių tipų įvykius, kurie nėra savaime naudingi, ir nėra užuominos apie būsimus atlygius, ir kad šie ne atlygio signalai turi svarbų vaidmenį motyvaciniame apdorojime. Šie ne atlygio įvykiai gali būti suskirstyti į dvi plačias kategorijas: aversyvus ir įspėjimo, kurią mes išsamiai aptarsime toliau. Aversyvūs įvykiai - tai nepageidaujami stimulai (pvz., Oro pripūtimai, kartūs skoniai, elektros smūgiai ir kiti nemalonūs pojūčiai) ir jutimo užuominos, kurios susiejo su šiais įvykiais. Įspėjamieji įvykiai yra netikėtai didelio potencialo jutimo jutikliai, kurie paprastai sukelia neatidėliotinas reakcijas, siekiant nustatyti jų reikšmę.

Įvairūs dopamino atsakai į aversinius įvykius

Neuronų atsakas į aversinius įvykius yra esminis jo funkcijų bandymas motyvacinėje kontrolėje (Schultz, 1998; Berridge ir Robinson, 1998; Redgrave ir kt., 1999; Horvitz, 2000; Joseph et al., 2003). Daugeliu atžvilgių mes vertiname apdovanojančius ir aversinius įvykius priešingu būdu, atspindintį priešingą motyvacinė vertė. Mes siekiame apdovanojimų ir priskiriame jiems teigiamą vertę, o vengiame aversinių įvykių ir priskiriame jiems neigiamą vertę. Kitais atžvilgiais mes vertiname naudingus ir aversinius įvykius panašiais būdais, atspindinčiais jų panašumą motyvacinį pagarbą [FOOTNOTE1]. Tiek apdovanojantys, tiek neabejingi įvykiai sukelia dėmesio orientaciją, pažinimo procesą ir didina bendrą motyvaciją.

Kurios iš šių funkcijų palaiko DA neuronų palaikymą? Jau seniai žinoma, kad įtemptos ir aversijos patirtis sukelia didelius DA koncentracijų pokyčius pasroviui smegenų struktūrose ir kad elgsenos reakcijos į šias patirties dramatiškai keičia DA agonistai, antagonistai ir pažeidimai (Salamone, 1994; Di Chiara, 2002; Pezze ir Feldon, 2004; Young et al., 2005). Tačiau šie tyrimai parodė ryškią rezultatų įvairovę (Levita ir kt., 2002; Di Chiara, 2002; Young et al., 2005). Daugelis tyrimų yra suderinti su DA neuronais, koduojančiais motyvacinį pagarbą. Jie praneša, kad aversiški įvykiai didina DA lygį ir kad elgesio priešiškumą palaiko aukštas DA perdavimo lygis (Salamone, 1994; Joseph et al., 2003; Ventura ir kt., 2007; Barr ir kt., 2009; Fadok ir kt., 2009) įskaitant fazines DA spragas (Zweifel ir kt., 2009). Tačiau kiti tyrimai labiau atitinka DA neuronus, koduojančius motyvacinę vertę. Jie praneša, kad aversiški įvykiai mažina DA lygį ir elgesio priešiškumą palaiko žemas DA perdavimo lygis.Mark et al., 1991; Shippenberg ir kt., 1991; Liu ir kt., 2008; Roitman ir kt., 2008). Daugeliu atvejų šie mišrūs rezultatai buvo nustatyti atskiruose tyrimuose, rodančiuose, kad aversyvi patirtis sukelia skirtingus DA išskyrimo modelius skirtingose ​​smegenų struktūrose (Thierry ir kt., 1976; Besson ir Louilot, 1995; Ventura ir kt., 2001; Jeanblanc ir kt., 2002; Bassareo ir kt., 2002; Pascucci ir kt., 2007) ir kad su DA susiję vaistai gali sukelti nervų ir elgesio efektų, panašių į tuos, kuriuos sukelia tiek naudingas, tiek aversinis, patirtis (Ettenberg, 2004; Wheeler ir kt., 2008).

Šią DA išskyrimo modelių ir funkcijų įvairovę sunku suderinti su idėja, kad DA neuronai perduoda vienodą motyvacinį signalą visoms smegenų struktūroms. Tačiau šie skirtingi atsakymai gali būti paaiškinti, jei DA neuronai yra įvairūs - jie susideda iš kelių neuronų populiacijų, kurios palaiko skirtingus aversyvaus apdorojimo aspektus. Šį požiūrį patvirtina nervų įrašymo tyrimai su anestezuotais gyvūnais. Šie tyrimai parodė, kad kenksmingi stimulai sukelia sužadinimą kai kuriuose DA neuronuose, bet slopina kitus DA neuronus (Chiodo ir kt., 1980; Maeda ir Mogensonas, 1982; Schultz ir Romo, 1987; Mantz ir kt., 1989; Gao ir kt., 1990; Coizet ir kt., 2006). Svarbu tai, kad tiek eksitaciniai, tiek slopinantys atsakai atsiranda neuronuose, patvirtintuose kaip dopaminerginiai, naudojant juxtaceliulinį ženklinimą (Brischoux ir kt., 2009) (3 pav). Panašus aversinių atsakymų įvairovė vyksta aktyvaus elgesio metu. Skirtingos DA neuronų grupės faziškai sužadinamos arba slopinamos aversiniais reiškiniais, įskaitant kenksmingą odos stimuliavimą (Kiyatkin, 1988a; Kiyatkin, 1988b), jutimo užuominos, numatančios aversinius sukrėtimus (Guarraci ir Kapp, 1999), aversive airpuffs (Matsumoto ir Hikosaka, 2009b), ir jutimo užuominos, prognozuojančios aversive airpuffs (Matsumoto ir Hikosaka, 2009b; Joshua ir kt., 2009a). Be to, tuo pačiu metu, kai du DA neuronai yra užregistruojami vienu metu, jų aversiniai atsakai paprastai turi mažą bandomojo ryšio tarpusavio ryšį (Joshua ir kt., 2009b), rodo, kad neatsakingi atsakymai nėra koordinuojami visoje DA.

3 pav 

Įvairūs dopamino neuronų atsakai į aversinius įvykius

Norint suprasti šių skirtingų aversinių atsakymų funkcijas, turime žinoti, kaip jie derinami su atlygio atsakymais, kad būtų sukurtas prasmingas motyvacinis signalas. Neseniai atliktas tyrimas ištyrė šią temą ir atskleidė, kad DA neuronai yra suskirstyti į keletą populiacijų, turinčių skirtingus motyvacinius signalus (Matsumoto ir Hikosaka, 2009b). Viena populiacija yra sužavėta už atlygį už įvykius ir slopinančius aversinius įvykius, lyg kodavimas motyvacinė vertė (Pav. 4A). Antrąja populiacija sužadina tiek naudingi, tiek aversyvūs įvykiai panašiais būdais, tarsi kodavimas motyvacinį pagarbą (Pav. 4B). Abiejose šiose populiacijose daug neuronų yra jautrūs atlyginimams ir aversyvioms prognozėms: jie reaguoja, kai apdovanojimų renginiai yra naudingesni už prognozuojamus ir kai aversiški įvykiai yra aversyvesni nei prognozuojama (Matsumoto ir Hikosaka, 2009b). Tai rodo, kad jų aversinius atsakymus iš tikrųjų sukelia prognozės apie aversinius įvykius, neleidžiančius, kad juos sukeltų nespecifiniai veiksniai, pvz., Žalioji jutimo įvestis arba apibendrintos asociacijos su atlygiu (Schultz, 2010). Tačiau šios dvi populiacijos skiriasi savo nuspėjamojo kodo detalumu. Motyvacinės vertės koduojančios DA neuronai koduoja tikslų prognozavimo klaidos signalą, įskaitant stiprią slopinimą, praleidžiant atlygį ir lengvas sužadinimas, praleidžiant aversinius įvykius (Pav. 4A, dešinėn). Priešingai, motyvaciniai patrauklumo kodavimo DA neuronai reaguoja, kai yra svarbių įvykių, bet ne tada, kai jie nėra (Pav. 4B, dešinėje), atitinka teorines susijaudinimo sąvokas (Langas ir Davis, 2006) [FOOTNOTE2]. Šių dviejų DA neuronų populiacijų įrodymai buvo pastebėti net tada, kai nervų aktyvumas buvo ištirtas vidutiniškai. Taigi, tyrimai, nukreipti į skirtingas DA sistemos dalis, rado fazinius DA signalus, koduojančius aversinius įvykius su slopinimu (Roitman ir kt., 2008), panašus į motyvacinės vertės kodavimą arba su sužadinimu (Joshua ir kt., 2008; Anstrom ir kt., 2009), panašus į motyvacinio atpažinimo kodavimą.

4 pav 

Skirtingos dopamino neuronų populiacijos, koduojančios motyvacinę vertę ir svarbą

Šie naujausi rezultatai gali prieštarauti ankstyvai ataskaitai, kad DA neuronai pirmiausia reaguoja už užuominas, o ne įžeidžiančius užuominas (Mirenowicz ir Schultz, 1996). Atidžiai išnagrinėjus, net tas tyrimas visiškai atitinka DA vertės ir svarbos kodavimą. Tame tyrime atlygio ženklai lėmė atlygio rezultatus su didele tikimybe (> 90%), o aversiniai ženklai - su maža tikimybe (<10%). Taigi vertę ir svarbą koduojantys DA neuronai mažai reaguotų į aversiškus ženklus, tiksliai koduodami jų žemą aversyvumo lygį.

Motyvacinės ir funkcinės reikšmės signalų funkcinis vaidmuo

Apibendrinant, pirmiau pateiktos išvados rodo, kad DA neuronai yra suskirstyti į kelias populiacijas, tinkamas skirtingiems motyvacijos kontrolės vaidmenims. Motyvacinės vertės koduojantys DA neuronai gerai tinka dabartinėms dopamino neuronų teorijoms ir atlygio apdorojimui (Schultz ir kt., 1997; Berridge ir Robinson, 1998; Išminčius, 2004). Šie neuronai koduoja pilną prognozavimo klaidos signalą ir koduoja atsiskaitymus ir aversyvius įvykius priešinga kryptimi. Taigi šie neuronai yra tinkamas instruktyvus signalas ieškant, vertinant ir vertinant mokymąsi (5 pav). Jei stimulas sukelia DA kodų vertės kodavimą, mes turėtume kreiptis į jį, priskirti jam didelę vertę ir išmokti veiksmus, kad vėl ieškotume. Jei stimulas sukelia vertę koduojančių DA neuronų slopinimą, mes turėtume to vengti, priskirti mažai vertei ir išmokti veiksmus, kad būtų išvengta jos ateityje.

5 pav 

Hipotezinės motyvacinės vertės, įspūdžių ir įspėjimo signalų funkcijos

Priešingai, motyvacinio patrauklumo kodavimo DA neuronai puikiai tinka dopamino neuronų teorijoms ir svarbiausių įvykių apdorojimui (Redgrave ir kt., 1999; Horvitz, 2000; Joseph et al., 2003; Kapur, 2003). Šiuos neuronus sužadina tiek apdovanojimai, tiek aversyvūs įvykiai ir silpnesni atsakymai į neutralius įvykius, užtikrinantis tinkamą instruktorinį signalą neuroninėms grandinėms išmokti aptikti, prognozuoti ir reaguoti į labai svarbias situacijas. Čia svarstysime tris tokias smegenų sistemas (5 pav). Pirma, vizualinės ir dėmesio orientacijos neuroninės grandinės yra kalibruotos, kad būtų galima rasti informacijos apie visų tipų įvykius, tiek naudingus, tiek aversinius. Pvz., Tiek atlygio, tiek aversyvūs užrašai veiksmingiau pritraukia orientacines reakcijas nei neutralūs ženklai (Langas ir Davis, 2006; Matsumoto ir Hikosaka, 2009b; Austinas ir Duka, 2010). Antra, tiek naudingos, tiek aversiškos situacijos įtraukia nervų sistemas į kognityvinę kontrolę ir veiksmų pasirinkimą - turime įsitraukti į darbinę atmintį, kad turėtume omenyje informaciją, konfliktų sprendimą, kad nuspręstume dėl veiksmų, ir ilgalaikę atmintį, kad prisimintume gautą rezultatą (Bradley ir kt., 1992; Botvinick ir kt., 2001; Savine ir kt., 2010). Trečia, tiek naudingos, tiek neabejotinos situacijos reikalauja didinti bendrą motyvaciją imtis veiksmų ir užtikrinti, kad jos būtų tinkamai vykdomos. Iš tiesų, DA neuronai yra labai svarbūs skatinant pastangas siekti aukšto vertės tikslų ir paverčiant žinias apie užduočių reikalavimus į patikimą variklio našumą (Berridge ir Robinson, 1998; Mazzoni ir kt., 2007; Niv et al., 2007; Salamone ir kt., 2007).

Dopamino sužadinimas įspėjant juslinius signalus

Be signalų, koduojančių motyvacinę vertę ir ištikimybę, dauguma DA neuronų taip pat susiduria su sprogimo atsakais į kelių tipų jutimo įvykius, kurie nėra tiesiogiai susiję su naudinga ar aversine patirtimi. Šie atsakymai teoriškai priklausė nuo daugelio nervų ir psichologinių veiksnių, įskaitant tiesioginį jutimo įvedimą, netikėtumą, naujovę, susijaudinimą, dėmesį, ištikimybę, apibendrinimą ir pseudo kondicionavimą.Schultz, 1998; Redgrave ir kt., 1999; Horvitz, 2000; Lismanas ir Grace, 2005; Redgrave ir Gurney, 2006; Joshua ir kt., 2009a; Schultz, 2010).

Čia mes stengsimės susintetinti šias idėjas ir atsižvelgti į šiuos DA atsakymus pagal vieną pagrindinį signalą įspėjimo signalas (5 pav). Sąvoka „įspėjimas“ buvo naudojama „Schultz“ (Schultz, 1998) kaip bendras terminas, skirtas įvykiams, kurie pritraukia dėmesį. Čia mes jį panaudosime konkrečiau. Pagal įspėjimo įvykį mes galvojame apie netikėtą jutimo pojūtį, kuris atkreipia dėmesį į greitą jo potencialo svarbos įvertinimą, naudojant paprastas funkcijas, tokias kaip jo vieta, dydis ir jutimo būdas. Tokie įspėjamieji įvykiai dažnai sukelia neatidėliotiną elgesio reakciją, kad juos ištirtų ir nustatytų jų tikslią reikšmę. Taigi DA signalizacijos signalai paprastai būna trumpi latentai, yra pagrįsti grubiomis stimulo savybėmis ir geriausiai koreliuoja su neatidėliotinomis reakcijomis, tokiomis kaip orientavimo reakcijos (Schultz ir Romo, 1990; Joshua ir kt., 2009a; Schultz, 2010). Tai prieštarauja kitiems motyvaciniams signalams DA neuronuose, kurie paprastai pasireiškia ilgesniais latentais, atsižvelgia į tikslią stimulo tapatybę ir yra geriausiai koreliuojami su laikomais elgesio veiksmais, pavyzdžiui, sprendimais artėti ar išvengti (Schultz ir Romo, 1990; Joshua ir kt., 2009a; Schultz, 2010).

DA signalizavimo atsakymus gali sukelti stebinantys jutimo įvykiai, pvz., Netikėti šviesos blyksniai ir klausos paspaudimai, kurie sukelia ryškius 60 – 90% DA neuronų pertraukimus visame SNc ir VTA (Strecker ir Jacobs, 1985; Horvitz ir kt., 1997; Horvitz, 2000) (Pav. 6A). Atrodo, kad šie įspėjamieji atsakymai atspindi, kokiu mastu stimulas stebina ir atkreipia dėmesį; jie sumažėja, jei stimulas pasireiškia nuspėjamu laiku, jei dėmesys skiriamas kitur, arba miego metu (Schultz, 1998; Takikawa ir kt., 2004; Strecker ir Jacobs, 1985; Steinfels ir kt., 1983). Pavyzdžiui, netikėtas paspaudęs garsas sukelia ryškią DA sprogimą, kai katė yra pasyvioje ramybės būsenoje, tačiau neturi jokio poveikio, kai katė užsiima veikla, kurios reikia dėmesio, pavyzdžiui, žiurkių medžioklė, šėrimas, viliojimas, puvimas eksperimento vykdytojas ir pan.Strecker ir Jacobs, 1985) (Pav. 6A). Panašiai ir DA sprogimo atsakas įsijungia jutimo įvykiai, kurie yra fiziškai silpni, tačiau įspėjami dėl jų naujovės (Ljungberg ir kt., 1992; Schultz, 1998). Šie atsakymai įpratę, nes nauji stimulai yra susipažinę, lygiagrečiai su orientavimo reakcijų įpročiu (Pav. 6B). Suderinus su šiais duomenimis, nustebinantys ir nauji įvykiai sukelia DA išsiskyrimą pasroviui.Lismanas ir Grace, 2005) ir suaktyvinti su DA susijusių smegenų grandines tokiu būdu, kuris \ tZink et al., 2003; Davidson ir kt., 2004; Duzel ir kt., 2010).

6 pav 

Dopamino neuronų susijaudinimas reaguojant į įspėjimo įvykius

DA įspėjimo atsakymus taip pat sukelia netikėti jutimo ženklai, galintys suteikti naują informaciją apie motyvaciškai svarbius įvykius. Kaip tikėtasi trumpalaikio įspėjimo signalo atveju, šie atsakymai yra gana neselektyvūs: juos skatina bet koks stimulas, kuris primena motyvaciniu požiūriu, net jei panašumas yra labai nedidelis (reiškinys, vadinamas apibendrinimu) (Schultz, 1998). Dėl to DA neuronai dažnai reaguoja į stimulą su dviejų signalų mišiniu: greitas įspėjimo signalas, koduojantis tai, kad stimulas yra potencialiai svarbu, ir antrasis signalas, koduojantis jo faktinis naudinga ar nenaudinga prasmė (Schultz ir Romo, 1990; Waelti ir kt., 2001; Tobler ir kt., 2003; Day et al., 2007; Kobayashi ir Schultz, 2008; Fiorillo ir kt., 2008; Nomoto ir kt., 2010) (pamatyti (Kakade ir Dayan, 2002; Joshua ir kt., 2009a; Schultz, 2010) peržiūrai). Pavyzdys gali būti matomas motyvacinio pasiskirstymo kodavimo DA neuronų rinkinyje Pav. 6C (Bromberg-Martin ir kt., 2010a). Šiuos neuronus sužadino apdovanojimai ir aversyvūs ženklai, tačiau jie taip pat buvo sužadinti neutraliu atspalviu. Neutralus atspalvis niekada nebuvo suporuotas su motyvaciniais rezultatais, bet turėjo (labai nedidelį) fizinį panašumą į atlygį ir aversyvius ženklus.

Šie įspėjamieji atsakymai, atrodo, yra glaudžiai susiję su jutimo cue gebėjimu sukelti orientacines reakcijas, kad jas būtų galima ištirti ir atrasti jo reikšmę. Tai galima matyti iš trijų reikšmingų savybių. Pirma, įspėjamieji atsakymai atsiranda tik jutimo signalams, kuriuos reikia išnagrinėti, siekiant nustatyti jų reikšmę, o ne iš esmės atlyginamiems ar aversiškiems įvykiams, pvz., Sulčių ar lėktuvų pristatymui (Schultz, 2010). Antra, įspėjamieji atsakymai atsiranda tik tada, kai užuomina yra potencialiai svarbi ir gali sukelti orientacines reakcijas, o ne tada, kai cue neturi reikšmės nagrinėjamai užduočiai ir nesukelia orientacinių reakcijų (Schultz ir Romo, 1990). Trečia, įspėjamieji atsakymai sustiprinami situacijose, kai užuominos sukels staigų dėmesio perėjimą - kai jos pasirodys netikėtai arba nuo žvilgsnio centro (Bromberg-Martin ir kt., 2010a). Taigi, kai motyvaciniai užrašai pateikiami su nenuspėjamu laiku, jie sukelia tiesiogines orientavimo reakcijas ir apibendrintą DA įspėjimo atsaką - sužadinimą visomis užuominomis, įskaitant neutralius užrašus (Pav. 6C, juoda). Tačiau, jei jų laikas yra nuspėjamas - pvz., Įspėję subjektus, turinčius „bandomojo starto lazdą“, pateiktą vieną sekundę, kol pasirodys užuominos, žymės nebesuteikia įspėjimo atsakymo (6D pav, pilka). Vietoj to, įspėjamasis atsakymas perkeliamas į bandomojo starto atspalvį - pirmąjį bandymo įvykį, kuris turi nenuspėjamą laiką ir sukelia orientacines reakcijas (6D pav, juoda).

Kas yra pagrindinis mechanizmas, kuris generuoja DA neuronų įspėjimo signalus? Viena hipotezė yra tai, kad įspėjamieji atsakymai yra tiesiog įprastiniai atlyginimų prognozavimo klaidos signalai, atsirandantys trumpais latentais, koduojantys tikėtiną skatinamąją stimulo vertę, kol ji nebus visiškai diskriminuojama (Kakade ir Dayan, 2002). Tačiau naujesni įrodymai rodo, kad įspėjimo signalus gali generuoti atskiras mechanizmas nuo įprastinių DA atlyginimo signalų (Satoh ir kt., 2003; „Bayer“ ir „Glimcher“, „2005“; Bromberg-Martin ir kt., 2010a; Bromberg-Martin ir kt., 2010c; Nomoto ir kt., 2010). Labiausiai ryškus įspėjimas, kad atsakymas į bandomojo starto biuletenį neapsiriboja užduotimis; ji gali būti vienodos jėgos per aversyvią užduotį, kurioje jokie apdovanojimai nepateikiami (6C, D pav, apačioje, „aversive task“). Taip atsitinka, nors įprastiniai DA atlygio signalai tose pačiose neuronuose teisingai rodo, kad užduoties užduotis turi daug didesnę tikėtiną vertę nei aversinis uždavinys (Bromberg-Martin ir kt., 2010a). Šie įspėjamieji signalai nėra vien tik vertės kodavimo forma arba grynai išpopuliarumo kodavimo forma, nes jie atsiranda daugumoje motyvacinės vertės ir DA kodonų kodavimo kodų (Bromberg-Martin ir kt., 2010a). Antroji disociacija gali būti matoma taip, kad DA neuronai prognozuoja būsimus atlyginimus, paremtus praeities atminimo rezultatais (Satoh ir kt., 2003; „Bayer“ ir „Glimcher“, „2005“). Nors įprastiniai DA atlygio signalai yra valdomi ilgos trukmės atminties pėdsakais, optimizuotais tiksliam atlyginimų prognozavimui, įspėjamieji atsakymai į bandomojo starto lazdą yra valdomi atskiru atminties pėdsaku, panašiu į tuos, kurie matomi nedelsiant orientuojantis reakcijas (Bromberg-Martin ir kt., 2010c). Trečias disociacija gali būti matoma taip, kad šie signalai pasiskirsto DA neuronų populiacijoje. Kadangi įprastiniai DA atlygio signalai yra stipriausi ventromedial SNc, įspėjimo atsakymai į bandomojo paleidimo ciklą (ir kitus netikėtai laikus užrašus) transliuojami visoje SNc (Nomoto ir kt., 2010).

Priešingai nei šie išskyrimai nuo įprastinių atlygio signalų, DA įspėjimo signalai koreliuoja su orientavimo ir artėjimo reagavimo į perspėjimo įvykį greičiu (Satoh ir kt., 2003; Bromberg-Martin ir kt., 2010a; Bromberg-Martin ir kt., 2010c). Tai rodo, kad įspėjimo signalus generuoja nervų procesas, kuris skatina greitą reakciją tirti potencialiai svarbius įvykius. Šiuo metu, deja, gana mažai žinoma, kokie įvykiai šiame procese traktuojami kaip „svarbūs“. Pavyzdžiui, ar įspėjamieji atsakymai yra vienodai jautrūs atlygio ir aversyviems įvykiams? Įspėjamieji atsakymai yra žinomi dėl dirgiklių, panašių į atlygio užrašus arba panašius į atlygį ir aversyvius ženklus (pvz., Dalijantis tuo pačiu jutimo modalumu). Tačiau dar nežinoma, ar įspėjamieji atsakymai atsiranda dėl dirgiklių, kurie tik primena aversyvius ženklus.

Funkcinis dopamino įspėjimo signalų vaidmuo

Kaip matėme, įspėjamieji signalai greičiausiai bus generuojami pagal atskirą mechanizmą nuo motyvacinės vertės ir svarbos signalų. Tačiau įspėjamieji signalai siunčiami tiek motyvacinei vertei, tiek patrauklumo koduojantiems DA neuronams, todėl jie gali reguliuoti smegenų apdorojimą ir elgseną panašiai kaip ir vertės bei svarbos signalai (5 pav).

Įspėjamieji signalai, siunčiami į motyvacinį įspūdį koduojančius DA neuronus, padėtų atkreipti dėmesį į įspėjamąjį stimulą, pažintinių išteklių įsitraukimą, kad būtų galima atrasti jos prasmę, ir nuspręsti dėl veiksmų plano ir padidinti motyvacijos lygius, kad šis planas būtų veiksmingai įgyvendinamas (5 pav). Šis poveikis gali atsirasti dėl tiesioginio poveikio nervų apdorojimui arba sustiprinant veiksmus, dėl kurių buvo aptiktas įspėjimo įvykis. Šis funkcinis vaidmuo puikiai tinka koreliacijai tarp DA įspėjimo atsakų ir greito elgesio reakcijų į įspėjimo stimulą, ir teorijomis, kad trumpojo latenso DA neuronų atsakai yra susiję su dėmesio, susijaudinimo, pažinimo procesų stiprinimo ir tiesioginių elgesio reakcijų orientavimu (Redgrave ir kt., 1999; Horvitz, 2000; Joseph et al., 2003; Lismanas ir Grace, 2005; Redgrave ir Gurney, 2006; Joshua ir kt., 2009a).

Įspėjamųjų signalų buvimas motyvacinės vertės kodavimo DA neuronuose yra sunkiau paaiškinamas. Šie neuronai perduoda motyvacinės vertės signalus, kurie yra idealūs ieškant, vertinant rezultatus ir vertinant mokymąsi; tačiau jie taip pat gali būti sužavėti įspėjančiais įvykiais, pvz., netikėtais paspaudusiais garsais ir aversinių bandymų pradžia. Pagal mūsų hipotezinį kelią (5 pav), tai paskatintų įspėjimo įvykius priskirti teigiamą vertę ir būti ieškoma panašiai kaip atlygiai! Nors iš pirmo žvilgsnio stebina, yra pagrindo įtarti, kad įspėjamieji įvykiai gali būti laikomi pozityviais tikslais. Įspėjamieji signalai suteikia pirmąjį įspėjimą, kad gali įvykti potencialiai svarbus įvykis, taigi tai suteikia pirmą galimybę imtis veiksmų, kad būtų kontroliuojamas šis įvykis. Jei yra įspėjamųjų signalų, motyvaciškai svarbius įvykius galima aptikti, numatyti ir paruošti iš anksto; jei nėra įspėjamųjų ženklų, motyvaciškai svarbūs įvykiai visada būna netikėta staigmena. Iš tiesų, žmonės ir gyvūnai dažnai išreiškia pirmenybę aplinkai, kurioje gali būti stebimi ir numatomi iš anksto numatomi atlygio, aversyvumo ir netgi motyvaciniu požiūriu neutralūs jutikliai.Badia ir kt., 1979; Herry ir kt., 2007; Daly, 1992; Kramtyti ir Ho, 1994) ir daugelis DA neuronų signalizuoja apie elgesio pasirinkimą, kad galėtumėte peržiūrėti atlygio nuspėjamąją informaciją (Bromberg-Martin ir Hikosaka, 2009). DA įspėjimo signalai gali paremti šias nuostatas, priskirdami teigiamą vertę aplinkai, kurioje gali būti numatyti potencialiai svarbūs jutimo ženklai.

Neuroniniai keliai, skirti motyvacinei vertei, ištikimybei ir įspėjimui

Iki šiol DA neuronus suskirstėme į du tipus, kurie koduoja motyvacinę vertę ir motyvacinį pagarbą, ir tinka skirtingiems motyvacijos kontrolės vaidmenims (5 pav). Kaip šis konceptualios schemos žemėlapis nukreipiamas į neuroninius kelius smegenyse? Čia siūlome hipotezę apie šių neuronų anatomines vietas, jų projekcijas į žemesnes struktūras ir jų motyvacinių signalų šaltinius (6 paveikslai,, 77).

7 pav 

Hipotezinė anatominė vieta ir dopamino motyvacinės reikšmės bei savybių kodavimo neuronų projekcijos

Anatominės vertės ir sergamumo kodavimo neuronų vietos

Neseniai atliktas tyrimas parodė DA atlygio ir aversinių signalų išdėstymą šoniniame vidurio smegenyje, įskaitant SNc ir šoninę VTA dalį (Matsumoto ir Hikosaka, 2009b). Motyvacinė vertė ir motyvaciniai atpažinimo signalai šiame regione buvo paskirstyti anatominiu gradientu. Motyvacinių reikšmių signalai dažniau aptinkami ventromedialinio SNc ir šoninio VTA neuronuose, o motyvaciniai atpažinimo signalai dažniau aptinkami dorsolaterinės SNc neuronuose (Pav. 7B). Tai atitinka ataskaitas, kad DA atlygio vertės kodavimas yra stipriausias ventromedial SNc (Nomoto ir kt., 2010), o aversyvūs sužadinimai dažniausiai būna stipresni iš šono (Mirenowicz ir Schultz, 1996). Kiti tyrimai ištyrė mediškesnę vidurinę smegenis. Šie tyrimai parodė, kad susijaudinančių ir slopinančių aversyvių reakcijų mišinys jų vietose nėra reikšmingas, nors tendencija, kad aversyvūs sužadinimai bus nustatyti ventraliai (Guarraci ir Kapp, 1999; Brischoux ir kt., 2009) (Pav. 7C).

Motyvacinės vertės signalų tikslai

Pagal mūsų hipotezę, motyvacinės vertės koduojantys DA neuronai turėtų nukreipti į smegenų regionus, dalyvaujančius artėjimo ir vengimo veiksmuose, rezultatų vertinimą ir vertės mokymąsi (5 pav). Iš tiesų, Ventromedial SNc ir VTA projektas į ventromedialinę prefroninę žievę (Williams ir Goldman-Rakic, 1998), įskaitant orbitofrontalinę žievę (OFC) (Porrino ir Goldman-Rakic, 1982) (Pav. 7A). OFC buvo nuosekliai susijęs su funkcijų vaizdavimo tyrimų vertės kodavimu (Anderson ir kt., 2003; Small et al., 2003; Jensen ir kt., 2007; Litt et al., 2010) ir vieno neurono įrašai (Morrison ir Salzman, 2009; Roesch ir Olson, 2004). Manoma, kad OFC įvertins pasirinkimo galimybes (Padoa-Schioppa, 2007; Kable ir Glimcher, 2009), koduoti rezultatų lūkesčius (Schoenbaum ir kt., 2009) ir atnaujinkite šiuos lūkesčius mokymosi metu (Walton ir kt., 2010). Be to, OFC dalyvauja mokantis iš neigiamų atlygio prognozavimo klaidų (Takahashi ir kt., 2009), kurie yra stipriausi DA kodų vertės kodais (4 pav).

Be to, dopaminerginio vidurinio smegenų projekto vidurinės dalys į ventralinę striatumą, įskaitant branduolio accumbens apvalkalą (NAc apvalkalas) (Haber et al., 2000) (Pav. 7A). Neseniai atliktas tyrimas parodė, kad NAc korpusas gauna fazinius DA signalus, koduojančius skonio rezultatų motyvacinę vertę (Roitman ir kt., 2008). Šie signalai gali sukelti mokymąsi dėl vertės, nes tiesioginė DA narkotikų infuzija į NAc korpusą stiprėja (Ikemoto, 2010), o gydymas, mažinantis DA įvestį į korpusą, gali sukelti aversions (Liu ir kt., 2008). Vienas įspėjimas yra tai, kad NAc apvalkalo DA išleidimo tyrimai per ilgus laiko tarpus (minutėmis) davė nevienodų rezultatų, kai kurie atitinka vertės kodavimą ir kitus su svarbiausiu kodavimu (pvz.Bassareo ir kt., 2002; Ventura ir kt., 2007)). Tai rodo, kad vertės signalai gali būti apriboti konkrečiomis NAc korpuso vietomis. Pažymėtina, kad skirtingi NAc korpuso regionai yra specializuoti apetito ir aversyvaus elgesio kontrolei (Reynolds ir Berridge, 2002), kurios abi reikalingos iš DA neuronų (Faure ir kt., 2008).

Galiausiai, DA neuronai visame SNc lygmenyje siunčia sunkias projekcijas į nugaros striatumą (Haber et al., 2000), rodo, kad nugaros striatumas gali gauti ir motyvacinę vertę, ir DA žymėjimą (Pav. 7A). Motyvacinės vertės koduojantys DA neuronai būtų idealus instruktyvus signalas striatų grandinei, susijusiai su vertybių mokymu, pvz., Sužadinimo ir atsako įpročių mokymasis (Faure ir kt., 2005; Yin ir Knowlton, 2006; „Balleine“ ir „O'Doherty“, „2010“). Kai šie DA neuronai sprogsta, jie įsitrauktų į tiesioginį kelią išmokti gauti atlygio rezultatus; jie pristabdys netiesioginį kelią, kad sužinotų, kaip išvengti vengiančių rezultatų (2 pav). Iš tiesų, yra naujausių įrodymų, kad striatų keliai seka būtent tokį darbo pasidalijimą už atlygį ir nenaudingą darbą (Hikida ir kt., 2010). Tačiau vis dar nežinoma, kaip šiuose keliuose vykstantys neuronai reaguoja į naudingus ir aversinius įvykius elgesio metu. Bent jau nugaros striatume, neuronų pogrupis reaguoja į tam tikrus apdovanojimo ir aversinius įvykius skirtingais būdais (Ravel ir kt., 2003; Yamada ir kt., 2004, 2007; Joshua ir kt., 2008).

Motyvacinių įspūdžių tikslai

Remiantis mūsų hipoteze, motyvacinio patrauklumo kodavimo DA neuronai turėtų nukreipti į smegenų sritis, dalyvaujančias orientavime, pažinimo procesuose ir bendroje motyvacijoje (5 pav). Iš tiesų, DA neuronai dorsolaterinėje vidurinėje smegenyje siunčia projekcijas į nugaros ir šoninę priekinę žievę (Williams ir Goldman-Rakic, 1998) (Pav. 7A), regionas, susijęs su kognityvinėmis funkcijomis, tokiomis kaip dėmesio paieška, darbo atmintis, pažinimo kontrolė ir sprendimų priėmimas tarp motyvacinių rezultatų (Williams ir Castner, 2006; Lee ir Seo, 2007; Išminčius, 2008; Kable ir Glimcher, 2009; Wallis ir Kennerley, 2010). Dorsolaterinės prefrontinės kognityvinės funkcijos yra griežtai reguliuojamos DA lygiais (Robbins ir Arnsten, 2009) ir yra teoriškai priklausomi nuo fazinės DA neuronų aktyvacijos (Cohen ir kt., 2002; Lapish ir kt., 2007). Pažymėtina, kad šoninių prefrontalinių neuronų pogrupis reaguoja tiek į naudingus, tiek į aversyvius vizualinius užuominas, o didžioji dauguma atsako į tą pačią kryptį, panašią į motyvacinio atpažinimo kodavimą (Kobayashi ir kt., 2006). Be to, šių neuronų aktyvumas siejamas su elgesio sėkme atliekant darbo atminties užduotis (Kobayashi ir kt., 2006). Nors šis dorsolaterinis DA → dorsolaterinis priekinės žievės takas yra būdingas primatams (Williams ir Goldman-Rakic, 1998), funkciniu požiūriu panašus kelias gali egzistuoti kitose rūšyse. Konkrečiai, daugelis primityviosios primityviosios prorontalinės žievės kognityvinių funkcijų atliekamos iš graužikų medialinės prefrontalinės žievės (Uylings ir kt., 2003), ir yra įrodymų, kad šis regionas gauna DA motyvacinius signalus ir kontroliuoja su savimi susijusį elgesį (Mantz ir kt., 1989; Di Chiara, 2002; Joseph et al., 2003; Ventura ir kt., 2007; Ventura ir kt., 2008).

Turint omenyje įrodymus, kad VTA yra ir svarbos, ir vertės kodavimo neuronai, o vertės kodavimo signalai siunčiami NAc korpusui, gali būti siunčiami NAc branduolio signalai (Pav. 7A). Iš tiesų NAc branduolys (bet ne apvalkalas) yra labai svarbus norint motyvuoti įveikti reagavimo išlaidas, pvz., Fizines pastangas; užduočių, reikalaujančių nustatyti kognityvinį lankstumą, vykdymui; ir už tai, kad už atlygį būtų galima paskatinti bendrą motyvaciją (Ghods-Sharifi ir Floresco, 2010; Floresco ir kt., 2006; Hall ir kt., 2001; Kardinolas, 2006). Vadovaudamasis motyvacinio atpažinimo kodavimu, NAc branduolys gauna fazines DA pertraukas abiejų apdovanojimų metu (Day et al., 2007) ir nepatogios patirties (Anstrom ir kt., 2009).

Galiausiai, kaip aptarta pirmiau, kai kurie svarbūs koduojantys DA neuronai gali išsivystyti į nugaros striatumą (Pav. 7A). Nors kai kurie nugaros striatumo regionai yra susiję su funkcijomis, susijusiomis su mokymosi veiksmų vertybėmis, nugaros striatumas taip pat yra susijęs su funkcijomis, kurios turėtų būti įtrauktos į visus svarbiausius įvykius, pvz., Orientaciją, dėmesį, darbo atmintį ir bendrą motyvaciją (Hikosaka ir kt., 2000; Klingberg, 2010; Palmiter, 2008). Iš tiesų, nugaros smegenų nervų neuronų pogrupis labiau reaguoja į atlygį ir aversinius įvykius, o ne į neutralius įvykius (Ravel ir kt., 1999; Blazquez ir kt., 2002; Yamada ir kt., 2004, 2007), nors jų priežastinis vaidmuo motyvuotame elgesyje dar nežinomas.

Motyvacinių reikšmių signalų šaltiniai

Naujausi tyrimai rodo, kad DA neuronai gauna motyvacinius vertės signalus iš nedidelio epitelio, šoninio habenulos (LHb) branduolio.Hikosaka, 2010) (8 pav). LHb stipriai neigiamai kontroliuoja DA neuronus: LHb stimuliacija slopina DA neuronus trumpais latentais (Christoph ir kt., 1986) ir gali reguliuoti mokymąsi priešingai nei VTA stimuliavimas (Shumake ir kt., 2010). Atsižvelgiant į neigiamą kontrolinį signalą, daugelis LHb neuronų turi atspindžių invazinius fazinius atsakymus į DA neuronus: LHb neuronai yra slopinamas pagal teigiamas atlygio prognozavimo klaidas ir. \ t susijaudinęs pagal neigiamas atlygio prognozavimo klaidas (Matsumoto ir Hikosaka, 2007, 2009a; Bromberg-Martin ir kt., 2010a; Bromberg-Martin ir kt., 2010c). Kai kuriais atvejais šie signalai LHb, esant LHb → DA perdavimui, atsiranda trumpesniais latentais.Matsumoto ir Hikosaka, 2007; Bromberg-Martin ir kt., 2010a).

8 pav 

Hipoteziniai motyvacinės vertės, svarbos ir įspėjimo signalų šaltiniai

LHb yra pajėgi kontroliuoti DA neuronus visoje vidurinės smegenys, tačiau keletas įrodymų rodo, kad jis turi pirmenybę kontroliuojančių DA neuronų kontrolei. Pirma, LHb neuronai koduoja motyvacinę vertę tokiu būdu, kuris glaudžiai atspindi vertės koduojančius DA neuronus - jie koduoja tiek teigiamus, tiek neigiamus atlygio prognozavimo klaidas ir reaguoja priešingomis kryptimis už atlygį ir aversyvius įvykius (Matsumoto ir Hikosaka, 2009a; Bromberg-Martin ir kt., 2010a). Antra, LHb stimuliacija turi didžiausią įtaką DA neuronams, kurių savybės atitinka reikšmės kodavimą, įskaitant slopinimą be atlygio užuominomis ir anatominę vietą ventromedial SNc (Matsumoto ir Hikosaka, 2007, 2009b). Trečia, LHb pažeidimai pakenkia DA neuronų slopinančiam atsakui į aversinius įvykius, o tai rodo, kad LHb yra priežastinis vaidmuo kuriant DA vertės signalus (Gao ir kt., 1990).

LHb yra platesnio pobūdžio neuronų kelias, kuriuo DA neuronai gali būti kontroliuojami baziniais gangliais (8 pav). LHb gauna signalus, panašius į atlygio prognozavimo klaidas, per neuronų, esančių aplink globus pallidus ribą (GPb), projekciją.Hong ir Hikosaka, 2008). Kai šie signalai pasiekia LHb, jie greičiausiai bus siunčiami į DA neuronus per disynaptinį kelią, kuriame LHb sužadina vidurio smegenų GABA neuronus, kurie savo ruožtu slopina DA neuronus (Ji ir Shepard, 2007; Omelchenko ir kt., 2009; Brinschwitz ir kt., 2010). Tai gali įvykti per LHb projekcijas į VNN esančius interneuronus ir gretimą GABA-ergic branduolį, vadinamą rostromedial tegmental branduoliu (RMTg) (Jhou ir kt., 2009b) (taip pat vadinama „VTA uodegos uola“).Kaufling ir kt., 2009)). Pažymėtina, kad RMTg neuronų atsako savybės panašios į LHb neuronus, koduoja motyvacinę vertę ir turi didelę slopinančią projekciją į dopaminerginę vidurinę smegenis (Jhou ir kt., 2009a). Taigi, visas bazinis ganglijų kelias, skirtas motyvacinės vertės signalams siųsti DA neuronams, gali būti GPb → LHb → RMTg → DA (Hikosaka, 2010).

Svarbus klausimas būsimiems tyrimams yra tai, ar motyvacinės vertės signalai yra nukreipiami tik per LHb, ar jie yra keliais įvesties keliais. Pažymėtina, kad DA slopina aversyviosios kojinės yra kontroliuojamos aktyvumu mezopontino parabrachijos branduolyje (PBN) (Coizet ir kt., 2010) (8 pav). Šiame branduolyje yra neuronų, kurie tiesiogiai patenka į nugaros smegenis, koduojančius kenksmingus pojūčius, ir gali slopinti DA neuronus, sukeldami RMTg (Coizet ir kt., 2010; Gauriau ir Bernard, 2002). Tai leidžia manyti, kad LHb siunčia DA neuronų motyvacinius vertės signalus už naudingus ir aversinius užuominas ir rezultatus, o PBN suteikia vertės signalo komponentą, konkrečiai susijusią su aversiniais rezultatais.

Motyvacinių įspūdžių šaltiniai

Mažiau žinoma apie motyvacinių pasekmių signalų šaltinį DA neuronuose. Vienas intriguojantis kandidatas yra centrinis amygdalos branduolys (CeA), kuris nuosekliai susijęs su orientavimu, dėmesiu ir bendrais motyvaciniais atsakymais tiek apdovanojančių, tiek aversinių įvykių metu (Olandija ir Gallagher, 1999; Baxter ir Murray, 2002; Merali ir kt., 2003; Balleine ir Killcross, 2006) (8 pav). CeA ir kituose amygdalos branduoliuose yra daug neuronų, kurių signalai atitinka motyvacinį atributą: jie signalizuoja už atlygį ir aversinius įvykius ta pačia kryptimi, yra sustiprinti, kai įvykiai netikėtai įvyksta ir yra susiję su elgsenos veiksmais (Nishijo ir kt., 1988; Belova ir kt., 2007; Shabel ir Janak, 2009). Šie signalai gali būti siunčiami į DA neuronus, nes CeA turi mažėjančias prognozes prie smegenų kamieno, kuriame yra naudingos ir aversinės informacijos (Lee ir kt., 2005; Pascoe ir Kapp, 1985) ir CeA yra būtina DA spaudai, susijusiai su atlyginimais susijusiais renginiais (Phillips ir kt., 2003a). Be to, CeA dalyvauja DA neuronuose keliuose, atitinkančiuose mūsų siūlomus anatominius ir funkcinius tinklus, skirtus motyvaciniam atpažinimui. Būtinas kelias, įskaitant CeA, SNc ir nugaros striatumą, norint išmokti orientuotis į maisto ženklus (Han et al., 1997; Lee ir kt., 2005; El-Amamy ir Olandija, 2007). Laikydamasis mūsų pasiskirstymo lyginant su vertės signalais, šis kelias yra būtinas mokymuisi orientuotis į maisto ženklus, bet ne mokytis, kaip pasiekti maisto rezultatus (Han et al., 1997). Antrasis kelias, įskaitant „CeA“, „SNc“, „VTA“ ir „NAc“ branduolį, yra būtinas norint gauti užmokesčio užuominas, kad būtų padidintas bendras motyvavimas atlikti atlygio ieškojimo veiksmus (Hall ir kt., 2001; Corbit ir Balleine, 2005; El-Amamy ir Olandija, 2007).

Be CeA, DA neuronai gali gauti motyvacinius įspūdžių signalus iš kitų šaltinių, pvz.Lin ir Nicolelis, 2008; Richardsonas ir DeLongas, 1991) ir neuronus PBN (Coizet ir kt., 2010), nors šie keliai vis dar turi būti tiriami.

Perspėjimo signalų šaltiniai

Yra keletas gerų kandidatų DA neuronams aprūpinti įspėjimo signalais. Galbūt patraukliausias kandidatas yra aukštesnysis colliculus (SC), vidurio smegenų branduolys, gaunantis trumpojo latentinio jutimo įvestį iš daugelio jutimo būdų ir kontroliuojant orientavimo reakcijas ir dėmesį (Redgrave ir Gurney, 2006) (8 pav). PK turi tiesioginę projekciją į SNc ir VTA (May ir kt., 2009; Comoli ir kt., 2003). Anestezuotiems gyvūnams SC yra gyvybiškai svarbus trumpųjų latentinių signalų kanalas, kad pasiektų DA neuronus ir sukeltų DA išsiskyrimą pasroviui.Comoli ir kt., 2003; Dommett ir kt., 2005). SC-DA kelias geriausiai tinka įspėjimo signalams perduoti, o ne už atlygį ir pasipriešinimo signalams, nes SC neuronai mažai reaguoja į atlygį ir turi tik nedidelę įtaką DA aversiniams atsakams (Coizet ir kt., 2006). Tai rodo, kad įvykių seka, kurioje SC neuronai (1) aptinka stimulą, (2) pasirenka jį kaip potencialiai svarbų (3) sukelia orientacinę reakciją, kad ištirtų stimulą, ir (4) tuo pačiu metu inicijuoja DA signalizacijos atsaką, kuris sukelia DA išsiveržimas pasroviui struktūrose (Redgrave ir Gurney, 2006).

Antrasis kandidatas, siunčiantis įspėjimo signalus DA neuronams, yra LHb (8 pav). Pažymėtina, kad netikėtas bandomojo starto pradžios pradžia slopina daugelį LHb neuronų atvirkštiniu būdu į DA neurono įspėjimo signalą, ir šis atsakas atsiranda trumpesniame latentiniame LHb, atitinkančiame LHb → DA perdavimo kryptį (Bromberg-Martin ir kt., 2010a; Bromberg-Martin ir kt., 2010c). Mes taip pat pastebėjome, kad LHb neuronai paprastai yra netikėti vaizdiniai vaizdai ir garsai, atvirkščiai į DA sužadinimus (MM, ESB-M, ir OH, nepublikuoti stebėjimai), nors tai laukia sistemingesnio tyrimo.

Galiausiai, trečiasis kandidatas, siunčiantis įspėjimo signalus DA neuronams, yra pedunculopontine tegmental branduolys (PPTg), kuris projektuoja tiek SNc, tiek VTA ir dalyvauja motyvaciniame apdorojime (Winn, 2006) (8 pav). PPTg yra svarbus, kad būtų galima atlikti VTA DA neuronų išsiliejimus (Grace ir kt., 2007) įskaitant spragų atsakymus į atlygio užuominas (Pan ir Hyland, 2005). Laikantis įspėjimo signalo, PPTg neuronai turi trumpalaikį atsaką į kelis jutimo būdus ir yra aktyvūs orientavimo reakcijų metu (Winn, 2006). Yra įrodymų, kad PPTg jutimo reakciją lemia atlygio vertė ir neatidėliotinų veiksmų reikalavimai (Dormont ir kt., 1998; Okada ir kt., 2009) (bet žr.Pan ir Hyland, 2005)). Kai kurie PPTg neuronai taip pat reaguoja į patenkinamus ar abejingus rezultatus (Dormont ir kt., 1998; Kobayashi ir kt., 2002; Ivlieva ir Timofeeva, 2003b, a). Svarbu išbandyti, ar signalai, kuriuos PPTg siunčia DA neuronams, yra konkrečiai susiję su įspėjimu arba ar jame yra kitų motyvacinių signalų, pvz., Vertės ir svarbos.

Būsimų mokslinių tyrimų kryptys

Mes peržiūrėjome atlygio, aversyvių ir įspėjamųjų signalų pobūdį DA neuronuose ir siūlėme hipotezę apie pagrindinius neuroninius kelius ir jų vaidmenis motyvuotame elgesyje. Manome, kad tai yra darbo hipotezė, ateities teorijų ir mokslinių tyrimų vadovas, kuris leis mums geriau suprasti. Čia išryškinsime keletą sričių, kuriose reikalingas tolesnis tyrimas, siekiant atskleisti gilesnį sudėtingumą.

Šiuo metu mūsų supratimas apie DA signalus sudarančius neuroninius kelius yra ankstyvame etape. Todėl bandėme daryti išvadą, kad vertės ir svarbos kodavimo DA signalų šaltiniai ir tikslai daugiausia pagrįsti netiesioginėmis priemonėmis, tokiomis kaip neuronų atsako savybės ir skirtingų smegenų sričių funkciniai vaidmenys. Svarbu, kad šie kandidatų keliai būtų tiesiogiai išbandyti ir atrasti jų išsamias savybes, padedant neseniai sukurtoms priemonėms, leidžiančioms stebėti DA perdavimą (Robinson ir kt., 2008) ir kontroliuojami (Tsai ir kt., 2009; Tecuapetla ir kt., 2010; Stuber ir kt., 2010) su dideliu erdviniu ir laiko tikslumu. Kaip jau minėta, keliose iš šių kandidatų struktūrų yra topografinė organizacija, o tai rodo, kad jų bendravimas su DA neuronais taip pat gali būti topografinis. Fazinių DA signalų nerviniai šaltiniai taip pat gali būti sudėtingesni už paprastus nukreipimo kelius, kuriuos siūlėme, nes neuronų struktūros, kurios bendrauja su DA neuronais, yra tankiai tarpusavyje susijusios (Geisler ir Zahm, 2005) ir DA neuronai gali bendrauti tarpusavyje per vidurinę smegenis (Ford ir kt., 2010).

Mes sutelkėme dėmesį į pasirinktą DA neuronų jungčių rinkinį, tačiau DA neuronai gauna funkcinį įnašą iš daugelio papildomų struktūrų, įskaitant subthalamic branduolį, laterodoralinį tegmentalinį branduolį, stria terminalo ląstelių branduolį, prefroninę žievę, ventralinę palidumą ir šoninę hipotalamą (Grace ir kt., 2007; Shimo ir Wichmann, 2009; Jalabert ir kt., 2009). Pažymėtina, kad šoninis hipotalamo oreksino neuronų projektas į DA neuronus yra aktyvinamas, o ne aversiniai įvykiai, ir skatina elgesį su narkotikais (Harris ir Aston-Jones, 2006), nurodant galimą funkciją, susijusią su vertybėmis. DA neuronai taip pat siunčia prognozes į daugelį papildomų struktūrų, įskaitant hipotalamą, hipokampą, amygdalą, habenulą ir daugelį žievės sričių. Pažymėtina, kad priekinės cingulinės žievės (ACC) buvo pasiūlyta gauti atlygio prognozavimo klaidų signalus iš DA neuronų (Holroydas ir Colesas, 2002) ir yra neuronų, kurių aktyvumas teigiamai susijęs su motyvacine verte (Koyama ir kt., 1998). Tačiau ACC aktyvavimas taip pat yra susijęs su aversyviu apdorojimu (Vogt, 2005; Johansenas ir laukai, 2004). Šios ACC funkcijos gali būti paremtos DA motyvacinės vertės ir svarbos signalų mišiniu, kurie bus svarbūs būsimiems tyrimams. Iš tiesų, kai kuriose srityse, įskaitant medialinę prefrontalinę žievę, buvo pranešta apie nervų signalus, susijusius su atlygio prognozavimo klaidomis (Matsumoto ir kt., 2007; Seo ir Lee, 2007), orbitofrontalinė žievė (Sul ir kt., 2010) (bet žr.Takahashi ir kt., 2009; Kennerley ir Wallis, 2009)) ir nugaros striatumas (Kim ir kt., 2009; Oyama ir kt., 2010) ir jų priežastinis ryšys su DA neuronų aktyvumu dar neatskleidžiamas.

Mes apibūdinome motyvacinius įvykius su paprasta dichotomija, klasifikuodami juos kaip „naudingus“ arba „aversyvius“. Tačiau šiose kategorijose yra labai įvairios. Aversyvi liga yra laipsniška, pailginta ir atsiranda dėl vidinių įvykių; Aversive airpuff yra greitas, trumpas ir sukeltas išorinio pasaulio. Šios situacijos reikalauja labai skirtingo elgesio atsako, kuris gali būti paremtas skirtingomis nervų sistemomis. Be to, nors mūsų diskusiją sutelkėme į dviejų tipų DA neuronus su signalais, panašiais į motyvacinę vertę ir ištikimybę, artimas tyrimas rodo, kad DA neuronai neapsiriboja šia griežta dichotomija. Kaip rodo mūsų anatominių gradientų samprata, kai kurie DA neuronai perduoda tiek panašių, tiek ir į vertę panašių signalų mišinius; dar kiti DA neuronai reaguoja į naudingus, bet ne aversinius įvykius (Matsumoto ir Hikosaka, 2009b; Bromberg-Martin ir kt., 2010a). Šie argumentai leidžia manyti, kad kai kurie DA neuronai gali nekoduoti motyvacinių įvykių palei mūsų intuityviąją „geros“ ir „blogos“ ašį ir galbūt būti specializuoti palaikyti specifines adaptyvaus elgesio formas.

Net atlyginimų srityje yra įrodymų, kad DA neuronai perduoda skirtingus atlygio signalus skirtingiems smegenų regionams (Bassareo ir Di Chiara, 1999; Ito ir kt., 2000; Stefani ir Moghaddam, 2006; Wightman ir kt., 2007; Aragona ir kt., 2009). Įvairūs atsakymai, pateikti SNc ir VTA, apima neuronus, kurie: atsako tik į bandymo pradžią (Roesch ir kt., 2007), galbūt koduojant gryną įspėjimo signalą; skirtingai reaguoja į vizualines ir klausos priemones (Strecker ir Jacobs, 1985), galbūt gaunant duomenis iš įvairių SC ir PPTg neuronų; atsakyti į pirmąjį ar paskutinį įvykį seka (Ravelas ir Ričmondas, 2006; Jin ir Costa, 2010); aktyviai aktyvavo rizikingi atlygiai (Fiorillo ir kt., 2003); arba yra aktyvuoti kūno judesiuose (Schultz, 1986; Kiyatkin, 1988a; Puryear ir kt., 2010; Jin ir Costa, 2010) (taip pat žr.Phillips ir kt., 2003b; Stuber ir kt., 2005)). Nors kiekvienas iš šių atsako modelių buvo praneštas tik nedidelėje tyrimų ar neuronų dalyje, šie duomenys rodo, kad DA neuronai gali būti suskirstyti į daug didesnį funkciniu požiūriu skirtingų populiacijų skaičių.

Galutinis ir svarbus aspektas yra tas, kad šiuo metu atliekant gyvūnų elgesio įrašymo tyrimus dar nėra visiškai įtikinamų DA neuronų aktyvumo matavimų, nes šie tyrimai galėjo išskirti tik DA ir ne DA neuronus, naudojant netiesioginius metodus, pagrįstus tokiomis neuroninėmis savybėmis. kaip degimo greitis, smaigalys ir jautrumas D2 receptorių agonistams (Grace ir Bunney, 1983; Schultz, 1986). Atrodo, kad šie metodai patikimai atpažįsta DA neuronus, nurodytus keliose įrodymų eilutėse, įskaitant ląstelių ir ląstelių ląstelių metodų palyginimą, juxtaceliulinius įrašus ir DA specifinių pažeidimų poveikį.Grace ir Bunney, 1983; Grace ir kt., 2007; Brown et al., 2009). Tačiau naujausi tyrimai rodo, kad šis metodas gali būti mažiau patikimas VTA, kur DA ir ne DA neuronai turi platesnį ląstelių savybių spektrą (Margolis ir kt., 2006; Margolis ir kt., 2008; Lammel ir kt., 2008; Brischoux ir kt., 2009). Net tiesioginiai DA koncentracijų matavimai pasroviui priklausančiose struktūrose nesuteikia įtikinamų įrodymų, kad DA neuronų sukelia aktyvumą, nes DA koncentracija gali būti kontroliuojama papildomais veiksniais, pvz., DA axon terminalų glutamaterginiu aktyvavimu (Cheramy ir kt., 1991) ir sparčiai keičiant DA vežėjų veiklą (\ tZahniser ir Sorkin, 2004). Norint atlikti visiškai įtikinamus DA neuronų aktyvumo matavimus aktyvaus elgesio metu, reikės naudoti naujus įrašymo metodus, pvz., Ekstraląstelinio įrašymo derinimą su optogenetine stimuliacija (Jin ir Costa, 2010).

Išvada

Įtakos vidutinio smegenų DA neuronų koncepcija buvo ta, kad jie perduoda vienodą motyvacinį signalą visoms pasroviui priklausančioms struktūroms. Čia mes peržiūrėjome įrodymų, kad DA signalai yra įvairesni nei paprastai manoma. Užuot užkodavęs vienodą signalą, DA neuronai būna įvairių tipų, kurie siunčia aiškius motyvacinius pranešimus apie atlygį teikiančius ir nepagrįstus įvykius. Netgi vienas DA neuronas neatskleidžia vieno motyvacinio signalo. Vietoj to, DA neuronai perduoda įvairių signalų mišinius, kuriuos generuoja skirtingi nerviniai procesai. Kai kurie atspindi išsamias prognozes apie naudingą ir nenaudingą patirtį, o kiti atspindi greitą atsaką į didelės svarbos įvykius.

Be to, siūlėme hipotezę apie šių įvairių DA signalų pobūdį, juos generuojančius neuroninius tinklus ir jų įtaką smegenų struktūroms ir motyvuotam elgesiui. Mūsų pasiūlymą galima vertinti kaip ankstesnių teorijų sintezę. Daugelis ankstesnių teorijų bandė nustatyti DA neuronus su vienu motyvaciniu procesu, pavyzdžiui, vertinamų tikslų ieškojimu, motyvaciniu požiūriu svarbių situacijų įtraukimu arba reagavimu į įspėjamus aplinkos pokyčius. Mūsų nuomone, DA neuronai gauna signalus, susijusius su visais šiais trimis procesais. Tačiau, o ne distiliuojant šiuos signalus į vienodą pranešimą, mes siūlėme, kad DA neuronai perduotų šiuos signalus į atskiras smegenų struktūras, kad paremtų skirtingas nervų sistemas motyvuotam pažinimui ir elgesiui. Kai kurie DA neuronai palaiko smegenų sistemas, kurios skiria motyvacinę vertę, skatindamos veiksmus, kuriais siekiama ieškoti naudingų įvykių, išvengti aversinių įvykių ir užtikrinti, kad įspėjamieji įvykiai galėtų būti numatyti ir paruošti iš anksto. Kiti DA neuronai palaiko smegenų sistemas, kurias skatina motyvacinė savijauta, įskaitant orientavimą į potencialiai svarbių įvykių nustatymą, pažinimo procesą, kad būtų galima pasirinkti atsakymą ir prisiminti jo pasekmes, ir motyvaciją išlikti siekiant optimalaus rezultato. Tikimės, kad šis pasiūlymas padės mums geriau suprasti DA funkcijas smegenyse, kai DA neuronai pritaiko savo signalus, kad palaikytų kelis neuroninius tinklus, turinčius atskirą vaidmenį motyvacinėje kontrolėje.

PATVIRTINIMAI

Šis darbas buvo paremtas Nacionalinės akių instituto intramuralinio tyrimo programa. Taip pat dėkojame Amy Arnsten už vertingas diskusijas.

Išnašos

Leidėjo atsisakymas: Tai PDF failas iš neregistruoto rankraščio, kuris buvo priimtas paskelbti. Kaip paslauga mūsų klientams teikiame šią ankstyvą rankraščio versiją. Rankraštis bus kopijuojamas, užrašomas ir peržiūrimas gautas įrodymas, kol jis bus paskelbtas galutinėje cituotojoje formoje. Atkreipkite dėmesį, kad gamybos proceso metu gali būti aptiktos klaidos, kurios gali turėti įtakos turiniui, ir visi su žurnalu susiję teisiniai atsakymai.

FOOTNOTE1By motyvacinį pagarbą mes suvokiame tokį kiekį, kuris yra aukštas tiek apdovanojantiems, tiek neramiems įvykiams ir yra mažas motyvaciškai neutraliems (nepelningiems ir ne aversiniams) įvykiams. Tai panaši į (Berridge ir Robinson, 1998). Atkreipkite dėmesį, kad motyvacinė savijauta skiriasi nuo kitų neurologijoje naudojamų savybių sąvokų, pvz., Skatinamojo dėmesio (kuris taikomas tik pageidaujamiems įvykiams;Berridge ir Robinson, 1998)) ir suvokimo suvokimas (taikomas motyvaciškai neutraliems įvykiams, pvz., judantiems objektams ir spalvotiems žiburiams;Bisley ir Goldberg, 2010)).

FOOTNOTE2Atkreipkite dėmesį, kad motyvacinio pasipriešinimo DA neuronų signalai skiriasi nuo klasikinių „asociatyvumo“ ir „asocijuotumo pokyčių“ sąvokų, kurios buvo pasiūlytos reguliuoti mokymosi tempą (pvz.,Pearce ir Hall, 1980)). Tokios teorijos teigia, kad gyvūnai mokosi (ir koreguoja mokymosi normas) ir iš teigiamų, ir neigiamų prognozavimo klaidų. Nors šie DA neuronai gali prisidėti prie mokymosi iš teigiamų prognozavimo klaidų, kurių metu jie gali turėti stiprią atsaką (pvz., Netikėtai gauti atlygį), jie negali prisidėti prie mokymosi iš neigiamų prognozavimo klaidų, kurių metu jie gali turėti mažai atsakymų arba jų neturėti ( pvz., dėl netikėto atlygio praleidimo) (4B).

NUORODOS

  1. Ahlbrecht M, Weber M. Netikrumo sprendimas: eksperimentinis tyrimas. Institucinės ir teorinės ekonomikos žurnalas. 1996: 152: 593 – 607.
  2. Albin RL, Young AB, Penney JB. Pagrindinių ganglijų sutrikimų funkcinė anatomija. Nanomokslų tendencijos. 1989: 12: 366 – 375. [PubMed]
  3. Andersonas AK, Christoffas K, Stappen I, Panitz D, Ghahremani DG, Glover G, Gabrieli JD, Sobel N. Žmogaus alyvuogių intensyvumo ir valentinės diferencijuotos nervinės reprezentacijos. Nat Neurosci. 2003: 6: 196 – 202. [PubMed]
  4. Anstrom KK, Miczek KA, Budygin EA. Padidėjęs fazinis dopamino signalizavimas mezolimbiniame take, kai žuvo žiurkės. Neurologija. 2009: 161: 3 – 12. [PubMed]
  5. Aragona BJ, diena JJ, Roitman MF, Cleaveland NA, Wightman RM, Carelli RM. Regioninis specifiškumas realaus laiko fazinio dopamino perdavimo modelių vystymuisi, kai žiurkėms įgyja cue-kokaino asociaciją. Europos neurologijos žurnalas. 2009: 30: 1889 – 1899. [PMC nemokamas straipsnis] [PubMed]
  6. Austin AJ, Duka T. Mechanizmai, skirti atkreipti dėmesį į apetitinius ir pasibjaurėtinus Pavlovijos kondicionavimo rezultatus. Elgesio smegenų tyrimai. 2010: 213: 19 – 26. [PubMed]
  7. Badia P, Harsh J, Abbott B. Pasirinkimas tarp prognozuojamų ir nenuspėjamų šoko sąlygų: duomenys ir teorija. Psichologinis biuletenis. 1979: 86: 1107 – 1131.
  8. Balleine BW, Killcross S. Lygiagrečiai skatinamasis apdorojimas: integruotas amygdala funkcijos vaizdas. Nanomokslų tendencijos. 2006: 29: 272 – 279. [PubMed]
  9. Balleine BW, O'Doherty JP. Žmogaus ir graužikų homologija kontroliuojant veiksmus: kortikosterialiniai veiksniai, lemiantys tikslo ir įpročio veiksmus. Neuropsichofarmakologija. 2010; 35: 48–69. [PMC nemokamas straipsnis] [PubMed]
  10. Barr GA, Moriceau S, Shionoya K, Muzny K, Gao P, Wang S, Sullivan RM. Kūdikių mokymosi perėjimai yra moduliuoti dopamino amygdaloje. Nat Neurosci. 2009: 12: 1364 – 1366. [PMC nemokamas straipsnis] [PubMed]
  11. „Bassareo V“, „De Luca MA“, „Di Chiara G.“ Dopamino diferencinė motyvacinių stimulų savybių išraiška Nucleus Accumbens Shell ir Core bei Prefrontal Cortex. J Neurosci. 2002: 22: 4709 – 4719. [PubMed]
  12. Bassareo V, Di Chiara G. Diferencialinis dopamino perdavimo jautrumas maisto stimulams branduolių accumbens lukštuose / šerdyse. Neurologija. 1999: 89: 637 – 641. [PubMed]
  13. Baxter MG, Murray EA. Amygdala ir atlygis. Nat Rev Neurosci. 2002: 3: 563 – 573. [PubMed]
  14. „Bayer HM“, „Glimcher PW“. Vidutinio smegenų dopamino neuronai koduoja kiekybinį atlygio prognozavimo klaidos signalą. Neuronas. 2005: 47: 129 – 141. [PMC nemokamas straipsnis] [PubMed]
  15. Belova MA, Paton JJ, Morrison SE, Salzman CD. Lūkesčiai moduliuoja nervinius atsakus į malonius ir aversinius stimulus primityviame amygdaloje. Neuronas. 2007: 55: 970 – 984. [PMC nemokamas straipsnis] [PubMed]
  16. Bentivoglio M, Morelli M. Mesencepalinių dopaminerginių neuronų organizavimas ir grandinės bei dopamino receptorių pasiskirstymas smegenyse. Cheminės neuroanatomijos vadovas. 2005: 1 – 107.
  17. Berridge KC, Robinson TE. Koks yra dopamino vaidmuo atlyginant: hedoninis poveikis, mokymas už atlygį ar skatinamasis dėmesys? Smegenų tyrimai. 1998: 28: 309 – 369. [PubMed]
  18. Besson C, Louilot A. Asimetrinė dopaminerginių neuronų įtaka afektiniam suvokimui. Neurologija. 1995: 68: 963 – 968. [PubMed]
  19. Birgner C, Nordenankar K, Lundblad M, Mendez JA, Smith C, Le Greves M, Galter D, Olson L, Fredriksson A, Trudeau LE ir kt. VGLUT2 dopamino neuronuose reikalingas psichostimuliantų sukeltam elgesio aktyvavimui. Jungtinių Amerikos Valstijų Nacionalinės mokslų akademijos darbai. 2010: 107: 389 – 394. [PMC nemokamas straipsnis] [PubMed]
  20. Bisley JW, Goldberg ME. Parietinės skilties dėmesys, ketinimas ir prioritetas. Metinė neurologijos apžvalga. 2010: 33: 1 – 21. [PMC nemokamas straipsnis] [PubMed]
  21. Bjorklund A, Dunnett SB. Dopamino neuronų sistemos smegenyse: atnaujinimas. Nanomokslų tendencijos. 2007: 30: 194 – 202. [PubMed]
  22. Blazquez PM, Fujii N, Kojima J, Graybiel AM. Tinklo reprezentacijos tikimybės striatume vaizdavimas. Neuronas. 2002: 33: 973 – 982. [PubMed]
  23. Botvinick MM, Braver TS, Barch DM, Carter CS, Cohen JD. Konfliktų stebėjimas ir pažinimo kontrolė. Psychol Rev. 2001; 108: 624 – 652. [PubMed]
  24. Bradley MM, Greenwald MK, Petry MC, Lang PJ. Atsiminti nuotraukas: malonumas ir susijaudinimas atmintyje. J Exp Psychol Learn Mem Cogn. 1992: 18: 379 – 390. [PubMed]
  25. Braun DA, Mehring C, Wolpert DM. Struktūrinis mokymasis veikloje. Elgesio smegenų tyrimai. 2010: 206: 157 – 165. [PMC nemokamas straipsnis] [PubMed]
  26. Brinschwitz K, Dittgen A, Madai VI, Lommel R, Geisler S, Veh RW. Glutamaterginiai axonai iš šoninio habenulio daugiausia baigiasi GABAerginiuose ventralinio smegenų neuronuose. Neurologija. 2010: 168: 463 – 476. [PubMed]
  27. Brischoux F, Chakraborty S, Brierley DI, „Ungless MA“. Fazinis dopamino neuronų sužadinimas ventralioje VTA sukelia kenksmingus stimulus. Jungtinių Amerikos Valstijų Nacionalinės mokslų akademijos darbai. 2009: 106: 4894 – 4899. [PMC nemokamas straipsnis] [PubMed]
  28. Bromberg-Martin ES, Hikosaka O. Vidutinio smegenų dopamino neuronai rodo, kad pirmenybė teikiama išankstinei informacijai apie būsimus apdovanojimus. Neuronas. 2009: 63: 119 – 126. [PMC nemokamas straipsnis] [PubMed]
  29. Bromberg-Martin ES, Matsumoto M, Hikosaka O. Išskirtinis toninis ir fazinis išankstinis aktyvumas šoniniame habenuloje ir dopamino neuronuose. Neuronas. 2010a: 67: 144 – 155. [PMC nemokamas straipsnis] [PubMed]
  30. Brombergas-Martinas ES, Matsumoto M, Hong S, Hikosaka O. Palodidus-habenula-dopamino kelias signalizuoja apie paskatas. J Neurophysiol. 2010b; 104: 1068 – 1076. [PMC nemokamas straipsnis] [PubMed]
  31. Bromberg-Martin ES, Matsumoto M, Nakahara H, Hikosaka O. Keli laikai atminties šoninėje habenuloje ir dopamino neuronuose. Neuronas. 2010c; 67: 499 – 510. [PMC nemokamas straipsnis] [PubMed]
  32. Ruda MTC, Henny P, Bolam JP, Magill PJ. Neurochemiškai heterogeninių dopaminerginių neuronų aktyvumas smegenų nigroje spontaniškų ir varomųjų smegenų būsenos pokyčių metu. J Neurosci. 2009: 29: 2915 – 2925. [PubMed]
  33. Kardinolas RN. Neurinės sistemos, susijusios su vėlavimu ir tikimybine sustiprinimu. Neuroninis tinklas. 2006: 19: 1277 – 1301. [PubMed]
  34. Cheer JF, Aragona BJ, Heien ML, Seipel AT, Carelli RM, Wightman RM. Koordinuotas dopamino išsiskyrimas ir neuronų aktyvumas skatina tikslinį elgesį. Neuronas. 2007: 54: 237 – 244. [PubMed]
  35. Cheramy A, Kemel ML, Gauchy C, Desce JM, Galli T, Barbeito L, Glowinski J. Eksitacinių aminorūgščių vaidmuo tiesioginiame ir netiesioginiame presinaptiniame dopamino išsiskyrimo iš nigrostriali dopamino neuronų galuose. Amino rūgštys. 1991: 1: 351 – 363. [PubMed]
  36. Chew SH, Ho JL. Viltis: empirinis tyrimas apie požiūrį į netikrumo sprendimo laiką. Rizikos ir netikrumo žurnalas. 1994: 8: 267 – 288.
  37. Chiodo LA, Antelman SM, Caggiula AR, Lineberry CG. Jutimo stimulai keičia dopamino (DA) neuronų išsiskyrimo greitį: įrodymai dėl dviejų funkcinių tipų DA ląstelėse. Brain Res. 1980: 189: 544 – 549. [PubMed]
  38. Christoph GR, Leonzio RJ, Wilcox KS. Šoninio habenulio stimuliavimas slopina dopamino turinčius neuronus žiurkės pagrindiniame ir ventraliniame apvalkalo plote. J Neurosci. 1986: 6: 613 – 619. [PubMed]
  39. Chuhma N, Choi WY, Mingote S, Rayport S. Dopamino neuronų glutamato perdavimas: dažnio priklausomas moduliavimas mezoventromedialinėje projekcijoje. Neurologija. 2009: 164: 1068 – 1083. [PMC nemokamas straipsnis] [PubMed]
  40. Cohen JD, Braver TS, Brown JW. Dopamino funkcijos skaičiavimo perspektyvos prefrontalinėje žievėje. Dabartinė nuomonė apie neurobiologiją. 2002: 12: 223 – 229. [PubMed]
  41. Coizet V, Dommett EJ, Klop EM, Redgrave P, Overton PG. Parabrachialinis branduolys yra kritinė nuoroda trumpos latentinės nociceptinės informacijos perdavimui į vidurio smegenų dopaminerginius neuronus. Neurologija. 2010: 168: 263 – 272. [PMC nemokamas straipsnis] [PubMed]
  42. Coizet V, Dommett EJ, Redgrave P, Overton PG. Vidutinio smegenų dopaminerginių neuronų nociceptinius atsakus moduliuoja žiurkės geresnis kolikulis. Neurologija. 2006: 139: 1479 – 1493. [PubMed]
  43. „Comoli E“, „Coizet V“, „Boyes J“, „Bolam JP“, „Canteras NS“, „Quirk RH“, „Overton PG“, „Redgrave P.“. Nat Neurosci. 2003: 6: 974 – 980. [PubMed]
  44. Corbit LH, Balleine BW. Dvigubas bazolaterinių ir centrinių amygdalos pakitimų disociacija bendrais ir specifiniais pavloviško instrumentinio pernešimo būdais. J Neurosci. 2005: 25: 962 – 970. [PubMed]
  45. Dalley JW, Laane K, Theobald DE, Armstrong HC, Corlett PR, Chudasama Y, Robbins TW. D1 ir NMDA receptorių branduolio accumbens laiko ribotas moduliavimas. Jungtinių Amerikos Valstijų Nacionalinės mokslų akademijos darbai. 2005: 102: 6189 – 6194. [PMC nemokamas straipsnis] [PubMed]
  46. Daly HB. Pirmenybė nenuspėjamumui yra atvirkščiai, kai nenuspėjamas nenaudingas elgesys: procedūros, duomenys ir apetito stebėjimo atsako gavimo teorijos. In: Gormezano I, Wasserman EA, redaktoriai. Mokymasis ir atmintis: elgesio ir biologiniai pagrindai. LE asocijuotieji; 1992. 81 – 104.
  47. Davidson MC, Horvitz JC, Tottenham N, Fossella JA, Watts R, Ulug AM, Casey BJ. Diferencinė caudatė ir cinguliuota aktyvacija po netikėtų nejautrių dirgiklių. NeuroImage. 2004: 23: 1039 – 1045. [PubMed]
  48. Diena JJ, Roitman MF, Wightman RM, Carelli RM. Asociatyvus mokymasis skatina dopamino signalizacijos dinaminius pokyčius branduolių accumbens. Nat Neurosci. 2007: 10: 1020 – 1028. [PubMed]
  49. Dayan P, Niv Y. Stiprinimasis mokymasis: geras, blogas ir negraži. Dabartinė nuomonė apie neurobiologiją. 2008: 18: 185 – 196. [PubMed]
  50. Descarries L, Berube-Carriere N, Riad M, Bo GD, Mendez JA, Trudeau LE. Glutamatas dopamino neuronuose: sinaptinis ir difuzinis perdavimas. Smegenų tyrimų apžvalgos. 2008: 58: 290 – 302. [PubMed]
  51. Di Chiara G. Nucleus accumbens apvalkalas ir pagrindinis dopaminas: diferencinis vaidmuo elgesyje ir priklausomybėje. Elgesio smegenų tyrimai. 2002: 137: 75 – 114. [PubMed]
  52. Dommett E, Coizet V, Blaha CD, Martindale J, Lefebvre V, Walton N, Mayhew JE, Overton PG, Redgrave P. Kaip vizualiniai stimulai trumpais latentais aktyvuoja dopaminerginius neuronus. Mokslas. 2005: 307: 1476 – 1479. [PubMed]
  53. „Dormont JF“, „Conde H“, „Farin D.“. Pedunculopontine tegmental branduolio vaidmuo, susijęs su sąlyga, kad variklis veikia katę. I. Kontekstinis ir su sustiprinimu susijęs vieneto veikimas. Eksperimentiniai smegenų tyrimai. Experimentelle Hirnforschung. 1998: 121: 401 – 410. [PubMed]
  54. Duzel E, Bunzeck N, Guitart-Masip M, Duzel S. Neišvengiamai susijusi dopamino (NOMAD) numatymo ir tyrimo motyvacija: poveikis sveikam senėjimui. Neurologijos ir biologinio elgesio apžvalgos. 2010: 34: 660 – 669. [PubMed]
  55. El-Amamy H, Olandijos kompiuteris. Skirtingi amygdalos centrinio branduolio atjungimo nuo ventralinio tegmentalio srities arba materia nigros poveikio mokymosi orientacija ir skatinamoji motyvacija. Europos neurologijos žurnalas. 2007: 25: 1557 – 1567. [PMC nemokamas straipsnis] [PubMed]
  56. Ettenberg A. Savęs vartojamo kokaino oponento proceso savybės. Neurologijos ir biologinio elgesio apžvalgos. 2004: 27: 721 – 728. [PubMed]
  57. Fadok JP, Dickerson TM, Palmiter RD. Dopaminas yra būtinas nuo bėdų priklausomam baimės kondicionavimui. J Neurosci. 2009: 29: 11089 – 11097. [PMC nemokamas straipsnis] [PubMed]
  58. „Fairhall AL“, „Lewen GD“, „Bialek W“, „de Ruyter Van Steveninck RR“. Efektyvumas ir dviprasmiškumas adaptuotame nerviniame kode. Gamta. 2001: 412: 787 – 792. [PubMed]
  59. Faure A, Haberland U, Conde F, El Massioui N. Lesion nigrostriali dopamino sistema sutrikdo stimulo ir atsako įpročio formavimąsi. J Neurosci. 2005: 25: 2771 – 2780. [PubMed]
  60. Faure A, Reynolds SM, Richard JM, Berridge KC. Mesolimbinis dopaminas noro ir baimėje: tai leidžia sukurti motyvaciją vietinių glutamato sutrikimų metu branduolyje. J Neurosci. 2008: 28: 7184 – 7192. [PMC nemokamas straipsnis] [PubMed]
  61. Fiorillo CD, Newsome WT, Schultz W. Dopamino neuronų atlyginimų prognozavimo laiko tikslumas. Nat Neurosci. 2008: 11: 966 – 973. [PubMed]
  62. „Fiorillo CD“, „Tobler PN“, „Schultz W“. Dopetinio tikimybės ir neapibrėžties diskretiškas kodavimas dopamino neuronais. Mokslas. 2003: 299: 1898 – 1902. [PubMed]
  63. Floresco SB, Ghods-Sharifi S, Vexelman C, Magyar O. Išskiriami branduolio ir korpuso vaidmenys reguliuojant rinkinį. J Neurosci. 2006: 26: 2449 – 2457. [PubMed]
  64. Ford CP, Gantz SC, Phillips PE, Williams JT. Ekstraląstelinio dopamino kontrolė dendrito ir axono terminaluose. J Neurosci. 2010: 30: 6975 – 6983. [PMC nemokamas straipsnis] [PubMed]
  65. Frank MJ. Dinaminis dopamino moduliavimas bazinėse ganglijose: neurokomputacinė pažintinių trūkumų gydomojo ir nežinomo Parkinsonizmo atveju. Pažinimo neurologijos žurnalas. 2005: 17: 51 – 72. [PubMed]
  66. Frank MJ, Fossella JA. Mokymosi, motyvacijos ir pažinimo neurogenetika ir farmakologija. Neuropsichofarmakologija. 2010 [PMC nemokamas straipsnis] [PubMed]
  67. Frank MJ, Seeberger LC, O'Reilly RC. Morka ar lazda: pažinimo stiprinimas mokantis parkinsonizmo. Mokslas. 2004; 306: 1940 – 1943. [PubMed]
  68. Gallistel CR, Gibbon J. Laikas, greitis ir kondicionavimas. Psychol Rev. 2000; 107: 289 – 344. [PubMed]
  69. Gao DM, Jeaugey L, Pollak P, Benabid AL. Intensyvumo priklausomas nociceptinis atsakas iš prielaidos dopaminerginių neuronų, esančių materia nigra, pars compacta žiurkėse ir jų modifikavimas šoniniais habenula įėjimais. Brain Res. 1990: 529: 315 – 319. [PubMed]
  70. Gauriau C, Bernard JF. Skausmo takai ir parabrachijos grandinės žiurkėse. Eksperimentinė fiziologija. 2002: 87: 251 – 258. [PubMed]
  71. Geisler S, Zahm DS. Žiurkės-anatominės substrato ventralinės tegmentalinės srities kliūtys integracinėms funkcijoms. Lyginamojo neurologijos žurnalas. 2005: 490: 270 – 294. [PubMed]
  72. Gerfen CR, Engber TM, Mahan LC, Susel Z, Chase TN, Monsma FJ, Jr, Sibley DR. D1 ir D2 dopamino receptorių reguliuojama striatonigralinių ir striatopallidinių neuronų geno ekspresija. Mokslas. 1990: 250: 1429 – 1432. [PubMed]
  73. Ghods-Sharifi S, Floresco SB. Diferencinis poveikis pastangų diskontavimui, kurį sukelia branduolio accumbens branduolio arba apvalkalo inaktyvavimas. Elgesio neurologija. 2010: 124: 179 – 191. [PubMed]
  74. Gonon FG. Netiesinis ryšys tarp impulso srauto ir dopamino, kurį išskiria žiurkės vidurio smegenų dopaminerginiai neuronai, kaip tiriama in vivo elektrochemijoje. Neurologija. 1988: 24: 19 – 28. [PubMed]
  75. Goto Y, Yang CR, Otani S. Funkcinis ir disfunkcinis sinaptinis plastiškumas prefrontalinėje žievėje: psichikos sutrikimų vaidmenys. Biologinė psichiatrija. 2010: 67: 199 – 207. [PubMed]
  76. Grace AA. Fazinis ir toninis dopamino išsiskyrimas ir dopamino sistemos atsako moduliavimas: šizofrenijos etiologijos hipotezė. Neurologija. 1991: 41: 1 – 24. [PubMed]
  77. Grace AA, Bunney BS. Nigralinių dopaminerginių neuronų intraląstelinė ir tarpląstelinė elektrofiziologija – 1. Identifikavimas ir apibūdinimas. Neuromokslas. 1983; 10: 301–315. [PubMed]
  78. Grace AA, Floresco SB, Goto Y, Lodge DJ. Dopaminerginių neuronų degimo reguliavimas ir tikslinio elgesio kontrolė. Nanomokslų tendencijos. 2007: 30: 220 – 227. [PubMed]
  79. Grecksch G, Matties H. Dopaminerginių mechanizmų vaidmuo žiurkių hipokampe, siekiant įtvirtinti šviesumo diskriminaciją. Psichofarmakologija (Berl) 1981, 75: 165 – 168. [PubMed]
  80. Guarraci FA, Kapp BS. Elektrofiziologinis ventralinio tegmentalinės srities dopaminerginių neuronų apibūdinimas diferencialinio pavloviško baimės metu, būdamas budrus triušyje. Elgesio smegenų tyrimai. 1999: 99: 169 – 179. [PubMed]
  81. Haber SN, Fudge JL, McFarland NR. Striatonigrostriatrijos keliai primatuose sudaro kylančią spiralę nuo lukšto iki dorsolaterinio striatumo. J Neurosci. 2000: 20: 2369 – 2382. [PubMed]
  82. Hall J, Parkinson JA, Connor TM, Dickinson A, Everitt BJ. Centrinės amygdalos ir branduolio branduolio branduolio dalyvavimas tarpininkuojant Pavlovijos įtaką instrumentiniam elgesiui. Europos neurologijos žurnalas. 2001: 13: 1984 – 1992. [PubMed]
  83. Han JS, McMahan RW, Holland P, Gallagher M. Amygdalo-nigrostriatalinio kelio vaidmuo asociatyviame mokyme. J Neurosci. 1997: 17: 3913 – 3919. [PubMed]
  84. Harris GC, Aston-Jones G. Arouzija ir atlygis: oreksino funkcijos dichotomija. Nanomokslų tendencijos. 2006: 29: 571 – 577. [PubMed]
  85. Herry C, Bach DR, Esposito F, Di Salle F, Perrig WJ, Scheffler K, Luthi A, Seifritz E. Žmogaus ir gyvūnų amygdalos laiko nenuspėjamumo apdorojimas. J Neurosci. 2007: 27: 5958 – 5966. [PubMed]
  86. Hikida T, Kimura K, Wada N, Funabiki K, Nakanishi S. Skirtingi sinaptinio perdavimo vaidmenys tiesioginiuose ir netiesioginiuose striatūros keliuose iki atlygio ir aversinio elgesio. Neuronas. 2010: 66: 896 – 907. [PubMed]
  87. Hikosaka O. Baziniai ganglijų atlyginimų akių judėjimo mechanizmai. Niujorko mokslų akademijos Annals. 2007: 1104: 229 – 249. [PubMed]
  88. Hikosaka O. habenula: nuo streso slėpimo iki vertybėmis pagrįstų sprendimų priėmimo. Nat Rev Neurosci. 2010: 11: 503 – 513. [PMC nemokamas straipsnis] [PubMed]
  89. Hikosaka O, Takikawa Y, Kawagoe R. Bazinio ganglijų vaidmuo kontroliuojant tikslingus krikščioniškus akių judesius. Fiziologinės apžvalgos. 2000: 80: 953 – 978. [PubMed]
  90. Hitchcott PK, Quinn JJ, Taylor JR. Dviejų krypčių tikslinių veiksmų moduliavimas prefrontalinės kortikos dopamino. Cereb Cortex. 2007: 17: 2820 – 2827. [PubMed]
  91. Hnasko TS, Chuhma N, Zhang H, Goh GY, Sulzer D, Palmiter RD, Rayport S, Edwards RH. Vesikulinis glutamato transportavimas skatina dopamino saugojimą ir glutamato koreleazę in vivo. Neuronas. 2010: 65: 643 – 656. [PMC nemokamas straipsnis] [PubMed]
  92. „Holland PC“, „Gallagher M. Amygdala“ schema, skirta dėmesio ir reprezentaciniams procesams. Pažintinių mokslų tendencijos. 1999: 3: 65 – 73. [PubMed]
  93. Hollerman JR, Schultz W. Dopamino neuronai praneša apie klaidą laiko atlyginimų prognozavimo metu. Nat Neurosci. 1998: 1: 304 – 309. [PubMed]
  94. Holroyd CB, Coles MG. Žmogaus klaidų apdorojimo neuroninis pagrindas: stiprinimas, dopaminas ir su klaidomis susijęs neigiamumas. Psychol Rev. 2002; 109: 679 – 709. [PubMed]
  95. Hong S, Hikosaka O. Globus pallidus siunčia su balais susijusius signalus į šoninį habenulą. Neuronas. 2008: 60: 720 – 729. [PMC nemokamas straipsnis] [PubMed]
  96. Horvitz JC. Mesolimbokortikiniai ir nigrostriatyvūs dopamino atsakai į svarbiausius neatlygintinus įvykius. Neurologija. 2000: 96: 651 – 656. [PubMed]
  97. Horvitz JC, Stewart T, Jacobs BL. Ventralinio tegmentinio dopamino neuronų aktyvumo atsiradimo priežastis yra juslinės stimuliacijos. Brain Res. 1997: 759: 251 – 258. [PubMed]
  98. Houk JC, Adams JL, Barto AG. Bazinio ganglio generuoja ir naudoja neuroninius signalus, kurie prognozuoja stiprinimą. In: Houk JC, Davis JL, Beiser DG, redaktoriai. Informacijos apdorojimo modeliai Basal Ganglia. Cambridge, MA: MIT Press; 1995. 249 – 274.
  99. Ikemoto S. Smegenų atlygio schema už mesolimbinės dopamino sistemos: neurobiologinė teorija. Neurologijos ir biologinio elgesio apžvalgos. 2010 [PMC nemokamas straipsnis] [PubMed]
  100. Ito R, Dalley JW, Howes SR, Robbins TW, Everitt BJ. Atskyrimas kondicionuojamame dopamino išsiskyrime branduolyje „Accumbens Core“ ir „Shell“, reaguojant į kokaino užuominas ir kokaino ieškant elgesio žiurkėse. J Neurosci. 2000: 20: 7489 – 7495. [PubMed]
  101. Ivlieva NY, Timofeeva NO. Neuronų aktyvumas pedunculopontine branduolyje per maistą veikiančio operacinio kondicionavimo reflekso metu. Neurologija ir elgesio fiziologija. 2003a: 33: 919 – 928. [PubMed]
  102. Ivlieva NY, Timofeeva NO. Neuronų aktyvumas pedunculopontine branduolyje operacijos sąlygoto reflekso metu. Neurologija ir elgesio fiziologija. 2003b; 33: 499 – 506. [PubMed]
  103. Jalabert M, Aston-Jones G, Herzog E, Manzoni O, Georges F. Stria terminalis lovos branduolio vaidmuo kontroliuojant ventralinio tegmentalinio ploto dopamino neuronus. Neuropsihofarmakologijos ir biologinės psichiatrijos pažanga. 2009; 33: 1336–1346. [PMC nemokamas straipsnis] [PubMed]
  104. Jeanblanc J, Hoeltzel A, Louilot A. Atsiskyrimas dopaminerginių neuronų, įkvepiančių branduolio accumbens branduolius ir apvalkalus, dalyvaujant latentinio slopinimo ir afektinio suvokimo metu. Neurologija. 2002: 111: 315 – 323. [PubMed]
  105. Jensen J, Smith AJ, Willeit M, Crawley AP, Mikulis DJ, Vitcu I, Kapur S. Atskiros smegenų sritys koduoja atributą prieš valentą atlyginimų prognozavimo metu žmonėms. Žmogaus smegenų žemėlapiai. 2007: 28: 294 – 302. [PubMed]
  106. Jhou TC, Fields HL, Baxter MG, Saper CB, Holland PC. Rostromedialinis tegmentinis branduolys (RMTg), GABAerginis afferentinis vidurio smegenų dopamino neuronams, koduoja aversinius stimulus ir slopina motorinius atsakus. Neuronas. 2009a: 61: 786 – 800. [PMC nemokamas straipsnis] [PubMed]
  107. Jhou TC, Geisler S, Marinelli M, Degarmo BA, Zahm DS. Mesopontino rostromedialinis tegmentinis branduolys: Struktūra, skirta šoniniam habenului, kuris projektuojasi į Tsai ir substia nigra compacta ventralinį tegmentalą. Lyginamojo neurologijos žurnalas. 2009b; 513: 566 – 596. [PMC nemokamas straipsnis] [PubMed]
  108. Ji H, Shepard PD. Šoninė habenula stimuliacija slopina žiurkių vidurio smegenų dopamino neuronus per GABA (A) receptorių sukeltą mechanizmą. J Neurosci. 2007: 27: 6923 – 6930. [PubMed]
  109. Jin X, Costa RM. Pradžios / sustabdymo signalai atsiranda nigrostriatrijos grandinėse sekos mokymosi metu. Gamta. 2010: 466: 457 – 462. [PMC nemokamas straipsnis] [PubMed]
  110. Johansen JP, Fields HL. Glutamaterginis priekinės cingulinės žievės aktyvinimas sukuria aversyvų mokymo signalą. Nat Neurosci. 2004: 7: 398 – 403. [PubMed]
  111. Joseph MH, Datla K, Young AM. Branduolio accumbens dopamino matavimo in vivo dializės interpretacija: smūgis, troškimas ar pažinimas? Neurologijos ir biologinio elgesio apžvalgos. 2003: 27: 527 – 541. [PubMed]
  112. Joshua M, Adler A, Bergman H. Dopamino dinamika valdant variklio elgesį. Dabartinė nuomonė apie neurobiologiją. 2009a: 19: 615 – 620. [PubMed]
  113. Joshua M, Adler A, Mitelman R, Vaadia E, Bergman H. Midbrain dopaminerginiai neuronai ir striatrijos cholinerginiai interneuronai koduoja skirtumą tarp atlygio ir aversinių įvykių skirtingų tikimybinių klasikinio kondicionavimo bandymų epochose. J Neurosci. 2008: 28: 11673 – 11684. [PubMed]
  114. Joshua M, Adler A, Prut Y, Vaadia E, Wickens JR, Bergmanas H. Vidutinio smegenų dopaminerginių neuronų sinchronizavimas yra pagerintas atlyginant renginius. Neuronas. 2009b; 62: 695 – 704. [PubMed]
  115. Kable JW, Glimcher PW. Sprendimo neurobiologija: sutarimas ir nesutarimai. Neuronas. 2009: 63: 733 – 745. [PMC nemokamas straipsnis] [PubMed]
  116. Kakade S, Dayan P. Dopamine: apibendrinimas ir premijos. Neuroniniai tinklai. 2002: 15: 549 – 559. [PubMed]
  117. Kapuras S. Psichozė, kaip aberrantinio išvaizdos būsena: sistema, susiejanti biologiją, fenomenologiją ir farmakologiją šizofrenijoje. Amerikos psichiatrijos žurnalas. 2003: 160: 13 – 23. [PubMed]
  118. Kaufling J, Veinante P, Pawlowski SA, Freund-Mercier MJ, Barrot M. Afferents į žiurkės ventralinio tegmentalinės srities GABAerginę uodegą. Lyginamojo neurologijos žurnalas. 2009: 513: 597 – 621. [PubMed]
  119. Kennerley SW, Wallis JD. Vertinant atskirų neuronų pasirinkimą priekinėje skiltyje: rezultatų vertė, užkoduota keliuose sprendimų kintamuosiuose. Europos neurologijos žurnalas. 2009: 29: 2061 – 2073. [PMC nemokamas straipsnis] [PubMed]
  120. Kim H, Sul JH, Huh N, Lee D, Jung MW. Striatumo vaidmuo atnaujinant pasirinktų veiksmų vertes. J Neurosci. 2009: 29: 14701 – 14712. [PubMed]
  121. Kiyatkin EA. Prognozuojamų dopamino turinčių ir kitų ventralių tegmentalinių zonų neuronų funkcinės savybės sąmoningose ​​žiurkėse. Int J Neurosci. 1988a: 42: 21 – 43. [PubMed]
  122. Kiyatkin EA. Morfino sukeltas ventralinio tegmentalinės srities neuronų funkcinių savybių keitimas sąmoningame žiurkėje. Intern J Neuroscience. 1988b; 41: 57 – 70. [PubMed]
  123. Klingberg T. Mokymas ir plastikumas darbo atmintyje. Pažintinių mokslų tendencijos. 2010: 14: 317 – 324. [PubMed]
  124. Kobayashi S, Nomoto K, Watanabe M, Hikosaka O, Schultz W, Sakagami M. Įtakos ir aversyvių rezultatų įtaka makakų šoninio prefrontalinio žievės aktyvumui. Neuronas. 2006: 51: 861 – 870. [PubMed]
  125. Kobayashi S, Schultz W. Atlyginimų vėlavimų įtaka dopamino neuronų atsakams. J Neurosci. 2008: 28: 7837 – 7846. [PMC nemokamas straipsnis] [PubMed]
  126. Kobayashi Y, Inoue Y, Yamamoto M, Isa T, Aizawa H. Pedunculopontine tegmental branduolių neuronų indėlis į vizualiai vadovaujamų saccade užduočių atlikimą beždžionėse. J Neurophysiol. 2002: 88: 715 – 731. [PubMed]
  127. Koyama T, Tanaka YZ, Mikami A. Nociceptiniai neuronai, esantys makakų priekiniame cingulyje, aktyvuojasi tikintis skausmo. Neuroreportas. 1998: 9: 2663 – 2667. [PubMed]
  128. Kravitz AV, Freeze BS, Parker PR, Kay K, Thwin MT, Deisseroth K, Kreitzer AC. Parkinsono motorinės elgsenos reguliavimas, valdant bazinę ganglijų grandinę. Gamta. 2010 [PMC nemokamas straipsnis] [PubMed]
  129. Lammel S, Hetzel A, Hackel O, Jones I, Liss B, Roeper J. Unikalios mezoprefrontalinių neuronų savybės dviguboje mezokortikolimbinėje dopamino sistemoje. Neuronas. 2008: 57: 760 – 773. [PubMed]
  130. Lang PJ, Davis M. Emocija, motyvacija ir smegenys: refleksiniai pamatai gyvūnų ir žmonių tyrimams. Pažanga smegenų tyrimų srityje. 2006: 156: 3 – 29. [PubMed]
  131. Laisvas KT, Kroener S, Durstewitz D, Lavin A, Seamans JK. Mesokortikinės dopamino sistemos gebėjimas veikti skirtingais laiko režimais. Psichofarmakologija (Berl) 2007, 191: 609 – 625. [PubMed]
  132. Lee D, Seo H. Stiprinimo mokymosi ir sprendimų priėmimo mechanizmai primityviame doros šoniniame prefrono žievėje. Niujorko mokslų akademijos Annals. 2007: 1104: 108 – 122. [PubMed]
  133. Lee HJ, Groshek F, Petrovich GD, Cantalini JP, Gallagher M, Olandijos kompiuteris. Amygdalo-nigralinės grandinės vaidmuo reguliuojant regėjimo stimulą, suporuotą su maistu. J Neurosci. 2005: 25: 3881 – 3888. [PMC nemokamas straipsnis] [PubMed]
  134. Levita L, Dalley JW, Robbins TW. Nucleus accumbens dopaminą ir išmintingą baimę peržiūrėjo: peržiūrą ir keletą naujų išvadų. Elgesio smegenų tyrimai. 2002: 137: 115 – 127. [PubMed]
  135. Lin SC, Nicolelis MA. Neuroninis ansamblis, susprogdinantis bazinę priekinę smegenis, koduoja aplinką Nepriklausomai nuo Valencijos. Neuronas. 2008: 59: 138 – 149. [PMC nemokamas straipsnis] [PubMed]
  136. Lisman JE, Grace AA. Hippokampo-VTA kilpa: informacijos įvedimo į ilgalaikę atmintį kontrolė. Neuronas. 2005: 46: 703 – 713. [PubMed]
  137. Litt A, Plassmann H, Shiv B, Rangel A. Sprendimų priėmimo metu skirstomi vertinimo ir atlaidumo signalai. Cereb Cortex. 2010 spaudoje. [PubMed]
  138. Liu Z, Richmond BJ, Murray EA, Saunders RC, Steenrod S, Stubblefield BK, Montague DM, Ginns EI. DNR nukreipimas į rininę žievę D2 receptoriaus baltymas grįžtamai blokuoja užuominų prognozavimą. Jungtinių Amerikos Valstijų Nacionalinės mokslų akademijos darbai. 2004: 101: 12336 – 12341. [PMC nemokamas straipsnis] [PubMed]
  139. Liu ZH, Shin R, Ikemoto S. Dvigubas medinių A10 dopamino neuronų vaidmuo emociniame kode. Neuropsichofarmakologija. 2008: 33: 3010 – 3020. [PMC nemokamas straipsnis] [PubMed]
  140. Ljungberg T, Apicella P, Schultz W. Avarinių dopamino neuronų reakcijos mokantis elgsenos reakcijų. J Neurophysiol. 1992: 67: 145 – 163. [PubMed]
  141. Lobo MK, Covington HE, 3rd, Chaudhury D, Friedman AK, Sun H, Damez-Werno D, Dietz DM, Zaman S, Koo JW, Kennedy PJ ir kt. BDNF signalizacijos ląstelių tipo specifinis praradimas imituoja optogenetinę kokaino atlygio kontrolę. Mokslas. 2010: 330: 385 – 390. [PMC nemokamas straipsnis] [PubMed]
  142. Maeda H, Mogensonas GJ. Periferinės stimuliacijos poveikis neuronų aktyvumui ventralinio tegmentalio srityje, nigra ir vidurio smegenų retikulinis formavimasis žiurkėms. Smegenų tyrimų biuletenis. 1982: 8: 7 – 14. [PubMed]
  143. Mantz J, Thierry AM, Glowinski J. Kenksmingo uodegos žiupsnelio įtaka mezokortikinių ir mezolimbinių dopamino neuronų išsiskyrimo greičiui: selektyvus mezokortikinės sistemos aktyvinimas. Brain Res. 1989: 476: 377 – 381. [PubMed]
  144. Margolis EB, užraktas H, Hjelmstad GO, laukai HL. Pakartota ventralinė tegmentalinė sritis: ar yra elektrofiziologinis žymuo dopaminerginiams neuronams? Fiziologijos žurnalas. 2006: 577: 907 – 924. [PMC nemokamas straipsnis] [PubMed]
  145. Margolis EB, Mitchell JM, Ishikawa J, Hjelmstad GO, laukai HL. Vidutinio smegenų dopamino neuronai: projekcijos tikslas nustato veiksmo potencialo trukmę ir dopamino D (2) receptorių slopinimą. J Neurosci. 2008: 28: 8908 – 8913. [PubMed]
  146. Mark GP, Blander DS, Hoebel BG. Po besimokančio skonio vengimo išsivystymo stimuliuojantis stimuliatorius mažina ekstraląstelinį dopaminą branduolyje accumbens. Brain Res. 1991: 551: 308 – 310. [PubMed]
  147. Marowsky A, Yanagawa Y, Obata K, Vogt KE. Specializuotas interneuronų poklasis tarpininkauja dopaminerginiam amygdalos funkcijos palengvinimui. Neuronas. 2005: 48: 1025 – 1037. [PubMed]
  148. Matsumoto M, Hikosaka O. Šoninis habenula kaip neigiamų atlygio signalų šaltinis dopamino neuronuose. Gamta. 2007: 447: 1111 – 1115. [PubMed]
  149. Matsumoto M, Hikosaka O. Neigiamosios motyvacinės vertės atstovavimas primityviame šoniniame habenuloje. Nat Neurosci. 2009a: 12: 77 – 84. [PMC nemokamas straipsnis] [PubMed]
  150. Matsumoto M, Hikosaka O. Dviejų tipų dopamino neuronai aiškiai perduoda teigiamus ir neigiamus motyvacinius signalus. Gamta. 2009b; 459: 837 – 841. [PMC nemokamas straipsnis] [PubMed]
  151. Matsumoto M, Matsumoto K, Abe H, Tanaka K. Medialinė prefrontalinių ląstelių veikla signalizuoja veiksmų verčių prognozavimo klaidas. Nat Neurosci. 2007: 10: 647 – 656. [PubMed]
  152. Gegužė PJ, McHaffie JG, Stanfordas TR, Jiang H, Costello MG, Coizet V, Hayes LM, Haber SN, Redgrave P. Tectonigral projekcijos primate: kelias, skirtas priešlaikiniam jutimui į vidurio smegenų dopaminerginius neuronus. Europos neurologijos žurnalas. 2009: 29: 575 – 587. [PMC nemokamas straipsnis] [PubMed]
  153. Mazzoni P, Hristova A, Krakauer JW. Kodėl mes nejudame greičiau? Parkinsono liga, judėjimo jėga ir numanoma motyvacija. J Neurosci. 2007; 27: 7105–7116. [PubMed]
  154. Merali Z, Michaud D, McIntosh J, Kent P, Anisman H. Amigdaloidinės CRH sistemos (-ų) diferencinis dalyvavimas dirgiklių ryškume ir valentyboje. Neuropsihofarmakologijos ir biologinės psichiatrijos pažanga. 2003; 27: 1201–1212. [PubMed]
  155. Mirenowicz J, Schultz W. Vidutinio smegenų dopamino neuronų pirmenybė aktyviau, o ne aversyviems stimulams. Gamta. 1996: 379: 449 – 451. [PubMed]
  156. Molina-Luna K, Pekanovic A, Rohrich S, Hertler B, Schubring-Giese M, Rioult-Pedotti MS, Luft AR. Dopaminas motoriniame žieve yra būtinas įgūdžių mokymuisi ir sinaptiniam plastiškumui. PLoS ONE. 2009: 4: e7082. [PMC nemokamas straipsnis] [PubMed]
  157. Montague PR, Berns GS. Neuroninė ekonomika ir biologiniai vertinimo pagrindai. Neuronas. 2002: 36: 265 – 284. [PubMed]
  158. Montague PR, Dayan P, Sejnowski TJ. Mesencepalinių dopamino sistemų pagrindas, pagrįstas prognozuojamuoju Hebbian mokymu. J Neurosci. 1996: 16: 1936 – 1947. [PubMed]
  159. Morris G, Arkadir D, Nevet A, Vaadia E, Bergmanas H. Sutapo, bet aiškūs vidutinio smegenų dopamino ir strialių toniškai aktyvių neuronų pranešimai. Neuronas. 2004: 43: 133 – 143. [PubMed]
  160. Morris G, Nevet A, Arkadir D, Vaadia E, Bergman H. Midbrain dopamino neuronai koduoja sprendimus dėl būsimų veiksmų. Nat Neurosci. 2006: 9: 1057 – 1063. [PubMed]
  161. Morrison SE, Salzman CD. Informacijos apie atlygį ir aversyvius dirgiklius pavienių neuronų konvergencija. J Neurosci. 2009: 29: 11471 – 11483. [PMC nemokamas straipsnis] [PubMed]
  162. Nakahara H, Itoh H, Kawagoe R, Takikawa Y, Hikosaka O. Dopamino neuronai gali rodyti konteksto priklausomą prognozavimo klaidą. Neuronas. 2004: 41: 269 – 280. [PubMed]
  163. Nakamura K, Hikosaka O. Dopamino vaidmuo primityviame caudate branduolyje, skiriant sachadų atlygio moduliavimą. J Neurosci. 2006: 26: 5360 – 5369. [PubMed]
  164. Neve KA, Seamans JK, Trantham-Davidson H. Dopamino receptorių signalizacija. Receptų ir signalų perdavimo žurnalas. 2004: 24: 165 – 205. [PubMed]
  165. Nishijo H, Ono T, Nishino H. Vienkartiniai neuronų atsakai įspėjamojo beždžionės amygdaloje sudėtingos jutimo stimuliacijos su afektyvine reikšme metu. J Neurosci. 1988: 8: 3570 – 3583. [PubMed]
  166. Niv Y, Daw ND, Joel D, dayan P. Tonic dopaminas: alternatyvios išlaidos ir reagavimo jėgos kontrolė. Psichofarmakologija. 2007: 191: 507 – 520. [PubMed]
  167. Nomoto K, Schultz W, Watanabe T, Sakagami M. Laikinai išplėstas dopamino atsakas į suvokiamus reikalavimus atitinkančius atlyginimų prognozavimo stimulus. J Neurosci. 2010: 30: 10692 – 10702. [PMC nemokamas straipsnis] [PubMed]
  168. Okada K, Toyama K, Inoue Y, Isa T, Kobayashi Y. Skirtingi pedunculopontine tegmental neuronai signalizuoja ir faktinius uždavinius. J Neurosci. 2009: 29: 4858 – 4870. [PubMed]
  169. Omelchenko N, Bell R, Sesack SR. Šoninės habenulos projekcijos į dopamino ir GABA neuronus žiurkės ventralinio tegmentalio srityje. Europos neurologijos žurnalas. 2009: 30: 1239 – 1250. [PMC nemokamas straipsnis] [PubMed]
  170. Owesson-White CA, Ariansen J, Stuber GD, Cleaveland NA, Cheer JF, Wightman RM, Carelli RM. Kokaino ieškojimo elgesio neuronų kodavimas sutampa su fazine dopamino išsiskyrimu į akmenų šerdį ir apvalkalą. Europos neurologijos žurnalas. 2009: 30: 1117 – 1127. [PMC nemokamas straipsnis] [PubMed]
  171. Oyama K, Hernadi I, Iijima T, Tsutsui K. Atlygio prognozavimo klaida, koduojanti nugaros smegenų neuronus. J Neurosci. 2010: 30: 11447 – 11457. [PubMed]
  172. „Packard MG“, balta NM. Hipokampo ir caudatinio branduolio atminties sistemų disociacija po treniruotės dopamino agonistų injekcijos. Elgesio neurologija. 1991: 105: 295 – 306. [PubMed]
  173. Padoa-Schioppa C. Orbitofrontalinė žievė ir ekonominės vertės apskaičiavimas. Niujorko mokslų akademijos Annals. 2007: 1121: 232 – 253. [PubMed]
  174. Palmiter RD. Dopamino signalizavimas nugaros striatume yra būtinas motyvuotam elgesiui: dopamino trūkumų turinčių pelių pamokoms. Niujorko mokslų akademijos Annals. 2008: 1129: 35 – 46. [PMC nemokamas straipsnis] [PubMed]
  175. Pan WX, Hyland BI. Pedunculopontine tegmental branduolys kontroliuoja vidutinio smegenų dopamino neuronų kondicionuojamus atsakus žiurkėms. J Neurosci. 2005: 25: 4725 – 4732. [PubMed]
  176. Pan WX, Schmidt R, Wickens JR, Hyland BI. Trišalis išnykimo mechanizmas, kurį rodo dopamino neuronų aktyvumas ir laiko skirtumo modelis. J Neurosci. 2008: 28: 9619 – 9631. [PubMed]
  177. Parker JG, Zweifel LS, Clark JJ, Evans SB, Phillips PE, Palmiter RD. NMDA receptorių nebuvimas dopamino neuronuose silpnina dopamino išsiskyrimą, bet ne kondicionuojamą požiūrį Pavloviano kondicionavimo metu. Jungtinių Amerikos Valstijų Nacionalinės mokslų akademijos darbai. 2010 [PMC nemokamas straipsnis] [PubMed]
  178. Pascoe JP, Kapp BS. Amygdaloidinių centrinių branduolių neuronų elektrofiziologinės savybės per Pavlovijos baimę kondicionuojant triušyje. Elgesio smegenų tyrimai. 1985: 16: 117 – 133. [PubMed]
  179. Pascucci T, Ventura R, Latagliata EC, Cabib S, Puglisi-Allegra S. Medialinė prefrontalinė žievė lemia dopamino atsaką į stresą dėl priešingojo norepinefrino ir dopamino poveikio. Cereb Cortex. 2007: 17: 2796 – 2804. [PubMed]
  180. „Pearce JM“, G. salė. Pavloviško mokymosi modelis: kondicionuotų, bet ne besąlyginių stimulų efektyvumo pokyčiai. Psychol Rev. 1980; 87: 532 – 552. [PubMed]
  181. Pezze MA, Feldon J. Mesolimbiniai dopaminerginiai keliai baimėje. Neurobiologijos pažanga. 2004: 74: 301 – 320. [PubMed]
  182. Phillips AG, Ahn S, Howland JG. Mezokortikolimbinės dopamino sistemos amygdalinis valdymas: lygiagrečiai keliaujant į motyvuotą elgesį. Neurologijos ir biologinio elgesio apžvalgos. 2003a: 27: 543 – 554. [PubMed]
  183. Phillips GD, Salussolia E, Hitchcott PK. Mesoamygdaloidinio dopamino projekcijos vaidmuo emociniame mokyme. Psichofarmakologija. 2010 [PubMed]
  184. Phillips PE, Stuber GD, Heien ML, Wightman RM, Carelli RM. Antrasis dopamino išsiskyrimas skatina kokaino paiešką. Gamta. 2003b; 422: 614 – 618. [PubMed]
  185. Porrino LJ, Goldman-Rakic ​​PS. Brainstem inervacija prefrontalinėje ir anteriorinėje cingulinėje žievėje reeso beždžionėje, atskleista per retrospektyvų HRP transportą. Lyginamojo neurologijos žurnalas. 1982: 205: 63 – 76. [PubMed]
  186. Puryear CB, Kim MJ, Mizumori SJ. Koncentruotas judesio ir atlygio kodavimas ventralinės tegmentalinės srities neuronams laisvai naršančiame graužikui. Elgesio neurologija. 2010: 124: 234 – 247. [PMC nemokamas straipsnis] [PubMed]
  187. „Ravel S“, „Legallet E“, „Apicella P.“. Aktyvūs neuronai beždžionių stiatumoje dažniausiai nereaguoja į apetitinius dirgiklius. Eksperimentiniai smegenų tyrimai. Experimentelle Hirnforschung. 1999: 128: 531 – 534. [PubMed]
  188. „Ravel S“, „Legallet E“, „Apicella P.“. Toniškai aktyvių neuronų atsakas beždžionių stiatume skiriasi nuo motyvaciškai priešingų stimulų. J Neurosci. 2003: 23: 8489 – 8497. [PubMed]
  189. Ravelas S, Ričmondas BJ. Dopamino neuronų reakcija beždžionėms, atliekančioms vizualiai nustatytą atlygio grafiką. Europos neuromokslo žurnalas. 2006; 24: 277 – 290. [PubMed]
  190. Redgrave P, Gurney K. Trumpo latentinio dopamino signalas: vaidmuo atrandant naujus veiksmus? Nat Rev Neurosci. 2006; 7: 967 – 975. [PubMed]
  191. „Redgrave P“, „Prescott TJ“, Gurney K. Ar trumpo latentinio dopamino atsakas yra per trumpas, kad signalizuotų apie atlygio klaidą? Neuromokslų tendencijos. 1999; 12: 146 – 151. [PubMed]
  192. „Rescorla RA“, „Wagner AR“. Pavlovijos kondicionavimo teorija: armavimo ir nesutvirtinimo efektyvumo variacijos. In: „Black AH“, „Prokasy WF“, redaktoriai. II klasikinis kondicionavimas: dabartiniai tyrimai ir teorija. Niujorkas, Niujorkas: „Appleton Century Crofts“; 1972. 64 – 99 psl.
  193. Reynolds JNJ, Hyland BI, Wickens JR. Su atlygiu susijusio mokymosi ląstelinis mechanizmas. Gamta. 2001; 413: 67 – 70. [PubMed]
  194. Reynolds SM, Berridge KC. Teigiama ir neigiama motyvacija nucleus accumbens apvalkale: dvivalenčiai rostrocaudaliniai gradientai valgant GABA, skonio „patinkančios“ / „nemėgstančios“ reakcijos, pirmenybė vietai / vengimas ir baimė. J Neurosci. 2002; 22: 7308–7320. [PubMed]
  195. Richardson RT, DeLong MR. Elektrofiziologiniai primatų branduolio funkcijų tyrimai. Pažanga eksperimentinėje medicinoje ir biologijoje. 1991; 295: 233 – 252. [PubMed]
  196. Robbins TW, Arnsten AF. Fronto vykdomosios funkcijos neuropsichofarmakologija: monoaminerginė moduliacija. Metinė neuromokslų apžvalga. 2009; 32: 267 – 287. [PMC nemokamas straipsnis] [PubMed]
  197. „Robinson DL“, „Hermans A“, „Seipel AT“, „Wightman RM“. Stebimas greitas cheminis ryšys smegenyse. Cheminių medžiagų apžvalgos. 2008; 108: 2554 – 2584. [PMC nemokamas straipsnis] [PubMed]
  198. „Roesch MR“, „Calu DJ“, „Schoenbaum G.“ Dopamino neuronai koduoja geresnį variantą žiurkėms, spręsdami tarp skirtingai atidėto ar dydžio atlygio. Nat Neurosci. 2007; 10: 1615 – 1624. [PMC nemokamas straipsnis] [PubMed]
  199. Roesch MR, Olson CR. Neurono veikla, susijusi su atlygio verte ir motyvacija primato priekinėje žievėje. Mokslas. 2004; 304: 307 – 310. [PubMed]
  200. Roitman MF, Wheeler RA, Wightman RM, Carelli RM. Realaus laiko cheminiai atsakai į branduolį accumbens diferencijuoja naudingus ir aversinius stimulus. Nat Neurosci. 2008: 11: 1376 – 1377. [PMC nemokamas straipsnis] [PubMed]
  201. „Rutledge RB“, „Lazzaro SC“, „Lau B“, „Myers CE“, „Gluck MA“, „Glimcher PW“. Dopaminerginiai vaistai moduliuoja Parkinsono ligos pacientų mokymosi greitį ir atkaklumą vykdydami dinamišką pašarų užduotį. J Neurosci. 2009; 29: 15104–15114. [PMC nemokamas straipsnis] [PubMed]
  202. Salamone JD. Branduolio akumuliatorių dopamino įsitraukimas į apetitinę ir neigiamą motyvaciją. Elgesio smegenų tyrimai. 1994; 61: 117 – 133. [PubMed]
  203. Salamone JD, Correa M, Farrar A, Mingote SM. Su branduoliu susietų dopamino ir susijusių smegenų grandinių funkcijos. Psichofarmakologija (Berl) 2007, 191: 461 – 482. [PubMed]
  204. Satoh T, Nakai S, Sato T, Kimura M. Susijęs dopamino neuronų motyvacijos ir sprendimo kodavimas. J Neurosci. 2003; 23: 9913 – 9923. [PubMed]
  205. „Savine AC“, „Beck SM“, „Edwards BG“, „Chiew KS“, „Braver TS“. Kognityvinės kontrolės stiprinimas taikant požiūrį ir vengiant motyvacinių būsenų. Pažinimas ir emocijos. 2010; 24: 338–356. [PMC nemokamas straipsnis] [PubMed]
  206. Schoenbaum G, Roesch MR, Stalnaker TA, Takahashi YK. Nauja perspektyva apie orbitofrontalinės žievės vaidmenį adaptyviame elgesyje. Nat Rev Neurosci. 2009: 10: 885 – 892. [PMC nemokamas straipsnis] [PubMed]
  207. Schultz W. Vidurinių smegenų dopamino neuronų reakcija į elgesį sukeliančius dirgiklius beždžionėms. J Neurofiziolis. 1986; 56: 1439 – 1461. [PubMed]
  208. Schultz W. Prognozuojantis dopamino neuronų atlygio signalas. J Neurophysiol. 1998: 80: 1 – 27. [PubMed]
  209. Schultz W. Kelios dopamino funkcijos skirtingu laiko kursu. Metinė neuromokslų apžvalga. 2007; 30: 259 – 288. [PubMed]
  210. Schultz W. Dopamino signalai apie atlygio vertę ir riziką: pagrindiniai ir naujausi duomenys. „Behav Brain Funct“. 2010; 6: 24. [PMC nemokamas straipsnis] [PubMed]
  211. Schultz W, Dayan P, Montague PR. Nervinis prognozavimo ir atlygio substratas. Mokslas. 1997: 275: 1593 – 1599. [PubMed]
  212. Schultz W, Romo R. Nigrostriatal dopamino neuronų reakcijos į didelio intensyvumo somatosensorinę stimuliaciją anestezuotoje beždžionėje. J Neurofiziolis. 1987; 57: 201 – 217. [PubMed]
  213. Schultz W, Romo R. Beždžionių vidurinės smegenų dopamino neuronai: reakcijos į dirgiklius, sukeliančios neatidėliotinas elgesio reakcijas. J Neurofiziolis. 1990; 63: 607 – 624. [PubMed]
  214. Seo H, Lee D. Apdovanojimų signalų laikinas filtravimas pakaušio priekinėje cingulinės žievės dalyje mišrių strategijų žaidimo metu. J Neurosci. 2007; 27: 8366 – 8377. [PMC nemokamas straipsnis] [PubMed]
  215. Shabel SJ, Janak PH. Esminis amygdala neuronų aktyvumo panašumas sąlygoto apetitinio ir aversiško emocinio susijaudinimo metu. Jungtinių Amerikos Valstijų nacionalinės mokslų akademijos leidiniai. 2009; 106: 15031 – 15036. [PMC nemokamas straipsnis] [PubMed]
  216. Shadmehr R, Smith MA, Krakauer JW. Klaidų taisymas, jutiminis numatymas ir pritaikymas variklio valdyme. Metinė neuromokslų apžvalga. 2010 [PubMed]
  217. „Shen W“, „Flajolet M“, „Greengard P“, „Surmeier DJ“. Dichotominė dopaminerginė striatos sinapsinio plastiškumo kontrolė. Mokslas. 2008; 321: 848 – 851. [PMC nemokamas straipsnis] [PubMed]
  218. Shimo Y, Wichmann T. Neuronų aktyvumas subtaluminiame branduolyje modifikuoja dopamino išsiskyrimą beždžionių striatumoje. Europos neuromokslo žurnalas. 2009; 29: 104 – 113. [PMC nemokamas straipsnis] [PubMed]
  219. Shippenberg TS, Bals-Kubik R, Huber A, Herz A. Neuroanatominiai substratai, tariantys neigiamą D-1 dopamino receptorių antagonistų poveikį. Psichofarmakologija (Berl) 1991; 103: 209 – 214. [PubMed]
  220. Shumake J, Ilango A, Scheich H, Wetzel W, Ohl FW. Diferencinis vengimo mokymosi neuromoduliacija šoninėje habenulinėje ir ventralinėje pagrindinėje srityje. J Neurosci. 2010; 30: 5876 – 5883. [PubMed]
  221. Mažasis DM, Gregoris MD, Mak YE, Gitelmanas D, Mesulamas MM, Parrishas T. Neurologinio intensyvumo ir afektinio vertinimo neurologinio atotrūkio žmogaus gustaktacijoje disociacija. Neuronas. 2003; 39: 701 – 711. [PubMed]
  222. Stefani MR, Moghaddam B. Taisyklių mokymasis ir atlygio nenumatymas yra siejami su atsiribojančiais dopamino aktyvacijos modeliais žiurkės priekinėje priekinėje žievėje, branduolio akumuliatoriuose ir nugaros juosmenyje. J Neurosci. 2006; 26: 8810 – 8818. [PMC nemokamas straipsnis] [PubMed]
  223. Steinfels GF, Heym J, Strecker RE, Jacobs BL. Dopaminerginių kačių neuronų reakcija į klausos dirgiklius, pasireiškiančius miego pabudimo cikle. „Brain Res. 1983; 277: 150 – 154. [PubMed]
  224. „Strecker RE“, „Jacobs BL“. Substantia nigra dopaminerginis vienetų aktyvumas veikiančiose katėse: žadinimo poveikis savaiminiam išsiskyrimui ir jutimo sukeltas aktyvumas. „Brain Res. 1985; 361: 339 – 350. [PubMed]
  225. Stuber GD, Hnasko TS, Britt JP, Edwards RH, Bonci A. Dopaminerginiai terminalai, esantys branduolio akumuliatoriuose, bet ne dorsalio striatumo branduolio glutamatas. „Neuroscience“ žurnalas. 2010; 30: 8229 – 8233. [PMC nemokamas straipsnis] [PubMed]
  226. Stuber GD, Wightman RM, Carelli RM. Pašalinus kokaino vartojimą, funkciškai ir laikinai atsiranda skirtingi dopaminerginiai signalai akumuliatorių branduolyje. Neuronas. 2005; 46: 661 – 669. [PubMed]
  227. Sul JH, Kim H, Huh N, Lee D, Jung MW. Skiriami graužikų orbitofrontalinės ir medialinės prefrontalinės žievės vaidmenys priimant sprendimus. Neuronas. 2010; 66: 449 – 460. [PMC nemokamas straipsnis] [PubMed]
  228. Surmeier DJ, Ding J, Day M, Wang Z, Shen W. D1 ir D2 dopamino-receptorių dopamino receptorių moduliavimas striatos glutamaterginiu signalu moduliavimas striatinėje esančiuose vidutinio smaigalio neuronuose. Neuromokslų tendencijos. 2007; 30: 228 – 235. [PubMed]
  229. Surmeier DJ, Shen W, Day M, Gertler T, Chan S, Tian X, Plotkin JL. Dopamino vaidmuo keičiant striatos grandinių struktūrą ir funkcijas. Smegenų tyrimų pažanga. 2010; 183C: 148 – 167. [PubMed]
  230. „Sutton RS“, „Barto AG“. Šiuolaikinės adaptyviųjų tinklų teorijos link: lūkesčiai ir numatymas. „Psychol“ red. 1981; 88: 135 – 170. [PubMed]
  231. „Takahashi YK“, „Roesch MR“, „Stalnaker TA“, „Haney RZ“, „Calu DJ“, „Taylor AR“, „Burke KA“, „Schoenbaum G.“ Orbitofrontalinė žievė ir ventralinė pagrindinė sritis yra būtina norint mokytis iš netikėtų rezultatų. Neuronas. 2009; 62: 269 – 280. [PMC nemokamas straipsnis] [PubMed]
  232. Takikawa Y, Kawagoe R, Hikosaka O. Galimas vidurinių smegenų dopamino neuronų vaidmuo trumpalaikiame ir ilgalaikiame sackadžių pritaikyme padėties ir naudos palyginimui. J Neurofiziolis. 2004; 92: 2520 – 2529. [PubMed]
  233. Tecuapetla F, Patel JC, Xenias H, English D, Tadros I, Shah F, Berlin J, Deisseroth K, Rice ME, Tepper JM, Koos T. Glutamaterginis signalizavimas mezolimbiniais dopamino neuronais akumuliaciniame branduolyje. J Neurosci. 2010; 30: 7105 – 7110. [PMC nemokamas straipsnis] [PubMed]
  234. Thierry AM, Tassin JP, Blanc G, Glowinski J. Selektyvus mezokortikinės DA sistemos aktyvavimas streso būdu. Gamta. 1976; 263: 242 – 244. [PubMed]
  235. Toblerio PN, Dickinsonas A, Schultzas W. Dopamino neuronų numatomo atlygio praradimo kodavimas sąlyginio slopinimo paradigmoje. J Neurosci. 2003; 23: 10402 – 10410. [PubMed]
  236. Tobler PN, Fiorillo CD, Schultz W. Dopamino neuronų adaptyvus atlygio vertės kodavimas. Mokslas. 2005: 307: 1642 – 1645. [PubMed]
  237. „Tsai HC“, „Zhang F“, „Adamantidis A“, „Stuber GD“, „Bonci A“, „Lecea L“, „Deisseroth“ K. Fazinis sudegimas dopaminerginiuose neuronuose yra pakankamas elgesio sąlygoms palaikyti. Mokslas. 2009 [PubMed]
  238. Ullsperger M. Veiklos stebėjimo ir mokymosi iš grįžtamojo ryšio genetiniai asociacijų tyrimai: dopamino ir serotonino vaidmuo. Neuromokslų ir biologinio elgesio apžvalgos. 2010; 34: 649 – 659. [PubMed]
  239. Nebent MA. Dopaminas: svarbiausias klausimas. Neuromokslų tendencijos. 2004; 27: 702 – 706. [PubMed]
  240. Uylings HB, Groenewegen HJ, Kolb B. Ar žiurkėms yra priekinė priekinė žievė? Elgesio smegenų tyrimai. 2003; 146: 3 – 17. [PubMed]
  241. Ventura R, Cabib S, Puglisi-Allegra S. Priešingas genotipo priklausomas mezokortikolimbinis dopamino atsakas į stresą. Neuromokslas. 2001; 104: 627 – 631. [PubMed]
  242. Ventura R, Latagliata EC, Morrone C, La Mela I, Puglisi-Allegra S. Prefrontalinis noradrenalinas lemia „aukšto“ motyvacinio polinkio priskyrimą. PLOS ONE. 2008; 3: e3044. [PMC nemokamas straipsnis] [PubMed]
  243. „Ventura R“, „Morrone C“, „Puglisi-Allegra S.“ Prefrontalinė / akumuliacinė katecholamino sistema lemia motyvacinį norą susieti tiek su atlygiu, tiek su baime susijusius dirgiklius. Jungtinių Amerikos Valstijų nacionalinės mokslų akademijos leidiniai. 2007; 104: 5181 – 5186. [PMC nemokamas straipsnis] [PubMed]
  244. Vogt BA. Skausmo ir emocijų sąveika cingulate gyrus subregionuose. Nat Rev Neurosci. 2005; 6: 533 – 544. [PMC nemokamas straipsnis] [PubMed]
  245. „Voon V“, „Pessiglione M“, „Brezing C“, „Gallea C“, „Fernandez HH“, „Dolan RJ“, „Hallett M.“. Mechanizmai, kuriais grindžiamas dopamino tarpininkaujamas atlygio ias už kompulsyvų elgesį. Neuronas. 2010; 65: 135 – 142. [PMC nemokamas straipsnis] [PubMed]
  246. Waelti P, Dickinson A, Schultz W. Dopamino atsakymai atitinka pagrindines formaliojo mokymosi teorijos prielaidas. Gamta. 2001: 412: 43 – 48. [PubMed]
  247. Wallis JD, Kennerley SW. Heterogeniniai atlygio signalai prefrontalinėje žievėje. Dabartinė nuomonė neurobiologijoje. 2010; 20: 191 – 198. [PMC nemokamas straipsnis] [PubMed]
  248. Waltonas ME, Behrens TE, Buckley MJ, Rudebeck PH, Rushworth MF. Atskiriamos mokymosi sistemos makakos smegenyse ir orbitofrontalinės žievės vaidmuo neapibrėžtame mokymesi. Neuronas. 2010; 65: 927 – 939. [PMC nemokamas straipsnis] [PubMed]
  249. „Wheeler RA“, „Twining RC“, „Jones JL“, „Slater JM“, „Grigson PS“, „Carelli RM“. Elgesio ir elektrofiziologiniai neigiamos įtakos rodikliai prognozuoja kokaino vartojimą savarankiškai. Neuronas. 2008; 57: 774 – 785. [PubMed]
  250. „Wightman RM“, „Heien MLAV“, „Wassum KM“, „Sombers LA“, „Aragona BJ“, „Khan AS“, „Ariansen JL“, „Cheer JF“, „Phillips PE“, „Carelli RM“. Dopamino išsiskyrimas yra nevienalytis žiurkės branduolio akumuliatorių mikroaplinkose. Europos neuromokslo žurnalas. 2007; 26: 2046 – 2054. [PubMed]
  251. „Williams GV“, „Castner SA“. Pagal kreivę: kritiniai D1 receptorių funkcijos išaiškinimo darbinėje atmintyje klausimai. Neuromokslas. 2006; 139: 263 – 276. [PubMed]
  252. Williams SM, „Goldman-Rakic ​​PS“. Plačiai paplitusi primatų mezofrontalinė dopamino sistema. Galūnių žievė. 1998; 8: 321 – 345. [PubMed]
  253. Winnas P. Kaip geriausia atsižvelgti į pedunculopontine pagrindinio branduolio struktūrą ir funkcijas: įrodymai iš tyrimų su gyvūnais. Neurologijos mokslų žurnalas. 2006; 248: 234 – 250. [PubMed]
  254. Išminčius RA. Dopaminas, mokymasis ir motyvacija. Nat Rev Neurosci. 2004: 5: 483 – 494. [PubMed]
  255. Išmintingas RA. Priekinis smegenų atlygio ir motyvacijos pagrindas. Lyginamosios neurologijos žurnalas. 2005; 493: 115 – 121. [PMC nemokamas straipsnis] [PubMed]
  256. Išminčius SP. Pirmieji priekiniai laukai: filogenija ir pagrindinė funkcija. Neuromokslų tendencijos. 2008; 31: 599 – 608. [PMC nemokamas straipsnis] [PubMed]
  257. Yamada H, Matsumoto N, Kimura M. Toniškai aktyvūs primatų kaudato branduolio ir putameno aktyvieji neuronai skirtingai koduoja nurodytus motyvuotus veiksmų rezultatus. J Neurosci. 2004; 24: 3500 – 3510. [PubMed]
  258. Yamada H, Matsumoto N, Kimura M. Istorija ir dabartiniai nurodymai, pagrįsti būsimų elgesio pasekmių striatumoje kodavimu. J Neurofiziolis. 2007; 98: 3557 – 3567. [PubMed]
  259. Yin HH, Knowlton BJ. Bazinių ganglijų vaidmuo formuojant įpročius. Nat Rev Neurosci. 2006; 7: 464 – 476. [PubMed]
  260. Jaunasis ambasadorius, Morano premjeras, Joseph MH. Dopamino vaidmuo kondicionuojant ir latentinį slopinimą: kas, kada, kur ir kaip? Neuromokslų ir biologinio elgesio apžvalgos. 2005; 29: 963 – 976. [PubMed]
  261. Zaghloul KA, Blanco JA, Weidemann CT, McGill K, Jaggi JL, Baltuch GH, Kahana MJ. Žmogaus musta nigra neuronai užkoduoja netikėtą finansinį atlygį. Mokslas. 2009; 323: 1496 – 1499. [PMC nemokamas straipsnis] [PubMed]
  262. Zahniser NR, Sorkin A. Greitas dopamino pernešėjo reguliavimas: koks vaidmuo priklausomybės nuo stimuliatorių srityje? Neurofarmakologija. 2004; 47 tiekimas 1: 80 – 91. [PubMed]
  263. Zhang L, Doyon WM, Clark JJ, Phillips PE, Dani JA. Tonizuojančio ir fazinio dopamino perdavimo kontrolė nugaros ir ventralinėje striatumoje. Molekulinė farmakologija. 2009; 76: 396 – 404. [PMC nemokamas straipsnis] [PubMed]
  264. „Zink CF“, „Pagnoni G“, „Martin ME“, „Dhamala M“, „Berns GS“. Žmogaus strijaus reakcija į svarbius neatlygintinus dirgiklius. „Neuroscience“ žurnalas. 2003; 23: 8092 – 8097. [PubMed]
  265. „Zweifel LS“, „Argilli E“, „Bonci A“, „Palmiter RD“. NMDA receptorių vaidmuo dopamino neuronuose dėl plastiškumo ir priklausomybės. Neuronas. 2008; 59: 486 – 496. [PMC nemokamas straipsnis] [PubMed]
  266. „Zweifel LS“, „Parker JG“, „Lobb CJ“, „Rainwater A“, „Wall VZ“, „Fadok JP“, „Darvas M“, „Kim MJ“, „Mizumori SJ“, „Paladini CA“ ir kt. Nutraukus dopamino neuronų NMDAR priklausomą sprogdinimą, galima selektyviai įvertinti fazinį nuo dopamino priklausomą elgesį. Jungtinių Amerikos Valstijų nacionalinės mokslų akademijos leidiniai. 2009; 106: 7281 – 7288. [PMC nemokamas straipsnis] [PubMed]