Dopamiin motivatsioonikontrollis: tasuv, aversiivne ja hoiatav (2010)

Vaata teisi PMC artikleid tsitaat avaldatud artiklis.

Midbrain dopamiini neuronid on tuntud oma tugeva vastuse eest hüvedele ja nende kriitilisele rollile positiivses motivatsioonis. Siiski on muutunud üha selgemaks, et dopamiini neuronid edastavad ka signaale, mis on seotud oluliste, kuid mitte rahuldavate kogemustega, nagu aversiivsed ja hoiatavad sündmused. Siin vaatame läbi hiljutised edusammud dopamiini tasu ja mitte-tasu funktsioonide mõistmisel. Nende andmete põhjal soovitame, et dopamiini neuronid oleksid erinevat tüüpi, mis on seotud erinevate aju võrkudega ja millel on erinevad motivatsioonikontrolli rollid. Mõned dopamiini neuronid kodeerivad motivatsiooni väärtust, toetades aju võrgustikke otsimise, hindamise ja väärtuse õppimise jaoks. Teised kodeerivad motivatsiooni, toetades aju võrgustikke orienteerumiseks, tunnetamiseks ja üldiseks motivatsiooniks. Mõlemat tüüpi dopamiini neuroneid täiendab hoiatussignaal, mis on seotud potentsiaalselt oluliste sensoorsete märkide kiire avastamisega. Me oletame, et need dopamiinergilised teed väärtuse, tähelepanu ja hoiatuse jaoks teevad koostööd, et toetada adaptiivset käitumist.

Dopamiin tasu otsivate tegevuste motiveerimisel

Dopamiini on juba ammu teadaolevalt oluline meetmete tugevdamiseks ja motiveerimiseks. Ravimid, mis häirivad DA-ülekannet, häirivad tugevdamise õppimist, samas kui DA-ülekandeid suurendavad manipulatsioonid, nagu aju stimuleerimine ja sõltuvust tekitavad ravimid, toimivad tihti tugevdajatena (Tark, 2004). DA edastamine on otsustava tähtsusega motivatsiooni saavutamiseks, et otsida hüvesid (Berridge ja Robinson, 1998; Salamone et al., 2007) ja mälestuste loomiseks kiidupreemiaühingutest (Dalley et al., 2005). DA vabastamine ei ole vajalik kõigi tasuõppe vormide jaoks ja seda ei pruugi alati meeldida, sest see põhjustab rõõmu, kuid on oluline, et eesmärgid muutuksid „soovitud” tähenduses, et motiveerida neid nende saavutamiseks (Berridge ja Robinson, 1998; Palmiter, 2008).

Üks hüpotees sellest, kuidas dopamiin tugevdab õppimist, on see, et see reguleerib neuronite vaheliste sünaptiliste ühenduste tugevust. Selle hüpoteesi kõige lihtsam versioon on see, et dopamiin kontrollib sünaptilist plastilisust vastavalt modifitseeritud Hebbi reeglile, mida võib ligikaudselt nimetada „neuroniteks, mis tulevad kokku traati kokku, kuni nad saavad dopamiini lõhkemise”. Teisisõnu, kui rakk A aktiveerib raku B ja raku B põhjustab käitumismeetme, mille tulemuseks on tasu, vabastatakse dopamiin ja tugevdatakse A → B ühendust (Montague et al., 1996; Schultz, 1998). See mehhanism võimaldaks organismil õppida optimaalset valikuvõimalust, et saada kasu, andes piisava katse-eksituse kogemuse. Selle hüpoteesi kohaselt on dopamiinil tugev mõju sünaptilisele plastilisusele paljudes aju piirkondades (Surmeier et al., 2010; Goto et al., 2010; Molina-Luna et al., 2009; Marowsky jt, 2005; Lisman ja Grace, 2005). Mõnel juhul võimaldab dopamiin sünaptilist plastilisust eespool kirjeldatud Hebbi reegli järgi viisil, mis on korrelatsioonis tasu otsiva käitumisega (Reynolds et al., 2001). Lisaks oma mõjudele pikaajalisele sünaptilisele plastilisusele võib dopamiin avaldada ka kohest kontrolli neuraalsete ahelate üle, moduleerides närvirakkude aktiivsust ja neuronite vahelisi sünaptilisi ühendusi (Surmeier et al., 2007; Robbins ja Arnsten, 2009), mõnel juhul toimides viisil, mis soodustaks kohest tasu otsivat tegevust (Frank, 2005).

Dopamiini neuronite tasu signaalid

Et motiveerida tegevusi, mis toovad kasu, tuleks dopamiin vabastada tasulise kogemuse ajal. Tõepoolest, enamik DA-neuroneid aktiveeritakse tugevalt ootamatute primaarsete hüvedega, nagu toit ja vesi, mis sageli tekitavad aktiivsust "aktiivseks".Schultz, 1998) (faasilised ergastused, sealhulgas mitmed naelu \ tGrace ja Bunney, 1983)). Kuid Wolfram Schultzi teerajaja uuringud näitasid, et need DA neuronite vastused ei ole põhjustatud tasu tarbimisest Rep. Selle asemel sarnanevad nad „tasu ennustamisveaga”, mis teatab erinevusest saadud tasu ja tasu vahel, mis eeldatavasti tekkis (Schultz et al., 1997) (Joonis 1A). Seega, kui tasu on suurem kui prognoositud, on DA-neuronid tugevalt põnevil (positiivne ennustusviga, Joonis 1E, punane); kui tasu on väiksem kui ennustatud või kui see ei toimu määratud ajal, on DA-neuronid faasiliselt inhibeeritud (negatiivne ennustusviga, Joonis 1E, sinine); ja kui tasu on eelnevalt loetud, et selle suurus oleks täielikult prognoositav, siis DA neuronitel on vähe vastuseid (nullprognoosi viga, Joonis 1C, must). Sama põhimõte kehtib ka DA vastuste kohta sensoorsetele märkidele, mis annavad uut teavet tulevaste hüvede kohta. DA neuronid on põnevil, kui kiip näitab tulevase tasu väärtuse suurenemist (Joonis 1C, punane), blokeeritud, kui kiip näitab tulevase tasu väärtuse vähenemist (Joonis 1C, sinine) ja üldjuhul on vähe vastuseid vihjele, mis ei anna uut tasustamisteavet (Joonis 1E, must). Need DA-vastused meenutavad konkreetse tasu ennustusvea tüüpi, mida nimetatakse ajalise erinevuse veaks või „TD-viga”, mis on pakutud toimima tugevdavate signaalidena tegevuste ja keskkonnatingimuste väärtuse õppimiseks (Houk et al., 1995; Montague et al., 1996; Schultz et al., 1997). TD-taolist tugevdavat signaali kasutavad arvutuslikud mudelid võivad seletada paljude inimeste, loomade ja DA neuronite tugevdamise õppimise aspekte (Sutton ja Barto, 1981; Waelti jt, 2001; Montague ja Berns, 2002; Dayan ja Niv, 2008).

 

Joonis 1

Tasu ennustusvigade dopamiini kodeerimine ja ennustava teabe eelistamine

Muljetavaldav hulk eksperimente on näidanud, et DA-signaalid esindavad tasu ennustusi viisil, mis sobib tihedalt käitumuslike eelistustega, kaasa arvatud eelistused suurtele hüvedele (Tobler jt, 2005) tõenäolised hüved ebatõenäoliste eest (Fiorillo et al., 2003; Satoh et al., 2003; Morris et al., 2004) ja kohesed hüved hilinenud eest (Roesch et al., 2007; Fiorillo et al., 2008; Kobayashi ja Schultz, 2008). On isegi tõendeid, et DA neuronid inimestel kodeerivad raha tasuvust (Zaghloul et al., 2009). Lisaks ilmnevad õppimise ajal DA-signaalid, mis sarnanevad sarnasele ajahetkele tasu ennustuse käitumismõõtmiste suhtes (Hollerman ja Schultz, 1998; Satoh et al., 2003; Takikawa et al., 2004; Day et al., 2007) ja on korrelatsioonis tasu eelistamise subjektiivsete meetmetega (Morris et al., 2006). Need leiud on loonud DA neuronite kui ühe kõige paremini mõistetava ja kõige enam replikeeritud näite aju kodeerivast tasust. Selle tulemusena on viimased uuringud mõjutanud DA neuroneid intensiivselt, et avastada, kuidas nad loovad tasu ennustusi ja kuidas nende signaalid toimivad käitumise kontrollimiseks allavoolu.

Dopamiini neuronite tasu signaalid

Hiljutised edusammud DA-tasu signaalide mõistmisel tulenevad kolmest laialdasest küsimusest: kuidas DA neuronid õpivad ennustusi? Kui täpsed on nende ennustused? Ja mida nad koheldavaks peavad?

Kuidas DA neuronid õpivad ennustusi? Klassikalised teooriad viitavad sellele, et tasu ennustusi õpitakse järkjärgulise tugevdamisprotsessi kaudu, mis nõuab korduvaid stiimulite tasusid.Rescorla ja Wagner, 1972; Montague et al., 1996). Iga aja stiimuli A järgneb ootamatu tasu, A hinnanguline väärtus suureneb. Hiljutised andmed näitavad siiski, et DA-neuronid lähevad kaugemale lihtsast stimuleerivast õppest ja teevad prognoose, mis põhinevad keerulistel veendumustel maailma struktuuri kohta. DA neuronid võivad ennustada õigesti tasusid isegi ebatavalistes keskkondades, kus stiimulitega seotud hüved põhjustavad a vähenema selle stiimuli väärtuses (Satoh et al., 2003; Nakahara et al., 2004; Bromberg-Martin jt, 2010c) või muuta täiesti erineva stiimuli väärtust (Bromberg-Martin jt, 2010b). DA neuronid võivad samuti kohandada oma tasu signaale, tuginedes tasu jaotamise kõrgema järjekorra statistikale, nagu näiteks nende eeldatava variatsioonil põhineva skaleerimise prognoosivigade signaalid (Tobler jt, 2005) ja "spontaanselt taastuvad" vastused kustutatud tasu märkidele (Pan jt, 2008). Kõik need nähtused kujutavad endast märkimisväärset paralleelset sarnaste efektidega, mida täheldatakse sensoorses ja motoorses kohandamises (Braun et al., 2010; Fairhall et al., 2001; Shadmehr jt, 2010), mis viitab sellele, et need võivad peegeldada ennustava õppe üldist närvimehhanismi.

Kui täpsed on DA tasu ennustused? Hiljutised uuringud on näidanud, et DA-neuronid kohandavad oma premeerimissignaale täpselt, et võtta arvesse kolme prognoositava ebakindluse allikat. Esiteks kannatavad inimesed ja loomad sisemise ajastuse müraga, mis takistab neil teha usaldusväärseid prognoose pikkade tasuvusaegade kohta (Gallistel ja Gibbon, 2000). Seega, kui kiip-tasu viivitused on lühikesed (1 – 2 sekundid), on ajastuse ennustused täpsed ja tasu andmine vallandab vähe DA-vastuse, kuid pikemate kiipide tasumise viivituste korral muutuvad ajastuse ennustused vähem usaldusväärseteks ja tasud tekitavad selgeid DA-lõhkeKobayashi ja Schultz, 2008; Fiorillo et al., 2008). Teiseks on paljud argid igapäevaelus ebatäpsed, täpsustades tasu tarneaja laia levikut. DA neuronid peegeldavad seda ajastuse ebakindluse vormi: nad muutuvad tasuvusaegade ajal järk-järgult inhibeerituks, justkui annavad signaali üha negatiivsematest tasu ennustusvigadest igal hetkel, kui tasu ei ilmu (Fiorillo et al., 2008; Bromberg-Martin jt, 2010a; Nomoto et al., 2010). Lõpuks on paljud vihjed ettekujutuslikult keerulised, mistõttu on vaja üksikasjalikku kontrolli, et jõuda kindla järelduseni nende tasuvuse kohta. Sellistes olukordades esinevad DA-tasu signaalid pika latentsusega ja järk-järgult, mis peegeldavad peegeldusväärtuse järkjärgulist voolu, kui stiimuli väärtus on dekodeeritud (Nomoto et al., 2010).

Millised sündmused on DA-neuronid kasulikud? Tavapärased tasuõppe teooriad viitavad sellele, et DA neuronid annavad väärtuse tulevase esmase tasu eeldatava summa alusel (Montague et al., 1996). Kuid isegi kui primaarse tasu määr on püsiv, väljendavad inimesed ja loomad sageli eelistatavust otsivaid keskkondi, kus iga tasu suurus, tõenäosus ja ajastus on eelnevalt teada (Daly, 1992; Närida ja Ho, 1994; Ahlbrecht ja Weber, 1996). Hiljutine uuring ahvidel leidis, et DA-neuronid annavad sellele eelistusele märku (Bromberg-Martin ja Hikosaka, 2009). Ahvid väljendasid tugevat eelistust vaadata läbi informatiivseid visuaalseid näpunäiteid, mis võimaldaksid neil ennustada tulevase tasu suurust, mitte mitteametlikke vihjeid, mis ei andnud uut teavet. Paralleelselt innustasid DA neuronid võimalust vaadata informatiivseid märke viisil, mis oli korrelatsioonis looma käitumusliku eelistusega (Joonis 1B, D). See viitab sellele, et DA-neuronid ei motiveeri mitte ainult meetmeid, et saada kasu, vaid motiveerivad ka meetmeid, et teha nende hüvede kohta täpseid prognoose, tagamaks, et tasusid saab ette näha ja ette valmistada.

Kokkuvõttes näitavad need leiud, et DA-i tasu ennustusvigade signaalid on tundlikud keerukate tegurite suhtes, mis annavad teavet inimeste ja loomade tasustamise prognooside kohta, sealhulgas kohanemine kõrgekvaliteedilise tasustamisstatistikaga, tasu määramatus ja ennustava teabe eelistused.

Faasiliste dopamiini tasu signaalide mõju allavoolu struktuuridele

DA tasu vastused tekivad sünkroonsetes faasipurskes (Joshua et al., 2009b), reageeringu muster, mis kujundab DA vabanemist sihtstruktuurides (Gonon, 1988; Zhang et al., 2009; Tsai et al., 2009). Pikka aega on teoreetiliselt öeldud, et need faasilised purunemised mõjutavad õppimist ja motivatsiooni toonilisest DA aktiivsusest (Grace, 1991; Grace et al., 2007; Schultz, 2007; Lapish et al., 2007). Hiljuti väljatöötatud tehnoloogia on võimaldanud kinnitada seda hüpoteesi, kontrollides DA neuronite aktiivsust peene ruumilise ja ajalise täpsusega. VTA DA neuronite optogeneetiline stimulatsioon indutseerib tugeva konditsioneeritud koha eelistuse, mis esineb ainult siis, kui stimulatsiooni rakendatakse lõhkemismustris (Tsai et al., 2009). Seevastu põhjustab DA-neuronite NMDA-retseptorite geneetiline väljatõrjumine, mis kahjustab lõhkemist, jättes samal ajal toonilise aktiivsuse suures osas terveks, põhjustades valikulist kahjustust teatud tasuõppe vormides (Zweifel et al., 2009; Parker jt, 2010) (kuigi tähele panna, et see väljalangemine kahjustab ka DA neuroni sünaptilist plastilisust (Zweifel et al., 2008)). DA lõhkemised võivad suurendada tasuõpet kohalike närvikontuuride ümberkonfigureerimise teel. Eelkõige saadetakse tuuma accumbens'i konkreetsetele piirkondadele tasu-ennustavad DA-lõhed ja neil piirkondadel on eriti kõrge tasu-ennustava neuraalse aktiivsuse tase (Cheer jt, 2007; Owesson-White jt, 2009).

Võrreldes faasiliste purunemistega on teada, et oluline on faasiliste pauside tähtsus negatiivse tasu ennustamisvigade esinemisel spikeerimisel. Need pausid põhjustavad väiksemaid muutusi spike määras, neid vähendatakse vähem tasu ootuste järgi (Bayer ja Glimcher, 2005; Joshua et al., 2009a; Nomoto et al., 2010) ja neil võib olla väiksem mõju õppimisele (Rutledge jt, 2009). Teatud tüüpi negatiivse prognoosimise veaõpe vajab siiski VTA-d (Takahashi et al., 2009), mis viitab sellele, et faasilised pausid võivad dekodeerida allavoolu struktuurid.

Kuna purunemised ja pausid põhjustavad DA vabanemise väga erinevaid mustreid, mõjutavad nad tõenäoliselt järgnevaid struktuure erinevate mehhanismide kaudu. DA-neuronite ühe peamise sihtmärgi - seljastriatumi - kohta on viimased tõendid selle hüpoteesi kohta. Dorsaalse striatumi projektsioon neuronid on kahte tüüpi, mis ekspresseerivad erinevaid DA-retseptoreid. Üks tüüp väljendab D1-retseptoreid ja -projekte basaalse ganglioni otsesele rajale, et hõlbustada keha liikumist; teine ​​tüüp väljendab D2-retseptoreid ja -projekte "kaudse raja" suunas, et pärssida keha liikumist (Joonis 2) (Albin et al., 1989; Gerfen et al., 1990; Kravitz et al., 2010; Hikida et al., 2010). Nende teede ja retseptorite omaduste põhjal on teoreetiliselt arvestatud, et DA purunemised tekitavad kõrge DA seisundi, aktiveerivad D1 retseptorid ja põhjustavad otsese tee suure väärtusega liikumiste valimiseks (Joonis 2A), samal ajal kui DA pausid tekitavad madala DA-i tingimusi, inhibeerivad D2-retseptoreid ja põhjustavad kaudset rada madala väärtusega liikumiste pärssimiseks (Joonis 2B) (Frank, 2005; Hikosaka, 2007). Kooskõlas selle hüpoteesiga soodustab kõrge DA-retseptori aktivatsioon cortico-striatuse sünapsi tugevnemist otseliinil (Shen et al., 2008) ja positiivsetest tulemustest õppimine (Frank jt, 2004; Voon et al., 2010), samal ajal kui striatali D1 retseptori blokaad kahjustab selektiivselt liikumisiNakamura ja Hikosaka, 2006). Analoogsel viisil soodustab madal DA-retseptori aktivatsioon cortico-striatuse sünapsi tugevnemist kaudsel teel (Shen et al., 2008) ja negatiivsetest tulemustest õppimine (Frank jt, 2004; Voon et al., 2010), samas kui striatali D2 retseptori blokaad pärsib selektiivselt liikumisi mittehüvitatud sihtmärkidega (Nakamura ja Hikosaka, 2006). D1i ja D2 retseptori funktsioonide jagunemine motivatsioonikontrollis selgitab paljusid DA-ga seotud geenide mõju inimese käitumisele (Ullsperger, 2010; Frank ja Fossella, 2010) ja võivad ulatuda kaugemale dorsaalsest striatumist, kuna on tõendeid sarnase tööjaotuse kohta \ tGrace et al., 2007; Lobo et al., 2010).

 

Joonis 2

Dopamiini positiivse ja negatiivse motivatsiooni kontroll dorsaalses striatumis

Kuigi ülalkirjeldatud skeem annab lihtsa pildi faasilisest DA käitumisjuhtimisest selle mõju kaudu striatumile, on täielik pilt palju keerulisem. DA mõjutab palgaga seotud käitumist, toimides paljudes aju piirkondades, sealhulgas prefrontaalses ajukoores (Hitchcott et al., 2007), rhinal cortex (Liu et al., 2004), hipokampus (Packard ja White, 1991; Grecksch ja Matties, 1981) ja amygdala (Phillips et al., 2010). DA mõju on tõenäoliselt väga erinev nende piirkondade vahel, mis tulenevad DA innervatsiooni tihedusest, DA transporteritest, metaboolsetest ensüümidest, autoretseptoritest, retseptoritest ja retseptori sidestusest rakusisestes signaaliradades (Neve et al., 2004; Bentivoglio ja Morelli, 2005; Frank ja Fossella, 2010). Lisaks võivad DA neuronitel vähemalt VTA-s olla erinevad raku omadused sõltuvalt nende projektsioonieesmärkidest (Lammel et al., 2008; Margolis et al., 2008) ja mõnedel on märkimisväärne võime edastada nii glutamaati kui ka dopamiini (Descarries et al., 2008; Chuhma et al., 2009; Hnasko et al., 2010; Tecuapetla et al., 2010; Stuber jt, 2010; Birgner jt, 2010). Seega algab DA neuronite kontrolli täielik ulatus neuronaalse töötlemise suhtes alles ilmnema.

Erinevad dopamiini vastused vastumeelsetele sündmustele

Närvirakkude vastus aversiivsetele sündmustele annab olulise testi selle funktsioonide kohta motivatsioonikontrollis (Schultz, 1998; Berridge ja Robinson, 1998; Redgrave et al., 1999; Horvitz, 2000; Joseph jt, 2003). Paljudes aspektides käsitleme rahuldavaid ja vastumeelseid sündmusi vastandlikel viisidel, mis peegeldavad nende vastupidist motiveeriv väärtus. Me otsime hüvesid ja anname neile positiivse väärtuse, vältides vältimatuid sündmusi ja määrates neile negatiivse väärtuse. Teistes aspektides käsitleme rahuldavaid ja aversiivseid sündmusi sarnasel viisil, mis kajastab nende sarnast motivatsioonikohustust [FOOTNOTE1]. Mõlemad rahuldavad ja aversiivsed sündmused põhjustavad tähelepanu, kognitiivse töötlemise ja üldise motivatsiooni suurenemise.

Millist neist funktsioonidest toetavad DA neuronid? On juba ammu teada, et stressirohked ja vastumeelsed kogemused põhjustavad DA-kontsentratsioonide suurt muutust allavoolu aju struktuurides ja et DA-agonistid, antagonistid ja kahjustused muudavad nende kogemuste suhtes dramaatiliselt käitumisreaktsioone (Salamone, 1994; Di Chiara, 2002; Pezze ja Feldon, 2004; Young jt, 2005). Need uuringud on siiski andnud tulemuste silmatorkava mitmekesisuse (Levita et al., 2002; Di Chiara, 2002; Young jt, 2005). Paljud uuringud on kooskõlas DA neuronitega, mis kodeerivad motivatsiooni. Nad teatavad, et aversiivsed sündmused suurendavad DA-tasemeid ja et käitumise vastumeelsust toetavad suured DA-edastuse tasemed (Salamone, 1994; Joseph jt, 2003; Ventura et al., 2007; Barr et al., 2009; Fadok et al., 2009) sealhulgas faasilised DA-lõhed (Zweifel et al., 2009). Kuid teised uuringud on paremini kooskõlas motiveerivat väärtust kodeerivate DA neuronitega. Nad teatavad, et aversiivsed sündmused vähendavad DA-tasemeid ja et käitumise vastumeelsust toetavad madalad DA-edastustasemed (Mark et al., 1991; Shippenberg et al., 1991; Liu et al., 2008; Roitman et al., 2008). Paljudel juhtudel on need segatud tulemused leitud üksikutest uuringutest, mis viitavad sellele, et aversiivsed kogemused põhjustavad DA vabanemise erinevaid mudeleid erinevates aju struktuuris (Thierry et al., 1976; Besson ja Louilot, 1995; Ventura et al., 2001; Jeanblanc et al., 2002; Bassareo et al., 2002; Pascucci et al., 2007) ja et DA-ga seotud ravimid võivad tekitada närvi- ja käitumuslike mõjude segu, mis on sarnane nii rahuldust pakkuvate kui ka vastumeelsete kogemustega (Ettenberg, 2004; Wheeler et al., 2008).

Seda DA vabanemismustrite ja funktsioonide mitmekesisust on raske ühitada ideega, et DA-neuronid edastavad kõigile aju struktuuridele ühtse motivatsioonisignaali. Neid erinevaid vastuseid võib seletada, kui DA neuronid ise on erinevad - koosnevad mitmest närvipopulatsioonist, mis toetavad aversiivse töötlemise erinevaid aspekte. Seda vaadet toetavad närvisalvestuse uuringud anesteseeritud loomadel. Need uuringud on näidanud, et mürgised stiimulid tekitavad mõnedes DA neuronites ergastust, kuid inhibeerivad teisi DA neuroneid (Chiodo et al., 1980; Maeda ja Mogenson, 1982; Schultz ja Romo, 1987; Mantz et al., 1989; Gao et al., 1990; Coizet et al., 2006). Oluline on see, et nii erutus- kui ka inhibeerivad reaktsioonid esinevad neuronites, mis on kinnitatud dopaminergilisteks, kasutades juxtacellular märgistust (Brischoux et al., 2009) (Joonis 3). Aktiivse käitumise ajal esineb sarnane vastumeelsete vastuste mitmekesisus. DA neuronite erinevad rühmad ergutatakse või inhibeeritakse aversiaalsete sündmuste, sealhulgas naha kahjuliku stimuleerimise kaudu, (Kiyatkin, 1988a; Kiyatkin, 1988b), sensoorsed näpunäited, mis ennustavad \ tGuarraci ja Kapp, 1999), aversive airpuffs (Matsumoto ja Hikosaka, 2009b) ja sensoorseid näpunäiteid, mis ennustavad aversiivseidMatsumoto ja Hikosaka, 2009b; Joshua et al., 2009a). Peale selle, kui kaks DA-neuroni registreeritakse samaaegselt, on nende aversiivsetel vastustel tavaliselt vähe kohtuprotsessi korrelatsiooni (Joshua et al., 2009b), mis viitab sellele, et vastumeelsed vastused ei ole kogu DA elanikkonna lõikes koordineeritud.

 

Joonis 3

Erinevad dopamiini neuronite vastused aversiivsetele sündmustele

Et mõista nende mitmekesiste vastumeelsete vastuste funktsioone, peame teadma, kuidas neid kombineeritakse tasuliste vastustega, et luua sisukas motiveeriv signaal. Hiljutine uuring uuris seda teemat ja näitas, et DA-neuronid jagunevad mitmeks populatsiooniks, millel on erinevad motiveerivad signaalid (Matsumoto ja Hikosaka, 2009b). Üks populatsioon on põnevil sündmuste tasustamise ja aversiivsete sündmuste poolt, nagu kodeerimine motiveeriv väärtus (Joonis 4A). Teine populatsioon on põnevil nii premeerivate kui ka aversiivsete sündmuste korral sarnasel viisil, nagu kodeerimine motivatsioonikohustust (Joonis 4B). Mõlemas nendes populatsioonides on paljud neuronid tundlikud premeerimis- ja aversiivsete prognooside suhtes: nad reageerivad, kui tasulised sündmused on oodatust suuremad ja kui aversiivsed sündmused on prognoositust aversiivsemad (Matsumoto ja Hikosaka, 2009b). See näitab, et nende aversiivsed vastused on tõepoolest põhjustatud prognoosidest aversiivsete sündmuste kohta, välistades võimaluse, et need võivad olla põhjustatud mittespetsiifilistest teguritest, nagu näiteks toores sensoorne sisend või üldised seosed tasuga (Schultz, 2010). Need kaks populatsiooni erinevad siiski oma ennustuskoodi üksikasjalikus iseloomus. DA-neuronite motiveeriva väärtuse kodeerimine kodeerib täpset prognoosivigade signaali, sealhulgas tugevat pärssimist hüvede ja kerge ergutamise puudumise tõttu aversiivsete sündmuste väljajätmisega (Joonis 4A, parem). Seevastu reageerivad motivatsioonikindlusega DA-neuronid, kui esinevad olulised sündmused, kuid mitte siis, kui nad puuduvad (Joonis 4B, parem), mis on kooskõlas erutamise teoreetiliste mõistetega (Lang ja Davis, 2006) [FOOTNOTE2]. Nende kahe DA-neuronipopulatsiooni kohta on leitud tõendeid isegi siis, kui neuroloogilist aktiivsust on uuritud keskmiselt. Seega leidsid DA-süsteemi eri osadele suunatud uuringud faasilisi DA-signaale, mis kodeerivad inhibeerivate aversiivsete sündmuste (Roitman et al., 2008), sarnaselt motiveeriva väärtuse kodeerimisele või erutusega (Joshua et al., 2008; Anstrom et al., 2009), sarnane motiveeriva ahvatluse kodeerimisega.

 

Joonis 4

Eraldatud dopamiini neuronite populatsioonid, mis kodeerivad motivatsiooni väärtust ja tähtsust

Need hiljutised leiud võivad tunduda vastuolus varajase aruandega, mille kohaselt DA-neuronid reageerivad eelistatavalt pigem vihjeid kui aversiivseid vihjeid (Mirenowicz ja Schultz, 1996). Hoolikalt uurides on isegi see uuring täielikult kooskõlas DA väärtuse ja silmapaistvuse kodeerimisega. Selles uuringus viisid auhinnamärgid suure tõenäosusega (> 90%) preemia tulemuseni, samas kui vastumeelsed vihjed viisid madala tõenäosusega (<10%) vastumeelsete tulemusteni. Seega oleks väärtus ja silmatorkavust kodeerivad DA neuronid vastumeelsetele vihjetele vähe reageerinud, kodeerides täpselt nende madalat vastumeelsuse taset.

Motiveeriva väärtuse funktsionaalne roll ja tunnussignaalid

Kokkuvõttes näitavad ülaltoodud leiud, et DA-neuronid jagunevad mitmeks populatsiooniks, mis sobivad motivatsioonikontrolli erinevateks rollideks. DA-neuronite motiveeriva väärtuse kodeerimine sobib hästi dopamiini neuronite praeguste teooriatega ja tasu töötlemisega (Schultz et al., 1997; Berridge ja Robinson, 1998; Tark, 2004). Need neuronid kodeerivad täieliku prognoosivea signaali ja kodeerivad rahuldavaid ja vastumeelset sündmusi vastassuunas. Seega pakuvad need neuronid sobivat juhendavat signaali otsimiseks, hindamiseks ja väärtuse õppimiseks (Joonis 5). Kui stiimul põhjustab DA-neuronite väärtuse kodeerimise põnevust, peaksime sellele lähenema, määrama selle suure väärtuse ja õppima meetmeid, et seda uuesti otsida. Kui stiimul pärsib väärtust kodeerivate DA-neuronite inhibeerimist, siis peaksime seda vältima, määrama väikese väärtuse ja õppima meetmeid selle vältimiseks tulevikus.

 

Joonis 5

Hüpoteesitud funktsioonid motivatsiooniväärtuse, säravuse ja häiresignaalide kohta

Seevastu sobivad motivatsioonikindlusega DA-neuronid hästi dopamiini neuronite teooriatega ja oluliste sündmuste töötlemisega (Redgrave et al., 1999; Horvitz, 2000; Joseph jt, 2003; Kapur, 2003). Neid neuroneid ärritavad nii rahuldavad kui ka aversiivsed sündmused ning neil on nõrgemad reaktsioonid neutraalsetele sündmustele, pakkudes sobivat õpetavat signaali närvipiirkonnale, et õppida avastama, ennustama ja reageerima väga tähtsatele olukordadele. Siin vaatleme kolme sellist aju süsteemi (Joonis 5). Esiteks kalibreeritakse visuaalseks ja tähelepanelikuks orienteerumiseks mõeldud närviahelad, et leida teavet igat liiki sündmuste kohta, nii rahuldust pakkuvate kui ka aversiivsete. Näiteks meelitavad nii tasu kui ka aversiivsed näpunäited orienteerimisreaktsioone tõhusamalt kui neutraalsed vihjed (Lang ja Davis, 2006; Matsumoto ja Hikosaka, 2009b; Austin ja Duka, 2010). Teiseks, nii tasulised kui ka vastumeelsed olukorrad kaasavad närvisüsteeme kognitiivse kontrolli ja tegevuse valiku jaoks - teabe hoidmiseks peame kaasama töömälu, konflikti lahendamise tegevussuuna otsustamiseks ja pikaajalise mälu tulemuse meenutamiseks (Bradley et al., 1992; Botvinick et al., 2001; Savine et al., 2010). Kolmandaks nõuavad nii rahuldust andvad kui ka vastumeelsed olukorrad üldise motivatsiooni suurendamist, et ergutada tegevusi ja tagada nende nõuetekohane täitmine. Tõepoolest, DA-neuronid on otsustava tähtsusega suure väärtusega eesmärkide saavutamiseks tehtavate jõupingutuste motiveerimisel ja teadmiste kogumisel ülesannete nõudmistest usaldusväärseks mootori jõudluseks (Berridge ja Robinson, 1998; Mazzoni et al., 2007; Niv et al., 2007; Salamone et al., 2007).

Dopamiini ergastamine sensoorsete märkide hoiatamisega

Lisaks motivatsiooniväärtust ja kalduvust kodeerivatele signaalidele on enamikul DA-neuronitel ka purunemisvastused mitut tüüpi sensoorsetele sündmustele, mis ei ole otseselt seotud rahuldavate või vastumeelsete kogemustega. Need vastused on teoreetiliselt sõltuvad mitmetest närvi- ja psühholoogilistest teguritest, kaasa arvatud otsene sensoorne sisend, üllatus, uudsus, erutus, tähelepanu, säravus, üldistus ja pseudo-konditsioneerimine (Schultz, 1998; Redgrave et al., 1999; Horvitz, 2000; Lisman ja Grace, 2005; Redgrave ja Gurney, 2006; Joshua et al., 2009a; Schultz, 2010).

Siinkohal püüame neid ideid sünteesida ja võtta arvesse neid DA-vastuseid ühe põhilise signaali, a hoiatussignaal (Joonis 5). Mõistet „hoiatus” kasutas Schultz (Schultz, 1998) kui üldist mõistet sündmustele, mis meelitavad tähelepanu. Siin kasutame seda konkreetsemas mõttes. Häirete korral tähendab see ootamatut sensoorset kihti, mis võtab arvesse selle potentsiaalse tähtsuse kiiret hindamist, kasutades lihtsaid funktsioone, näiteks selle asukohta, suurust ja sensoorset modaalsust. Sellised hoiatavad sündmused põhjustavad sageli koheseid käitumisreaktsioone, et neid uurida ja määrata nende täpne tähendus. Seega esinevad DA-hoiatussignaalid tavaliselt lühikeste latentsuste ajal, põhinevad stiimuli ligikaudsetel omadustel ja on kõige paremini korrelatsioonis vahetute reaktsioonidega, nagu orienteerumisreaktsioonid (Schultz ja Romo, 1990; Joshua et al., 2009a; Schultz, 2010). See on erinevalt teistest motivatsioonisignaalidest DA neuronites, mis tavaliselt esinevad pikemate latentsuste korral, võtavad arvesse stiimuli täpset identiteeti ja on kõige paremini korrelatsioonis käsitletavate käitumistoimingutega, nagu lähenemise või vältimise otsused (Schultz ja Romo, 1990; Joshua et al., 2009a; Schultz, 2010).

DA-hoiatusreaktsioone võivad käivitada üllatavad sensoorsed sündmused, nagu ootamatud valguse vilkumised ja kuuldavad klõpsud, mis tekitavad DA-neuronite 60-90% -is silmapaistvaid purunemishäireid kogu SNc ja VTA-s (Strecker ja Jacobs, 1985; Horvitz et al., 1997; Horvitz, 2000) (Joonis 6A). Need häiresignaalid näivad peegeldavat stiimulite üllatuslikkust ja tähelepanu; neid vähendatakse, kui stiimul esineb prognoositavatel aegadel, kui tähelepanu pööratakse mujale või une ajal (Schultz, 1998; Takikawa et al., 2004; Strecker ja Jacobs, 1985; Steinfels jt, 1983). Näiteks ootamatu klõpsav heli tekitab silmapaistva DA lõhkemise, kui kass on vaikselt ärkvel passiivses olekus, kuid sellel ei ole mingit mõju, kui kass tegeleb tähelepanelikuga tegevustega, nagu rottide jahipidamine, söötmine, peibutamine katsetaja poolt ja nii edasi (Strecker ja Jacobs, 1985) (Joonis 6A). Samamoodi vallandavad DA-lõhkemise vastused füüsiliselt nõrgad, kuid nende uudsuse tõttu hoiatavad sensoorilised sündmused.Ljungberg jt, 1992; Schultz, 1998). Need vastused muutuvad harjumuspäraseks, kuna uudsed stiimulid tajuvad paralleelselt orienteerumisreaktsioonide harjumusega (Joonis 6B). Kooskõlas nende tulemustega tekitavad üllatavad ja uudsed sündmused DA vabanemist allavoolu struktuuridesse (Lisman ja Grace, 2005) ja aktiveerivad DA-ga seotud aju ahelad viisil, mis kujundab tasu töötlemise (Zink et al., 2003; Davidson et al., 2004; Duzel et al., 2010).

 

Joonis 6

Dopamiini neuronite erutusreaktsioon hoiatusjuhtumitele

DA-i hoiatusreaktsioone käivitavad ka ootamatud sensoorsed vihjed, mis võivad anda uut teavet motiveerivalt oluliste sündmuste kohta. Nagu oodatakse lühiajalise hoiatussignaali puhul, on need vastused pigem mitteselektiivsed: neid vallandab mis tahes stiimul, mis meenutab motiveerivalt esile kerge, isegi kui sarnasus on väga väike (nähtus, mida nimetatakse üldistamiseks) (Schultz, 1998). Selle tulemusena reageerivad DA neuronid sageli stiimulile kahe signaali seguga: kiire häiresignaal, mis kodeerib asjaolu, et stiimul on potentsiaalselt oluline ja teine ​​signaal, mis kodeerib selle tegelik tasuv või hirmutav tähendus (Schultz ja Romo, 1990; Waelti jt, 2001; Tobler jt, 2003; Day et al., 2007; Kobayashi ja Schultz, 2008; Fiorillo et al., 2008; Nomoto et al., 2010) (vt (Kakade ja Dayan, 2002; Joshua et al., 2009a; Schultz, 2010) ülevaatamiseks). Näitena võib näha motiivsete motivatsioonikodeerimise DA-neuronite komplekti, mis on näidatud Joonis 6C (Bromberg-Martin jt, 2010a). Neid neuroneid ergutasid tasu ja aversiivsed vihjed, kuid neid erutas ka neutraalne kiip. Neutraalset kihti ei olnud kunagi motiveerivate tulemustega seotud, kuid neil oli (väga väike) füüsiline sarnasus tasu ja aversiivsete märkidega.

Need hoiatusreaktsioonid tunduvad olevat tihedalt seotud sensoorsete kihtide võimega käivitada orienteeruvad reaktsioonid, et seda edasi uurida ja selle tähendust avastada. Seda võib näha kolme märkimisväärse omadusega. Esiteks tekivad häiresignaalid ainult sensoorsete märkide puhul, mida tuleb uurida nende tähenduse kindlaksmääramiseks, mitte sisuliselt tasuvate või aversiivsete sündmuste, näiteks mahla või õhupuhastite (Schultz, 2010). Teiseks tekivad häiresignaalid ainult siis, kui kiip on potentsiaalselt oluline ja võimeline käivitama orienteerumisreaktsioone, mitte siis, kui kiip ei ole käimasoleva ülesande jaoks asjakohane ja ei suuda käivitada orienteerimisreaktsioone (Schultz ja Romo, 1990). Kolmandaks, hoiatusreaktsioonid paranevad olukordades, kus vihjed põhjustavad järsku tähelepanu nihkumist - kui need ilmuvad ootamatul ajal või kaugel pilgu keskusest (Bromberg-Martin jt, 2010a). Seega, kui motiveerivaid näpunäiteid esitatakse ettearvamatu ajastusega, käivitavad need kohesed orienteerumisreaktsioonid ja üldise DA-hoiatusreaktsiooni - ergastuse kõikidele vihjetele, kaasa arvatud neutraalsed märgid (Joonis 6C, must). Aga kui nende ajastamine on ennustatav - näiteks hoiatades "sekundis enne" näpunäidete esitamist "katseprobleemidega" subjektidele, ei anna vihjeid enam hoiatavat vastust (Joonis 6D, hall). Selle asemel nihkub hoiatav vastus katse algusrežiimile, mis on esimese uuringu sündmus, millel on ettearvamatu ajastus ja mis tekitab orienteeruvaid reaktsioone (Joonis 6D, must).

Milline on alusmehhanism, mis genereerib DA-neuronite hoiatussignaale? Üheks hüpoteesiks on see, et häiresignaalid on lihtsalt tavalised tasu ennustusvigade signaalid, mis tekivad lühikese latentsusega, kodeerides stiimuli eeldatavat tasuvust enne, kui see on täielikult diskrimineeritud (Kakade ja Dayan, 2002). Viimased tõendid näitavad siiski, et häiresignaale saab genereerida tavapäraste DA tasustussignaalide abil (Satoh et al., 2003; Bayer ja Glimcher, 2005; Bromberg-Martin jt, 2010a; Bromberg-Martin jt, 2010c; Nomoto et al., 2010). Kõige silmapaistvamalt ei piirdu hoiatav vastus katse alguslehele ainult tasuliste ülesannete rahuldamisele; sellel võib olla võrdne tugevus vastumeelse ülesande ajal, kus mingeid hüvesid ei anta (Joonis 6C, D, alt, “aversiivne ülesanne”). See juhtub isegi siis, kui tavalised DA-tasu signaalid samades neuronites annavad õigesti märku, et premeeriva ülesande oodatav väärtus on palju suurem kui aversiivne ülesanne (Bromberg-Martin jt, 2010a). Need hoiatussignaalid ei ole üksnes väärtuse kodeerimise vorm või puhtalt kodeerimise vorm, sest need esinevad enamikus nii motiveerivates väärtustes kui ka koha kodeerivates DA-neuronites (Bromberg-Martin jt, 2010a). Teist dissotsiatsiooni võib näha viisil, kuidas DA-neuronid ennustavad tulevasi hüvesid, tuginedes mineviku tasu tulemustele (Satoh et al., 2003; Bayer ja Glimcher, 2005). Kui tavapäraseid DA-tasu signaale juhitakse pikaajalise mälumälu abil, mis on optimeeritud täpse tasu ennustamiseks, kontrollitakse katse alguskiirele reageerivaid hoiatusi eraldi mälukaardi abil, mis meenutab vahetu orienteerumisreaktsiooniga (Bromberg-Martin jt, 2010c). Kolmandat dissotsiatsiooni võib näha selles, kuidas need signaalid on jaotunud DA neuroni populatsiooni ulatuses. Kui tavalised DA-tasu signaalid on ventromediaalses SNc-s kõige tugevamad, edastatakse kogu SNc-s katse alguskiirele (ja teistele ootamatult ajastatud märkidele) hoiatavaid vastuseid (Nomoto et al., 2010).

Erinevalt tavapäraste tasu signaalide dissotsiatsioonidest korreleeruvad DA-hoiatussignaalid hoiatussündmusele orienteerumise ja lähenemise kiirusega (Satoh et al., 2003; Bromberg-Martin jt, 2010a; Bromberg-Martin jt, 2010c). See viitab sellele, et hoiatussignaale genereerib närviprotsess, mis motiveerib kiiret reaktsiooni potentsiaalselt oluliste sündmuste uurimiseks. Praegusel ajal on kahjuks teada, millised sündmused seda protsessi "oluliseks" käsitletakse. Näiteks, kas hoiatavad reageeringud on sama tundlikud ka rahuldavate ja vastumeelsete sündmuste suhtes? Teada on, et häiresignaalid tekivad stiimulite puhul, mis meenutavad tasuväärtusi või mis sarnanevad nii tasu kui ka aversiivsete märkidega (nt jagades sama sensoorset modaalsust). Kuid ei ole veel teada, kas hoiatusreaktsioonid tekivad stiimulite puhul, mis meenutavad ainult aversiivseid märke.

Dopamiini häire signaalide funktsionaalne roll

Nagu me oleme näinud, tekitavad hoiatussignaalid tõenäoliselt eraldi mehhanismi motivatsiooniväärtusest ja säravussignaalidest. Kuid hoiatussignaalid saadetakse nii motiveerivale väärtusele kui ka läbilaskvust kodeerivatele DA-neuronitele ning seetõttu reguleerivad nad tõenäoliselt aju töötlemist ja käitumist sarnaselt väärtuse ja tähtsuse signaalidele (Joonis 5).

Motivatsioonikeskkonda kodeerivatele DA-neuronitele saadetavate signaalide hoiatamine toetaks tähelepanu suunamist hoiatavale stiimulile, kognitiivsete ressursside kaasamisele selle tähenduse avastamiseks ja otsuste tegemiseks tegevusplaani kohta ning motivatsioonitasemete suurendamiseks selle kava tõhusaks rakendamiseks (Joonis 5). Need mõjud võivad ilmneda kohese mõjuga närvi töötlemisele või tugevdades tegevusi, mis viisid häire sündmuse avastamiseni. See funktsionaalne roll sobib hästi korrelatsiooni vahel DA häiresignaalide ja kiirete käitumisreaktsioonide vahel häiresignaaliga ning teooriatega, et lühikese latentsusega DA neuronite vastused on seotud tähelepanu, erutuse, kognitiivse töötlemise võimendamise ja koheste käitumuslike reaktsioonidega (Redgrave et al., 1999; Horvitz, 2000; Joseph jt, 2003; Lisman ja Grace, 2005; Redgrave ja Gurney, 2006; Joshua et al., 2009a).

Häiresignaalide olemasolu motiveerivates väärtustes kodeerivates DA neuronites on raskem seletada. Need neuronid edastavad motiveeriva väärtuse signaale, mis on ideaalsed otsimiseks, tulemuste hindamiseks ja väärtuse õppimiseks; veel võib neid innustada ka selliste sündmuste, nagu ootamatud klõpsamishelid ja aversiivsete katsete algus. Vastavalt meie hüpoteesile (Joonis 5), see põhjustaks häiresündmuste positiivse väärtuse andmist ja otsimist selliselt, et see sarnaneks hüvedega! Kuigi esmapilgul üllatav, on põhjust kahtlustada, et hoiatavaid sündmusi saab käsitleda positiivsete eesmärkidena. Hoiatussignaalid annavad esimese hoiatuse potentsiaalselt olulise sündmuse toimumise kohta ja annavad seega esimese võimaluse selle sündmuse juhtimiseks. Kui hoiatusteated on kättesaadavad, saab motiveerivalt olulisi sündmusi tuvastada, ennustada ja ette valmistada; kui hoiatusteated puuduvad, esinevad alati motivatsiooniliselt olulised sündmused ootamatu üllatusena. Tõepoolest, inimesed ja loomad väljendavad sageli eelistust keskkondadele, kus premeerivaid, aversiivseid ja isegi motiveerivalt neutraalseid sensoorseid sündmusi saab eelnevalt jälgida ja ennustada (Badia et al., 1979; Herry et al., 2007; Daly, 1992; Närida ja Ho, 1994) ja paljud DA-neuronid näitavad käitumuslikku eelistust, et vaadata tasu-ennustavat teavet (Bromberg-Martin ja Hikosaka, 2009). DA-hoiatussignaalid võivad neid eelistusi toetada, määrates positiivse väärtuse keskkondadele, kus potentsiaalselt olulisi sensoorset vihjeid on võimalik ette näha.

Väärtuse ja koha kodeerivate neuronite anatoomilised asukohad

Hiljutises uuringus kaardistati DA-tasu ja aversiivsete signaalide asukohad külgmise keskjoones, sealhulgas SNC ja VTA kõige ülemine osa (Matsumoto ja Hikosaka, 2009b). Motivatsiooniline väärtus ja motivatsioonikatsetussignaalid jagati selles piirkonnas anatoomilise gradiendiga. Motivatsiooniväärtussignaale leiti sagedamini ventromediaalse SNc ja külg-VTA neuronites, samas kui motoorse tähtsusega signaale leiti sagedamini dorsolateraalse SNc neuronites (Joonis 7B). See on kooskõlas aruannetega, et DA tasu väärtuse kodeerimine on kõige tugevam ventromediaalses SNc-s (Nomoto et al., 2010) samas kui aversiivsed ärritused kalduvad olema tugevamad rohkem külgsuunas (Mirenowicz ja Schultz, 1996). Teised uuringud on uurinud rohkem meditsiinilist keskmist aju. Nendes uuringutes leiti ergastavate ja pärssivate vastumeelsete reaktsioonide segu, millel ei olnud nende asukohtades märkimisväärset erinevust, kuigi suundumus, et aversiivsed erutused paiknevad ventraalsemalt (Guarraci ja Kapp, 1999; Brischoux et al., 2009) (Joonis 7C).

Motiveerivate väärtuste signaalide sihtkohad

Meie hüpoteesi kohaselt peaksid DA-neuronite motivatsiooniväärtused kodeerima aju piirkondadele, mis on seotud lähenemise ja vältimise meetmetega, tulemuste hindamisega ja väärtuse õppimisega (Joonis 5). Tõepoolest, ventromediaalne SNc ja VTA projekt ventromediaalse prefrontaalsesse ajukooresse (Williams ja Goldman-Rakic, 1998), sealhulgas orbitofrontaalse koore (OFC) (Porrino ja Goldman-Rakic, 1982) (Joonis 7A). OFC-d on järjepidevalt seotud funktsionaalsete kujutamise uuringute väärtuse kodeerimisega (Anderson et al., 2003; Small et al., 2003; Jensen et al., 2007; Litt et al., 2010) ja ühe neuroni salvestused (Morrison ja Salzman, 2009; Roesch ja Olson, 2004). Arvatakse, et OFC hindab valikuvõimalusi (Padoa-Schioppa, 2007; Kable ja Glimcher, 2009), kodeerida tulemuse ootusi (Schoenbaum jt, 2009) ja ajakohastama neid ootusi õppimise ajal (Walton et al., 2010). Lisaks osaleb OFC negatiivsete tasu ennustusvigadest (Takahashi et al., 2009), mis on kõige tugevamad väärtust kodeerivates DA-neuronites (Joonis 4).

Lisaks sellele on dopamiinergilise keskmise aju projekti keskmised osad ventralisele striatumile, kaasa arvatud tuumakeha (NAc shell) (Haber jt, 2000) (Joonis 7A). Hiljutine uuring näitas, et NAc kesta saab faasilisi DA-signaale, mis kodeerivad maitsetulemuste motiveerivat väärtust (Roitman et al., 2008). Need signaalid põhjustavad tõenäoliselt väärtust õppimist, kuna DA-ravimite otsene infusioon NAc kesta tugevdab tugevalt (Ikemoto, 2010) kui ravi, mis vähendab DA sisendit kestale, võib põhjustada aversioone (Liu et al., 2008). Üks hoiatus on see, et NAc shell DA vabastamine pika aja jooksul (minutid) on andnud erinevaid tulemusi, millest mõned on kooskõlas väärtuse kodeerimisega ja teistega, kes omavad tähtsuskoode (nt (Bassareo et al., 2002; Ventura et al., 2007)). See viitab sellele, et väärtussignaalid võivad olla piiratud konkreetsete asukohtadega NAc kesta sees. Eelkõige on NAc kesta erinevad piirkonnad spetsialiseerunud isuäratava ja aversiivse käitumise kontrollimisele (Reynolds ja Berridge, 2002), mis mõlemad nõuavad DA neuronite sisendit (Faure et al., 2008).

Lõpuks saadavad DA-neuronid kogu SNc ulatuses rasked projektsioonid seljaga (Haber jt, 2000), mis viitab sellele, et dorsaalne striatum võib saada nii motiveerivat väärtust kui ka \ tJoonis 7A). DA-neuronite motiveeriva väärtuse kodeerimine annaks ideaalse juhendava signaali väärtuste õppimisega seotud striatraalskeemidele, nagu stimuleerimis-vastuse harjumuste õppimine (Faure et al., 2005; Yin ja Knowlton, 2006; Balleine ja O'Doherty, 2010). Kui need DA-neuronid lõhkuvad, osaleksid nad otsesel teel, et õppida tasu tulemuste saamiseks; kui nad peatuvad, osaleksid nad kaudsel teel, et õppida vältima vastumeelseid tulemusi (Joonis 2). Tõepoolest, on hiljutisi tõendeid selle kohta, et striatraalsed teed järgivad täpselt seda tööjaotust tasu ja aversiivse töötlemise jaoks (Hikida et al., 2010). Siiski pole veel teada, kuidas neuronid nendes radades reageerivad käitumise ajal rahuldavatele ja vastumeelsetele sündmustele. Vähemalt dorsaalses striatumis tervikuna reageerivad neuronite alamhulk teatud rahuldust andvatele sündmustele erinevatel viisidel (Ravel et al., 2003; Yamada et al., 2004, 2007; Joshua et al., 2008).

Motiveerivate tunnussignaalide sihtkohad

Vastavalt meie hüpoteesile peaksid motivatsioonikindluse kodeerivad DA-neuronid suunama orienteerumise, kognitiivse töötlemise ja üldise motivatsiooniga seotud ajupiirkondadesse (Joonis 5). Tõepoolest, DA-neuronid dorsolateraalses keskjoones saadavad väljaulatuvad dorsaalsed ja külgmised eesmise koore (Williams ja Goldman-Rakic, 1998) (Joonis 7A) piirkond, mis on seotud kognitiivsete funktsioonidega, nagu tähelepanelik otsing, töömälu, kognitiivne kontroll ja motivatsioonitulemuste otsuste tegemine (Williams ja Castner, 2006; Lee ja Seo, 2007; Tark, 2008; Kable ja Glimcher, 2009; Wallis ja Kennerley, 2010). Dorsolateraalset prefrontaalset kognitiivset funktsiooni reguleeritakse tihedalt DA tasemega (Robbins ja Arnsten, 2009) ja on teoreetiliselt sõltuvad faasi DA neuronite aktivatsioonist (Cohen et al., 2002; Lapish et al., 2007). Eelkõige reageerivad lateraalsete prefrontaalsete neuronite alamhulk nii rahuldust andvatele, kui ka aversiivsetele visuaalsetele märkidele ning suur enamus reageerib samas suunas, mis meenutab motivatsioonikõvera kodeerimist (Kobayashi et al., 2006). Lisaks on nende neuronite aktiivsus korrelatsioonis käitumishäiretega töömälu ülesannete täitmisel (Kobayashi et al., 2006). Kuigi see dorsolateraalne DA → dorsolateraalne eesmise ajukoorme rada näib olevat spetsiifiline \ tWilliams ja Goldman-Rakic, 1998), võib funktsionaalselt sarnane rada esineda ka teistes liikides. Eriti teostab paljud primaadi dorsolateraalse prefrontaalse koore kognitiivsed funktsioonid näriliste mediaalse prefrontaalse koore poolt (Uylings et al., 2003) ja on tõendeid selle kohta, et see piirkond saab DA motivatsioonikohasuse signaale ja kontrollib sellega seotud käitumist (Mantz et al., 1989; Di Chiara, 2002; Joseph jt, 2003; Ventura et al., 2007; Ventura et al., 2008).

Arvestades tõendeid selle kohta, et VTA sisaldab nii kodeerimis- kui ka väärtuskodeerivaid neuroneid ja et väärtuse kodeerimissignaalid saadetakse NAc-kesta, võib säritussignaalid saata NAc-südamikule (Joonis 7A). Tõepoolest, NAc tuum (kuid mitte kest) on oluline selleks, et motiveerida reageerimiskulusid, näiteks füüsilist pingutust, ületama; kognitiivset paindlikkust vajavate seadete muutmise ülesannete täitmiseks; ja võimaldada tasuliste märkide tekitamist üldise motivatsiooni \ tGhods-Sharifi ja Floresco, 2010; Floresco et al., 2006; Hall et al., 2001; Kardinal, 2006). Kooskõlas motivatsioonikohasuse kodeerimisega saab NAc tuum DA-i faasilisi purunemisi mõlema rahuldava kogemuse ajal (Day et al., 2007) ja aversiivsed kogemused (Anstrom et al., 2009).

Lõpuks, nagu eelpool mainitud, võivad mõned kodeerivad DA-neuronid esile tuua dorsaalse striatumi (Joonis 7A). Kuigi mõned seljastriatumi piirkonnad on seotud õpiväljundite väärtustega seotud funktsioonidega, osaleb ka seljastriatum funktsioonides, mis peaksid olema seotud kõigi tähtsamate sündmustega, nagu orienteerumine, tähelepanu, töömälu ja üldine motivatsioon (Hikosaka et al., 2000; Klingberg, 2010; Palmiter, 2008). Tõepoolest, dorsaalsete striataalsete neuronite alamhulk reageerib tugevamalt tasuvale ja aversiivsele sündmusele kui neutraalsetele sündmustele (Ravel et al., 1999; Blazquez et al., 2002; Yamada et al., 2004, 2007), kuigi nende põhjuslik roll motiveeritud käitumises ei ole veel teada.

Motiveerivate väärtuste signaalide allikad

Hiljutised uuringud näitavad, et DA-neuronid saavad motivatsiooniväärtuse signaale väikestest tuumadest epiteelamuses, lateraalses habenula (LHb) (Hikosaka, 2010) (Joonis 8). LHb avaldab DA neuronite suhtes tugevat negatiivset kontrolli: LHb stimulatsioon inhibeerib DA neuroneid lühikese latentsusega (Christoph et al., 1986) ja saab reguleerida õppimist vastupidiselt VTA stimuleerimisele (Shumake et al., 2010). Negatiivse kontrollsignaaliga on paljudel LHb neuronitel peegeldunud invasiivne faasiline vastus DA neuronitele: LHb neuronid on inhibeeritud positiivsete premeerimisvigade ja erutatud negatiivsete tasu ennustamisvigadega (Matsumoto ja Hikosaka, 2007, 2009; Bromberg-Martin jt, 2010a; Bromberg-Martin jt, 2010c). Mitmel juhul esinevad need signaalid LHb-s lühema latentsusega, mis on kooskõlas LHb → DA ülekandega (Matsumoto ja Hikosaka, 2007; Bromberg-Martin jt, 2010a).

 

Joonis 8

Hüpoteesitud motivatsiooniväärtuse, omapära ja hoiatussignaalide allikad

LHb on võimeline kontrollima DA-neuroneid kogu keskmise aju jooksul, kuid mitmed tõendid näitavad, et see avaldab soodsat kontrolli motiveeriva väärtuse kodeeriva DA-neuronite üle. Esiteks, LHb neuronid kodeerivad motivatsiooniväärtust viisil, mis peegeldab väärtust kodeerivaid DA-neuroneid - nad kodeerivad nii positiivseid kui ka negatiivseid premeerimisvigu ja reageerivad vastassuunas rahuldust andvatele ja aversiivsetele sündmustele (Matsumoto ja Hikosaka, 2009a; Bromberg-Martin jt, 2010a). Teiseks, LHb stimulatsioonil on kõige tugevam toime DA neuronitele, mille omadused on kooskõlas väärtuse kodeerimisega, kaasa arvatud inhibeerimine mitte-premeerivate märkidega ja anatoomiline asukoht ventromediaalses SNc-s (Matsumoto ja Hikosaka, 2007, 2009b). Kolmandaks, LHb kahjustused kahjustavad DA neuronite inhibeerivaid vastuseid aversiivsetele sündmustele, mis viitab LHb põhjuslikule rollile DA väärtussignaalide genereerimisel (Gao et al., 1990).

LHb on osa ulatuslikumast neuroloogilisest rajast, mille kaudu saab DA neuroneid kontrollida basaalganglioni (Joonis 8). LHb võtab vastu signaale, mis sarnanevad tasu ennustusvigadele, läbi globus pallidus piiri (GPb) ümbritseva neuronite populatsiooni projektsiooni.Hong ja Hikosaka, 2008). Kui need signaalid jõuavad LHb-sse, saadetakse need tõenäoliselt DA-neuronitesse läbi dünaamilise tee, kus LHb ergutab keskmist aju GABA neuroneid, mis omakorda inhibeerivad DA-neuroneid (Ji ja Shepard, 2007; Omelchenko et al., 2009; Brinschwitz et al., 2010). See võib tekkida LHb projektsioonide kaudu interneuronitele VTA-s ja sellega külgnevas GABA-ergilises tuumas, mida nimetatakse rostromediaalse tegmentaalse tuumaks (RMTg) (Jhou et al., 2009b) (mida nimetatakse ka „VTA saba-Kaufling et al., 2009)). Nimelt on RMTg neuronitel LHb neuronite sarnased vastusomadused, kodeerivad motivatsiooniväärtust ja neil on raske inhibeeriv projektsioon dopamiinergilisele keskjoonele (Jhou et al., 2009a). Seega võib kogu basaal ganglioni rada motivatsiooniväärtuste signaalide saatmiseks DA neuronitele olla GPb → LHb → RMTg → DA (Hikosaka, 2010).

Tulevaste uuringute jaoks on oluline küsimus, kas motiveeriva väärtuse signaalid suunatakse ainult LHb kaudu või kas neid kannavad mitmed sisendradad. Eriti kontrollitakse DA-inhibeerimist aversiivsete footshocks'e poolt aktiivsusega mesopontiini parabrakiaalses tuumas (PBN) (Coizet et al., 2010) (Joonis 8). See tuum sisaldab neuroneid, mis saavad otsest sisendit mürgiseid tundeid kodeerivast seljaajust ja võivad inhibeerida DA neuroneid RMTg-i erutavate väljaulatuvate osade kaudu (Coizet et al., 2010; Gauriau ja Bernard, 2002). See viitab sellele, et LHb saadab DA neuronite motiveeriva väärtuse signaale nii rahuldust andvate kui ka aversiivsete märkide ja tulemuste jaoks, samas kui PBN annab komponendi väärtussignaalist, mis on spetsiifiliselt seotud aversiivsete tulemustega.

Motivatsioonilise tähtsusega signaalide allikad

DA neuronites on motivatsioonikatsetuste signaalide allikast vähem teada. Üks intrigeeriv kandidaat on amügdala keskne tuum (CeA), mis on järjekindlalt seotud orienteerumisega, tähelepanu ja üldiste motiveerivate vastustega nii rahuldust pakkuvate kui ka aversiivsete sündmuste ajal (Holland ja Gallagher, 1999; Baxter ja Murray, 2002; Merali jt, 2003; Balleine ja Killcross, 2006) (Joonis 8). CeA ja teised amügdala tuumad sisaldavad paljusid neuroneid, mille signaalid on kooskõlas motivatsioonikatsega: nad annavad tunnistust tasulistest ja aversiivsetest sündmustest samas suunas, paranevad, kui sündmused toimuvad ootamatult ja on korrelatsioonis ärrituse käitumismeetmetega (Nishijo et al., 1988; Belova et al., 2007; Shabel ja Janak, 2009). Neid signaale võib saata DA-neuronitele, kuna CeA-l on ajurihmale kahanevaid prognoose, mis annavad rahuldust ja vastutustundlikku teavet (Lee jt, 2005; Pascoe ja Kapp, 1985) ja CeA on vajalik DA-i vabastamiseks tasuliste sündmuste ajal (Phillips et al., 2003a). Lisaks osaleb CeA DA-neuronitega teedel, mis on kooskõlas meie soovitatud anatoomiliste ja funktsionaalsete võrgustikega motivatsioonilisuse saavutamiseks. Toidumärkidele orienteeritud orienteerumise jaoks on vajalik CeA, SNc ja dorsaalset striatumit sisaldav rada (Han et al., 1997; Lee jt, 2005; El-Amamy ja Holland, 2007). Kooskõlas meie jagunemise ja väärtussignaalide jagunemisega on see rada vajalik selleks, et õppida orienteeruma toiduvalikutele, kuid mitte õppida toiduainete tulemustele lähenema (Han et al., 1997). Teine võimalus, kaasa arvatud CeA, SNc, VTA ja NAc tuum, on vajalik tasuliste märkide jaoks, mis põhjustavad üldist motivatsiooni tasu otsivate tegevuste läbiviimiseks (Hall et al., 2001; Corbit ja Balleine, 2005; El-Amamy ja Holland, 2007).

Lisaks CeA-le võivad DA-neuronid saada motivatsioonikohasuse signaale teistest allikatest, nagu basaalses eeljoones olevad kodeerivad neuronid (Lin ja Nicolelis, 2008; Richardson ja DeLong, 1991) ja neuronid PBN-is (Coizet et al., 2010), kuigi neid teid tuleb veel uurida.

Hoiatussignaalide allikad

DA neuronite varustamiseks häiresignaalidega on mitmeid häid kandidaate. Võib-olla kõige atraktiivsem kandidaat on kõrgem colliculus (SC), keset aju tuuma, mis saab lühiajalise sensoorse sisendi mitmest sensoorsest modaalsusest ja kontrollib orienteerumisreaktsioone ja tähelepanu (Redgrave ja Gurney, 2006) (Joonis 8). Järelevalvekomiteel on otsene prognoos SNc-le ja VTA-le (May et al., 2009; Comoli et al., 2003). Anesteseeritud loomadel on SC hädavajalik lühiajaliste visuaalsete signaalide kanal, mis jõuab DA neuronite juurde ja vallandab DA vabanemist allavoolu struktuurides (Comoli et al., 2003; Dommett et al., 2005). SC-DA rada sobib kõige paremini hoiatussignaalide edastamiseks kui tasu ja vastumeelsuse signaalid, kuna SC neuronitel on väike vastus tasu andmisele ja neil on vaid kerge mõju DA aversiivsetele vastustele (Coizet et al., 2006). See viitab sündmuste järjestusele, milles SC neuronid (1) tuvastavad stiimuli, (2) valivad selle potentsiaalselt oluliseks, (3) käivitab orienteeruva reaktsiooni stimulatsiooni uurimiseks ja (4) käivitavad samaaegselt DA-i hoiatusreaktsiooni, mis põhjustab DA lõhkemine järgnevatel struktuuridel (Redgrave ja Gurney, 2006).

Teine kandidaat hoiatussignaalide saatmiseks DA neuronitele on LHb (Joonis 8). Eelkõige inhibeerib uuringu alguskihi ootamatu algus paljude LHb neuronite pöörduval moel DA-neuroni häiresignaaliga ja see reaktsioon esineb LHb-s lühema latentsusega, mis on kooskõlas LHb → DA edastamise suunaga (Bromberg-Martin jt, 2010a; Bromberg-Martin jt, 2010c). Samuti oleme täheldanud, et LHb neuronid on tavaliselt ootamatute visuaalsete kujutiste ja helide poolt pärssitud vastupidiselt DA erutustele (MM, ESB-M ja OH, avaldamata vaatlused), kuigi see ootab süstemaatilisemat uurimist.

Lõpuks, kolmas kandidaat, kes saadab DA-neuronitele hoiatussignaale, on pedunculopontine tegmental nucleus (PPTg), mis projekteerib nii SNc-le kui ka VTA-le ning on seotud motiveeriva töötlemisega (Winn, 2006) (Joonis 8). PPTg on oluline VTA DA neuronite purunemise võimaldamiseks (Grace et al., 2007), sealhulgas löögivastused vastusnäitajatele (Pan ja Hyland, 2005). Vastavalt hoiatussignaalile on PPTg neuronitel lühiajalised vastused mitmetele sensoorsetele režiimidele ja on aktiivsed orienteerumisreaktsioonide ajal (Winn, 2006). On tõendeid, et PPTg-sensoorseid vastuseid mõjutab tasu väärtus ja kohese tegutsemise nõuded (Dormont et al., 1998; Okada et al., 2009) (kuid vaata (Pan ja Hyland, 2005)). Mõned PPTg neuronid reageerivad ka rahuldavatele või vastumeelsetele tulemustele (Dormont et al., 1998; Kobayashi et al., 2002; Ivlieva ja Timofeeva, 2003b, a). Oluline on testida, kas signaalid, mida PPTg saadab DA-neuronitele, on konkreetselt seotud hoiatusega või kas need sisaldavad muid motiveerivaid signaale, nagu väärtus ja tähtsus.

Seda tööd toetas riiklik silmainstituudi intramuraalne uurimisprogramm. Täname ka Amy Arnstenit väärtuslike arutelude eest.

Kirjastaja vastutusest loobumine: See on PDF-fail, mis on avaldamata avaldatud käsikirjast. Teenusena meie klientidele pakume seda käsikirja varajast versiooni. Käsikiri läbib kopeerimise, trükkimise ja selle tulemuste läbivaatamise enne selle lõplikku avaldamist. Pange tähele, et tootmisprotsessi käigus võidakse avastada vigu, mis võivad mõjutada sisu ja kõik ajakirja suhtes kehtivad õiguslikud lahtiütlused.

^FOOTNOTE1By motivatsioonikohustust me mõtleme koguse eest, mis on nii rahuldust pakkuvate kui ka aversiivsete sündmuste puhul kõrge ja motivatsiooniga neutraalsete (mittekasutavate ja mitte aversiivsete) sündmuste puhul madal. See on sarnane (Berridge ja Robinson, 1998). Pange tähele, et motivatsioonikõla erineb teistest neuroteaduses kasutatavatest mõistetest, nagu ergutusvõime (mis kehtib ainult soovitud sündmustele;Berridge ja Robinson, 1998)) ja tajumisvõime (mis kehtib motiveerivalt neutraalsetele sündmustele, nagu liikuvad objektid ja värvilised tuled;Bisley ja Goldberg, 2010)).

^FOOTNOTE2Pange tähele, et motivatsioonikindluskodeerivad DA-neuronite signaalid erinevad klassikalistest mõistetest "kaasatavus" ja "assotsieeruvuse muutus", mis on välja pakutud tugevdamise õppimise kiiruse reguleerimiseks (nt (Pearce ja Hall, 1980)). Sellised teooriad näitavad, et loomad õpivad (ja kohandavad õppe määrasid) nii positiivsetest kui negatiivsetest prognoosivigadest. Kuigi need DA-neuronid võivad kaasa aidata positiivsetest prognoosivigadest õppimisele, mille jooksul neil võib olla tugev vastus (nt ootamatu tasu saamine), ei pruugi nad kaasa aidata negatiivsete ennustusvigade õppimisele, mille jooksul neil on vähe vastuseid või mitte. näiteks ootamatute tasude tegematajätmiseks) (Joonis 4B).

1. Ahlbrecht M, Weber M. Ebakindluse lahendamine: eksperimentaalne uuring. Institutsioonilise ja teoreetilise majanduse ajakiri. 1996: 152: 593 – 607.
2. Albin RL, Young AB, Penney JB. Basaalsete ganglionihäirete funktsionaalne anatoomia. Suundumused neuroteadustes. 1989: 12: 366 – 375. [PubMed]
3. Anderson AK, Christoff K, Stappen I, Panitz D, Ghahremani peadirektoraat, Glover G, Gabrieli JD, Sobel N. Intensiivse intensiivsuse ja valentsuse närvilised neuroloogilised kujutised inimese olfaktsioonis. Nat Neurosci. 2003: 6: 196 – 202. [PubMed]
4. Anstrom KK, Miczek KA, Budygin EA. Suurenenud faasiline dopamiini signaaliülekanne mesolimbilisel teel rottide sotsiaalse lüüasaamise ajal. Neuroteadus. 2009: 161: 3 – 12. [PubMed]
5. Aragona BJ, päev JJ, Roitman MF, Cleaveland NA, Wightman RM, Carelli RM. Piirkondlik spetsiifilisus faasiliste dopamiini ülekandemustrite reaalajas arengus rottidel katse-kokaiini assotsiatsiooni omandamisel. Euroopa neuroteaduse ajakiri. 2009: 30: 1889 – 1899. [PMC tasuta artikkel] [PubMed]
6. Austin AJ, Duka T. Mehhanismid tähelepanu pööramiseks suupärastele ja vastumeelsetele tulemustele Pavloviani konditsioneerimisel. Käitumuslikud ajuuuringud. 2010: 213: 19 – 26. [PubMed]
7. Badia P, Harsh J, Abbott B. Ennustatavate ja ettenägematute šokkitingimuste valimine: andmed ja teooria. Psühholoogiline bülletään. 1979: 86: 1107 – 1131.
8. Balleine BW, Killcross S. Paralleelne ergutusprotsess: integreeritud vaade amygdala funktsioonile. Suundumused neuroteadustes. 2006: 29: 272 – 279. [PubMed]
9. Balleine BW, O'Doherty JP. Inimeste ja näriliste homoloogiad tegevuse kontrollimisel: eesmärgipärase ja harjumuspärase tegevuse kortikostertaalsed determinantid. Neuropsühhofarmakoloogia. 2010; 35: 48–69. [PMC tasuta artikkel] [PubMed]
10. Barr GA, Moriceau S, Shionoya K, Muzny K, Gao P, Wang S, Sullivan RM. Imikuõppe üleminekuid moduleerib dopamiin amygdalas. Nat Neurosci. 2009: 12: 1364 – 1366. [PMC tasuta artikkel] [PubMed]
11. Bassareo V, De Luca MA, Di Chiara G. Dopamiini motiveeriva stiimuli omaduste diferentseerimine Nucleus Accumbens Shell'is ja Core ja Prefrontal Cortexis. J Neurosci. 2002: 22: 4709 – 4719. [PubMed]
12. Bassareo V, Di Chiara G. Dopamiini ülekande diferentsiaalne tundlikkus toite-stiimulitele tuuma- ja tuumakambrites. Neuroteadus. 1999: 89: 637 – 641. [PubMed]
13. Baxter MG, Murray EA. Amygdala ja tasu. Nat Rev Neurosci. 2002: 3: 563 – 573. [PubMed]
14. Bayer HM, Glimcher PW. Midbrain dopamiini neuronid kodeerivad kvantitatiivset tasu ennustamisvea signaali. Neuron. 2005: 47: 129 – 141. [PMC tasuta artikkel] [PubMed]
15. Belova MA, Paton JJ, Morrison SE, Salzmani CD. Ootused moduleerivad närvivastust meeldivatele ja aversiivsetele stiimulitele primaadi amygdala puhul. Neuron. 2007: 55: 970 – 984. [PMC tasuta artikkel] [PubMed]
16. Bentivoglio M, Morelli M. Mesenkefaalsete dopamiinergiliste neuronite organiseerimine ja ahelad ning dopamiini retseptorite jaotumine ajus. Keemilise neuroanatoomia käsiraamat. 2005: 1 – 107.
17. Berridge KC, Robinson TE. Milline on dopamiini roll tasu eest: hedooniline mõju, tasu õppimine või stiimulid? Ajuuuringud. 1998: 28: 309 – 369. [PubMed]
18. Besson C, Louilot A. Mesolimbiliste dopamiinergiliste neuronite asümmeetriline osalemine afektiivses tajumises. Neuroteadus. 1995: 68: 963 – 968. [PubMed]
19. Birgner C, Nordenankar K, Lundblad M, Mendez JA, Smith C, Le Greves M, Galter D, Olson L, Fredriksson A, Trudeau LE, et al. VGLUT2 on dopamiini neuronites vajalik psühhostimulandi poolt indutseeritud käitumuslikuks aktiveerimiseks. Ameerika Ühendriikide Riikliku Teaduste Akadeemia toimingud. 2010: 107: 389 – 394. [PMC tasuta artikkel] [PubMed]
20. Bisley JW, Goldberg ME. Tähelepanu, kavatsust ja prioriteeti parietaalses lõunas. Iga-aastane ülevaade neuroteadusest. 2010: 33: 1 – 21. [PMC tasuta artikkel] [PubMed]
21. Bjorklund A, Dunnett SB. Dopamiini neuronite süsteemid ajus: uuendus. Suundumused neuroteadustes. 2007: 30: 194 – 202. [PubMed]
22. Blazquez PM, Fujii N, Kojima J, Graybiel AM. Võrguesitus reageerimisvõimaluse kohta striatumis. Neuron. 2002: 33: 973 – 982. [PubMed]
23. Botvinick MM, Braver TS, Barch DM, Carter CS, Cohen JD. Konfliktide jälgimine ja kognitiivne kontroll. Psychol Rev. 2001; 108: 624 – 652. [PubMed]
24. Bradley MM, Greenwald MK, Petry MC, Lang PJ. Piltide mälestamine: rõõm ja erutus mälus. J Exp Psychol Learn Mem Cogn. 1992: 18: 379 – 390. [PubMed]
25. Braun DA, Mehring C, Wolpert DM. Struktuuri õppimine tegevuses. Käitumuslikud ajuuuringud. 2010: 206: 157 – 165. [PMC tasuta artikkel] [PubMed]
26. Brinschwitz K, Dittgen A, Madai VI, Lommel R, Geisler S, Veh RW. Glutamatergilised aksonid lateraalsest habenulast lõpevad peamiselt GABAergiliste neuronite kaudu, mis on kõhupiirkonna keskjoones. Neuroteadus. 2010: 168: 463 – 476. [PubMed]
27. Brischoux F, Chakraborty S, Brierley DI, Ungless MA. Dopamiini neuronite ergastamine vatsakaudses VTA-s mürgiste stiimulite poolt. Ameerika Ühendriikide Riikliku Teaduste Akadeemia toimingud. 2009: 106: 4894 – 4899. [PMC tasuta artikkel] [PubMed]
28. Bromberg-Martin ES, Hikosaka O. Midbrain dopamiini neuronid eelistavad eelseisvat teavet eelseisvate hüvede kohta. Neuron. 2009: 63: 119 – 126. [PMC tasuta artikkel] [PubMed]
29. Bromberg-Martin ES, Matsumoto M, Hikosaka O. Eriline tooniline ja faasiline ennetav aktiivsus lateraalses habenula ja dopamiini neuronites. Neuron. 2010a: 67: 144 – 155. [PMC tasuta artikkel] [PubMed]
30. Bromberg-Martin ES, Matsumoto M, Hong S, Hikosaka O. Pallidus-habenula-dopamiini rada tähistab stimuleerivaid väärtusi. J Neurophysiol. 2010b: 104: 1068 – 1076. [PMC tasuta artikkel] [PubMed]
31. Bromberg-Martin ES, Matsumoto M, Nakahara H, Hikosaka O. Mitmekordne mälu aeg külgsuunas ja dopamiini neuronites. Neuron. 2010c: 67: 499 – 510. [PMC tasuta artikkel] [PubMed]
32. Pruun MTC, Henny P, Bolam JP, Magill PJ. Neurokeemiliselt heterogeensete dopamiinergiliste neuronite aktiivsus aju nigras spontaansete ja ajendatud aju seisundi muutuste ajal. J Neurosci. 2009: 29: 2915 – 2925. [PubMed]
33. Kardinal RN. Närvisüsteemid, mis on seotud viivitusega ja tõenäosuse tugevdamisega. Neuraalne võrk. 2006: 19: 1277 – 1301. [PubMed]
34. Härra JF, Aragona BJ, Heien ML, Seipel AT, Carelli RM, Wightman RM. Kooskõlastatud dopamiini vabanemise ja närviaktiivsuse juhtimise eesmärk. Neuron. 2007: 54: 237 – 244. [PubMed]
35. Cheramy A, Kemel ML, Gauchy C, Desce JM, Galli T, Barbeito L, Glowinski J. Ergastavate aminohapete roll dipamiini vabanemise otseses ja kaudses regulatsioonis nigrostriaalse dopamiini neuronite närvipunktidest. Aminohapped. 1991: 1: 351 – 363. [PubMed]
36. Chew SH, Ho JL. Lootus: empiiriline uurimus suhtumise kohta määramatuse resolutsiooni ajastusse. Ajakiri riskide ja ebakindluse kohta. 1994: 8: 267 – 288.
37. Chiodo LA, Antelman SM, Caggiula AR, Lineberry CG. Sensoorsed stiimulid muudavad dopamiini (DA) neuronite tühjenemise kiirust: tõendid kahe DA rakkude funktsionaalsete tüüpide kohta. Brain Res. 1980: 189: 544 – 549. [PubMed]
38. Christoph GR, Leonzio RJ, Wilcox KS. Külgse habenula stimuleerimine inhibeerib dopamiini sisaldavaid neuroneid rottide nigra ja ventraalse tegmentaalses piirkonnas. J Neurosci. 1986: 6: 613 – 619. [PubMed]
39. Chuhma N, Choi WY, Mingote S, Rayport S. Dopamiini neuronite glutamaadi kotransmissioon: sagedusest sõltuv modulatsioon mesoventromeediaalses projektsioonis. Neuroteadus. 2009: 164: 1068 – 1083. [PMC tasuta artikkel] [PubMed]
40. Cohen JD, Braver TS, Brown JW. Dopamiini funktsiooni arvutuslik perspektiiv prefrontaalses ajukoores. Praegune arvamus neurobioloogias. 2002: 12: 223 – 229. [PubMed]
41. Coizet V, Dommett EJ, Klop EM, Redgrave P, Overton PG. Parabrahiaalne tuum on kriitiline seos lühikese latentsusega notsitseptiivse informatsiooni edastamisel keskjoonte dopamiinergilistele neuronitele. Neuroteadus. 2010: 168: 263 – 272. [PMC tasuta artikkel] [PubMed]
42. Coizet V, Dommett EJ, Redgrave P, Overton PG. Keskmise aju dopamiinergiliste neuronite notsitseptiivseid reaktsioone moduleerib rottidel kõrgem kolliculus. Neuroteadus. 2006: 139: 1479 – 1493. [PubMed]
43. Comoli E, Coizet V, Boyes J, Bolam JP, Canteras NS, Quirk RH, Overton PG, Redgrave P. Otsene projektsioon kõrgema kollektsiooni ja sisulise nigra suhtes, et avastada silmapaistvaid visuaalseid sündmusi. Nat Neurosci. 2003: 6: 974 – 980. [PubMed]
44. Corbit LH, Balleine BW. Basolateraalse ja keskse amygdala kahjustuse kahekordne dissotsiatsioon pavlovia-instrumentaalse ülekande üldistel ja tulemuspõhistel vormidel. J Neurosci. 2005: 25: 962 – 970. [PubMed]
45. Dalley JW, Laane K, Theobald DE, Armstrong HC, Corlett PR, Chudasama Y, Robbins TW. D1i ja NMDA retseptorite tuuma accumbens'i ajalise piiritletud modulaatide muutmine. Ameerika Ühendriikide Riikliku Teaduste Akadeemia toimingud. 2005: 102: 6189 – 6194. [PMC tasuta artikkel] [PubMed]
46. Daly HB. Ennustamatuse eelistamine on vastupidine, kui ettearvamatu mitteavalik on aversiivne: protseduurid, andmed ja iseseisva jälgimise vastuste omandamise teooriad. In: Gormezano I, Wasserman EA, toimetajad. Õppimine ja mälu: käitumuslikud ja bioloogilised alused. LE Associates; 1992. lk. 81 – 104.
47. Davidson MC, Horvitz JC, Tottenham N, Fossella JA, Watts R, Ulug AM, Casey BJ. Diferentsiaalne caudate ja cingulate aktiveerimine ootamatute mittekontrollivate stiimulite järel. NeuroImage. 2004: 23: 1039 – 1045. [PubMed]
48. Päev JJ, Roitman MF, Wightman RM, Carelli RM. Assotsiatiivne õpe vahendab dopamiini signaaliülekande dünaamilisi nihkeid tuuma accumbensis. Nat Neurosci. 2007: 10: 1020 – 1028. [PubMed]
49. Dayan P, Niv Y. Tugevdamine: hea, halb ja kole. Praegune arvamus neurobioloogias. 2008: 18: 185 – 196. [PubMed]
50. Descarries L, Berube-Carriere N, Riad M, Bo GD, Mendez JA, Trudeau LE. Glutamaat dopamiini neuronites: sünaptiline versus difuusne ülekanne. Ajuuuringute ülevaated. 2008: 58: 290 – 302. [PubMed]
51. Di Chiara G. Nucleus accumbens shell ja dopamiini tuum: diferentseeritud roll käitumises ja sõltuvuses. Käitumuslikud ajuuuringud. 2002: 137: 75 – 114. [PubMed]
52. Dommett E, Coizet V, Blaha CD, Martindale J, Lefebvre V, Walton N, Mayhew JE, Overton PG, Redgrave P. Kuidas visuaalsed stiimulid aktiveerivad dopamiinergilisi neuroneid lühikese latentsusega. Teadus. 2005: 307: 1476 – 1479. [PubMed]
53. Dormont JF, Conde H, Farin D. Pedunculopontine tegmental tuuma roll seoses konditsioneeritud mootori jõudlusega kassis. I. Kontekstest sõltuv ja tugevdamisega seotud üksikaktiivsus. Eksperimentaalne ajuuuring. Experimentelle Hirnforschung. 1998: 121: 401 – 410. [PubMed]
54. Duzel E, Bunzeck N, Guitart-Masip M, Duzel S. Dopamiini (NOMAD) prognoosimise ja uurimise motiiviga seotud motivatsioon: mõju tervisele vananemisele. Neuroteadus ja bioloogiline käitumine. 2010: 34: 660 – 669. [PubMed]
55. El-Amamy H, Hollandi PC. Amygdala keskse tuuma eraldamine ventralisest tegmentaalsest piirkonnast või sisemisest nigrast õpitud orientatsiooni ja motiveeriva motivatsiooni vahel. Euroopa neuroteaduse ajakiri. 2007: 25: 1557 – 1567. [PMC tasuta artikkel] [PubMed]
56. Ettenberg A. Enda manustatud kokaiini vastulause protsessi omadused. Neuroteadus ja bioloogiline käitumine. 2004: 27: 721 – 728. [PubMed]
57. Fadok JP, Dickerson TM, Palmiter RD. Dopamiin on vajalik kihisõltuva hirmu parandamiseks. J Neurosci. 2009: 29: 11089 – 11097. [PMC tasuta artikkel] [PubMed]
58. Fairhall AL, Lewen GD, Bialek W, de Ruyter Van Steveninck RR. Efektiivsus ja ebaselgus adaptiivse närvikoodi puhul. Loodus. 2001: 412: 787 – 792. [PubMed]
59. Faure A, Haberland U, Conde F, El Massioui N. Lesion nigrostriaalses dopamiinisüsteemis häirivad stiimul-vastuse harjumuse teket. J Neurosci. 2005: 25: 2771 – 2780. [PubMed]
60. Faure A, Reynolds SM, Richard JM, Berridge KC. Mesolimbiline dopamiin soovis ja hirmus: mis võimaldab motivatsiooni tekkida lokaalsete glutamaadihäirete tõttu tuuma accumbensis. J Neurosci. 2008: 28: 7184 – 7192. [PMC tasuta artikkel] [PubMed]
61. Fiorillo CD, Newsome WT, Schultz W. Dopamiini neuronite tasustamise ennustuse ajaline täpsus. Nat Neurosci. 2008: 11: 966 – 973. [PubMed]
62. Fiorillo CD, Tobler PN, Schultz W. Dopamiini neuronite tasu tõenäosuse ja ebakindluse diskreetne kodeerimine. Teadus. 2003: 299: 1898 – 1902. [PubMed]
63. Floresco SB, Ghods-Sharifi S, Vexelman C, Magyar O. Tuumade akumuleerumise südamiku ja koorega eraldatavad rollid seadistuste muutmisel. J Neurosci. 2006: 26: 2449 – 2457. [PubMed]
64. Ford CP, Gantz SC, Phillips PE, Williams JT. Ekstratsellulaarse dopamiini kontroll dendriidi ja aksoni terminalides. J Neurosci. 2010: 30: 6975 – 6983. [PMC tasuta artikkel] [PubMed]
65. Frank MJ. Dünaamiline dopamiini modulatsioon basaalsetes ganglionides: neurokompositsiooniline arusaam ravimi ja mitte-ravitud parkinsonismi kognitiivsetest puudustest. Kognitiivse neuroteaduse ajakiri. 2005: 17: 51 – 72. [PubMed]
66. Frank MJ, Fossella JA. Õppimise, motivatsiooni ja tunnetuse neurogeneetika ja farmakoloogia. Neuropsühharmakoloogia. 2010 [PMC tasuta artikkel] [PubMed]
67. Frank MJ, Seeberger LC, O'Reilly RC. Porgand või kepp: parkinsonismi kognitiivne tugevdamine. Teadus. 2004: 306: 1940 – 1943. [PubMed]
68. Gallistel CR, Gibbon J. Aeg, kiirus ja konditsioneerimine. Psychol Rev. 2000; 107: 289 – 344. [PubMed]
69. Gao DM, Jeaugey L, Pollak P, Benabid AL. Intensiivsusest sõltuvad notsitseptiivsed vastused eeldatud dopamiinergilistest neuronitest, mis pärinevad materia nigra'st, pars compacta rottidel ja nende modifitseerimine lateraalsete habenula sisendite abil. Brain Res. 1990: 529: 315 – 319. [PubMed]
70. Gauriau C, Bernard JF. Valu rajad ja parabahhilised ahelad rottidel. Eksperimentaalne füsioloogia. 2002: 87: 251 – 258. [PubMed]
71. Geisler S, Zahm DS. Rott-anatoomilise substraadi ventraalse tegmentaala afferendid integreerivate funktsioonide jaoks. Võrdleva neuroloogia ajakiri. 2005: 490: 270 – 294. [PubMed]
72. Gerfen CR, Engber TM, Mahan LC, Susel Z, Chase TN, Monsma FJ, Jr, Sibley DR. D1 ja D2 dopamiiniretseptori poolt reguleeritud striatonigraalse ja striatopallidaalse neuroni geeniekspressioon. Teadus. 1990: 250: 1429 – 1432. [PubMed]
73. Ghods-Sharifi S, Floresco SB. Tuuma accumbens-südamiku või koore inaktiveerimisest põhjustatud vaevuste vähendamise erinev mõju. Käitumuslik neuroteadus. 2010: 124: 179 – 191. [PubMed]
74. Gonon FG. Mittelineaarne suhe impulsi voolu ja dopamiini vahel, mida vabaneb rottide keskjõu dopamiinergilistest neuronitest, nagu on uuritud in vivo elektrokeemia abil. Neuroteadus. 1988: 24: 19 – 28. [PubMed]
75. Goto Y, Yang CR, Otani S. Funktsionaalne ja düsfunktsionaalne sünaptiline plastsus prefrontaalses ajukoores: rollid psühhiaatrilistes häiretes. Bioloogiline psühhiaatria. 2010: 67: 199 – 207. [PubMed]
76. Grace AA. Phasic versus tonic dopamiini vabanemine ja dopamiini süsteemi reageerimise moduleerimine: hüpotees skisofreenia etioloogia kohta. Neuroteadus. 1991: 41: 1 – 24. [PubMed]
77. Armu AA, Bunney BS. Nigraalsete dopaminergiliste neuronite rakusisene ja rakuväline elektrofüsioloogia – 1. Identifitseerimine ja iseloomustamine. Neuroteadus. 1983; 10: 301–315. [PubMed]
78. Grace AA, Floresco SB, Goto Y, Lodge DJ. Dopamiinergiliste neuronite põletamise reguleerimine ja eesmärgipärase käitumise kontroll. Suundumused neuroteadustes. 2007: 30: 220 – 227. [PubMed]
79. Grecksch G, Matties H. Dopamiinergiliste mehhanismide roll roti hipokampuses, et kindlustada heleduse diskrimineerimine. Psühhofarmakoloogia (Berl) 1981; 75: 165 – 168. [PubMed]
80. Guarraci FA, Kapp BS. Ventral tegmentaala dopamiinergiliste neuronite elektrofüsioloogiline iseloomustus diferentseeritud pavlovia hirmu puhul, mis ilmutab ärkvel küülikus. Käitumuslikud ajuuuringud. 1999: 99: 169 – 179. [PubMed]
81. Haber SN, Fudge JL, McFarland NR. Striatonigrostriatraalsed teed primaatides moodustavad kesta ja dorsolateraalse striatumi tõusu. J Neurosci. 2000: 20: 2369 – 2382. [PubMed]
82. Hall J, Parkinson JA, Connor TM, Dickinson A, Everitt BJ. Amygdala ja tuuma accumbens'i tuuma keskse tuuma kaasamine Pavlovia mõjutamisse instrumentaalsele käitumisele. Euroopa neuroteaduse ajakiri. 2001: 13: 1984 – 1992. [PubMed]
83. Han JS, McMahan RW, Holland P, Gallagher M. Amygdalo-nigrostriaalse tee roll assotsiatiivses õppes. J Neurosci. 1997: 17: 3913 – 3919. [PubMed]
84. Harris GC, Aston-Jones G. Arousal ja tasu: dikotoomia orexini funktsioonis. Suundumused neuroteadustes. 2006: 29: 571 – 577. [PubMed]
85. Herry C, Bach DR, Esposito F, Di Salle F, Perrig WJ, Scheffler K, Luthi A, Seifritz E. Inimeste ja loomade amygdala ajaline ettearvamatuse töötlemine. J Neurosci. 2007: 27: 5958 – 5966. [PubMed]
86. Hikida T, Kimura K, Wada N, Funabiki K, Nakanishi S. Erinevad sünaptilise ülekande rollid otseses ja kaudses striaalses tees tasu ja aversiivseks käitumiseks. Neuron. 2010: 66: 896 – 907. [PubMed]
87. Hikosaka O. Tasulise silma liikumise basaal gangliumi mehhanismid. New Yorgi Teaduste Akadeemia Annals. 2007: 1104: 229 – 249. [PubMed]
88. Hikosaka O. habenula: alates stressi vältimisest kuni väärtuspõhise otsuste tegemiseni. Nat Rev Neurosci. 2010: 11: 503 – 513. [PMC tasuta artikkel] [PubMed]
89. Hikosaka O, Takikawa Y, Kawagoe R. Basaal-ganglionide roll eesmärgipäraste püha silmade liikumise kontrollis. Füsioloogilised ülevaated. 2000: 80: 953 – 978. [PubMed]
90. Hitchcott PK, Quinn JJ, Taylor JR. Eesmärgile suunatud tegevuste kahesuunaline moduleerimine prefrontaalse kortikaalse dopamiini poolt. Cereb Cortex. 2007: 17: 2820 – 2827. [PubMed]
91. Hnasko TS, Chuhma N, Zhang H, Goh GY, Sulzer D, Palmiter RD, Rayport S, Edwards RH. Vesikulaarne glutamaadi transport soodustab dopamiini säilitamist ja glutamaadi corelease in vivo. Neuron. 2010: 65: 643 – 656. [PMC tasuta artikkel] [PubMed]
92. Holland PC, Gallagher M. Amygdala ahelad tähelepanu- ja esindusprotsessides. Kognitiivsete teaduste suundumused. 1999: 3: 65 – 73. [PubMed]
93. Hollerman JR, Schultz W. Dopamiini neuronid teatavad veast õppimise ajalise tasu ennustamisel. Nat Neurosci. 1998: 1: 304 – 309. [PubMed]
94. Holroyd CB, Coles MG. Inimvigade töötlemise närvisüsteem: tugevdamine, dopamiin ja veaga seotud negatiivsus. Psychol Rev. 2002; 109: 679 – 709. [PubMed]
95. Hong S, Hikosaka O. Globus pallidus saadab tasulisi signaale lateraalsele habenulale. Neuron. 2008: 60: 720 – 729. [PMC tasuta artikkel] [PubMed]
96. Horvitz JC. Mesolimbokortikaalsed ja nigrostriaalsed dopamiini reaktsioonid tähtsamatele mittetulunduslikele sündmustele. Neuroteadus. 2000: 96: 651 – 656. [PubMed]
97. Horvitz JC, Stewart T, Jacobs BL. Ventral tegmental dopamiini neuronite purunemisaktiivsust äratab ärevas kassis sensoorsed stiimulid. Brain Res. 1997: 759: 251 – 258. [PubMed]
98. Houk JC, Adams JL, Barto AG. Mudel, kuidas basaalganglionid genereerivad ja kasutavad närvisignaale, mis ennustavad tugevdamist. In: Houk JC, Davis JL, Beiser peadirektor, toimetajad. Infotöötluse mudelid Basali Ganglias. Cambridge, MA: MIT Press; 1995. lk. 249 – 274.
99. Ikemoto S. Aju tasu ahelad väljaspool mesolimbilist dopamiini süsteemi: neurobioloogiline teooria. Neuroteadus ja bioloogiline käitumine. 2010 [PMC tasuta artikkel] [PubMed]
100. Ito R, Dalley JW, Howes SR, Robbins TW, Everitt BJ. Jaotumine konditsioneeritud dopamiini vabanemisel tuumas Accumbens Core ja Shell vastusena kokaiiniväljale ja kokaiini otsimise käitumisele rotides. J Neurosci. 2000: 20: 7489 – 7495. [PubMed]
101. Ivlieva NY, Timofeeva NO. Neuroni aktiivsus pedunculopontine'i tuumas toiduga seotud operandi konditsioneeritud refleksi ajal. Neuroteadus ja käitumisfüsioloogia. 2003a: 33: 919 – 928. [PubMed]
102. Ivlieva NY, Timofeeva NO. Neuroni aktiivsus pedunculopontine tuumas operatsiooniga konditsioneeritud refleksi ajal. Neuroteadus ja käitumisfüsioloogia. 2003b: 33: 499 – 506. [PubMed]
103. Jalabert M, Aston-Jones G, Herzog E, Manzoni O, Georges F. Stria terminalis'e voodituuma roll ventraalse tegmentaalse piirkonna dopamiini neuronite kontrollimisel. Edusammud neuro-psühhofarmakoloogias ja bioloogilises psühhiaatrias. 2009; 33: 1336–1346. [PMC tasuta artikkel] [PubMed]
104. Jeanblanc J, Hoeltzel A, Louilot A. Düsamiinergiliste neuronite kaasamine tuuma accumbens'i tuuma- ja karpide alampiirkondi, mis on varjatud inhibeerimise ja afektiivse tajumise all. Neuroteadus. 2002: 111: 315 – 323. [PubMed]
105. Jensen J, Smith AJ, Willeit M, Crawley AP, Mikulis DJ, Vitcu I, Kapur S. Eraldi ajupiirkonnad koodivad salentsust vs. Inimese aju kaardistamine. 2007: 28: 294 – 302. [PubMed]
106. Jhou TC, Fields HL, Baxter MG, Saper CB, Hollandi PC. Rostromediaalne tegmentaalne tuum (RMTg), GABAergiline aju-dopamiini neuronite afferent, kodeerib aversiivseid stiimuleid ja pärsib mootori vastuseid. Neuron. 2009a: 61: 786 – 800. [PMC tasuta artikkel] [PubMed]
107. Jhou TC, Geisler S, Marinelli M, Degarmo BA, Zahm DS. Mesopontiini rostromediaalne tegmentaalne tuum: struktuur, mille sihiks on külgne habenula, mis ulatub Tsai ja substia nigra compacta ventral tegmentaalsesse piirkonda. Võrdleva neuroloogia ajakiri. 2009b: 513: 566 – 596. [PMC tasuta artikkel] [PubMed]
108. Ji H, Shepard PD. Külgne habenula stimuleerimine inhibeerib roti keskjõu dopamiini neuroneid GABA (A) retseptor-vahendatud mehhanismi kaudu. J Neurosci. 2007: 27: 6923 – 6930. [PubMed]
109. Jin X, Costa RM. Käivitamis- / seiskamissignaalid tekivad järjestikuse õppimise ajal nigrostriaalses ahelas. Loodus. 2010: 466: 457 – 462. [PMC tasuta artikkel] [PubMed]
110. Johansen JP, väljad HL. Anterior-cingulaarse koore glutamatergiline aktiveerimine annab aversiivse õpetussignaali. Nat Neurosci. 2004: 7: 398 – 403. [PubMed]
111. Joseph MH, Datla K, Young AM. Tuumade akumuleerumise dopamiini mõõtmine in vivo dialüüsi abil: kick, iha või tunnetus? Neuroteadus ja bioloogiline käitumine. 2003: 27: 527 – 541. [PubMed]
112. Joshua M, Adler A, Bergman H. Dopamiini dünaamika mootori käitumise kontrollimisel. Praegune arvamus neurobioloogias. 2009a: 19: 615 – 620. [PubMed]
113. Joshua M, Adler A, Mitelman R, Vaadia E, Bergman H. Midbrain dopamiinergilised neuronid ja striatu kolinergilised interneuronid kodeerivad erinevust tõenäosuslike klassikaliste konditsioneerimiskatsete erinevates epohhites esinevate tasu ja aversiivsete sündmuste vahel. J Neurosci. 2008: 28: 11673 – 11684. [PubMed]
114. Joshua M, Adler A, Prut Y, Vaadia E, Wickens JR, Bergman H. Keskmise aju dopamiinergiliste neuronite sünkroniseerimist soodustavad sündmused. Neuron. 2009b: 62: 695 – 704. [PubMed]
115. Kable JW, Glimcher PW. Otsuse neurobioloogia: konsensus ja vastuolu. Neuron. 2009: 63: 733 – 745. [PMC tasuta artikkel] [PubMed]
116. Kakade S, Dayan P. Dopamiin: üldistus ja preemiad. Närvivõrgud. 2002: 15: 549 – 559. [PubMed]
117. Kapur S. Psühhoos kui ebanormaalse säilivuse seisund: skisofreenia bioloogiat, fenomenoloogiat ja farmakoloogiat ühendav raamistik. Ameerika psühhiaatriaajakiri. 2003: 160: 13 – 23. [PubMed]
118. Kaufling J, Veinante P, Pawlowski SA, Freund-Mercier MJ, Barrot M. Afferents vatsakeha vetrataalse ala GABAergilisele sabale. Võrdleva neuroloogia ajakiri. 2009: 513: 597 – 621. [PubMed]
119. Kennerley SW, Wallis JD. Üksikute neuronite valikuvõimaluste hindamine eesmise lõuna puhul: tulemuste väärtus, mis on kodeeritud mitme otsustusmuutujaga. Euroopa neuroteaduse ajakiri. 2009: 29: 2061 – 2073. [PMC tasuta artikkel] [PubMed]
120. Kim H, Sul JH, Huh N, Lee D, Jung MW. Striatumi roll valitud tegevuste väärtuste uuendamisel. J Neurosci. 2009: 29: 14701 – 14712. [PubMed]
121. Kiyatkin EA. Eeldatavate dopamiini sisaldavate ja teiste ventral tegmentaalala neuronite funktsionaalsed omadused teadlikes rottides. Int. J. Neurosci. 1988a: 42: 21 – 43. [PubMed]
122. Kiyatkin EA. Morfiini poolt indutseeritud ventral tegmentaalala neuronite funktsionaalsete omaduste modifitseerimine teadvusel rottidel. Intern J Neuroteadus. 1988b: 41: 57 – 70. [PubMed]
123. Klingberg T. Koolitus ja töömälu plastilisus. Kognitiivsete teaduste suundumused. 2010: 14: 317 – 324. [PubMed]
124. Kobayashi S, Nomoto K, Watanabe M, Hikosaka O, Schultz W, Sakagami M. Mõjutavate ja vastumeelsete tulemuste mõju makaakse lateraalse prefrontaalse koore aktiivsusele. Neuron. 2006: 51: 861 – 870. [PubMed]
125. Kobayashi S, Schultz W. Tasu viivituste mõju dopamiini neuronite vastustele. J Neurosci. 2008: 28: 7837 – 7846. [PMC tasuta artikkel] [PubMed]
126. Kobayashi Y, Inoue Y, Yamamoto M, Isa T, Aizawa H. Pedunculopontine tegmental tuuma neuronite panus ahvidel visuaalselt juhitavate sakkade ülesannete täitmiseks. J Neurophysiol. 2002: 88: 715 – 731. [PubMed]
127. Koyama T, Tanaka YZ, Mikami A. Natsitseptiivsed neuronid aktiveeruvad makaagi eesmise cingulatsiooni ajal valu ennetamisel. Neuroreport. 1998: 9: 2663 – 2667. [PubMed]
128. Kravitz AV, Freeze BS, Parker PR, Kay K, Thwin MT, Deisseroth K, Kreitzer AC. Parkinsoni mootori käitumise reguleerimine basaalganglioni ahelate optogeneetilise juhtimise abil. Loodus. 2010 [PMC tasuta artikkel] [PubMed]
129. Lammel S, Hetzel A, Hackel O, Jones I, Liss B, Roeper J. Unikaalsed omadused mesoprefrontaalsetel neuronitel kahekordse mesokortikolimbilise dopamiini süsteemis. Neuron. 2008: 57: 760 – 773. [PubMed]
130. Lang PJ, Davis M. Emotsioon, motivatsioon ja aju: looma- ja inimuuringute refleksi alused. Ajuuuringute edusammud. 2006: 156: 3 – 29. [PubMed]
131. Lapish CC, Kroener S, Durstewitz D, Lavin A, Seamans JK. Mesokortikaalse dopamiinisüsteemi võime toimida erinevatel ajalistel režiimidel. Psühhofarmakoloogia (Berl) 2007; 191: 609 – 625. [PubMed]
132. Lee D, Seo H. Mehhanismid tugevdamise õppimiseks ja otsuste tegemiseks primaadi dorsolateraalses prefrontaalses ajukoores. New Yorgi Teaduste Akadeemia Annals. 2007: 1104: 108 – 122. [PubMed]
133. Lee HJ, Groshek F, Petrovich GD, Cantalini JP, Gallagher M, Hollandi PC. Amygdalo-nigraalse ahela roll toiduga seotud visuaalse stiimuli konditsioneerimisel. J Neurosci. 2005: 25: 3881 – 3888. [PMC tasuta artikkel] [PubMed]
134. Levita L, Dalley JW, Robbins TW. Nucleus accumbens dopamiini ja õppinud hirm uuesti läbi: läbivaatamine ja mõned uued järeldused. Käitumuslikud ajuuuringud. 2002: 137: 115 – 127. [PubMed]
135. Lin SC, Nicolelis MA. Neuronaalne ansambel, mis lõhub basaalses eesnäärmes, kodeerib elukvaliteeti Olenemata Valence'ist. Neuron. 2008: 59: 138 – 149. [PMC tasuta artikkel] [PubMed]
136. Lisman JE, Grace AA. Hippokampuse-VTA silmus: teabe sisestamine pikaajalisse mällu. Neuron. 2005: 46: 703 – 713. [PubMed]
137. Litt A, Plassmann H, Shiv B, Rangel A. Otsustamisprotsessi käigus jagatakse hindamis- ja säravussignaalid. Cereb Cortex. 2010 ajakirjanduses. [PubMed]
138. Liu Z, Richmond BJ, Murray EA, Saunders RC, Steenrod S, Stubblefield BK, Montague DM, Ginn EI. Rhinaalse koore D2 retseptori valgu DNA sihtimine blokeerib pöörduvalt palgat ennustavate märkide õppimist. Ameerika Ühendriikide Riikliku Teaduste Akadeemia toimingud. 2004: 101: 12336 – 12341. [PMC tasuta artikkel] [PubMed]
139. Liu ZH, Shin R, Ikemoto S. Mediaalse A10 dopamiini neuronite kahesugune roll afektiivses kodeerimises. Neuropsühharmakoloogia. 2008: 33: 3010 – 3020. [PMC tasuta artikkel] [PubMed]
140. Ljungberg T, Apicella P, Schultz W. Ahvide dopamiini neuronite vastused käitumisreaktsioonide õppimise ajal. J Neurophysiol. 1992: 67: 145 – 163. [PubMed]
141. Lobo MK, Covington HE, 3rd, Chaudhury D, Friedman AK, Sun H, Damez-Werno D, Dietz DM, Zaman S, Koo JW, Kennedy PJ, et al. BDNF signaaliülekande rakutüübi spetsiifiline kadumine jäljendab kokaiini tasu optogeneetilist kontrolli. Teadus. 2010: 330: 385 – 390. [PMC tasuta artikkel] [PubMed]
142. Maeda H, Mogenson GJ. Perifeerse stimulatsiooni mõju närvirakkude aktiivsusele ventral tegmentaalses piirkonnas, nigra ja keskmise aju retikulatsiooni moodustumine rottidel. Ajuuuringute bülletään. 1982: 8: 7 – 14. [PubMed]
143. Mantz J, Thierry AM, Glowinski J. Mürgise saba näputähe mõju mesokortikaalsete ja mesolimbiliste dopamiini neuronite tühjenemise kiirusele: mesokortikaalse süsteemi selektiivne aktiveerimine. Brain Res. 1989: 476: 377 – 381. [PubMed]
144. Margolis EB, lukk H, Hjelmstad GO, väljad HL. Ventral tegmentaala vaadati uuesti läbi: kas on dopamiinergiliste neuronite elektrofüsioloogiline marker? Füsioloogia ajakiri. 2006: 577: 907 – 924. [PMC tasuta artikkel] [PubMed]
145. Margolis EB, Mitchell JM, Ishikawa J, Hjelmstad GO, väljad HL. Keskmise aju dopamiini neuronid: projektsioonieesmärk määrab toimepotentsiaali kestuse ja dopamiini D (2) retseptori inhibeerimise. J Neurosci. 2008: 28: 8908 – 8913. [PubMed]
146. Mark GP, Blander DS, Hoebel BG. Konditsioneeritud stiimul vähendab ekstratsellulaarset dopamiini tuumas accumbensis pärast õpitud maitsetundlikkuse teket. Brain Res. 1991: 551: 308 – 310. [PubMed]
147. Marowsky A, Yanagawa Y, Obata K, Vogt KE. Spetsiaalne interneuroonide alaklass vahendab dopamiinergilist amygdala funktsiooni soodustamist. Neuron. 2005: 48: 1025 – 1037. [PubMed]
148. Matsumoto M, Hikosaka O. Külgne habenula kui negatiivsete tasu signaalide allikas dopamiini neuronites. Loodus. 2007: 447: 1111 – 1115. [PubMed]
149. Matsumoto M, Hikosaka O. Negatiivse motiveeriva väärtuse esitamine primaadi külgsuunas. Nat Neurosci. 2009a: 12: 77 – 84. [PMC tasuta artikkel] [PubMed]
150. Matsumoto M, Hikosaka O. Kaks dopamiini neuroni tüüpi annavad selgelt positiivseid ja negatiivseid motivatsioonisignaale. Loodus. 2009b: 459: 837 – 841. [PMC tasuta artikkel] [PubMed]
151. Matsumoto M, Matsumoto K, Abe H, Tanaka K. Mediaalne prefrontaalse raku aktiivsus signaliseerib tegevusväärtuste prognoosivigu. Nat Neurosci. 2007: 10: 647 – 656. [PubMed]
152. Mai PJ, McHaffie JG, Stanford TR, Jiang H, Costello MG, Coizet V, Hayes LM, Haber SN, Redgrave P. Tectonigral prognoosid primaadis: tee ettevaatlikuks sensoorseks sisendiks keskmise aju dopamiinergilistesse neuronitesse. Euroopa neuroteaduse ajakiri. 2009: 29: 575 – 587. [PMC tasuta artikkel] [PubMed]
153. Mazzoni P, Hristova A, Krakauer JW. Miks me ei liigu kiiremini? Parkinsoni tõbi, liikumisjõud ja kaudne motivatsioon. J Neurosci. 2007; 27: 7105–7116. [PubMed]
154. Merali Z, Michaud D, McIntosh J, Kent P, Anisman H. Amügdaloidse CRH süsteemi (de) diferentsiaalne osalus stiimulite silmatorkavuses ja valentsuses. Neuropsühhofarmakoloogia ja bioloogilise psühhiaatria areng. 2003; 27: 1201–1212. [PubMed]
155. Mirenowicz J, Schultz W. Keskmise aju dopamiini neuronite eelistatud aktiveerimine pigem söögiisu kui aversiivsete stiimulite poolt. Loodus. 1996: 379: 449 – 451. [PubMed]
156. Molina-Luna K, Pekanovic A, Rohrich S, Hertler B, Schubring-Giese M, Rioult-Pedotti MS, Luft AR. Dopamiin motoorses ajukoores on vajalik oskuste õppimiseks ja sünaptiliseks plastilisuseks. PLoS ONE. 2009: 4: e7082. [PMC tasuta artikkel] [PubMed]
157. Montague PR, Berns GS. Neurumajandus ja hindamise bioloogilised alused. Neuron. 2002: 36: 265 – 284. [PubMed]
158. Montague PR, Dayan P, Sejnowski TJ. Mesakefaalsete dopamiinisüsteemide raamistik, mis põhineb prognoositaval Hebbian õppel. J Neurosci. 1996: 16: 1936 – 1947. [PubMed]
159. Morris G, Arkadir D, Nevet A, Vaadia E, Bergman H. Kokkusattuvad, kuid erinevad sõnumid keskjoonest dopamiinist ja striaaltooniliselt aktiivsetest neuronitest. Neuron. 2004: 43: 133 – 143. [PubMed]
160. Morris G, Nevet A, Arkadir D, Vaadia E, Bergman H. Midbrain dopamiini neuronid kodeerivad otsuseid tulevase tegevuse jaoks. Nat Neurosci. 2006: 9: 1057 – 1063. [PubMed]
161. Morrison SE, Salzmani CD. Üksikute neuronite premeerivate ja aversiivsete stiimulite kohta käiva informatsiooni lähenemine. J Neurosci. 2009: 29: 11471 – 11483. [PMC tasuta artikkel] [PubMed]
162. Nakahara H, Itoh H, Kawagoe R, Takikawa Y, Hikosaka O. Dopamiini neuronid võivad kujutada kontekstist sõltuvat prognoosiviga. Neuron. 2004: 41: 269 – 280. [PubMed]
163. Nakamura K, Hikosaka O. Dopamiini roll primaatide caudate tuumas pühaadade auhinnamodulatsioonis. J Neurosci. 2006: 26: 5360 – 5369. [PubMed]
164. Neve KA, Seamans JK, Trantham-Davidson H. Dopamiini retseptori signaalimine. Retseptori ja signaaliülekande uuring. 2004: 24: 165 – 205. [PubMed]
165. Nishijo H, Ono T, Nishino H. Üksikute neuronite vastused hoiatusmahuka amygdala-s keerulise sensoorse stimulatsiooni ajal afektiivse tähendusega. J Neurosci. 1988: 8: 3570 – 3583. [PubMed]
166. Niv Y, Daw ND, Joel D, dayan P. Tonic dopamiin: alternatiivkulud ja reageerimisjõu kontroll. Psühhofarmakoloogia. 2007: 191: 507 – 520. [PubMed]
167. Nomoto K, Schultz W, Watanabe T, Sakagami M. Ajaliselt pikendatud dopamiini vastused tajutavale nõudlikule premeerimis-stiimulile. J Neurosci. 2010: 30: 10692 – 10702. [PMC tasuta artikkel] [PubMed]
168. Okada K, Toyama K, Inoue Y, Isa T, Kobayashi Y. Erinevad pedunculopontine tegmental neuronid signaal ennustavad ja tegelikud ülesannete tasud. J Neurosci. 2009: 29: 4858 – 4870. [PubMed]
169. Omelchenko N, Bell R, Sesack SR. Külgmised habenula projektsioonid dopamiini ja GABA neuronitele roti ventral tegmental piirkonnas. Euroopa neuroteaduse ajakiri. 2009: 30: 1239 – 1250. [PMC tasuta artikkel] [PubMed]
170. Owesson-White CA, Ariansen J, Stuber GD, Cleaveland NA, Cheer JF, Wightman RM, Carelli RM. Kokaiini otsiva käitumise neuroloogiline kodeerimine langeb kokku faasilise dopamiini vabanemisega accumbens'i südamikus ja kestas. Euroopa neuroteaduse ajakiri. 2009: 30: 1117 – 1127. [PMC tasuta artikkel] [PubMed]
171. Oyama K, Hernadi I, Iijima T, Tsutsui K. Auhinnaprognoosi viga, mis kodeerib dorsaalsetes striatu neuronites. J Neurosci. 2010: 30: 11447 – 11457. [PubMed]
172. Packard MG, valge NM. Hippokampuse ja caudate tuuma mälusüsteemide dissotsiatsioon dopamiini agonistide intratserebraalse süstimise järgselt. Käitumuslik neuroteadus. 1991: 105: 295 – 306. [PubMed]
173. Padoa-Schioppa C. Orbitofrontaalne ajukoor ja majandusliku väärtuse arvutamine. New Yorgi Teaduste Akadeemia Annals. 2007: 1121: 232 – 253. [PubMed]
174. Palmiter RD. Dopamiini signaaliülekanne dorsaalses striatumis on motiveeritud käitumise jaoks oluline: dopamiinipuudulike hiirte õppetunnid. New Yorgi Teaduste Akadeemia Annals. 2008: 1129: 35 – 46. [PMC tasuta artikkel] [PubMed]
175. Pan WX, Hyland BI. Pedunculopontine tegmental tuum kontrollib keskjoonte dopamiini neuronite konditsioneeritud vastuseid rottidel. J Neurosci. 2005: 25: 4725 – 4732. [PubMed]
176. Pan WX, Schmidt R, Wickens JR, Hyland BI. Dopamiini neuronite aktiivsuse ja ajalise erinevuse mudeli poolt välja pakutud kolmepoolne väljasuremise mehhanism. J Neurosci. 2008: 28: 9619 – 9631. [PubMed]
177. Parker JG, Zweifel LS, Clark JJ, Evans SB, Phillips PE, Palmiter RD. NMDA retseptorite puudumine dopamiini neuronites nõrgendab dopamiini vabanemist, kuid mitte konditsioneeritud lähenemist Pavloviani konditsioneerimise ajal. Ameerika Ühendriikide Riikliku Teaduste Akadeemia toimingud. 2010 [PMC tasuta artikkel] [PubMed]
178. Pascoe JP, Kapp BS. Amygdaloidse tsentraalse tuuma neuronite elektrofüsioloogilised omadused küülikutel Pavloviani hirmutamise ajal. Käitumuslikud ajuuuringud. 1985: 16: 117 – 133. [PubMed]
179. Pascucci T, Ventura R, Latagliata EC, Cabib S, Puglisi-Allegra S. Mediaalne prefrontaalne koor määrab dopamiini vastuse stressile läbi norepinefriini ja dopamiini vastandlike mõjude. Cereb Cortex. 2007: 17: 2796 – 2804. [PubMed]
180. Pearce JM, Hall G. Pavlovia keele õppimise mudel: konditsioneeritud, kuid mitte tingimusteta stiimulite efektiivsuse varieerumine. Psychol Rev. 1980; 87: 532 – 552. [PubMed]
181. Pezze MA, Feldon J. Mesolimbic dopaminergilised teed hirmuärastamisel. Neurobioloogia edusammud. 2004: 74: 301 – 320. [PubMed]
182. Phillips AG, Ahn S, Howland JG. Mesokortikolimbilise dopamiini süsteemi amygdalarne kontroll: paralleelsed teed motiveeritud käitumisele. Neuroteadus ja bioloogiline käitumine. 2003a: 27: 543 – 554. [PubMed]
183. Phillips GD, Salussolia E, Hitchcott PK. Mesoamygdaloidse dopamiini projektsiooni roll emotsionaalses õppes. Psühhofarmakoloogia. 2010 [PubMed]
184. Phillips PE, Stuber GD, Heien ML, Wightman RM, Carelli RM. Dopamiini teine ​​vabanemine soodustab kokaiini otsimist. Loodus. 2003b: 422: 614 – 618. [PubMed]
185. Porrino LJ, Goldman-Rakic ​​PS. Eesnäärme ja eesmise cingulaarse ajukoorme ajurünnaku inervatsioon reesus ahvis, mis ilmnes HRP retrospektiivse transpordiga. Võrdleva neuroloogia ajakiri. 1982: 205: 63 – 76. [PubMed]
186. Puryear CB, Kim MJ, Mizumori SJ. Liikumise ja tasu konjunktiivne kodeerimine ventral tegmentaala neuronite poolt vabalt navigeeritavas närilistes. Käitumuslik neuroteadus. 2010: 124: 234 – 247. [PMC tasuta artikkel] [PubMed]
187. Ravel S, Legallet E, Apicella P. Tooniliselt aktiivsed neuronid ahvi striatumis ei reageeri eelistatavalt isuärritustele. Eksperimentaalne ajuuuring. Experimentelle Hirnforschung. 1999: 128: 531 – 534. [PubMed]
188. Ravel S, Legallet E, Apicella P. Tooniliselt aktiivsete neuronite vastused ahvi striatumis eristavad motiveerivalt vastandlikke stiimuleid. J Neurosci. 2003: 23: 8489 – 8497. [PubMed]
189. Ravel S, Richmond BJ. Dopamiini neuronaalsed reaktsioonid ahvidel, kes teostavad visuaalselt kalkuleeritud tasu graafikuid. Euroopa neuroteaduse ajakiri. 2006: 24: 277 – 290. [PubMed]
190. Redgrave P, Gurney K. Lühiajalise dopamiini signaal: roll uute tegevuste avastamisel? Nat Rev Neurosci. 2006: 7: 967 – 975. [PubMed]
191. Redgrave P, Prescott TJ, Gurney K. Kas lühikese latentsusega dopamiini vastus on liiga lühike, et saada signaali tasu viga? Suundumused neuroteadustes. 1999: 12: 146 – 151. [PubMed]
192. Rescorla RA, Wagner AR. Pavlovia konditsioneerimise teooria: tugevdus- ja mittekinnipidamise tõhususe variatsioonid. In: Black AH, Prokasy WF, toimetajad. Klassikaline konditsioneerimine II: praegune uuring ja teooria. New York, New York: Appleton Century Crofts; 1972. lk. 64 – 99.
193. Reynolds JNJ, Hyland BI, Wickens JR. Tasulise õppimise rakumehhanism. Loodus. 2001: 413: 67 – 70. [PubMed]
194. Reynolds SM, Berridge KC. Positiivne ja negatiivne motivatsioon nucleus accumbens kestas: kahevalentsed rostrocaudaalsed gradiendid GABA poolt esile kutsutud söömiseks, maitse meeldimise / mittemeeldimise reaktsioonid, eelistamine / vältimine ja hirm. J Neurosci. 2002; 22: 7308–7320. [PubMed]
195. Richardson RT, DeLong MR. Nukleuse basali funktsionaalsuse elektrofüsioloogilised uuringud primaatides. Eksperimentaalse meditsiini ja bioloogia edusammud. 1991: 295: 233 – 252. [PubMed]
196. Robbins TW, Arnsten AF. Fronto-täidesaatva funktsiooni neuropsühharmakoloogia: monoaminergiline moduleerimine. Iga-aastane ülevaade neuroteadusest. 2009: 32: 267 – 287. [PMC tasuta artikkel] [PubMed]
197. Robinson DL, Hermans A, Seipel AT, Wightman RM. Kiire keemilise suhtluse jälgimine ajus. Keemilised ülevaated. 2008: 108: 2554 – 2584. [PMC tasuta artikkel] [PubMed]
198. Roesch MR, Calu DJ, Schoenbaum G. Dopamiini neuronid kodeerivad paremat võimalust rottidel, kes otsustavad erineva viivitusega või suurusega hüvede vahel. Nat Neurosci. 2007: 10: 1615 – 1624. [PMC tasuta artikkel] [PubMed]
199. Roesch MR, Olson CR. Neuronaalne aktiivsus, mis on seotud auhinna väärtuse ja motivatsiooniga primaadi eesmise ajukoores. Teadus. 2004: 304: 307 – 310. [PubMed]
200. Roitman MF, Wheeler RA, Wightman RM, Carelli RM. Reaalajalised keemilised reaktsioonid tuuma accumbensis eristavad rahuldavaid ja aversiivseid stiimuleid. Nat Neurosci. 2008: 11: 1376 – 1377. [PMC tasuta artikkel] [PubMed]
201. Rutledge RB, Lazzaro SC, Lau B, Myers CE, Gluck MA, Glimcher PW. Dopaminergilised ravimid moduleerivad Parkinsoni tõvega patsientide õppimismäära ja visadust dünaamilise toidulaua ülesande täitmisel. J Neurosci. 2009; 29: 15104–15114. [PMC tasuta artikkel] [PubMed]
202. Salamone JD. Tuuma accumbens'i kaasamine dopamiiniga isuäratavasse ja aversiivsesse motivatsiooni. Käitumuslikud ajuuuringud. 1994: 61: 117 – 133. [PubMed]
203. Salamone JD, Correa M, Farrar A, Mingote SM. Tuumade akumuleerumisega seotud pingutusfunktsioonid dopamiini ja sellega seotud eesmise ahelatega. Psühhofarmakoloogia (Berl) 2007; 191: 461 – 482. [PubMed]
204. Satoh T, Nakai S, Sato T, Kimura M. Dopamiini neuronite motivatsiooni ja otsuse tulemuste kodeerimine. J Neurosci. 2003: 23: 9913 – 9923. [PubMed]
205. Savine AC, Beck SM, Edwards BG, Chiew KS, Braver TS. Kognitiivse kontrolli tugevdamine lähenemise ja vältimise motivatsiooniseisundite abil. Tunnetus ja emotsioon. 2010; 24: 338–356. [PMC tasuta artikkel] [PubMed]
206. Schoenbaum G, Roesch MR, Stalnaker TA, Takahashi YK. Uus perspektiiv orbitofrontaalse ajukoorme rollist adaptiivses käitumises. Nat Rev Neurosci. 2009: 10: 885 – 892. [PMC tasuta artikkel] [PubMed]
207. Schultz W. Keskmise aju dopamiini neuronite vastused ahvidel käitumuslikele trigeri stiimulitele. J Neurophysiol. 1986: 56: 1439 – 1461. [PubMed]
208. Schultz W. Dopamiini neuronite ennustav tasu signaal. J Neurophysiol. 1998: 80: 1 – 27. [PubMed]
209. Schultz W. Mitme dopamiini funktsioonid erinevatel aegadel. Iga-aastane ülevaade neuroteadusest. 2007: 30: 259 – 288. [PubMed]
210. Schultz W. Dopamiini signaalid tasu väärtuseks ja riskiks: põhilised ja hiljutised andmed. Behav Brain Funct. 2010: 6: 24. [PMC tasuta artikkel] [PubMed]
211. Schultz W, Dayan P, Montague PR. Ennustuse ja tasu närvi substraat. Teadus. 1997: 275: 1593 – 1599. [PubMed]
212. Schultz W, Romo R. Nigrostriaalse dopamiini neuronite vastused kõrge intensiivsusega somatosensoorsele stimulatsioonile anesteseeritud ahvil. J Neurophysiol. 1987: 57: 201 – 217. [PubMed]
213. Schultz W, Romo R. Monkey keskjõu dopamiini neuronid: vastused ägedaid reaktsioone tekitavatele stiimulitele. J Neurophysiol. 1990: 63: 607 – 624. [PubMed]
214. Seo H, Lee D. Hüvitussignaalide ajutine filtreerimine dorsaalses eesmise cinguleeriva ajukoores segastrateegia mängu ajal. J Neurosci. 2007: 27: 8366 – 8377. [PMC tasuta artikkel] [PubMed]
215. Shabel SJ, Janak PH. Amygdala neuronaalse aktiivsuse märkimisväärne sarnasus konditsioneeritud isuäratavas ja aversiivses emotsionaalses erutuses. Ameerika Ühendriikide Riikliku Teaduste Akadeemia toimingud. 2009: 106: 15031 – 15036. [PMC tasuta artikkel] [PubMed]
216. Shadmehr R, Smith MA, Krakauer JW. Veaparandus, sensoorsed ennustused ja kohandamine mootori juhtimises. Iga-aastane ülevaade neuroteadusest. 2010 [PubMed]
217. Shen W, Flajolet M, Greengard P, Surmeier DJ. Striatsi sünaptilise plastilisuse dopamiinergiline kontroll. Teadus. 2008: 321: 848 – 851. [PMC tasuta artikkel] [PubMed]
218. Shimo Y, Wichmann T. Neuronaalne aktiivsus subthalamic tuumas moduleerib dopamiini vabanemist ahvistriatumis. Euroopa neuroteaduse ajakiri. 2009: 29: 104 – 113. [PMC tasuta artikkel] [PubMed]
219. Shippenberg TS, Bals-Kubik R, Huber A, Herz A. Neuroanatoomilised substraadid, mis vahendavad D-1 dopamiini retseptori antagonistide aversiivset toimet. Psühhofarmakoloogia (Berl) 1991; 103: 209 – 214. [PubMed]
220. Shumake J, Ilango A, Scheich H, Wetzel W, Ohl FW. Vältimisõppe omandamise ja saamise diferentsiaalne neuromodulatsioon külgse habenula ja ventral tegmentaalpiirkonna kaudu. J Neurosci. 2010: 30: 5876 – 5883. [PubMed]
221. Väike DM, Gregory MD, Mak YE, Gitelman D, Mesulam MM, Parrish T. Intensiivse neuroloogilise esindatuse ja afektiivse väärtuse jagamine inimese gustatsioonis. Neuron. 2003: 39: 701 – 711. [PubMed]
222. Stefani MR, Moghaddam B. Reeglite õppimise ja tasustamise kontingentsus on seotud dopamiini aktivatsiooni dissotsieeruvate mustritega roti prefrontaalses ajukoores, tuumasõlmedes ja dorsaalses striatumis. J Neurosci. 2006: 26: 8810 – 8818. [PMC tasuta artikkel] [PubMed]
223. Steinfels GF, Heym J, Strecker RE, Jacobs BL. Dopamiinergiliste neuronite vastus kassile kuulmis-stiimulitele, mis ilmnesid une-ärkveloleku tsüklis. Brain Res. 1983: 277: 150 – 154. [PubMed]
224. Strecker RE, Jacobs BL. Substantia nigra dopamiinergilise ühiku aktiivsus kasside käitumises: erutumise mõju spontaansele tühjenemisele ja sensoorsele äratundmisele. Brain Res. 1985: 361: 339 – 350. [PubMed]
225. Stuber GD, Hnasko TS, Britt JP, Edwards RH, Bonci A. Dopamiinergilised terminalid tuuma accumbensis, kuid mitte dorsaalne striatum corelease glutamaat. Journal of Neuroscience. 2010: 30: 8229 – 8233. [PMC tasuta artikkel] [PubMed]
226. Stuber GD, Wightman RM, Carelli RM. Kokaiini enda manustamise väljasuremine toob esile funktsionaalselt ja ajaliselt eristuvad dopamiinergilised signaalid tuuma accumbensis. Neuron. 2005: 46: 661 – 669. [PubMed]
227. Sul JH, Kim H, Huh N, Lee D, Jung MW. Näriliste orbitofrontaalse ja mediaalse prefrontaalse ajukoorme eristusvõime otsuste tegemisel. Neuron. 2010: 66: 449 – 460. [PMC tasuta artikkel] [PubMed]
228. Surmeier DJ, Ding J, päev M, Wang Z, Shen W. D1 ja D2 dopamiiniretseptori struktuursete glutamatergiliste signaalide moduleerimine striaalsetes keskmistes närvirakkudes. Suundumused neuroteadustes. 2007: 30: 228 – 235. [PubMed]
229. Surmeier DJ, Shen W, päev M, Gertler T, Chan S, Tian X, Plotkin JL. Dopamiini roll striaadi ahelate struktuuri ja funktsiooni moduleerimisel. Ajuuuringute edusammud. 2010: 183C: 148 – 167. [PubMed]
230. Sutton RS, Barto AG. Tänapäeva adaptiivsete võrgustike teooria suunas: ootus ja ennustus. Psychol Rev. 1981; 88: 135 – 170. [PubMed]
231. Takahashi YK, Roesch MR, Stalnaker TA, Haney RZ, Calu DJ, Taylor AR, Burke KA, Schoenbaum G. Orbitofrontaalse ajukoore ja ventral tegmental ala on vajalikud ootamatutest tulemustest õppimiseks. Neuron. 2009: 62: 269 – 280. [PMC tasuta artikkel] [PubMed]
232. Takikawa Y, Kawagoe R, Hikosaka O. Keskmise aju dopamiini neuronite võimalik roll saksaadide lühi- ja pikaajalises kohandamises positsioonitasu kaardistamisele. J Neurophysiol. 2004: 92: 2520 – 2529. [PubMed]
233. Tecuapetla F, Patel JC, Xenias H, inglise D, Tadros I, Shah F, Berliin J, Deisseroth K, Rice ME, Tepper JM, Koos T. Glutamatergiline signaaliülekanne mesolimbiliste dopamiini neuronite poolt tuuma accumbensis. J Neurosci. 2010: 30: 7105 – 7110. [PMC tasuta artikkel] [PubMed]
234. Thierry AM, Tassin JP, Blanc G, Glowinski J. Mesokortikaalse DA süsteemi selektiivne aktiveerimine stressiga. Loodus. 1976: 263: 242 – 244. [PubMed]
235. Tobler PN, Dickinson A, Schultz W. Dopamiini neuronite prognoositava tasu andmise kodeerimine konditsioneeritud inhibeerimise paradigmas. J Neurosci. 2003: 23: 10402 – 10410. [PubMed]
236. Tobler PN, Fiorillo CD, Schultz W. Dopamiini neuronite tasuväärtuse adaptiivne kodeerimine. Teadus. 2005: 307: 1642 – 1645. [PubMed]
237. Tsai HC, Zhang F, Adamantidis A, Stuber GD, Bonci A, de Lecea L, Deisseroth K. Faasiline põletamine dopamiinergilistes neuronites on käitumuslikuks konditsioneerimiseks piisav. Teadus. 2009 [PubMed]
238. Ullsperger M. Geneetilise assotsiatsiooni uuringud tulemuslikkuse jälgimise ja tagasisidest õppimise kohta: dopamiini ja serotoniini roll. Neuroteadus ja bioloogiline käitumine. 2010: 34: 649 – 659. [PubMed]
239. Tundmatu MA. Dopamiin: oluline küsimus. Suundumused neuroteadustes. 2004: 27: 702 – 706. [PubMed]
240. Uylings HB, Groenewegen HJ, Kolb B. Kas rottidel on prefrontaalne ajukoor? Käitumuslikud ajuuuringud. 2003: 146: 3 – 17. [PubMed]
241. Ventura R, Cabib S, Puglisi-Allegra S. Vastupidiselt genotüübist sõltuvale mesokortikolimbilisele dopamiini vastusele stressile. Neuroteadus. 2001: 104: 627 – 631. [PubMed]
242. Ventura R, Latagliata EC, Morrone C, La Mela I, Puglisi-Allegra S. Prefrontaalne noradrenaliin määrab „kõrge” motivatsioonilise silmapaistvuse omistamise. PLOS ÜKS. 2008; 3: e3044. [PMC tasuta artikkel] [PubMed]
243. Ventura R, Morrone C, Puglisi-Allegra S. Prefrontal / accumbal katekolamiin süsteem määrab motivatsioonilise omandiõiguse nii tasu kui ka vastumeelsusega seotud stiimulitele. Ameerika Ühendriikide Riikliku Teaduste Akadeemia toimingud. 2007: 104: 5181 – 5186. [PMC tasuta artikkel] [PubMed]
244. Vogt BA. Valu ja emotsioonide interaktsioonid cingulate gyrus alampiirkondades. Nat Rev Neurosci. 2005: 6: 533 – 544. [PMC tasuta artikkel] [PubMed]
245. Voon V, Pessiglione M, Brezing C, Gallea C, Fernandez HH, Dolan RJ, Hallett M. Mehhanismid, mis on tingitud dopamiini poolt vahendatud tasu ias kompulsiivsest käitumisest. Neuron. 2010: 65: 135 – 142. [PMC tasuta artikkel] [PubMed]
246. Waelti P, Dickinson A, Schultz W. Dopamiini vastused vastavad formaalse õppe teooria peamistele eeldustele. Loodus. 2001: 412: 43 – 48. [PubMed]
247. Wallis JD, Kennerley SW. Heterogeensed tasu signaalid prefrontaalses ajukoores. Praegune arvamus neurobioloogias. 2010: 20: 191 – 198. [PMC tasuta artikkel] [PubMed]
248. Walton ME, Behrens TE, Buckley MJ, Rudebeck PH, Rushworth MF. Eraldatavad õppesüsteemid makaak-ajus ja orbitofrontaalse ajukoorme roll tingimuslikus õppes. Neuron. 2010: 65: 927 – 939. [PMC tasuta artikkel] [PubMed]
249. Wheeler RA, Twining RC, Jones JL, Slater JM, Grigson PS, Carelli RM. Negatiivse mõju käitumuslikud ja elektrofüsioloogilised näitajad ennustavad kokaiini enese manustamist. Neuron. 2008: 57: 774 – 785. [PubMed]
250. Wightman RM, Heien MLAV, Wassum KM, Sombers LA, Aragona BJ, Khan AS, Ariansen JL, Cheer JF, Phillips PE, Carelli RM. Dopamiini vabanemine on roti tuumaklundide mikrokeskkondades heterogeenne. Euroopa neuroteaduse ajakiri. 2007: 26: 2046 – 2054. [PubMed]
251. Williams GV, Castner SA. Kõvera all: kriitilised küsimused D1 retseptori funktsiooni selgitamiseks töömälus. Neuroteadus. 2006: 139: 263 – 276. [PubMed]
252. Williams SM, Goldman-Rakic ​​PS. Primaadi mesofrontaalse dopamiini süsteemi laialt levinud päritolu. Cereb Cortex. 1998: 8: 321 – 345. [PubMed]
253. Winn P. Kuidas kõige paremini kaaluda pedunculopontine tegmental tuuma struktuuri ja funktsiooni: tõendid loomkatsetest. Neuroloogiateaduste ajakiri. 2006: 248: 234 – 250. [PubMed]
254. Tark RA. Dopamiin, õppimine ja motivatsioon. Nat Rev Neurosci. 2004: 5: 483 – 494. [PubMed]
255. Tark RA. Tasu ja motivatsiooni eesmise substraadid. Võrdleva neuroloogia ajakiri. 2005: 493: 115 – 121. [PMC tasuta artikkel] [PubMed]
256. Wise SP. Edasised eesmised väljad: phylogeny ja fundamentaalne funktsioon. Suundumused neuroteadustes. 2008: 31: 599 – 608. [PMC tasuta artikkel] [PubMed]
257. Yamada H, Matsumoto N, Kimura M. Toniseerivad neuronid primaadi caudate tuumas ja putamen kodeerivad diferentseeritud instruktsiooniga motiveerivaid tulemusi. J Neurosci. 2004: 24: 3500 – 3510. [PubMed]
258. Yamada H, Matsumoto N, Kimura M. Ajalugu - ja tulevaste käitumishäirete praegune juhenditel põhinev kodeerimine striatumis. J Neurophysiol. 2007: 98: 3557 – 3567. [PubMed]
259. Yin HH, Knowlton BJ. Basaalse gangliumi roll harjumuste tekkimisel. Nat Rev Neurosci. 2006: 7: 464 – 476. [PubMed]
260. Noor AM, Moran PM, Joseph MH. Dopamiini roll konditsioneerimisel ja varjatud inhibeerimisel: mida, millal, kus ja kuidas? Neuroteadus ja bioloogiline käitumine. 2005: 29: 963 – 976. [PubMed]
261. Zaghloul KA, Blanco JA, Weidemann CT, McGill K, Jaggi JL, Baltuch GH, Kahana MJ. Inimese substants nigra neuronid kodeerivad ootamatuid rahalisi hüvesid. Teadus. 2009: 323: 1496 – 1499. [PMC tasuta artikkel] [PubMed]
262. Zahniser NR, Sorkin A. Dopamiini transporteri kiire reguleerimine: roll stimulantide sõltuvuses? Neurofarmakoloogia. 2004; 47 Suppl 1: 80 – 91. [PubMed]
263. Zhang L, Doyon WM, Clark JJ, Phillips PE, Dani JA. Toonilise ja faasilise dopamiini ülekande kontroll dorsaalses ja ventralises striatumis. Molekulaarne farmakoloogia. 2009: 76: 396 – 404. [PMC tasuta artikkel] [PubMed]
264. Zink CF, Pagnoni G, Martin ME, Dhamala M, Berns GS. Inimese striaatiline reaktsioon peamistele mittetundvatele stiimulitele. Journal of Neuroscience. 2003: 23: 8092 – 8097. [PubMed]
265. Zweifel LS, Argilli E, Bonci A, Palmiter RD. NMDA retseptorite roll dopamiini neuronites plastilisuse ja sõltuvust tekitava käitumise jaoks. Neuron. 2008: 59: 486 – 496. [PMC tasuta artikkel] [PubMed]
266. Zweifel LS, Parker JG, Lobb CJ, Rainwater A, Wall VZ, Fadok JP, Darvas M, Kim MJ, Mizumori SJ, Paladini CA, et al. NMDAR-sõltuva lõhkemise katkestamine dopamiini neuronite poolt annab faasilise dopamiinist sõltuva käitumise selektiivse hindamise. Ameerika Ühendriikide Riikliku Teaduste Akadeemia toimingud. 2009: 106: 7281 – 7288. [PMC tasuta artikkel] [PubMed]