Dopamin a motivációs kontrollban: jutalmazó, averzív és riasztó (2010)

Lásd a PMC egyéb cikkeit idéz a közzétett cikket.

A középsó agyi dopamin neuronok jól ismertek a jutalmakra adott erőteljes reakcióikkal és a pozitív motivációban játszott kritikus szerepükkel. Egyre világosabbá vált azonban, hogy a dopamin idegsejtek olyan jeleket is továbbítanak, amelyek a jóindulatú, de nem jutalmazó tapasztalatokkal kapcsolatosak, mint például averzív és riasztó események. Itt áttekintjük a dopamin jutalom és nem jutalom funkcióinak megértésében elért legújabb fejleményeket. Ezen adatok alapján javasoljuk, hogy a dopamin neuronok többféle típusba kerüljenek, amelyek különálló agyhálózatokkal vannak összekapcsolva, és különös szerepet játszanak a motivációs kontrollban. Egyes dopamin neuronok motivációs értéket kódolnak, támogatva az agyi hálózatokat a kereséshez, az értékeléshez és az értékeléshez. Mások a motivációs szemléletet kódolják, támogatva az agyi hálózatokat a tájékozódás, a megismerés és az általános motiváció érdekében. A dopamin idegsejtek mindkét típusát riasztási jel növeli, amely a potenciálisan fontos szenzoros jelek gyors felismerésében vesz részt. Feltételezzük, hogy ezek az értékteremtési, tiszteletbeli és riasztási dopaminerg utak együttműködnek az adaptív viselkedés támogatása érdekében.

Dopamin a jutalom-kereső tevékenységek motivációjában

A dopamin régóta ismert, hogy fontos a cselekvések megerősítéséhez és motiválásához. Azok a gyógyszerek, amelyek zavarják a DA átjutását, akadályozzák az erősítés tanulását, míg a DA átvitelét fokozó manipulációk, például agyi stimuláció és addiktív gyógyszerek gyakran megerősítő hatásúak (Bölcs, 2004). A DA továbbítása elengedhetetlen a jutalom elérésének motivációs állapotának megteremtéséhez (Berridge és Robinson, 1998; Salamone és munkatársai, 2007) és a cue-jutalmazási szövetségek emlékeinek létrehozására (Dalley és munkatársai, 2005). A DA felszabadítása nem szükséges a jutalom megtanulásának minden formájához, és az öröm okozása szempontjából nem mindig szereti „kedvelni”, de kritikus jelentőségű, ha a célokat „vágyakozni” kell az elérésük motiválása érdekében (Berridge és Robinson, 1998; Palmiter, 2008).

Az egyik hipotézis arról, hogy a dopamin miként támogatja a megerősítő tanulást, az az, hogy ez beállítja az idegsejtek közötti szinaptikus kapcsolatok erősségét. Ennek a hipotézisnek a legegyértelműbb változata az, hogy a dopamin a módosított hebbiai szabály szerint szabályozza a szinaptikus plaszticitást, amelyet nagyjából úgy lehet kijelenteni, hogy „az idegsejtek, amelyek együtt tüzet vezetnek össze, mindaddig, amíg a dopamin tört”. Más szavakkal: ha az A sejt aktiválja a B sejtet, és a B sejt olyan viselkedési tevékenységet okoz, amely jutalmat eredményez, akkor a dopamin felszabadul és az A → B kapcsolat megerősödik (Montague és munkatársai, 1996; Schultz, 1998). Ez a mechanizmus lehetővé tenné a szervezet számára, hogy megtanulja a haszonszerzéshez szükséges intézkedések optimális választását, ha elegendő kísérleti és hiba tapasztalattal rendelkezik. E hipotézissel összhangban a dopamin számos agyi régióban erőteljesen befolyásolja a szinaptikus plaszticitást (Surmeier és munkatársai, 2010; Goto és munkatársai, 2010; Molina-Luna és munkatársai, 2009; Marowsky és munkatársai, 2005; Lisman és Grace, 2005). Bizonyos esetekben a dopamin lehetővé teszi a szinaptikus plaszticitást a fent leírt hebbiai szabálynak megfelelően, oly módon, hogy összefüggésben legyen a jutalom-kereső magatartással (Reynolds és munkatársai, 2001). A dopaminnak a hosszú távú szinaptikus plaszticitásra gyakorolt ​​hatásain kívül azonnali ellenőrzést is gyakorolhat az idegi áramkörök felett azáltal, hogy modulálja az idegrendszeri spikert és a neuronok közötti szinaptikus kapcsolatokat (Surmeier és munkatársai, 2007; Robbins és Arnsten, 2009), egyes esetekben oly módon, hogy elősegítse az azonnali jutalom-kereső intézkedéseket (Frank, 2005).

A dopamin neuron jutalom jelei

A jutalomhoz vezető tevékenységek motiválása érdekében a dopamint fel kell szabadítani a jutalmazás során. Valójában a legtöbb DA-idegrendszert erősen aktiválja olyan váratlan primer jutalmak, mint az étel és a víz, amelyek gyakran fázisos aktivitást eredményeznek (Schultz, 1998) (fázisos gerjesztések, többszörös tüskékkel együtt) (Grace és Bunney, 1983)). Wolfram Schultz úttörő tanulmányai azonban kimutatták, hogy ezeket a DA neuronválaszokat nem váltja ki jutalomfogyasztás önmagában. Ehelyett egy „jutalom-előrejelzési hibára” hasonlítanak, és jelentik a kapott jutalom és az előrejelzett jutalom közötti különbséget (Schultz és munkatársai, 1997) (1A ábra). Tehát, ha a jutalom nagyobb, mint amire számítottak, a DA neuronok erősen izgatottak (pozitív predikciós hiba, 1E, piros); ha a jutalom kevesebb, mint az előre jelezte, vagy nem fordul elő a kijelölt időpontban, a DA neuronokat fokozatosan gátolják (negatív predikciós hiba, 1E, kék); és ha egy jutalmat előre megkapnak, hogy annak mérete teljes mértékben kiszámítható legyen, a DA idegsejteknek kevés vagy egyáltalán nincs válaszuk (nulla előrejelzési hiba, 1C ábra, fekete). Ugyanez az elv érvényes az érzékszervi jelekre adott DA válaszokra is, amelyek új információkat szolgáltatnak a jövőbeli jutalmakról. A DA neuronok izgatottak, ha egy dátuma jelzi a jövőbeli jutalom értékének növekedését (1C ábra, piros), gátolva, amikor a dátum jelzi a jövőbeli jutalom értékének csökkenését (1C ábra, kék), és általában kevéssé reagálnak a jelzésekre, amelyek nem szolgáltatnak új jutalominformációkat (1E, fekete). Ezek a DA válaszok egy bizonyos típusú jutalom-előrejelzési hibára emlékeztetnek, az úgynevezett időbeli különbség hibára vagy „TD hibára”, amelyet arra javasoltak, hogy megerősítő jelként szolgáljon a cselekvések és a környezeti állapotok értékének megismerésére (Houk és munkatársai, 1995; Montague és munkatársai, 1996; Schultz és munkatársai, 1997). A TD-szerű megerősítő jelet használó számítási modellek megmagyarázhatják a megerősítés tanulásának számos aspektusát emberekben, állatokban és a DA neuronokban (Sutton és Barto, 1981; Waelti és munkatársai, 2001; Montague és Berns, 2002; Dayan és Niv, 2008).

 

ábra 1

A jutalom-előrejelzési hibák dopamin kódolása és a prediktív információk preferenciája

A kísérletek lenyűgöző sorozata azt mutatta, hogy a DA jelek a jutalom előrejelzéseit olyan módon reprezentálják, amelyek szorosan megegyeznek a viselkedési preferenciákkal, ideértve a nagyobb jutalmak előnyben részesítését a kicsivel szemben (Tobler és munkatársai, 2005) valószínű jutalmak a valószínűtlenekkel szemben (Fiorillo és munkatársai, 2003; Satoh és munkatársai, 2003; Morris és munkatársai, 2004) és azonnali jutalom a késleltetett (Roesch és munkatársai, 2007; Fiorillo és munkatársai, 2008; Kobayashi és Schultz, 2008). Arra is van bizonyíték, hogy az emberek DA idegsejtjei kódolják a pénz jutalomértékét (Zaghloul és munkatársai, 2009). Ezenkívül a DA jelek a tanulás során is megjelennek, hasonlóan haladva a jutalom előrejelzésének viselkedési mutatóihoz (Hollerman és Schultz, 1998; Satoh és munkatársai, 2003; Takikawa és munkatársai, 2004; Day és munkatársai, 2007) és összefüggenek a jutalom preferencia szubjektív mutatóival (Morris és munkatársai, 2006). Ezek az eredmények megállapították, hogy a DA idegsejtek az agyban a jutalomkódolás egyik legjobban megértett és leginkább megismételhető példája. Ennek eredményeként a közelmúltban végzett tanulmányok DA neuronokat intenzív ellenőrzésnek vettek alá, hogy felfedezzék, hogyan generálják a jutalom előrejelzéseit, és hogyan hatnak jelzéseik a downstream struktúrákra a viselkedés ellenőrzése céljából.

A dopamin neuron jutalom jelei

A DA jutalomjeleinek megértésében a közelmúltban elért haladás három széles kérdés megfontolásából származik: Hogyan tanulhatják meg a DA idegsejtek a jutalom előrejelzéseit? Mennyire pontosak a jóslatok? És mit tekintnek jutalmazásuknak?

Hogyan tanulhatják meg a DA neuronok a jutalom előrejelzéseit? A klasszikus elméletek azt sugallják, hogy a jutalom előrejelzéseit egy fokozatos megerősítési folyamaton keresztül lehet megtanulni, amelyhez ismételt stimulus-jutalom párosítás szükséges (Rescorla és Wagner, 1972; Montague és munkatársai, 1996). Minden alkalommal, amikor az A stimulust váratlan jutalom követi, az A becsült értéke növekszik. A legfrissebb adatok azonban azt mutatják, hogy a DA-idegsejtek túlmutatnak az egyszerű inger-jutalom tanuláson, és előrejelzéseket készítenek a világ szerkezetével kapcsolatos kifinomult hiedelmek alapján. A DA idegsejtek még a nem szokatlan környezetben is megjósolhatják a jutalmakat, még akkor is, ha a stimulusokkal párosított jutalmak a csökkenés az inger értékében (Satoh és munkatársai, 2003; Nakahara és munkatársai, 2004; Bromberg-Martin és munkatársai, 2010c), vagy megváltoztathatja egy teljesen más inger értékét (Bromberg-Martin és munkatársai, 2010b). A DA neuronok jutalomjeleiket a jutalomeloszlás magasabb rendű statisztikája alapján is adaptálhatják, például a predikciós hibajeleket skálázhatják a várt variancia alapján (Tobler és munkatársai, 2005) és az eloltott jutalomra adott válaszok spontán visszanyerésére (Pan és munkatársai, 2008). Mindezek a jelenségek figyelemre méltó párhuzamot képeznek az érzékszervi és motoros alkalmazkodásban tapasztalt hasonló hatásokkal (Braun és munkatársai, 2010; Fairhall és munkatársai, 2001; Shadmehr és munkatársai, 2010), arra utalva, hogy tükrözik a prediktív tanulás általános idegi mechanizmusát.

Mennyire pontosak a DA jutalom előrejelzései? A legújabb tanulmányok kimutatták, hogy a DA idegsejtek hűen igazítják jutalomjeleiket a predikciós bizonytalanság három forrásának figyelembevételéhez. Először, az embereket és az állatokat a belső időzítési zaj szenvedi, amely megakadályozza őket abban, hogy megbízható előrejelzéseket tegyenek a hosszú dákótámogatási időintervallumokról (Gallistel és Gibbon, 2000). Tehát, ha a dátum-jutalom késése rövid (1 – 2 másodperc), az időzítési előrejelzések pontosak és a jutalom kézbesítés kevés DA-választ vált ki, de hosszabb cue-jutalmi késések esetén az időzítési előrejelzések kevésbé megbízhatóak és a jutalmak egyértelmű DA-sorozatot idéznek elő (Kobayashi és Schultz, 2008; Fiorillo és munkatársai, 2008). Másodszor, a hétköznapi életben sok útmutatás pontatlan, meghatározva a jutalom kiszállítási idejének széles eloszlását. A DA neuronok ismét tükrözik az időzítési bizonytalanság ilyen formáját: fokozatosan gátolják őket a változó jutalom késések során, mintha egyre növekvő negatív jutalom-előrejelzési hibákat jeleznének, amikor a jutalom nem jelenik meg (Fiorillo és munkatársai, 2008; Bromberg-Martin és munkatársai, 2010a; Nomoto és munkatársai, 2010). Végül, sok útmutatás érzékeltetően bonyolult, és részletes ellenőrzést igényel annak érdekében, hogy határozott következtetésre juthassanak jutalom értékükről. Ilyen esetekben a DA jutalmazási jelek hosszú késéssel és fokozatosan fordulnak elő, és úgy tűnik, hogy tükrözik az észlelési információk fokozatos áramlását az ingerérték dekódolásakor (Nomoto és munkatársai, 2010).

Milyen eseményeket kezelnek a DA idegsejtek jutalmazónak? A jutalom tanulásának szokásos elméletei azt sugallják, hogy a DA idegsejtek a jövőbeli elsődleges jutalom várható összege alapján adnak értéket (Montague és munkatársai, 1996). Még ha az elsődleges jutalom mértéke állandó is, az emberek és az állatok gyakran további előnyben részesítik a kiszámíthatóságot - olyan környezetet keresnek, ahol az egyes jutalmak mérete, valószínűsége és időzítése előre ismert.Daly, 1992; Chew és Ho, 1994; Ahlbrecht és Weber, 1996). A majmokkal egy nemrégiben végzett tanulmány szerint a DA idegsejtek jelezték ezt a preferenciát (Bromberg-Martin és Hikosaka, 2009). A majmok határozottan kedvelték az informatív vizuális útmutatások megtekintését, amelyek lehetővé tennék számukra a jövőbeli jutalom mértékének előrejelzését, nem pedig az olyan információt nem mutató útmutatások, amelyek nem szolgáltattak új információt. Ezzel párhuzamosan a DA-idegsejteket izgatotta az a lehetőség, hogy az információs útmutatásokat az állat viselkedésbeli preferenciájával összefüggésben tudja megtekinteni (1B, D ábra). Ez arra utal, hogy a DA idegsejtek nemcsak motiválják a jutalom megszerzésére irányuló tevékenységeket, hanem ösztönzik azokat a tevékenységeket is, amelyek pontos előrejelzéseket készítenek ezekről a jutalmakról, annak biztosítása érdekében, hogy a jutalmak megfelelő módon előre jelezhetők és előre felkészüljenek.

Összefoglalva, ezek az eredmények azt mutatják, hogy a DA jutalom-előrejelzési hibajelek érzékenyek a kifinomult tényezőkre, amelyek tájékoztatják az emberi és állati jutalom előrejelzéseit, ideértve a magas rendű jutalom-statisztikákhoz való alkalmazkodást, a jutalom bizonytalanságát és a prediktív információk preferenciáit.

A fázisos dopamin jutalmazó jelek hatása a downstream struktúrákra

A DA jutalomválaszok szinkron fázisos sorozatban fordulnak elő (Joshua és munkatársai, 2009b), egy válaszmintázat, amely formálja a DA felszabadulását a célszerkezetekben (Gonon, 1988; Zhang és munkatársai, 2009; Tsai és munkatársai, 2009). Régóta elméletük szerint ezek a fázisos kitörések a tonizáló DA aktivitástól elkülönülten befolyásolják a tanulást és a motivációt (Grace, 1991; Grace és munkatársai, 2007; Schultz, 2007; Lapish és munkatársai, 2007). A nemrégiben kifejlesztett technológia lehetővé tette ennek a hipotézisnek a megerősítését a DA idegsejtek aktivitásának finom térbeli és időbeli pontosságú szabályozásával. A VTA DA idegsejtek optogenetikus stimulálása erős kondicionált helypreferenciát vált ki, amely csak akkor fordul elő, ha a stimulációt felszakítási mintázatban alkalmazzák (Tsai és munkatársai, 2009). Ezzel szemben a DA-idegsejtekből származó NMDA-receptorok genetikai kiesése, amely hátráltatja a robbanást, miközben a tonikus aktivitást nagyrészt érintetlennek tartja, szelektív károsodást okoz a jutalomtanulás speciális formáiban (Zweifel és munkatársai, 2009; Parker és munkatársai, 2010) (bár vegye figyelembe, hogy ez a kiesés a DA neuron szinaptikus plaszticitását is rontja (Zweifel és munkatársai, 2008)). A DA sorozat javíthatja a jutalom tanulását a helyi idegi áramkörök újrakonfigurálásával. Nevezetesen, a jutalom-prediktív DA-töréseket a nucleus carrbens meghatározott régióira küldik, és ezeknek a régióknak különösen magas a jutalom-prediktív idegi aktivitása (Cheer és munkatársai, 2007; Owesson-White és munkatársai, 2009).

A fázistörésekkel összehasonlítva kevésbé ismertek a fázisos szünetek fontosságáról a negatív jutalombecslési hibák előidézésében. Ezek a szünetek kisebb változásokat okoznak a tüskék arányában, kevésbé modulálják a jutalomvárakozás (Bayer és Glimcher, 2005; Joshua és munkatársai, 2009a; Nomoto és munkatársai, 2010), és kisebb hatással lehet a tanulásra (Rutledge és munkatársai, 2009). Bizonyos típusú negatív előrejelzési hibák elsajátításához azonban szükség van a VTA-ra (Takahashi és mtsai., 2009), ami arra utal, hogy a szakaszos szünetek továbbra is dekódolhatók a downstream struktúrák segítségével.

Mivel a törések és a szünetek a DA felszabadulásának nagyon eltérő mintázatát okozzák, valószínűleg különféle mechanizmusok révén befolyásolják a downstream struktúrákat. A DA hipotézis egyik legfontosabb célpontjában, a dorsalis striatumban nemrégiben vannak bizonyítékok erre a hipotézisre. A dorális striatum vetület neuronok kétféle típusúak, amelyek különböző DA receptorokat expresszálnak. Az egyik típus a D1 receptorokat fejezi ki és a bazális ganglionok „közvetlen útjába” juttatja a test mozgását; a második típus a D2 receptorokat fejezi ki, és a testmozgások elnyomására „közvetett útvonalra” terjed ki (ábra 2) (Albin és munkatársai, 1989; Gerfen és munkatársai, 1990; Kravitz és munkatársai, 2010; Hikida és munkatársai, 2010). Ezen útvonalak és receptorok tulajdonságai alapján elmélet szerint a DA sorozat magas DA körülményeket hoz létre, aktiválja a D1 receptorokat, és a közvetlen útvonalat nagy értékű mozgások kiválasztására (2A ábra), míg a DA szünetek alacsony DA körülményeket hoznak létre, gátolják a D2 receptorokat, és az indirekt út révén elnyomják az alacsony értékű mozgásokat (2B ábra) (Frank, 2005; Hikosaka, 2007). Ezzel a hipotézissel összhangban a magas DA receptor aktiválás elősegíti a cortico-striatális szinapszisok potenciális fokozódását a közvetlen úton (Shen és munkatársai, 2008) és a pozitív eredményekből való tanulás (Frank és munkatársai, 2004; Voon és munkatársai, 2010), míg a striatális D1 receptor blokád szelektíven gátolja a jutalmazott célok mozgását (Nakamura és Hikosaka, 2006). Hasonló módon az alacsony DA receptor aktiválás elősegíti a kortiko-striatális szinapszisok fokozódását a közvetett úton (Shen és munkatársai, 2008) és tanulás a negatív eredményekből (Frank és munkatársai, 2004; Voon és munkatársai, 2010), míg a striatális D2 receptor blokád szelektíven gátolja a nem jutalmazott célok mozgását (Nakamura és Hikosaka, 2006). A D1 és a D2 receptor funkcióknak ez a megosztása a motivációs kontrollban megmagyarázza a DA-hoz kapcsolódó géneknek az emberi viselkedésre gyakorolt ​​hatásait (Ullsperger, 2010; Frank és Fossella, 2010), és meghaladhatja a háti striatumot, mivel vannak bizonyítékok a hasonló munkamegosztásról a ventrális striatumban (Grace és munkatársai, 2007; Lobo és munkatársai, 2010).

 

ábra 2

A pozitív és negatív motiváció dopaminszabályozása a hátsó striatumban

Noha a fenti séma egyszerű képet ad a viselkedés szakaszos DA ellenőrzéséről a striatumra gyakorolt ​​hatásán keresztül, a teljes kép sokkal összetettebb. A DA befolyásolja a jutalomhoz kapcsolódó viselkedést azáltal, hogy számos agyrégióra hat, beleértve a prefrontalis cortexet (Hitchcott és munkatársai, 2007), rhinal cortex (Liu és munkatársai, 2004), hippokampusz (Packard és fehér, 1991; Grecksch és Matties, 1981) és amygdala (Phillips és munkatársai, 2010). A DA hatása ezekben a régiókban valószínűleg nagymértékben különbözik a DA beidegződése sűrűségének, a DA transzporterek, metabolikus enzimek, autoreceptorok, receptorok és az intracelluláris jelátviteli útvonalakhoz kapcsolódó receptorok kapcsoltsága miatt (Neve és munkatársai, 2004; Bentivoglio és Morelli, 2005; Frank és Fossella, 2010). Ezenkívül, legalábbis a VTA-ban, a DA neuronok eltérő sejttulajdonságokkal rendelkezhetnek, a projekciós céloktól függően (Lammel és munkatársai, 2008; Margolis és munkatársai, 2008), és néhányuk figyelemre méltó képességgel rendelkezik a glutamát és a dopamin (Descarries és munkatársai, 2008; Chuhma és munkatársai, 2009; Hnasko és munkatársai, 2010; Tecuapetla és munkatársai, 2010; Stuber és munkatársai, 2010; Birgner és munkatársai, 2010). Így a DA idegsejteknek az idegi feldolgozás feletti teljes körű ellenőrzése csak most kezd felfedezni.

Változatos dopaminválasz a riasztó eseményekre

Az idegseg reakció az agresszív eseményekre kritikus tesztet tesz a motivációs kontroll funkciói szempontjából (Schultz, 1998; Berridge és Robinson, 1998; Redgrave és munkatársai, 1999; Horvitz, 2000; Joseph és munkatársai, 2003). Sok szempontból a jutalmazást és az ellentmondást okozó eseményeket ellentétes módon kezeljük, tükrözve ellentéteiket motivációs érték. Jutalmakat keresünk, és pozitív értéket tulajdonítunk nekik, miközben elkerüljük az agresszív eseményeket, és negatív értéket tulajdonítunk nekik. Más tekintetben a jutalmazást és az ellentmondást okozó eseményeket hasonló módon kezeljük, tükrözve azok hasonlóit motivációs nyugalom [FOOTNOTE1]. Mind a jutalmazó, mind az ellentétes események kiváltják a figyelem irányítását, a kognitív feldolgozást és növelik az általános motivációt.

Ezen funkciók közül melyiket támogatják a DA neuronok? Régóta ismert, hogy a stresszes és riasztó tapasztalatok nagy változásokat okoznak a DA koncentrációjában az agyi áramlási szakaszokban, és hogy a tapasztalatokra gyakorolt ​​viselkedési reakciókat drasztikusan megváltoztatják a DA agonisták, antagonisták és léziók (Salamone, 1994; Di Chiara, 2002; Pezze és Feldon, 2004; Young és munkatársai, 2005). Ezek a tanulmányok meglepően sokféle eredményt hoztak, (Levita és munkatársai, 2002; Di Chiara, 2002; Young és munkatársai, 2005). Sok tanulmány összhangban áll a motivációs ösztönzést kódoló DA neuronokkal. Beszámolnak arról, hogy az agresszív események növelik a DA szintet, és hogy a viselkedés iránti elkerülést a DA átvitel magas szintje támogatja (Salamone, 1994; Joseph és munkatársai, 2003; Ventura és munkatársai, 2007; Barr és munkatársai, 2009; Fadok és munkatársai, 2009), beleértve a fázisos DA sorozatot (Zweifel és munkatársai, 2009). De más tanulmányok jobban összhangban vannak a motivációs értéket kódoló DA neuronokkal. Beszámolnak arról, hogy az agresszív események csökkentik a DA szintet, és hogy a magatartás elleni küzdelmet az DA átvitel alacsony szintje támogatja (Mark és mtsai., 1991; Shippenberg és munkatársai, 1991; Liu és munkatársai, 2008; Roitman és munkatársai, 2008). Sok esetben ezeket a vegyes eredményeket találták egyetlen vizsgálatban, amelyek azt mutatják, hogy az agresszív tapasztalatok eltérő DA felszabadulási mintákat okoznak a különböző agyszerkezetekben (Thierry és munkatársai, 1976; Besson és Louilot, 1995; Ventura és munkatársai, 2001; Jeanblanc és munkatársai, 2002; Bassareo és munkatársai, 2002; Pascucci és munkatársai, 2007), és hogy a DA-val összefüggő gyógyszerek neurális és viselkedési hatások keverékét eredményezhetik, hasonlóan a jutalmazó és a riasztó tapasztalatokhoz (Ettenberg, 2004; Wheeler és munkatársai, 2008).

A DA felszabadulási mintáinak és funkcióinak ilyen sokfélesége nehéz összeegyeztethető azzal az elképzeléssel, hogy a DA neuronok egységes motivációs jelet közvetítenek az összes agyszerkezetre. Ezek a változatos válaszok azonban megmagyarázhatók, ha a DA neuronok is különféleek - több idegpopulációból állnak, amelyek támogatják az averzív feldolgozás különféle aspektusait. Ezt a nézetet altatott állatokban végzett neurális felvételi vizsgálatok támasztják alá. Ezek a tanulmányok kimutatták, hogy a DA káros idegekben a káros ingerek gerjesztést idéznek elő, míg más DA neuronokban gátlást okoznak (Chiodo és munkatársai, 1980; Maeda és Mogenson, 1982; Schultz és Romo, 1987; Mantz és munkatársai, 1989; Gao és munkatársai, 1990; Coizet és munkatársai, 2006). Fontos szempont, hogy mind az ingerlő, mind a gátló válasz olyan neuronokban fordul elő, amelyek dopaminergnek bizonyultak a juxtacelluláris jelölés alkalmazásával (Brischoux és munkatársai, 2009) (ábra 3). Az averzív reakciók hasonló változatossága fordul elő az aktív viselkedés során. A DA idegsejtek különböző csoportjait fokozatosan gerjesztik vagy gátolják averz események, beleértve a bőr káros stimulációját (Kiyatkin, 1988a; Kiyatkin, 1988b), érzéki jelzések, amelyek előrehozó sokkokat előre jeleznek (Guarraci és Kapp, 1999), riasztó légpofák (Matsumoto és Hikosaka, 2009b), és az érzékszervi jelek előrehozó légpárnák előrejelzésére (Matsumoto és Hikosaka, 2009b; Joshua és munkatársai, 2009a). Ezen túlmenően, ha két DA idegsejt egyidejűleg rögzítenek, az averzív válaszuk általában kevés kísérleti korrelációt mutat egymással (Joshua és munkatársai, 2009b), amely arra utal, hogy az averzív válaszokat a DA populáció egészében nem koordinálják.

 

ábra 3

Változatos dopamin neuronválaszok averzív eseményekre

Ahhoz, hogy megértsük a különféle ellentétes válaszok funkcióit, tudnunk kell, hogyan kombináljuk azokat a jutalomreakciókkal, hogy értelmes motivációs jelet hozzunk létre. Egy nemrégiben végzett tanulmány ezt a témát vizsgálta, és kiderült, hogy a DA neuronok több populációra oszlanak meg, amelyek motivációs szignálok különböznek (Matsumoto és Hikosaka, 2009b). Az egyik populációt a jutalmazó események izgatják, és az averz események gátolják, mintha kódolnák motivációs érték (4A ábra). A második populációt mind a jutalmazás, mind a riasztó események izgatják hasonló módon, mintha kódolnának motivációs nyugalom (4B ábra). Mindkét populációban sok neuron érzékeny a jutalomra és az averzív előrejelzésekre: akkor reagálnak, ha a jutalmazási események jövedelmezőbbek, mint ahogy az előre jelezték, és amikor az averzív események sokkal inkább riasztóak, mint ahogy az előre jelzett volt (Matsumoto és Hikosaka, 2009b). Ez azt mutatja, hogy riasztó válaszukat valóban az averz események előrejelzése okozza, kizárva annak lehetőségét, hogy azokat nem-specifikus tényezők, például nyers érzékszervi bemenetek vagy általános juttatásokkal járó társulások okozzák (Schultz, 2010). Ez a két populáció azonban prediktív kódjuk részletes jellege szempontjából különbözik. A motivációs értéket kódoló DA idegsejtek pontos predikciós hibajelet kódolnak, ideértve a haszon elmulasztásával történő erőteljes gátlást és az agresszív események mulasztásának enyhe gerjesztését (4A ábra, jobb). Ezzel szemben a motivációs nyugalmat kódoló DA neuronok reagálnak, ha észlelhető események vannak jelen, de nem vannak hiányukban (4B ábra, jobbra), összhangban az izgalom elméleti fogalmaival (Lang és Davis, 2006) [FOOTNOTE2]. A két DA neuronpopulációra akkor is bizonyítékot figyeltek meg, ha az idegi aktivitást átlagolt módon vizsgálták. Így a DA-rendszer különböző részeire irányuló kutatások fázisos DA-jeleket találtak, amelyek gátlásukkal ellenkező eseményeket kódolnak (Roitman és munkatársai, 2008), hasonlóan a motivációs érték kódolásához, vagy gerjesztéssel (Joshua és munkatársai, 2008; Anstrom és munkatársai, 2009), hasonlóan a motivációs ösztönzés kódolásához.

 

ábra 4

Különböző dopamin neuronpopulációk, amelyek motivációs értéket és megfontoltságot kódolnak

Úgy tűnik, hogy ezek a legfrissebb eredmények ellentmondnak egy korai jelentésnek, miszerint a DA idegsejtjei inkább jutalom-utalásokra reagálnak, mint riasztó jelekre (Mirenowicz és Schultz, 1996). Szorosan megvizsgálva azonban még ez a tanulmány is teljes mértékben összhangban áll a DA érték és a szálkódolással. Ebben a tanulmányban a jutalomjelek nagy valószínűséggel (> 90%) jutalomkimenetelekhez vezettek, míg az averzív jelzések alacsony valószínűséggel (<10%) aversív eredményekhez. Ennélfogva az érték és az ékességet kódoló DA idegsejtek alig reagálnak az averzív jelekre, pontosan kódolva alacsony averzivitásukat.

A motivációs érték és az észlelési jelek funkcionális szerepe

Összességében a fenti megállapítások azt mutatják, hogy a DA neuronok több populációra oszlanak meg, amelyek alkalmasak a motivációs kontroll különálló szerepeire. A motivációs értéket kódoló DA neuronok jól illeszkednek a dopamin neuronok jelenlegi elméleteihez és a jutalom feldolgozásához (Schultz és munkatársai, 1997; Berridge és Robinson, 1998; Bölcs, 2004). Ezek az idegselek egy teljes predikciós hibajelet kódolnak, és a jutalmazó és averzív eseményeket ellentétes irányokba kódolják. Így ezek az idegselek megfelelő oktató jelet szolgáltatnak a kereséshez, az értékeléshez és az érték megtanulásához (ábra 5). Ha egy stimulus miatt az értékkódoló DA neuronok izgatottak, akkor megközelítenünk kell azt, nagy értéket kell hozzárendelnünk, és meg kell tanulnunk cselekedeteket, hogy a jövőben újra megkeressük. Ha egy stimulus miatt az DA értékét kódoló DA neuronok gátlottak, akkor kerülnünk kell, hozzá kell adnunk az alacsony értéket és meg kell tanulnunk a jövőbeni ismételt elkerülésének lehetőségeit.

 

ábra 5

A motivációs érték, a jóindulatú és a riasztó jelek feltételezett funkciói

Ezzel szemben a DA idegsejteket kódoló motivációs ösztönző hatás jól illeszkedik a dopamin idegsejtek elméleteihez és a jóindulatú események feldolgozásához (Redgrave és munkatársai, 1999; Horvitz, 2000; Joseph és munkatársai, 2003; Kapur, 2003). Ezeket a neuronokat mind jutalmazó, mind riasztó események gerjesztik, és a semleges eseményekre gyengébben reagálnak, és megfelelő oktatójelet szolgáltatnak az idegi áramkörökhöz, hogy megtanulják felismerni, megjósolni és reagálni a nagy jelentőségű helyzetekre. Itt három ilyen agyi rendszert (ábra 5). Először a vizuális és a figyelem-orientáló idegáramköröket kalibrálják, hogy felfedezzék az összes eseménytípust, mind jutalmazó, mind riasztó jellegű információkat. Például, mind a jutalom, mind a riasztó jelzés hatékonyabban vonzza az orientáló reakciókat, mint a semleges útmutatások (Lang és Davis, 2006; Matsumoto és Hikosaka, 2009b; Austin és Duka, 2010). Másodszor, mind a jutalmazó, mind az averzív helyzetek bekapcsolják az idegrendszereket a kognitív kontroll és a cselekvés kiválasztása érdekében - munkamemóriát kell bevonnunk az információk szem előtt tartása érdekében, konfliktusok megoldását kell választanunk a cselekvés irányáról, és hosszú távú memóriával kell emlékeznünk az eredményül (Bradley és munkatársai, 1992; Botvinick és munkatársai, 2001; Savine és munkatársai, 2010). Harmadsorban, mind a jutalmazó, mind az idegenkedõ helyzetek megnövelik az általános motivációt a tevékenységek fellendülésére és a megfelelõ végrehajtásuk biztosítására. A DA idegsejtek valóban kritikus fontosságúak a nagy értékű célok elérése érdekében, és a feladatkövetelmények ismereteinek megbízható motoros teljesítménnyé alakításában (Berridge és Robinson, 1998; Mazzoni és munkatársai, 2007; Niv és munkatársai, 2007; Salamone és munkatársai, 2007).

Dopamin gerjesztés az érzékszervi jelek figyelmeztetésével

A motivációs értéket és a jóindulatot kódoló jeleken túl a DA neuronok többsége többféle szenzoros eseményre reagál, amelyek nincsenek közvetlenül összefüggésben a jutalmazással vagy a riasztó tapasztalatokkal. Ezeket a válaszokat számos idegi és pszichológiai tényezőtől függően határozták meg, ideértve a közvetlen érzékszervi bemenetet, meglepetést, újdonságot, izgalmat, figyelmet, megfigyelést, általánosítást és ál-kondicionálást (Schultz, 1998; Redgrave és munkatársai, 1999; Horvitz, 2000; Lisman és Grace, 2005; Redgrave és Gurney, 2006; Joshua és munkatársai, 2009a; Schultz, 2010).

Itt megpróbáljuk ezeket az ötleteket szintetizálni, és ezeket a DA válaszokat egyetlen mögöttes jel, an figyelmeztető jel (ábra 5). Az „riasztás” kifejezést Schultz (Schultz, 1998), mint általános figyelmeztető események. Itt konkrétabb értelemben használjuk. Riasztási esemény alatt olyan váratlan érzékszervet értünk, amely megragadja a figyelmet annak lehetséges fontosságának gyors felmérése alapján, olyan egyszerű jellemzőkkel, mint a hely, a méret és az érzékszervi mód. Az ilyen figyelmeztető események gyakran azonnali viselkedési reakciókat váltanak ki, hogy kivizsgálják őket és meghatározzák azok pontos jelentését. Így a DA riasztási jelek általában rövid késéssel fordulnak elő, egy inger durva tulajdonságain alapulnak, és a legmegfelelőbbek az azonnali reakciókkal, például az orientáló reakciókkal (Schultz és Romo, 1990; Joshua és munkatársai, 2009a; Schultz, 2010). Ez ellentétben áll a DA-idegsejtek más motivációs jeleivel, amelyek jellemzően hosszabb latenciával fordulnak elő, figyelembe veszik az inger pontos identitását, és a legjobban összefüggenek olyan megfontolt viselkedési cselekedetekkel, mint például a megközelítési vagy elkerülési döntések (Schultz és Romo, 1990; Joshua és munkatársai, 2009a; Schultz, 2010).

A DA riasztási válaszokat olyan meglepő szenzoros események válthatják ki, mint például váratlan fény villanások és hallható kattintások, amelyek az SNc és a VTA egész területén a DA neuronok 60 – 90% -ában jelentkező burst gerjesztést váltanak ki (Strecker és Jacobs, 1985; Horvitz és munkatársai, 1997; Horvitz, 2000) (6A ábra). Ezek a figyelmeztető válaszok úgy tűnik, hogy tükrözik, hogy az inger milyen meglepő, és megragadja a figyelmet; ezek csökkennek, ha egy stimulus előre jelezhető időpontokban fordul elő, ha máshol figyelmet fordítanak, vagy alvás közben (Schultz, 1998; Takikawa és munkatársai, 2004; Strecker és Jacobs, 1985; Steinfels és munkatársai, 1983). Például egy váratlan kattanó hang egy kiemelkedő DA robbanást idéz elő, amikor a macska passzív állapotban van csendes ébrenlétkor, de ennek nincs hatása, ha a macska figyelmet igénylő tevékenységekben vesz részt, például patkány vadászata, etetés, ápolás, kisállat a kísérletező által, és így tovább (Strecker és Jacobs, 1985) (6A ábra). Hasonlóképpen, a DA sorozatválaszokat érzékelési események váltják ki, amelyek fizikailag gyengék, de újszerűségük miatt figyelmeztetnek (Ljungberg és munkatársai, 1992; Schultz, 1998). Ezek a válaszok megszokják, amikor az új stimulus megismerkedik, párhuzamosan az orientáló reakciók megszokásával (6B ábra). Ezen eredményekkel összhangban a meglepő és újszerű események váltják fel a DA felszabadulását a downstream struktúrákban (Lisman és Grace, 2005) és aktiválja a DA-val kapcsolatos agyi köröket oly módon, hogy alakítsák a jutalomfeldolgozást (Zink és munkatársai, 2003; Davidson és munkatársai, 2004; Duzel és munkatársai, 2010).

 

ábra 6

Dopamin idegsejtek izgató válaszai riasztási eseményekre

A DA riasztási válaszokat váratlan szenzoros jelek is kiváltják, amelyek új információt szolgáltatnak a motivációs szempontból kiemelkedő eseményekről. Ahogyan a rövid késleltetésű riasztási jelre számíthatunk, ezek a válaszok meglehetősen nem szelektívek: bármilyen stimulus kiváltja őket, amelyek csupán hasonlít motivációs szempontból kiemelkedő cél, még akkor is, ha a hasonlóság nagyon csekély (egy általánosításnak nevezett jelenség) (Schultz, 1998). Ennek eredményeként a DA idegsejtek gyakran stimulusra reagálnak két jel keverékével: egy gyors figyelmeztető jel, amely azt kódolja, hogy az inger potenciálisan fontos, és egy második jelet, amely azt kódolja tényleges jutalmazó vagy riasztó jelentés (Schultz és Romo, 1990; Waelti és munkatársai, 2001; Tobler és munkatársai, 2003; Day és munkatársai, 2007; Kobayashi és Schultz, 2008; Fiorillo és munkatársai, 2008; Nomoto és munkatársai, 2010) (lát (Kakade és Dayan, 2002; Joshua és munkatársai, 2009a; Schultz, 2010) ellenőrzésre). Példa egy, a DA ábra szerinti neuronokat kódoló motivációs ösztönző sorozatra mutat 6C ábra (Bromberg-Martin és munkatársai, 2010a). Ezeket az idegsejteket jutalom és riasztó jelzések gerjesztették, de semleges dákó izgatotta őket is. A semleges vámot soha nem hozták párban a motivációs eredményekkel, de fizikailag (kissé) hasonlítottak a jutalomhoz és az idegesítő jelek.

Ezek a riasztási válaszok szorosan kapcsolódnak az érzékszervi dák képességéhez, hogy orientáló reakciókat váltjon ki, hogy tovább vizsgálja és jelentését felfedezzék. Ez három figyelemre méltó tulajdonságban látható. Először is, a riasztási válaszok csak érzékszervi jelekre vonatkoznak, amelyeket jelentésük megvizsgálása céljából kell megvizsgálni, nem pedig a természetüknél fogva jutalmazó vagy riasztó események, például a gyümölcslé vagy a légcsövek szállítása (Schultz, 2010). Másodszor, a riasztási válaszok csak akkor fordulnak elő, ha egy dákó potenciálisan fontos és képes orientáló reakciókat kiváltani, nem akkor, ha a dákó nem releváns a feladathoz, és nem vált ki orientáló reakciókat (Schultz és Romo, 1990). Harmadszor, a riasztási reakciók fokozódnak olyan helyzetekben, amikor a jelzések hirtelen figyelmeztető eltolódást idéznek elő - amikor váratlan időben jelennek meg, vagy a tekintet központjától távol (Bromberg-Martin és munkatársai, 2010a). Tehát amikor a motivációs jelek kiszámíthatatlan ütemezésével jelennek meg, akkor azonnali orientáló reakciókat és általános DA figyelmeztető reakciót váltanak ki - az összes jel gerjesztése, beleértve a semleges jeleket is (6C ábra, fekete). De ha időzítésük kiszámíthatóvá válik - például azáltal, hogy az alanyokat egy másodperccel a jelölések megjelenése előtt bemutatott „próbaindító jelzéssel” figyelmeztetik - a jelzések már nem idéznek elő figyelmeztető választ (6D, szürke). Ehelyett a riasztási válasz a próba indulási dátumára változik - a próba első olyan eseménye, amely kiszámíthatatlan időzítéssel rendelkezik és orientáló reakciókat vált ki (6D, fekete).

Mi a mögöttes mechanizmus, amely a DA neuron riasztási jeleket generálja? Az egyik hipotézis az, hogy a riasztási válaszok egyszerűen jutalom-előrejelzési hibajelek, amelyek rövid késleltetéssel fordulnak elő, és kódolják az inger várt jutalomértékét, még mielőtt az teljesen megkülönböztette volna őket (Kakade és Dayan, 2002). A legfrissebb bizonyítékok azonban azt sugallják, hogy a riasztási jeleket a hagyományos DA jutalmazási jelektől eltérő mechanizmus generálhatja (Satoh és munkatársai, 2003; Bayer és Glimcher, 2005; Bromberg-Martin és munkatársai, 2010a; Bromberg-Martin és munkatársai, 2010c; Nomoto és munkatársai, 2010). A leg feltűnőbb, hogy a próbaindító jelre adott riasztási válasz nem korlátozódik a feladatok jutalmazására; azonos erősségű lehet olyan támadó feladat során, amelyben jutalmat nem kapnak (6C ábra, D, alul, „riasztó feladat”). Ez akkor is fordul elő, ha a hagyományos DA jutalomjelek ugyanazon idegsejtekben helyesen jelzik, hogy a jutalmazási feladat várható értéke sokkal nagyobb, mint az averzív feladat (Bromberg-Martin és munkatársai, 2010a). Ezek a riasztási jelek nem pusztán értékkódolás, vagy pusztán az élethűségkódolás egyik formája, mivel mind a motivációs érték, mind az élelmezéskódoló DA idegsejtek többségében előfordulnak (Bromberg-Martin és munkatársai, 2010a). A második disszociáció abban látható, hogy a DA neuronok a múltbeli jutalom kimeneteleinek emlékezete alapján előre jelzik a jövőbeli jutalmakat (Satoh és munkatársai, 2003; Bayer és Glimcher, 2005). Míg a hagyományos DA jutalmazási jeleket egy hosszú időtartamú memória nyomkövetés vezérli, amely a jutalom pontos előrejelzése céljából van optimalizálva, a próbaindító jelre adott riasztási válaszokat külön memória nyomkövetés vezérli, amely hasonlít a közvetlen orientációs reakciók során észlelthez (Bromberg-Martin és munkatársai, 2010c). A harmadik disszociáció abban látható, hogy ezek a jelek eloszlanak a DA neuronpopulációban. Míg a hagyományos DA jutalomjelek a legerősebbek a ventromedialis SNc-ben, a próbaindító jelre (és más váratlanul időzített jelzésekre) figyelmeztető válaszokat az egész SNc-n keresztül sugározzák (Nomoto és munkatársai, 2010).

A hagyományos jutalmazási jelektől való ezen disszociációval ellentétben a DA riasztási jelek korrelálnak a riasztási eseményhez való orientáció és megközelítés sebességével (Satoh és munkatársai, 2003; Bromberg-Martin és munkatársai, 2010a; Bromberg-Martin és munkatársai, 2010c). Ez arra utal, hogy a riasztási jeleket egy neurális folyamat generálja, amely a gyors reakciókat motiválja a potenciálisan fontos események kivizsgálására. Jelenleg sajnos viszonylag keveset tudunk arról, hogy pontosan mely eseményekről beszél ez a folyamat „fontosnak”. Például, hogy a riasztási válaszok ugyanolyan érzékenyek-e a jutalmazásra és a riasztó eseményekre? A riasztási válaszok ismertek olyan ingerek esetén, amelyek hasonlítanak a jutalomra, vagy amelyek hasonlóak a jutalomra és a rákkeltő útmutatásokra (pl. Ugyanazon érzékszervi módszer megosztásával). De még nem ismeretes, hogy riasztási válaszok fordulnak-e elő olyan ingerek esetén, amelyek kizárólag az idegesítő jelekre hasonlítanak.

A dopamin riasztó jelek funkcionális szerepe

Mint láttuk, a riasztási jeleket valószínűleg egy külön mechanizmus generálja, a motivációs értéktől és az észlelési jelektől. A riasztási jelek azonban mind a motivációs értéket, mind a szalonképességet kódoló DA idegsejteket továbbítják, és ezért valószínűleg az agyi feldolgozást és viselkedést szabályozzák az érték- és az észlelési jelekhez hasonló módon (ábra 5).

A motivációs kényszerkódoló DA idegsejtekre küldött riasztási jelek támogatnák a figyelmeztetés irányítását a riasztási ingerre, a kognitív erőforrások bevonását a jelentés felfedezéséhez és a cselekvési terv eldöntéséhez, és növelnék a motivációs szintet a terv hatékony végrehajtásához (ábra 5). Ezek a hatások az idegfeldolgozásra gyakorolt ​​azonnali hatások révén vagy a riasztási esemény észleléséhez vezető tevékenységek megerősítésével jelentkezhetnek. Ez a funkcionális szerep jól illeszkedik a DA riasztási válaszok és a riasztási stimulusra gyakorolt ​​gyors viselkedési reakciók közötti korrelációhoz, valamint az elméletekkel, hogy a rövid késleltetésű DA-idegválaszok részt vesznek a figyelem irányításában, az izgalom fokozásában, a kognitív feldolgozás fokozásában és az azonnali viselkedési reakciókban (Redgrave és munkatársai, 1999; Horvitz, 2000; Joseph és munkatársai, 2003; Lisman és Grace, 2005; Redgrave és Gurney, 2006; Joshua és munkatársai, 2009a).

A figyelmeztető jelzések jelenléte a motivációs értéket kódoló DA neuronokban nehezebben magyarázható. Ezek a neuronok olyan motivációs értékjeleket továbbítanak, amelyek ideálisak a keresésre, az eredmények értékelésére és az értékmegtanulásra; mégis izgathatók lehetnek olyan események riasztásával is, mint a váratlan kattintási hangok és a riasztó próbák kezdete. A feltételezett útvonalunk szerint (ábra 5), ez azt eredményezi, hogy a riasztási események pozitív értéket kapnak, és a jutalmakhoz hasonló módon keresik meg őket! Noha első pillantásra meglepő, okkal feltételezhető, hogy a riasztási események pozitív céloknak tekinthetők. A riasztási jelek az első figyelmeztetést jelentenek egy potenciálisan fontos esemény bekövetkeztéről, és ezáltal az első lehetőséget kínálják az esemény ellenőrzésére. Ha rendelkezésre állnak figyelmeztető jelzések, akkor motivációs szempontból kiemelkedő események észlelhetők, előrejelzhetők és előre felkészíthetők; Ha nincs figyelmeztető jelzés, a motivációs szempontból kiemelkedő események mindig váratlan meglepetésként fordulnak elő. Valójában az emberek és az állatok gyakran olyan környezetet részesítenek előnyben, amelyben jutalmazó, riasztó és még motivációs szempontból semleges érzékszervi események megfigyelhetők és előre megjósolhatók (Badia és munkatársai, 1979; Herry és munkatársai, 2007; Daly, 1992; Chew és Ho, 1994) és sok DA neuron jelzi a viselkedés preferenciáját a jutalom-prediktív információk megtekintésére (Bromberg-Martin és Hikosaka, 2009). A DA riasztási jelek támogathatják ezeket a preferenciákat, pozitív értéket adva azoknak a környezeteknek, amelyekben potenciálisan fontos érzékszervi jelek előre jelezhetők.

Az értéket és az észlelhetőséget kódoló neuronok anatómiai elhelyezkedése

Egy nemrégiben készült tanulmány feltérképezte a DA jutalom és averzív jelek helyét az oldalsó középső agyban, beleértve az SNc-t és a VTA legkülső részét (Matsumoto és Hikosaka, 2009b). A motivációs értéket és a motivációs észlelési jeleket anatómiai gradiensben elosztottuk ezen a területen. A motivációs értékjeleket gyakrabban a ventromedialis SNc és az lateralis VTA idegsejtjeiben találták, míg a motivációs észlelési jeleket a dorsolateralis SNc neuronjaiban találták gyakrabban (7B ábra). Ez összhangban áll azokkal a jelentésekkel, amelyek szerint a DA jutalomérték kódolása a ventromedialis SNc-ben a legerősebb (Nomoto és munkatársai, 2010), míg az averz gerjesztések általában oldalirányban a legerősebbek (Mirenowicz és Schultz, 1996). Más tanulmányok feltárták a mediálisabb agyt. Ezek a tanulmányok az gerjesztő és gátló averzív válaszok keverékét találták, helyükben nem volt szignifikáns különbség, bár az averszív gerjesztések inkább ventrálisan helyezkednek el (Guarraci és Kapp, 1999; Brischoux és munkatársai, 2009) (7C ábra).

A motivációs értékjelek célpontjai

Hipotézisünk szerint a motivációs értéket kódoló DA-idegsejteknek ki kell terjedniük a megközelítési és elkerülési tevékenységekben részt vevő agyi régiókra, az eredmények értékelésére és az értéktanulásra (ábra 5). Valójában a ventromedialis SNc és a VTA a ventromedialis prefrontalis kéregbe (Williams és Goldman-Rakic, 1998), beleértve az orbitofrontalis kéregét (OFC) (Porrino és Goldman-Rakic, 1982) (7A ábra). Az OFC-t következetesen befolyásolták az értékkódolásba a funkcionális képalkotó vizsgálatokban (Anderson és munkatársai, 2003; Small és munkatársai, 2003; Jensen és munkatársai, 2007; Litt és munkatársai, 2010) és egyetlen neuron felvételek (Morrison és Salzman, 2009; Roesch és Olson, 2004). Úgy gondolják, hogy az OFC értékeli a választási lehetőségeket (Padoa-Schioppa, 2007; Kable és Glimcher, 2009), kódolja az eredményvárakozásokat (Schoenbaum és munkatársai, 2009), és frissítse ezeket az elvárásokat a tanulás során (Walton és munkatársai, 2010). Ezenkívül az OFC részt vesz a negatív jutalom-előrejelzési hibákból való tanulásban (Takahashi és mtsai., 2009), amelyek az értékkódoló DA neuronokban a legerősebbek (ábra 4).

Ezenkívül a dopaminerg középső agy medialis részei a ventrális striatumhoz vezetnek, beleértve a nucleus akumuls héjat (NAc héj) (Haber és munkatársai, 2000) (7A ábra). Egy nemrégiben elvégzett tanulmány kimutatta, hogy az NAc héj fázisos DA jeleket kap, amelyek az ízkimenetek motivációs értékét kódolják (Roitman és munkatársai, 2008). Ezek a jelek valószínűleg értéktanulást okoznak, mivel a DA gyógyszerek közvetlen infúziója a NAc héjba erősen megerősíti (Ikemoto, 2010), míg azok a kezelések, amelyek csökkentik a héj DA bevitelét, idegeségeket okozhatnak (Liu és munkatársai, 2008). Az egyik figyelmeztetés az, hogy a NAc héj DA felszabadulásának vizsgálata hosszú időnként (percben) vegyes eredményeket hozott, némelyik összhangban van az értékkódolással, mások az élethűségkódolással (pl.Bassareo és munkatársai, 2002; Ventura és munkatársai, 2007)). Ez arra enged következtetni, hogy az értékjelek a NAc-héjon belül meghatározott helyekre korlátozhatók. Figyelemre méltó, hogy az NAc héja különböző régiói az étvágygerjesztő és agresszív viselkedés ellenőrzésére szakosodtak (Reynolds és Berridge, 2002), amelyek egyaránt DA neuronok bemenetét igénylik (Faure és munkatársai, 2008).

Végül, a DA idegsejtjei az SNc teljes terjedelmében nehéz vetületeket küldenek a háti striatumba (Haber és munkatársai, 2000), ami azt sugallja, hogy a háti striatum mind motivációs értéket, mind derítőképességet kódoló DA jeleket kaphat (7A ábra). A motivációs értéket kódoló DA neuronok ideális oktató jelet adnának az értéktanulásban részt vevő striatális áramköröknek, például az inger-válasz szokások tanulásának (Faure és munkatársai, 2005; Yin és Knowlton, 2006; Balleine és O'Doherty, 2010). Amikor ezek a DA neuronok felrobbannak, bekapcsolódnának a közvetlen útba, hogy megtanuljanak jutalom eredményeket szerezni; szünet után a közvetett útvonalon megtanulják elkerülni a riasztó eredményeket (ábra 2). Sőt, a közelmúltban bizonyítékok vannak arra, hogy a striatális utak pontosan követik ezt a munkamegosztást a jutalom és a riasztó feldolgozás érdekében (Hikida és munkatársai, 2010). Még mindig nem ismert, hogy ezekben az útvonalakban a neuronok hogyan reagálnak a jutalmazó és riasztó eseményekre viselkedés során. Legalábbis a hátsó striatum egészében egy idegsejtek egy része bizonyos jutalmazó és riasztó eseményekre reagál különféle módon (Ravel és munkatársai, 2003; Yamada és munkatársai, 2004, 2007; Joshua és munkatársai, 2008).

A motivációs figyelmeztető jelzések célpontjai

Hipotézisünk szerint a motivációs nyugalmat kódoló DA idegsejteknek ki kell terjedniük az agy régiókra, amelyek részt vesznek az orientációban, a kognitív feldolgozásban és az általános motivációban (ábra 5). Valójában, a dorsolateralis középső agyban lévő DA neuronok vetületeket küldnek a hátsó és az oldalsó frontális kéregbe (Williams és Goldman-Rakic, 1998) (7A ábra), egy olyan régióban, amely részt vesz a kognitív funkciókban, például a figyelemfelkutatásban, a munkamemóriában, a kognitív kontrollban és a motivációs eredmények közötti döntéshozatalban (Williams és Castner, 2006; Lee és Seo, 2007; Bölcs, 2008; Kable és Glimcher, 2009; Wallis és Kennerley, 2010). A dorsolateralis prefrontalis kognitív funkciókat a DA szintje szigorúan szabályozza (Robbins és Arnsten, 2009) és elméletük szerint a DA fázisos neuron aktiválásától függnek (Cohen és munkatársai, 2002; Lapish és munkatársai, 2007). Nevezetesen, az oldalsó prefrontalis neuronok egy része reagál mind a jutalmazó, mind a riasztó vizuális útmutatásokra, és a túlnyomó többség ugyanabban az irányban reagál, hasonlóan a motivációs nyugalom kódolásához (Kobayashi és munkatársai, 2006). Ezen túlmenően, ezen idegsejtek aktivitása korrelál a viselkedési sikerrel a munkamemória-feladatok elvégzésekor (Kobayashi és munkatársai, 2006). Noha ez a dorsolateral DA → dorsolateral frontalis cortex út jellemzően a főemlősökre jellemző (Williams és Goldman-Rakic, 1998), funkcionálisan hasonló út fordulhat elő más fajokban is. Különösen a főemlős dorsolateralis prefrontalis cortex kognitív funkcióinak számos funkcióját a rágcsáló medialis prefrontalis cortex végzi (Uylings és munkatársai, 2003), és bizonyítékok vannak arra, hogy ez a régió DA motivációs észlelési jeleket kap és ellenőrzi az üdvözlettel kapcsolatos viselkedést (Mantz és munkatársai, 1989; Di Chiara, 2002; Joseph és munkatársai, 2003; Ventura és munkatársai, 2007; Ventura és munkatársai, 2008).

Tekintettel arra a bizonyítékra, hogy a VTA egyaránt tartalmaz érzékelési és értékkódoló idegsejteket, és hogy az értékkódoló jeleket az NAc héjhoz továbbítják, az átvilágítási jeleket az NAc magjához lehet küldeni (7A ábra). Valójában a NAc mag (de nem a héj) kulcsfontosságú ahhoz, hogy lehetővé váljon a motiváció a válaszadási költségek - például a fizikai erőfeszítés - leküzdéséhez; kognitív rugalmasságot igénylő készlet-váltó feladatok elvégzéséhez; és hogy a jutalomjelzők lehetővé tegyék az általános motiváció fokozódását (Ghods-Sharifi és Floresco, 2010; Floresco és munkatársai, 2006; Hall és munkatársai, 2001; Kardinális, 2006). A motivációs ösztönzés kódolásával összhangban a NAc magja fokozatosan DA eltöréseket kap mindkét jutalmazó tapasztalat során (Day és munkatársai, 2007) és riasztó tapasztalatok (Anstrom és munkatársai, 2009).

Végül, amint azt fentebb tárgyaltuk, egyes DA-idegrendszereket kódoló, érzékeny idegsejtek kihúzódhatnak a háti striatumba (7A ábra). Míg a hátsó striatum egyes régiói részt vesznek az akcióértékek megtanulásával kapcsolatos funkciókban, a hátsó striatum olyan funkciókban is részt vesz, amelyeket minden kiemelkedő eseménynél, például a tájékozódás, a figyelem, a munkamemória és az általános motiváció során be kell vonni (Hikosaka és munkatársai, 2000; Klingberg, 2010; Palmiter, 2008). Valójában a dorsalis striatális neuronok egy része erőteljesebben reagál a jutalmazó és riasztó eseményekre, mint a semleges eseményekre (Ravel és munkatársai, 1999; Blazquez és munkatársai, 2002; Yamada és munkatársai, 2004, 2007), bár okozati szerepe a motivált viselkedésben még nem ismert.

A motivációs értékjelek forrásai

Egy nemrégiben végzett tanulmánysor arra utal, hogy a DA idegsejtek motivációs értékjeleket kapnak az epithalamus egy kis magjából, az laterális habenulaból (LHb) (Hikosaka, 2010) (ábra 8). Az LHb erős negatív irányítást gyakorol a DA idegsejtek felett: Az LHb stimuláció rövid idejű késleltetéssel gátolja a DA idegsejteket (Christoph és munkatársai, 1986), és a VTA stimulációval ellentétes módon szabályozhatja a tanulást (Shumake és munkatársai, 2010). A negatív kontrolljelekkel összhangban számos LHb neuron tükörrel fordított fázisos válaszokkal reagál a DA neuronokra: LHb neuronok gátolt pozitív jutalom-előrejelzési hibákkal és izgatott negatív jutalom-előrejelzési hibákkal (Matsumoto és Hikosaka, 2007, 2009a; Bromberg-Martin és munkatársai, 2010a; Bromberg-Martin és munkatársai, 2010c). Sok esetben ezek a jelek az LHb rövidebb latenciájával fordulnak elő, összhangban az LHb → DA továbbítással (Matsumoto és Hikosaka, 2007; Bromberg-Martin és munkatársai, 2010a).

 

ábra 8

A motivációs érték, a jóindulatú és a riasztó jelek feltételezett forrásai

Az LHb képes a DA idegsejteket az egész agy egész területén ellenőrizni, de számos bizonyíték arra utal, hogy preferenciális irányítást gyakorol a motivációs értéket kódoló DA idegsejtek felett. Először, az LHb neuronok a motivációs értéket kódolják az értéket kódoló DA idegsejteket szorosan tükröző módon - pozitív és negatív jutalombecslési hibákat kódolnak, és ellentétes irányban reagálnak a jutalmazó és riasztó eseményekre (Matsumoto és Hikosaka, 2009a; Bromberg-Martin és munkatársai, 2010a). Másodszor, az LHb stimulációnak a leghatékonyabb hatása van a DA idegsejtekre, amelyek tulajdonságai összhangban vannak az értékkódolással, ideértve a nem jutalmazó jelek általi gátlást és a ventromedialis SNc anatómiai elhelyezkedését (Matsumoto és Hikosaka, 2007, 2009b). Harmadszor, az LHb sérülései rontják a DA idegsejtek gátló válaszát az averszív eseményekre, jelezve az LHb ok-okozati szerepét a DA értékjelek generálásában (Gao és munkatársai, 1990).

Az LHb egy kiterjedtebb neurális út része, amelyen keresztül a DA neuronokat a bazális ganglionok vezérelhetik (ábra 8). Az LHb a jutalom-előrejelzési hibákhoz hasonló jeleket vetít egy kivetítésen keresztül a globus pallidus határ (GPb) körüli neuronpopulációtól (GPb) (Hong és Hikosaka, 2008). Amint ezek a jelek elérték az LHb-t, valószínűleg egy disinaptikus úton továbbítódnak DA neuronokhoz, amelyben az LHb gerjeszti a középső agyi GABA neuronokat, amelyek viszont gátolják a DA neuronokat (Ji és Shepard, 2007; Omelchenko és munkatársai, 2009; Brinschwitz és munkatársai, 2010). Ez LHb-projekciók révén a VTA interneuronjaira és a szomszédos GABA-ergikus magra, az úgynevezett rostromedialis tegmentummagra (RMTg) (Jhou és munkatársai, 2009b) (más néven „a VTA farok farkának” (Kaufling és munkatársai, 2009)). Nevezetesen, az RMTg idegsejtek hasonló tulajdonságokkal rendelkeznek, mint az LHb neuronok, motivációs értéket kódolnak, és erősen gátolják a dopaminerg közepes agyt (Jhou és munkatársai, 2009a). Így a teljes bazális ganglion útvonala a motivációs érték jelek továbbítására a DA neuronokra lehet GPb → LHb → RMTg → DA (Hikosaka, 2010).

A jövőbeli kutatások szempontjából fontos kérdés az, hogy a motivációs értékjeleket kizárólag az LHb-en keresztül-csatornázzák-e, vagy több bemeneti útvonalon továbbítják-e őket. Nevezetesen, a DA-gátlásokat az averzív lábütés által a mezopontin parabrachialis magban (PBN) végzett aktivitás szabályozza (Coizet és munkatársai, 2010) (ábra 8). Ez a mag olyan neuronokat tartalmaz, amelyek közvetlenül a gerincvelétől érkeznek, ártalmas érzéseket kódolva, és gátolhatják a DA idegsejteket az RMTg gerjesztő előrejelzésein keresztül (Coizet és munkatársai, 2010; Gauriau és Bernard, 2002). Ez azt sugallja, hogy az LHb a DA neuronok motivációs értékjeleit küldi mind a jutalmazó, mind az riasztó jelek és kimenetelek számára, míg a PBN az értékjel egy olyan elemét tartalmazza, amely kifejezetten a rákkeltő eredményekhez kapcsolódik.

A motivációs észlelési jelek forrásai

Kevésbé ismertek a DA idegsejtekben a motivációs nyugalmi jelforrásokról. Az egyik érdekes jelölt az amygdala központi magja (CeA), amelyet következetesen bevontak a tájékozódásba, a figyelembe és az általános motivációs válaszokba mind a jutalmazó, mind a riasztó események során (Holland és Gallagher, 1999; Baxter és Murray, 2002; Merali és munkatársai, 2003; Balleine és Killcross, 2006) (ábra 8). A CeA és más amygdala-magok sok olyan neuront tartalmaznak, amelyek szignálok összhangban állnak a motivációs nyugalommal: azonos módon jutalmazó és riasztó eseményeket jeleznek, fokozódnak, ha az események váratlanul bekövetkeznek, és összekapcsolódnak az izgalom viselkedési viselkedésével (Nishijo és munkatársai, 1988; Belova és munkatársai, 2007; Shabel és Janak, 2009). Ezeket a jeleket tovább lehet küldeni a DA idegsejteknek, mert a CeA csökkenő előrejelzései vannak az agytörzsön, amelyek jutalmazó és riasztó információkat tartalmaznak (Lee és munkatársai, 2005; Pascoe és Kapp, 1985) és a CeA szükséges a DA felszabadításához jutalomhoz kapcsolódó események során (Phillips és munkatársai, 2003a). Ezenkívül a CeA DA neuronokkal vesz részt olyan utakon, amelyek összhangban vannak a motivációs nyugalomra javasolt anatómiai és funkcionális hálózatunkkal. A CeA-t, SNc-t és a hátsó striatumot magában foglaló út szükséges az élelmiszerekre mutató útmutatásokhoz való megtanult orientációhoz (Han és munkatársai, 1997; Lee és munkatársai, 2005; El-Amamy és Holland, 2007). Összhangban az észlelés és az értékjelek megosztásával, erre az útvonalra van szükség ahhoz, hogy megtanuljunk táplálkozási célokra orientálni, de ne az élelmiszerek kimeneteleinek megközelítéséhez.Han és munkatársai, 1997). A juttatási útmutatásokhoz egy második út, beleértve a CeA, SNc, VTA és NAc magot, szükséges ahhoz, hogy növekedjen a jutalom-keresési tevékenységek elvégzéséhez szükséges általános motiváció (Hall és munkatársai, 2001; Corbit és Balleine, 2005; El-Amamy és Holland, 2007).

A CeA-n kívül a DA neuronok más forrásokból is kaphatnak motivációs nyugalmi jeleket, például az alap elülső agyat kódoló idegsejteket (Lin és Nicolelis, 2008; Richardson és DeLong, 1991) és a PBN neuronjai (Coizet és munkatársai, 2010), bár ezeket az utakat még meg kell vizsgálni.

A riasztási jelek forrásai

Számos jó jelölt van arra, hogy a DA neuronokat riasztási jelekkel látja el. Talán a legvonzóbb jelölt az superior colliculus (SC), egy olyan középső agymag, amely a rövid érzékenységű érzékszervi bemenetet több érzékszervi módszerből áll, és irányítja az orientáló reakciókat és a figyelmet (Redgrave és Gurney, 2006) (ábra 8). Az SC közvetlenül vetíti az SNc-t és a VTA-t (May és munkatársai, 2009; Comoli és munkatársai, 2003). Altatott állatokban az SC létfontosságú vezeték a rövid késleltetésű vizuális jelek eléréséhez, hogy elérjék a DA idegsereket és kiváltják a DA felszabadulását az áramlási irányú struktúrákban (Comoli és munkatársai, 2003; Dommett és munkatársai, 2005). Az SC-DA útvonal a riasztási jelek közvetítéséhez leginkább alkalmas, nem pedig jutalmazási és ellenszenv jelek helyett, mivel az SC idegsejtek kevés reakcióval reagálnak a jutalom átadására, és csak enyhén befolyásolják a DA riasztó válaszátCoizet és munkatársai, 2006). Ez arra utal, hogy olyan események sorozatára kerül sor, amikor az SC idegsejtek (1) észlelnek egy ingert, (2) kiválasztják azt potenciálisan fontosnak, (3) indít egy orientációs reakciót az inger megvizsgálására, és (4) egyidejűleg DA riasztási választ vált ki, amely DA tört fel a downstream struktúrákban (Redgrave és Gurney, 2006).

A DA jel idegsejtekre figyelmeztető jelek küldésének második jelöltje az LHb (ábra 8). Nevezetesen, a kísérleti indítási dákó váratlan megkezdése sok LHb neuront fordított módon gátol a DA neuron figyelmeztető jelhez, és ez a válasz az LHb rövidebb késleltetési idejekor következik be, összhangban az LHb → DA átviteli irányával (Bromberg-Martin és munkatársai, 2010a; Bromberg-Martin és munkatársai, 2010c). Azt is anekdotikusan megfigyeltük, hogy az LHb idegsejteket általában a váratlan vizuális képek és hangok gátolják a DA gerjesztésekre fordított módon (MM, ESB-M és OH, nem publikált megfigyelések), bár ez szisztematikusabb vizsgálatot vár.

Végül, egy harmadik jelölt a figyelmeztető jelek továbbítására a DA idegsejtekre a pedunculopontine tegmental nucleus (PPTg), amely mind az SNc, mind a VTA számára kiáll, és részt vesz a motivációs feldolgozásban (Winn, 2006) (ábra 8). A PPTg fontos a VTA DA idegsejt-felrobbanásának lehetővé tételéhez (Grace és munkatársai, 2007), beleértve a sorozatválaszokat a jutalmakhoz (Pan és Hyland, 2005). A riasztási jelnek megfelelően a PPTg idegsejtek rövid érzékenységi reakcióval reagálnak több érzékszervi modalitásra és aktívak az orientációs reakciók során (Winn, 2006). Bizonyítékok vannak arra, hogy a PPTg szenzoros válaszokat befolyásolja a jutalom értéke és az azonnali fellépés követelményei (Dormont és munkatársai, 1998; Okada és munkatársai, 2009) (de lásd: (Pan és Hyland, 2005)). Néhány PPTg neuron maguk is jutalmazó vagy riasztó következményekre reagál (Dormont és munkatársai, 1998; Kobayashi és munkatársai, 2002; Ivlieva és Timofeeva, 2003b, a). Fontos lesz megvizsgálni, hogy a PPTg által a DA idegsejteknek küldött jelek kifejezetten a riasztáshoz kapcsolódnak-e, vagy tartalmaznak-e egyéb motivációs jeleket, mint például érték és közönség.

Ezt a munkát a Nemzeti Szem Intézet intramural kutatási programja támogatta. Ezenkívül megköszönjük Amy Arnstennek az értékes beszélgetéseket is.

Kiadói nyilatkozat: Ez egy PDF-fájl egy nem szerkesztett kéziratból, amelyet közzétételre fogadtak el. Ügyfeleink szolgálataként a kézirat korai változatát nyújtjuk. A kéziratot másolják, megírják és felülvizsgálják a kapott bizonyítékot, mielőtt a végleges idézhető formában közzéteszik. Kérjük, vegye figyelembe, hogy a gyártási folyamat során hibák észlelhetők, amelyek hatással lehetnek a tartalomra, és minden, a naplóra vonatkozó jogi nyilatkozat vonatkozik.

^FOOTNOTE1By motivációs nyugalom Olyan mennyiséget értünk, amely magas mind a jutalmazó, mind az riasztó eseményeknél, és alacsony a motivációs szempontból semleges (nem jutalmazó és nem riasztó) eseményeknél. Ez hasonló a (Berridge és Robinson, 1998). Vegye figyelembe, hogy a motivációs nyugalom különbözik az idegtudományban alkalmazott ösztönzés más fogalmaitól, például az ösztönző nyugalomtól (amely csak a kívánatos eseményekre vonatkozik; (Berridge és Robinson, 1998)) és az észlelési nyugalom (amely vonatkozik a motivációs szempontból semleges eseményekre, például mozgó tárgyakra és színes fényekre; (Bisley és Goldberg, 2010)).]

^FOOTNOTE2Vegye figyelembe, hogy a DA neuronjeleket kódoló motivációs szemléletmód különbözik a „társulhatóság” és a „társulás változásának” klasszikus fogalmaitól, amelyeket a megerősítéses tanulás sebességének szabályozására javasoltak (pl.Pearce és Hall, 1980)). Ezek az elméletek állítják, hogy az állatok megtanulják (és módosítják a tanulási arányt) mind a pozitív, mind a negatív predikciós hibákból. Noha ezek a DA neuronok hozzájárulhatnak a pozitív előrejelzési hibákból való tanuláshoz, amely során erőteljes választ adhatnak (pl. Váratlan jutalomszerzésre), valószínűleg nem járulnak hozzá a negatív előrejelzési hibákból való tanuláshoz, amely során kevés vagy egyáltalán nem reagálnak ( pl. váratlan jutalom mulasztás) (4B).

1. Ahlbrecht M, Weber M. A bizonytalanság feloldása: kísérleti tanulmány. Intézményi és elméleti közgazdaságtan. 1996; 152: 593-607.
2. Albin RL, Young AB, Penney JB. A bazális ganglia rendellenességek funkcionális anatómiája. Az idegtudomány alakulása. 1989; 12: 366-375. [PubMed]
3. Anderson AK, Christoff K, Stappen I., Panitz D, Ghahremani DG, Glover G, Gabrieli JD, Sobel N. Az emberi szaglás intenzitásának és valenciájának disszociált neurális reprezentációi. Nat Neurosci. 2003; 6: 196-202. [PubMed]
4. Anstrom KK, Miczek KA, Budygin EA. Megnövekedett fázisos dopamin jelátvitel a mezolimbikus úton patkányok társadalmi veresége során. Neuroscience. 2009; 161: 3-12. [PubMed]
5. Aragona BJ, JJ nap, Roitman MF, Cleaveland NA, Wightman RM, Carelli RM. A fázisos dopamin transzmissziós minták valós idejű fejlődésének regionális specifikása patkányokon végzett cue-kokain társulás megszerzése során. Az idegtudományi európai folyóirat. 2009; 30: 1889-1899. [PMC ingyenes cikk] [PubMed]
6. Austin AJ, Duka T. Az étvágygerjesztõ és riasztó következményekre figyelmeztetõ mechanizmusok a pavloviai kondicionálásban. Agyi viselkedéskutatás. 2010; 213: 19-26. [PubMed]
7. Badia P, Harsh J, Abbott B. A kiszámítható és kiszámíthatatlan sokk körülmények közötti választás: adatok és elmélet. Pszichológiai közlemény. 1979; 86: 1107-1131.
8. Balleine BW, Killcross S. Párhuzamos ösztönző feldolgozás: az amygdala funkció integrált képe. Az idegtudomány alakulása. 2006; 29: 272-279. [PubMed]
9. Balleine BW, O'Doherty JP. Emberi és rágcsáló homológiák a cselekvés szabályozásában: a célirányos és szokásos cselekvés kortikosztriatális meghatározói. Neuropszichofarmakológia. 2010; 35: 48–69. [PMC ingyenes cikk] [PubMed]
10. Barr GA, Moriceau S, Shionoya K, Muzny K, Gao P, Wang S, Sullivan RM. A csecsemőkori tanulásban az átmenetet az amygdala dopaminja modulálja. Nat Neurosci. 2009; 12: 1364-1366. [PMC ingyenes cikk] [PubMed]
11. Bassareo V, De Luca, MA, Di Chiara G. A motivációs stimulációs tulajdonságok differenciált kifejezése dopaminnal a Nucleus Accumbens Shellben, szemben a maggal és a prefrontalis kéreggel. J Neurosci. 2002; 22: 4709-4719. [PubMed]
12. Bassareo V, Di Chiara G. A dopamin táplálkozási ingerekre történő átvitelének differenciális reagálási képessége a nucleus carrbens héj / mag rekeszekben. Neuroscience. 1999; 89: 637-641. [PubMed]
13. Baxter MG, Murray EA. Az amygdala és a jutalom. Nat Rev Neurosci. 2002; 3: 563-573. [PubMed]
14. Bayer HM, Glimcher PW. A középsó agy dopamin idegsejtjei kvantitatív jutalombecslési hibajelet kódolnak. Idegsejt. 2005; 47: 129-141. [PMC ingyenes cikk] [PubMed]
15. Belova MA, Paton JJ, Morrison SE, Salzman CD. A várakozások modulálják a főemlősök amygdalajának kellemes és riasztó ingereire adott neurális választ. Idegsejt. 2007; 55: 970-984. [PMC ingyenes cikk] [PubMed]
16. Bentivoglio M, Morelli M. A mesencephalic dopaminerg neuronok szervezete és áramkörei, valamint a dopamin receptorok eloszlása ​​az agyban. Kézikönyv a kémiai neuroanatómiáról. 2005: 1-107.
17. Berridge KC, Robinson TE. Mi a dopamin szerepe a jutalomban: hedonikus hatás, jutalom tanulás vagy ösztönző ösztönzés? Agykutatás. 1998; 28: 309-369. [PubMed]
18. Besson C, Louilot A. A mezolimbikus dopaminerg neuronok aszimmetrikus bevonása az érzelmi percepcióba. Neuroscience. 1995; 68: 963-968. [PubMed]
19. Birgner C, Nordenankar K, Lundblad M, Mendez JA, Smith C, le Greves M, Galter D, Olson L, Fredriksson A, Trudeau LE, et al. A dopamin idegsejtekben a VGLUT2 szükséges a pszichostimulánsok által kiváltott viselkedési aktivációhoz. Az Amerikai Egyesült Államok Nemzeti Tudományos Akadémia folyóiratai. 2010; 107: 389-394. [PMC ingyenes cikk] [PubMed]
20. Bisley JW, Goldberg ME. Figyelem, szándék és prioritás a parietális lebenyben. Az idegtudomány éves áttekintése. 2010; 33: 1-21. [PMC ingyenes cikk] [PubMed]
21. Bjorklund A, Dunnett SB. Az agy dopamin idegrendszerei: frissítés. Az idegtudomány alakulása. 2007; 30: 194-202. [PubMed]
22. Blazquez PM, Fujii N, Kojima J, Graybiel AM. A válasz valószínűségének hálózati ábrázolása a striatumban. Idegsejt. 2002; 33: 973-982. [PubMed]
23. Botvinick MM, Braver TS, Barch DM, Carter CS, Cohen JD. Konfliktusfigyelés és kognitív kontroll. Psychol Rev. 2001; 108: 624 – 652. [PubMed]
24. Bradley MM, Greenwald MK, Petry MC, Lang PJ. Emlékezés a képekre: öröm és izgalom a memóriában. J Exp Psychol Learn Mem Cogn. 1992; 18: 379-390. [PubMed]
25. Braun DA, Mehring C, Wolpert DM. Strukturális tanulás a gyakorlatban. Agyi viselkedéskutatás. 2010; 206: 157-165. [PMC ingyenes cikk] [PubMed]
26. Brinschwitz K, Dittgen A, Madai VI, Lommel R, Geisler S, Veh RW. Az oldalsó habenulából származó glutamatergikus axonok elsősorban a ventrális középső agy GABAerg neuronjain végződnek. Neuroscience. 2010; 168: 463-476. [PubMed]
27. Brischoux F, Chakraborty S, Brierley DI, Ungless MA. A dopamin neuronok fázikus gerjesztése a ventrális VTA-ban káros ingerekkel. Az Amerikai Egyesült Államok Nemzeti Tudományos Akadémia folyóiratai. 2009; 106: 4894-4899. [PMC ingyenes cikk] [PubMed]
28. Bromberg-Martin ES, Hikosaka O. A középső agy dopamin idegsejtjei jelzik a preferenciák előrejelzését a közelgő jutalmakról. Idegsejt. 2009; 63: 119-126. [PMC ingyenes cikk] [PubMed]
29. Bromberg-Martin ES, Matsumoto M, Hikosaka O. Megkülönböztető tonikus és fázisos megelőző aktivitás az oldalsó habenula és dopamin idegsejtekben. Idegsejt. 2010a; 67: 144-155. [PMC ingyenes cikk] [PubMed]
30. Bromberg-Martin ES, Matsumoto M, Hong S, Hikosaka O. A pallidus-habenula-dopamin út jelzi az ingerértékeket. J Neurophysiol. 2010b; 104: 1068-1076. [PMC ingyenes cikk] [PubMed]
31. Bromberg-Martin ES, Matsumoto M, Nakahara H, Hikosaka O. Több időtartamú memória az oldalsó habenula és dopamin idegsejtekben. Idegsejt. 2010c; 67: 499-510. [PMC ingyenes cikk] [PubMed]
32. Brown MTC, Henny P, Bolam JP, Magill PJ. A neurokémiailag heterogén dopaminerg neuronok aktivitása a jóindulatú nigra az agyi állapot spontán és vezérelt változásainál. J Neurosci. 2009; 29: 2915-2925. [PubMed]
33. RN bíboros. A késleltetett és valószínűsíthető megerősítéssel járó idegi rendszerek. Neurális háló. 2006; 19: 1277-1301. [PubMed]
34. JF, Aragona BJ, Heien ML, Seipel AT, Carelli RM, Wightman RM. Az összehangolt dopamin felszabadulás és a neurális aktivitás hajtja a célirányos viselkedést. Idegsejt. 2007; 54: 237-244. [PubMed]
35. Cheramy A, Kemel ML, Gauchy C, Desce JM, Galli T, Barbeito L, Glowinski J. Az ingerlő aminosavak szerepe a dopamin felszabadulásának közvetlen és közvetett preszinaptikus szabályozásában a nigrostriatális dopamin neuronok idegvégződéseiből. Aminosavak. 1991; 1: 351-363. [PubMed]
36. Chew SH, Ho JL. Remélem: a bizonytalanság feloldásának időzítésével kapcsolatos hozzáállás empirikus vizsgálata. A kockázatok és bizonytalanság naplója. 1994; 8: 267-288.
37. Chiodo LA, Antelman SM, Caggiula AR, Lineberry CG. A szenzoros ingerek megváltoztatják a dopamin (DA) neuronok kisülési sebességét: bizonyíték a DA sejtek két funkcionális típusára a materiális nigrában. Brain Res. 1980; 189: 544-549. [PubMed]
38. Christoph GR, Leonzio RJ, Wilcox KS. Az laterális habenula stimulálása gátolja a dopamint tartalmazó idegsejteket a patkányok lényeges nigra és ventrális tematikus területein. J Neurosci. 1986; 6: 613-619. [PubMed]
39. Chuhma N, Choi WY, Mingote S, Rayport S. Dopamin neuron glutamát átvitel: frekvenciafüggő moduláció a mezoventromedialis vetületben. Neuroscience. 2009; 164: 1068-1083. [PMC ingyenes cikk] [PubMed]
40. Cohen JD, Braver TS, Brown JW. A preoprontalis cortex dopamin funkciójának számítási szempontjai. Jelenlegi vélemény a neurobiológiában. 2002; 12: 223-229. [PubMed]
41. Coizet V, Dommett EJ, Klop EM, Redgrave P, Overton PG. A parabrachialis sejt kritikus kapcsolat a rövid késleltetésű nociceptív információ átvitelében az agy középső részének dopaminerg neuronjaiba. Neuroscience. 2010; 168: 263-272. [PMC ingyenes cikk] [PubMed]
42. Coizet V, Dommett EJ, Redgrave P, Overton PG. A középsó agy dopaminerg neuronjainak nockiceptív reakcióit a patkány felsőbb colliculusja modulálja. Neuroscience. 2006; 139: 1479-1493. [PubMed]
43. Comoli E, Coizet V, Boyes J, Bolam JP, Canteras NS, Quirk RH, Overton PG, Redgrave P. Közvetlen vetítés a felsőbb colliculusból a bizonyosságnak a nigra felé a szembeszökő vizuális események kimutatására. Nat Neurosci. 2003; 6: 974-980. [PubMed]
44. Corbit LH, Balleine BW. A bazolateralis és központi amygdala sérülések kettős disszociációja a pavlovianus-instrumentális transzfer általános és eredményspecifikus formáin. J Neurosci. 2005; 25: 962-970. [PubMed]
45. Dalley JW, Laane K, Theobald DE, Armstrong HC, Corlett PR, Chudasama Y, Robbins TW. Az étvágygerjesztõ Pavlovian memória idõkorlátozott modulációja a D1 és az NMDA receptorok révén a nucleus activumban. Az Amerikai Egyesült Államok Nemzeti Tudományos Akadémia folyóiratai. 2005; 102: 6189-6194. [PMC ingyenes cikk] [PubMed]
46. Daly HB. A kiszámíthatatlanság preferenciája megfordul, ha a kiszámíthatatlan nem visszatérítés vonzó: eljárások, adatok és elméletek az étvágygerjesztő megfigyelésről. In: I. Gormezano, Wasserman EA, szerkesztők. Tanulás és memória: Viselkedési és biológiai felületek. LE Associates; 1992. 81 – 104.
47. Davidson MC, Horvitz JC, Tottenham N, Fossella JA, Watts R, Ulug AM, Casey BJ. Differenciál caudate és cingulate aktiváció váratlan nem visszatérítő ingereket követően. NeuroImage. 2004; 23: 1039-1045. [PubMed]
48. JJ nap, Roitman MF, Wightman RM, Carelli RM. Az asszociatív tanulás a dopamin jelátvitel dinamikus eltolódását közvetíti a magban. Nat Neurosci. 2007; 10: 1020-1028. [PubMed]
49. Dayan P, Niv Y. Erősítő tanulás: jó, rossz és csúnya. Jelenlegi vélemény a neurobiológiában. 2008; 18: 185-196. [PubMed]
50. Descarries L, Berube-Carriere N, Riad M, Bo GD, Mendez JA, Trudeau LE. Glutamát a dopamin idegsejtekben: szinaptikus és diffúz transzmisszió. Agyi kutatások áttekintése. 2008; 58: 290-302. [PubMed]
51. Di Chiara G. A Nucleus akumulbens héja és a mag dopamin: különbség a viselkedésben és a függőségben. Agyi viselkedéskutatás. 2002; 137: 75-114. [PubMed]
52. Dommett E, Coizet V, Blaha CD, Martindale J, Lefebvre V, Walton N, Mayhew JE, Overton PG, Redgrave P. Hogyan működik a vizuális ingerek rövid késleltetéssel a dopaminerg neuronok? Tudomány. 2005; 307: 1476-1479. [PubMed]
53. Dormont JF, Conde H, Farin D. A pedunculopontine effemental mag szerepe a kondicionált motoros teljesítmény szempontjából a macskában. I. Kontextusfüggő és megerősítéssel kapcsolatos egységi tevékenység. Kísérleti agykutatás. Experimentelle Hirnforschung. 1998; 121: 401-410. [PubMed]
54. Duzel E, Bunzeck N, Guitart-Masip M, Duzel S. A dopamin (NOMAD) előrejelzésének és feltárásának újdonságokkal kapcsolatos motivációja: az egészséges öregedés következményei. Idegtudomány és biológiai viselkedés áttekintés. 2010; 34: 660-669. [PubMed]
55. El-Amamy H, Hollandia PC. Az amygdala központi magjának a ventrális tegmentális területről vagy a bizonyított nigráról történő leválasztásának disszociálható hatása a megtanult orientációra és az ösztönző motivációra. Az idegtudományi európai folyóirat. 2007; 25: 1557-1567. [PMC ingyenes cikk] [PubMed]
56. Ettenberg A. Az önbeadott kokain szembenálló folyamatainak tulajdonságai. Idegtudomány és biológiai viselkedés áttekintés. 2004; 27: 721-728. [PubMed]
57. Fadok JP, Dickerson TM, Palmiter RD. A dopamin szükséges a dákfüggő félelem kondicionálásához. J Neurosci. 2009; 29: 11089-11097. [PMC ingyenes cikk] [PubMed]
58. Fairhall AL, Lewen GD, Bialek W, Ruyter Van Steveninck RR. Hatékonyság és kétértelműség az adaptív idegi kódban. Természet. 2001; 412: 787-792. [PubMed]
59. Faure A, Haberland U, Conde F, El Massioui N. Lesion a nigrostriatális dopamin rendszerben megzavarja az inger-válasz szokás kialakulását. J Neurosci. 2005; 25: 2771-2780. [PubMed]
60. Faure A, Reynolds SM, Richard JM, Berridge KC. Mezolimbikus dopamin vágyban és félelemben: lehetővé teszi a motiváció generálását a felhalmozódott mag lokalizált glutamát-megszakításaival. J Neurosci. 2008; 28: 7184-7192. [PMC ingyenes cikk] [PubMed]
61. Fiorillo CD, Newsome WT, Schultz W. A dopamin neuronok jutalmi előrejelzésének időbeli pontossága. Nat Neurosci. 2008; 11: 966-973. [PubMed]
62. Fiorillo CD, Tobler PN, Schultz W. Dopamin neuronok jutalmi valószínűségének és bizonytalanságának diszkrét kódolása. Tudomány. 2003; 299: 1898-1902. [PubMed]
63. Floresco SB, Ghods-Sharifi S, Vexelman C, Magyar O. A atommag és a héj elválasztható szerepe a készlet eltolódás szabályozásában. J Neurosci. 2006; 26: 2449-2457. [PubMed]
64. Ford CP, Gantz SC, Phillips PE, Williams JT. Az extracelluláris dopamin szabályozása a dendrit és az axon terminálison. J Neurosci. 2010; 30: 6975-6983. [PMC ingyenes cikk] [PubMed]
65. Frank MJ. Dinamikus dopamin moduláció a bazális ganglionokban: a gyógyszeres és nem gyógyszeres parkinsonizmus kognitív hiányának neurokomputációs beszámolója. A kognitív idegtudomány naplója. 2005; 17: 51-72. [PubMed]
66. Frank MJ, Fossella JA. A tanulás, a motiváció és a megismerés neurogenetikája és farmakológiája. Neuropsychop. 2010 [PMC ingyenes cikk] [PubMed]
67. Frank MJ, Seeberger LC, O'Reilly RC. A sárgarépa vagy bot: a parkinsonizmus kognitív megerősítése. Tudomány. 2004; 306: 1940-1943. [PubMed]
68. Gallistel CR, Gibbon J. Idő, sebesség és kondicionálás. Psychol Rev. 2000; 107: 289 – 344. [PubMed]
69. Gao DM, Jeaugey L, Pollak P, Benabid AL. Intenzitásfüggő nociceptív válaszok a lényeges nigra, a pars compacta feltételezett dopaminerg idegsejtjeiből patkányban és azok módosítása oldalsó habenulabemenetekkel. Brain Res. 1990; 529: 315-319. [PubMed]
70. Gauriau C, Bernard JF. Fájdalom utak és parabrachialis áramkörök patkányban. Kísérleti élettan. 2002; 87: 251-258. [PubMed]
71. Geisler S, Zahm DS. A patkány-anatómiai szubsztrát ventrális tegmental területének befolyásolói az integráló funkciók érdekében. Az összehasonlító neurológiai folyóirat. 2005; 490: 270-294. [PubMed]
72. Gerfen CR, Engber TM, Mahan LC, Susel Z, Chase TN, Monsma FJ, Jr, Sibley DR. D1 és D2 dopaminreceptor által szabályozott striatonigrális és striatopallid neuronok expressziója. Tudomány. 1990; 250: 1429-1432. [PubMed]
73. Ghods-Sharifi S, Floresco SB. Az erőfeszítés diszkriminációjára gyakorolt ​​differenciális hatások, amelyeket a nucleus carrbens mag vagy a héj inaktivációi okoznak. Viselkedési idegtudomány. 2010; 124: 179-191. [PubMed]
74. Gonon FG. Nemlineáris kapcsolat az impulzusáramlás és a patkány közepes agyú dopaminerg neuronok által felszabadult dopamin között in vivo elektrokémia segítségével. Neuroscience. 1988; 24: 19-28. [PubMed]
75. Goto Y, Yang CR, Otani S. Funkcionális és diszfunkcionális szinaptikus plaszticitás a prefrontalis cortexben: szerepek pszichiátriai rendellenességekben. Biológiai pszichiátria. 2010; 67: 199-207. [PubMed]
76. Grace AA. Phasic-tónusos dopamin-felszabadulás és a dopamin-rendszer reakcióképességének módosítása: a szkizofrénia etiológiájának hipotézise. Neuroscience. 1991; 41: 1-24. [PubMed]
77. Grace AA, Bunney BS. A nigrális dopaminerg idegsejtek intracelluláris és extracelluláris elektrofiziológiája – 1. Azonosítás és jellemzés. Idegtudomány. 1983; 10: 301–315. [PubMed]
78. Grace AA, Floresco SB, Goto Y, Lodge DJ. A dopaminerg neuronok kirúgásának szabályozása és a célirányos viselkedés szabályozása. Az idegtudomány alakulása. 2007; 30: 220-227. [PubMed]
79. Grecksch G, Matties H. A dopaminerg mechanizmusok szerepe a patkány hippokampuszában a konszolidációhoz a fényerő-diszkriminációban. Pszichofarmakológia (Berl) 1981; 75: 165 – 168. [PubMed]
80. Guarraci FA, Kapp BS. A ventrális tegmental terület dopaminerg neuronok elektrofiziológiai jellemzése az ébren lévő nyúl differenciális pavlovian félelem kondicionálása során. Agyi viselkedéskutatás. 1999; 99: 169-179. [PubMed]
81. Haber SN, Fudge JL, McFarland NR. A főemlősökben lévő striatonigrostriatusi útvonalak a héjától a dorsolaterális striatumig emelkedő spirált képeznek. J Neurosci. 2000; 20: 2369-2382. [PubMed]
82. J hall, Parkinson JA, Connor TM, Dickinson A, Everitt BJ. Az amygdala központi magjának és a nucleus activum magjának bevonása a Pavlovian instrumentális viselkedésre gyakorolt ​​hatásainak közvetítésébe. Az idegtudományi európai folyóirat. 2001; 13: 1984-1992. [PubMed]
83. Han JS, McMahan RW, Holland P, Gallagher M. Az amygdalo-nigrostriatális út szerepe az asszociatív tanulásban. J Neurosci. 1997; 17: 3913-3919. [PubMed]
84. Harris GC, Aston-Jones G. Izgalom és jutalom: dichotómia orexin funkcióban. Az idegtudomány alakulása. 2006; 29: 571-577. [PubMed]
85. Herry C, Bach DR, Esposito F, Di Salle F, Perrig WJ, Scheffler K, Luthi A, Seifritz E. Az időbeli kiszámíthatatlanság feldolgozása az emberi és állati amygdalaban. J Neurosci. 2007; 27: 5958-5966. [PubMed]
86. Hikida T, Kimura K, Wada N, Funabiki K, Nakanishi S. A szinaptikus transzmisszió megkülönböztető szerepe a közvetlen és közvetett striatális utakon a jutalom és az averzív viselkedés felé. Idegsejt. 2010; 66: 896-907. [PubMed]
87. Hikosaka O. A jutalom-orientált szemmozgás bazális ganglion mechanizmusai. A New York Tudományos Akadémia naplói. 2007; 1104: 229-249. [PubMed]
88. Hikosaka O. A habenula: a stresszkerüléstől az értékalapú döntéshozatalig. Nat Rev Neurosci. 2010; 11: 503-513. [PMC ingyenes cikk] [PubMed]
89. Hikosaka O, Takikawa Y, Kawagoe R. A bazális ganglionok szerepe a szándékos szakkadi szemmozgások irányításában. Élettani áttekintések. 2000; 80: 953-978. [PubMed]
90. Hitchcott PK, Quinn JJ, Taylor JR. Prefrontalis corticalis dopamin a célirányú tevékenységek kétirányú modulálása. Cereb Cortex. 2007; 17: 2820-2827. [PubMed]
91. Hnasko TS, Chuhma N, Zhang H, Goh GY, Sulzer D, Palmiter RD, Rayport S, Edwards RH. A hólyagos glutamát transzport elősegíti a dopamin tárolását és a glutamát corerase in vivo működését. Idegsejt. 2010; 65: 643-656. [PMC ingyenes cikk] [PubMed]
92. Holland PC, Gallagher M. Amygdala áramkör a figyelem- és reprezentációs folyamatokban. A kognitív tudományok tendenciái. 1999; 3: 65-73. [PubMed]
93. Hollerman JR, Schultz W. A dopamin neuronok hibát jelentenek a jutalom időbeli előrejelzésében a tanulás során. Nat Neurosci. 1998; 1: 304-309. [PubMed]
94. Holroyd CB, Coles MG. Az emberi hibafeldolgozás idegi alapjai: megerősítő tanulás, dopamin és a hibával kapcsolatos negatívumok. Psychol Rev. 2002; 109: 679 – 709. [PubMed]
95. Hong S, Hikosaka O. A globus pallidus jutalommal kapcsolatos jeleket küld az oldalsó habenula felé. Idegsejt. 2008; 60: 720-729. [PMC ingyenes cikk] [PubMed]
96. Horvitz JC. Mezolimbokortikális és nigrostriatális dopamin válaszok észlelhető nem rewardális eseményekre. Neuroscience. 2000; 96: 651-656. [PubMed]
97. Horvitz JC, Stewart T, Jacobs BL. A ventrális tegmentális dopamin neuronok felszívódási aktivitását érzékszervi ingerek okozzák az ébresztő macskában. Brain Res. 1997; 759: 251-258. [PubMed]
98. Houk JC, Adams JL, Barto AG. Annak modellje, hogy a bazális ganglionok miként generálnak és használnak neurális jeleket, amelyek előre jelezik a megerősödést. In: Houk JC, Davis JL, Beiser DG, szerkesztők. Az alapvető gangliai információfeldolgozási modellek. Cambridge, MA: MIT Press; 1995. 249 – 274.
99. Ikemoto S. Agy jutalmazási áramköre a mezolimbikus dopamin rendszeren túl: Neurobiológiai elmélet. Idegtudomány és biológiai viselkedés áttekintés. 2010 [PMC ingyenes cikk] [PubMed]
100. Ito R, Dalley JW, Howes SR, Robbins TW, Everitt BJ. A diszociáció a kondicionált dopamin-felszabadulás során a Nucleus Accumbens magában és a Shellben kokainválaszra adott válaszként és patkányokon végzett kokainkeresett viselkedés során. J Neurosci. 2000; 20: 7489-7495. [PubMed]
101. Ivlieva NY, Timofeeva NO. Neuron aktivitás a pedunculopontine magban egy étellel kapcsolatos operált kondicionált reflex során. Idegtudomány és viselkedési élettan. 2003a; 33: 919-928. [PubMed]
102. Ivlieva NY, Timofeeva NO. Neuron aktivitás a pedunculopontine magban operált kondicionált reflex során. Idegtudomány és viselkedési élettan. 2003b; 33: 499-506. [PubMed]
103. Jalabert M, Aston-Jones G, Herzog E, Manzoni O, Georges F. A stria terminalis ágymagjának szerepe a ventrális tegmentális terület dopaminneuronjainak szabályozásában. Haladás a neuro-pszichofarmakológiában és a biológiai pszichiátriában. 2009; 33: 1336–1346. [PMC ingyenes cikk] [PubMed]
104. Jeanblanc J, Hoeltzel A, Louilot A. A diszociáció a dopaminerg neuronok bevonásával, amelyek a sejtmag és a héj alrégióinak beidegződése során felhalmozódnak a rejtett gátlásban és az érzelmi észlelésben. Neuroscience. 2002; 111: 315-323. [PubMed]
105. Jensen J, Smith AJ, Willeit M, Crawley AP, Mikulis DJ, Vitcu I., Kapur S. Az agyrégiók külön-külön kódolják az érzékenységet és a valenciát a jutalom előrejelzésekor az emberekben. Emberi agy leképezése. 2007; 28: 294-302. [PubMed]
106. Jhou TC, a Fields HL, a Baxter MG, a Saper CB, a Holland PC. A rostromedialis tegmentális mag (RMTg), egy a középső agy dopamin idegsejtekkel szembeni GABAerg hatású, riasztó ingereket kódol és gátolja a motoros válaszokat. Idegsejt. 2009a; 61: 786-800. [PMC ingyenes cikk] [PubMed]
107. Jhou TC, Geisler S, Marinelli M., Degarmo BA, Zahm DS. A mezopontin rostromedialis tegmentummag: Az oldalsó habenula által megcélzott struktúra, amely kinyúlik a Tsai és a Essia nigra compacta ventrális tegmental területére. Az összehasonlító neurológiai folyóirat. 2009b; 513: 566-596. [PMC ingyenes cikk] [PubMed]
108. Ji H, Shepard PD. A laterális habenula stimuláció GABA (A) receptor által közvetített mechanizmuson keresztül gátolja a patkányok középső agyának dopamin neuronjait. J Neurosci. 2007; 27: 6923-6930. [PubMed]
109. Jin X, Costa Rica. A start / stop jelek a nigrostriatális áramkörökben jelennek meg a szekvencia-tanulás során. Természet. 2010; 466: 457-462. [PMC ingyenes cikk] [PubMed]
110. Johansen JP, HL mezők. Az elülső cinguláris kéreg glutamátergikus aktiválása riasztó oktatási jelet produkál. Nat Neurosci. 2004; 7: 398-403. [PubMed]
111. Joseph MH, K Datla, Young AM. A dopamin-mag felmérésének értelmezése in vivo dialízissel: rúgás, vágy vagy megismerés? Idegtudomány és biológiai viselkedés áttekintés. 2003; 27: 527-541. [PubMed]
112. Joshua M, Adler A, Bergman H. A dopamin dinamikája a motoros viselkedés szabályozásában. Jelenlegi vélemény a neurobiológiában. 2009a; 19: 615-620. [PubMed]
113. Joshua M, Adler A, Mitelman R, Vaadia E, Bergman H. Midbrain dopaminerg neuronok és striatális kolinerg interneuronok a valószínűségi klasszikus kondicionáló vizsgálatok különböző korszakaiban a jutalom és az averzív események közötti különbséget kódolják. J Neurosci. 2008; 28: 11673-11684. [PubMed]
114. Joshua M, Adler A, Prut Y, Vaadia E, Wickens JR, Bergman H. A középső agy dopaminerg idegsejtjeinek szinkronizálását a jutalmazó események segítik elő. Idegsejt. 2009b; 62: 695-704. [PubMed]
115. Kable JW, Glimcher PW. A döntés neurobiológiája: konszenzus és viták. Idegsejt. 2009; 63: 733-745. [PMC ingyenes cikk] [PubMed]
116. Kakade S, Dayan P. Dopamin: általánosítás és bónuszok. Neurális hálózatok. 2002; 15: 549-559. [PubMed]
117. Kapur S. A pszichózis mint aberráns észlelés állapota: a biológiát, a fenomenológiát és a farmakológiát összekapcsoló keret a skizofréniaban. Az amerikai pszichiátriai folyóirat. 2003; 160: 13-23. [PubMed]
118. Kaufling J, Veinante P, Pawlowski SA, Freund-Mercier MJ, Barrot M. A patkányok ventrális tegmental területének GABAergikus farkához kapcsolódik. Az összehasonlító neurológiai folyóirat. 2009; 513: 597-621. [PubMed]
119. Kennerley SW, Wallis JD. A frontális lebenyben lévő egyes neuronok általi választások értékelése: az eredményérték több döntési változó között kódolva. Az idegtudományi európai folyóirat. 2009; 29: 2061-2073. [PMC ingyenes cikk] [PubMed]
120. Kim H, Sul JH, Huh N, Lee D, Jung MW. A striatum szerepe a kiválasztott műveletek értékeinek frissítésében. J Neurosci. 2009; 29: 14701-14712. [PubMed]
121. Kiyatkin EA. A feltételezett dopamintartalmú és más ventrális tegmentalis idegsejtek funkcionális tulajdonságai tudatos patkányokban. Int J Neurosci. 1988a; 42: 21-43. [PubMed]
122. Kiyatkin EA. A ventrális tegmental terület neuronok funkcionális tulajdonságainak morfin által indukált módosítása tudatos patkányokban. Intern J Idegtudomány. 1988b; 41: 57-70. [PubMed]
123. Klingberg T. A munkamemória képzése és plaszticitása. A kognitív tudományok tendenciái. 2010; 14: 317-324. [PubMed]
124. Kobayashi S, Nomoto K, Watanabe M, Hikosaka O, Schultz W, Sakagami M. A jutalmazás és averzív eredmények hatása a makákó oldalsó prefrontalis cortex aktivitására. Idegsejt. 2006; 51: 861-870. [PubMed]
125. Kobayashi S, Schultz W. A jutalom késéseinek hatása a dopamin neuronok válaszaira. J Neurosci. 2008; 28: 7837-7846. [PMC ingyenes cikk] [PubMed]
126. Kobayashi Y, Inoue Y, Yamamoto M, Isa T, Aizawa H. A pedunculopontine tegmental nucleus neuronok hozzájárulása a majmok vizuálisan vezetett saccade feladatainak végrehajtásához. J Neurophysiol. 2002; 88: 715-731. [PubMed]
127. Koyama T, Tanaka YZ, Mikami A. A makákó elülső cingulátusok nociceptív idegsejtjei a fájdalom előrejelzésekor aktiválódnak. Neuroreport. 1998; 9: 2663-2667. [PubMed]
128. Kravitz AV, Freeze BS, Parker PR, Kay K, Thwin MT, Deisseroth K, Kreitzer AC. A parkinsonismi motor viselkedésének szabályozása az alapganglia áramkör optogenetikus vezérlésével. Természet. 2010 [PMC ingyenes cikk] [PubMed]
129. Lammel S, Hetzel A, Hackel O, Jones I, Liss B, Roeper J. A mezoprefrontalis idegsejtek egyedi tulajdonságai kettős mezokortikolimbikus dopamin rendszerben. Idegsejt. 2008; 57: 760-773. [PubMed]
130. Lang PJ, Davis M. Érzelem, motiváció és az agy: reflex alapok az állatok és emberek kutatásában. Előrelépés az agykutatásban. 2006; 156: 3-29. [PubMed]
131. Lapish CC, Kroener S, Durstewitz D, Lavin A, Seamans JK. A mezokortikális dopamin rendszer képessége arra, hogy különféle időbeli módokban működjön. Pszichofarmakológia (Berl) 2007; 191: 609 – 625. [PubMed]
132. Lee D, Seo H. A megerősítő tanulás és a döntéshozatal mechanizmusai a főemlős dorsolateralis prefrontalis kéregében. A New York Tudományos Akadémia naplói. 2007; 1104: 108-122. [PubMed]
133. Lee HJ, Groshek F, Petrovich GD, Cantalini JP, Gallagher M, Holland PC. Az amygdalo-nigral áramkörök szerepe az étellel párosított vizuális inger kondicionálásában. J Neurosci. 2005; 25: 3881-3888. [PMC ingyenes cikk] [PubMed]
134. Levita L, Dalley JW, Robbins TW. A nukleusz akumuláló dopamint és a megtanult félelmet felülvizsgálták: áttekintés és néhány új eredmény. Agyi viselkedéskutatás. 2002; 137: 115-127. [PubMed]
135. Lin SC, Nicolelis MA. Az elülső agyban felrepedő neuronális együttesek valenciától függetlenül kódolják a jó közérzetet. Idegsejt. 2008; 59: 138-149. [PMC ingyenes cikk] [PubMed]
136. Lisman JE, Grace AA. A hippocampal-VTA hurok: az információ hosszú távú memóriába történő bejuttatásának ellenőrzése. Idegsejt. 2005; 46: 703-713. [PubMed]
137. Litt A, Plassmann H, Shiv B, Rangel A. Az értékelési és ösztönző jelek disszociálása a döntéshozatal során. Cereb Cortex. 2010 a sajtóban. [PubMed]
138. Liu Z, Richmond BJ, Murray EA, Saunders RC, Steenrod S, Stubblefield BK, Montague DM, Ginns EI. Az rhinalis kéreg D2 receptor fehérjét célzó DNS-é visszafordíthatóan blokkolja a jutalmat előrejelző jelek tanulását. Az Amerikai Egyesült Államok Nemzeti Tudományos Akadémia folyóiratai. 2004; 101: 12336-12341. [PMC ingyenes cikk] [PubMed]
139. Liu ZH, Shin R, Ikemoto S. Az A10 mediális dopamin neuronok kettős szerepe az affektív kódolásban. Neuropsychop. 2008; 33: 3010-3020. [PMC ingyenes cikk] [PubMed]
140. Ljungberg T, Apicella P, Schultz W. A majom dopamin neuronok válaszai a viselkedési reakciók tanulása során. J Neurophysiol. 1992; 67: 145-163. [PubMed]
141. Lobo MK, Covington HE, 3rd, Chaudhury D, Friedman AK, Sun H, Damez-Werno D, Dietz DM, Zaman S, Koo JW, Kennedy PJ, et al. A BDNF jelátvitel sejttípus-specifikus vesztesége utánozza a kokain jutalom optogenetikus szabályozását. Tudomány. 2010; 330: 385-390. [PMC ingyenes cikk] [PubMed]
142. Maeda H, Mogenson GJ. A perifériás stimuláció hatása a patkányok ventrális tegmental területén lévő neuronok aktivitására, a pagrindi nigra és agy középső agy retikuláris kialakulására. Agykutató közlemény. 1982; 8: 7-14. [PubMed]
143. Mantz J, Thierry AM, Glowinski J. A káros farokcsípés hatása a mezokortikális és mezolimbikus dopamin neuronok kisülési sebességére: a mezokortikális rendszer szelektív aktiválása. Brain Res. 1989; 476: 377-381. [PubMed]
144. Margolis EB, Lock H, Hjelmstad GO, HL mezők. Felülvizsgálták a ventrális tegmental területet: van-e elektrofiziológiai marker a dopaminerg neuronokhoz? A fiziológiai folyóirat. 2006; 577: 907-924. [PMC ingyenes cikk] [PubMed]
145. Margolis EB, Mitchell JM, Ishikawa J, Hjelmstad GO, Fields HL. Közép agyi dopamin neuronok: a vetítési cél meghatározza az akciópotenciál időtartamát és a dopamin D (2) receptor gátlását. J Neurosci. 2008; 28: 8908-8913. [PubMed]
146. Mark GP, Blander DS, Hoebel BG. A kondicionált inger csökkenti az extracelluláris dopamint a sejtmagban, egy tanult ízérzékelés kialakulása után. Brain Res. 1991; 551: 308-310. [PubMed]
147. Marowsky A, Yanagawa Y, Obata K, Vogt KE. Az interneuronok speciális alosztálya az amygdala funkció dopaminerg megkönnyítését közvetíti. Idegsejt. 2005; 48: 1025-1037. [PubMed]
148. Matsumoto M, Hikosaka O. Oldalirányú habenula mint negatív jutalom jelek forrása a dopamin neuronokban. Természet. 2007; 447: 1111-1115. [PubMed]
149. Matsumoto M, Hikosaka O. A negatív motivációs érték ábrázolása a prímás oldalsó habenulában. Nat Neurosci. 2009a; 12: 77-84. [PMC ingyenes cikk] [PubMed]
150. Matsumoto M, Hikosaka O. A dopamin neuronok két típusa kifejezetten pozitív és negatív motivációs jeleket közvetít. Természet. 2009b; 459: 837-841. [PMC ingyenes cikk] [PubMed]
151. Matsumoto M, Matsumoto K, Abe H, Tanaka K. Mediális prefrontalis sejtaktivitás jelző akcióértékek előrejelzési hibái. Nat Neurosci. 2007; 10: 647-656. [PubMed]
152. Május PJ, McHaffie JG, Stanford TR, Jiang H, Costello MG, Coizet V, Hayes LM, Haber SN, Redgrave P. A főemlősök tektonigrális vetületei: út a pre-figyelmes érzékszervi bemenethez az agy középső részének dopaminerg neuronjaiba. Az idegtudományi európai folyóirat. 2009; 29: 575-587. [PMC ingyenes cikk] [PubMed]
153. Mazzoni P, Hristova A, Krakauer JW. Miért nem haladunk gyorsabban? Parkinson-kór, mozgási erő és implicit motiváció. J Neurosci. 2007; 27: 7105–7116. [PubMed]
154. Merali Z, Michaud D, McIntosh J, Kent P, Anisman H. Az amigdaloid CRH rendszer (ek) differenciális szerepvállalása az ingerek kiemelkedésében és valenciájában. Haladás a neuro-pszichofarmakológiában és a biológiai pszichiátriában. 2003; 27: 1201–1212. [PubMed]
155. Mirenowicz J, Schultz W. A középsó agy dopamin idegsejtjeinek preferenciális aktiválása inkább étvágygerjesztő, mint riasztó ingerekkel. Természet. 1996; 379: 449-451. [PubMed]
156. Molina-Luna K, Pekanovic A, Rohrich S, Hertler B, Schubring-Giese M, Rioult-Pedotti MS, Luft AR. A motorkéregben lévő dopamin szükséges a készség megtanulásához és a szinaptikus plaszticitáshoz. PLOS ONE. 2009; 4: e7082. [PMC ingyenes cikk] [PubMed]
157. Montague PR, Berns GS. Neurális közgazdaságtan és az értékelés biológiai szubsztrátjai. Idegsejt. 2002; 36: 265-284. [PubMed]
158. Montague PR, Dayan P, Sejnowski TJ. A mesencephalikus dopamin rendszerek kerete a prediktív Hebbian tanuláson alapul. J Neurosci. 1996; 16: 1936-1947. [PubMed]
159. Morris G, Arkadir D, Nevet A, Vaadia E, Bergman H. A középsó agy dopamin és a striatális tonikusan aktív neuronok véletlenszerű, de megkülönböztetett üzenetei. Idegsejt. 2004; 43: 133-143. [PubMed]
160. Morris G, Nevet A, Arkadir D, Vaadia E, Bergman H. Midbrain dopamin neuronok kódolják a döntéseket a jövőbeli cselekvésekhez. Nat Neurosci. 2006; 9: 1057-1063. [PubMed]
161. Morrison SE, Salzman CD. Az egyes neuronokban a jutalmazó és riasztó ingerekkel kapcsolatos információk konvergenciája. J Neurosci. 2009; 29: 11471-11483. [PMC ingyenes cikk] [PubMed]
162. Nakahara H, Itoh H, Kawagoe R, Takikawa Y, Hikosaka O. A dopamin neuronok kontextusfüggő predikciós hibát képviselhetnek. Idegsejt. 2004; 41: 269-280. [PubMed]
163. Nakamura K, Hikosaka O. A dopamin szerepe a prímás caudate magban a zsákok jutalommodulációja során. J Neurosci. 2006; 26: 5360-5369. [PubMed]
164. Neve KA, Seamans JK, Trantham-Davidson H. Dopamin receptor jelátvitel. Receptor- és szignáltranszdukciós kutatások 2004; 24: 165-205. [PubMed]
165. Nishijo H, Ono T, Nishino H. Egyetlen neuronválaszok figyelmeztető majom amygdalajában, komplex érzékszervi érzékszervi stimuláció során. J Neurosci. 1988; 8: 3570-3583. [PubMed]
166. Y. Niv, Daw ND, Joel D, dayan P. Tonikus dopamin: alternatív költségek és a válaszadási erő ellenőrzése. Psychopharmacology. 2007; 191: 507-520. [PubMed]
167. Nomoto K, Schultz W, Watanabe T, Sakagami M. Az ideiglenesen kiterjesztett dopaminválaszok érzékeltetően igényes jutalom-prediktív stimulusokra. J Neurosci. 2010; 30: 10692-10702. [PMC ingyenes cikk] [PubMed]
168. Okada K, Toyama K, Inoue Y, Isa T, Kobayashi Y. Különböző pedunculopontine faktormentális idegsejtek jelzik az előre jelzett és a feladat tényleges hasznát. J Neurosci. 2009; 29: 4858-4870. [PubMed]
169. Omelchenko N, Bell R, Sesack SR. A dopamin és a GABA neuronok oldalirányú habenula-vetületei a patkányok ventrális tementális területén. Az idegtudományi európai folyóirat. 2009; 30: 1239-1250. [PMC ingyenes cikk] [PubMed]
170. Owesson-White CA, Ariansen J, Stuber GD, Cleaveland NA, Cheer JF, Wightman RM, Carelli RM. A kokainkereső viselkedés idegi kódolása egybeesik a dopamin fázissal történő felszabadulásával a felhalmozódott magban és a héjában. Az idegtudományi európai folyóirat. 2009; 30: 1117-1127. [PMC ingyenes cikk] [PubMed]
171. Oyama K, Hernadi I., Iijima T, Tsutsui K. Jutalom-predikciós hiba kódolás a hátsó striatális neuronokban. J Neurosci. 2010; 30: 11447-11457. [PubMed]
172. Packard MG, fehér NM. A hippokampusz és a caudate sejtmag memória rendszerek disszociációja a dopamin agonisták intracerebrális injekció utáni kiképzése révén. Viselkedési idegtudomány. 1991; 105: 295-306. [PubMed]
173. Padoa-Schioppa C. Orbitofrontalis kéreg és a gazdasági érték kiszámítása. A New York Tudományos Akadémia naplói. 2007; 1121: 232-253. [PubMed]
174. Palmiter RD. A dopamin jelátvitel a hátsó striatumban elengedhetetlen a motivált viselkedéshez: a dopaminhiányos egerek tanulságai. A New York Tudományos Akadémia naplói. 2008; 1129: 35-46. [PMC ingyenes cikk] [PubMed]
175. Pan WX, Hyland BI. A pedunculopontine taktmental mag szabályozza a középsó agy dopamin neuronok kondicionált válaszát viselkedő patkányokon. J Neurosci. 2005; 25: 4725-4732. [PubMed]
176. Pan WX, Schmidt R, Wickens JR, Hyland BI. A kihalás háromoldalú mechanizmusa, amelyet a dopamin neuron aktivitás és az időbeli különbség modell javasolt. J Neurosci. 2008; 28: 9619-9631. [PubMed]
177. Parker JG, Zweifel LS, Clark JJ, Evans SB, Phillips PE, Palmiter RD. Az NMDA receptorok hiánya a dopamin idegsejtekben csökkenti a dopamin felszabadulását, de nem kondicionált megközelítést tartalmaz Pavlovian kondicionálás során. Az Amerikai Egyesült Államok Nemzeti Tudományos Akadémia folyóiratai. 2010 [PMC ingyenes cikk] [PubMed]
178. Pascoe JP, Kapp BS. Az amygdaloid központi magneuronok elektrofiziológiai tulajdonságai a nyúl Pavlovian félelem kondicionálása során. Agyi viselkedéskutatás. 1985; 16: 117-133. [PubMed]
179. Pascucci T, Ventura R, Latagliata EC, Cabib S, Puglisi-Allegra S. A mediális prefrontalis kéreg meghatározza a akumulének dopamin stresszválaszát a norepinefrin és a dopamin ellentétes hatásain keresztül. Cereb Cortex. 2007; 17: 2796-2804. [PubMed]
180. Pearce JM, G. terem. Pavloviai tanulás modellje: a kondicionált, de a feltétel nélküli ingerek hatékonyságának változásai. Psychol Rev. 1980; 87: 532 – 552. [PubMed]
181. Pezze MA, Feldon J. Mesolimbic dopaminerg útvonalak a félelem kondicionálásában. Előrelépés a neurobiológiában. 2004; 74: 301-320. [PubMed]
182. Phillips AG, Ahn S, Howland JG. A mezokortikolimbikus dopamin rendszer amyglaráris szabályozása: párhuzamos utak a motivált viselkedéshez. Idegtudomány és biológiai viselkedés áttekintés. 2003a; 27: 543-554. [PubMed]
183. Phillips GD, Salussolia E, Hitchcott PK. A mezoamigdaloid dopamin vetítés szerepe az érzelmi tanulásban. Psychopharmacology. 2010 [PubMed]
184. Phillips PE, Stuber GD, Heien ML, Wightman RM, Carelli RM. A másodperc dopamin-felszabadulás elősegíti a kokainkeresést. Természet. 2003b; 422: 614-618. [PubMed]
185. Porrino LJ, Goldman-Rakic ​​PS. A prefrontalis és az anterior cingulate cortulate agykéreg beidegződése a rhesus majomban, amelyet a HRP retrográd transzportja tárt fel. Az összehasonlító neurológiai folyóirat. 1982; 205: 63-76. [PubMed]
186. Puryear CB, Kim MJ, Mizumori SJ. A mozgás és a jutalom konjunktív kódolása a ventrális tegmental terület neuronokkal a szabadon navigáló rágcsálóban. Viselkedési idegtudomány. 2010; 124: 234-247. [PMC ingyenes cikk] [PubMed]
187. Ravel S, Legallet E, Apicella P. A majom striatumában a tonálisan aktív neuronok nem elsősorban az étvágygerjesztésre reagálnak. Kísérleti agykutatás. Experimentelle Hirnforschung. 1999; 128: 531-534. [PubMed]
188. Ravel S, Legallet E, Apicella P. A majom striatumában a tonikusan aktív neuronok válaszai megkülönböztetik a motivációval ellentétes ingereket. J Neurosci. 2003; 23: 8489-8497. [PubMed]
189. Ravel S, Richmond BJ. A dopamin neuronális válaszok a majmokban, vizuálisan megcélozott jutalmazási ütemezés szerint. Az idegtudományi európai folyóirat. 2006; 24: 277-290. [PubMed]
190. Redgrave P, Gurney K. A rövid késleltetésű dopamin jel: szerepe az új cselekedetek felfedezésében? Nat Rev Neurosci. 2006; 7: 967-975. [PubMed]
191. Redgrave P, Prescott TJ, Gurney K. A rövid késleltetésű dopamin válasz túl rövid ahhoz, hogy jelzi a jutalom hibáját? Az idegtudomány alakulása. 1999; 12: 146-151. [PubMed]
192. Rescorla RA, Wagner AR. Pavloviai kondicionálás elmélete: variációk a megerősítés és az megerősítés hatékonyságában. In: Black AH, Prokasy WF, szerkesztők. Klasszikus kondicionálás II: Jelenlegi kutatás és elmélet. New York, New York: Appleton Century Crofts; 1972. 64 – 99.
193. Reynolds JNJ, Hyland BI, Wickens JR. A jutalomhoz kapcsolódó tanulás celluláris mechanizmusa. Természet. 2001; 413: 67-70. [PubMed]
194. Reynolds SM, Berridge KC. Pozitív és negatív motiváció a nucleus accumbens héjban: kétértékű rostrocaudalis gradiensek a GABA által kiváltott étkezéshez, ízléskedvelő / nem tetsző reakciók, helypreferencia / elkerülés és félelem. J Neurosci. 2002; 22: 7308–7320. [PubMed]
195. Richardson RT, DeLong MR. A primális magok funkcióinak elektrofiziológiai vizsgálata. Előrelépések a kísérleti orvoslás és a biológia területén. 1991; 295: 233-252. [PubMed]
196. Robbins TW, Arnsten AF. A fronto-végrehajtó funkció neuropszichofarmakológiája: monoaminerg moduláció. Az idegtudomány éves áttekintése. 2009; 32: 267-287. [PMC ingyenes cikk] [PubMed]
197. Robinson DL, Hermans A, Seipel AT, Wightman RM. A gyors kémiai kommunikáció figyelése az agyban. Kémiai áttekintések. 2008; 108: 2554-2584. [PMC ingyenes cikk] [PubMed]
198. Roesch MR, Calu DJ, Schoenbaum G. A dopamin idegsejtek a jobb választási lehetőséget kódolják patkányokban, különféle késleltetés vagy méret szerinti juttatások között. Nat Neurosci. 2007; 10: 1615-1624. [PMC ingyenes cikk] [PubMed]
199. Roesch MR, Olson CR. A prímás frontális kéreg jutalomértékével és motivációjával kapcsolatos neurális aktivitás. Tudomány. 2004; 304: 307-310. [PubMed]
200. Roitman MF, Wheeler RA, Wightman RM, Carelli RM. A nukleáris accumbensben a valós idejű kémiai válaszok megkülönböztetik a jutalmazó és averzív ingereket. Nat Neurosci. 2008; 11: 1376-1377. [PMC ingyenes cikk] [PubMed]
201. Rutledge RB, Lazzaro SC, Lau B, Myers CE, Gluck MA, Glimcher PW. A dopaminerg gyógyszerek dinamikus takarmányozási feladat során modulálják a tanulási arányt és a kitartást a Parkinson-kórban szenvedő betegeknél. J Neurosci. 2009; 29: 15104–15114. [PMC ingyenes cikk] [PubMed]
202. Salamone JD. A felhalmozódott dopamin atommag szerepe az étvágygerjesztő és riasztó motivációban. Agyi viselkedéskutatás. 1994; 61: 117-133. [PubMed]
203. Salamone JD, Correa M, Farrar A, Mingote SM. A dopamin és a mag előtti áramkörök erőfeszítéssel kapcsolatos funkciói. Pszichofarmakológia (Berl) 2007: 191: 461 – 482. [PubMed]
204. Satoh T, Nakai S, Sato T, Kimura M. A motiváció és a döntés eredményének összefüggő kódolása dopamin neuronok szerint. J Neurosci. 2003; 23: 9913-9923. [PubMed]
205. Savine AC, Beck SM, Edwards BG, Chiew KS, Braver TS. A kognitív kontroll fokozása megközelítéssel és elkerülési motivációs állapotokkal. Megismerés és érzelem. 2010; 24: 338–356. [PMC ingyenes cikk] [PubMed]
206. Schoenbaum G, Roesch MR, Stalnaker TA, Takahashi YK. Új perspektíva az orbitofrontális kéreg szerepéről az adaptív viselkedésben. Nat Rev Neurosci. 2009; 10: 885-892. [PMC ingyenes cikk] [PubMed]
207. Schultz W. A középsó agy dopamin idegsejtek válaszai a majom viselkedésbeli kiváltó ingeire. J Neurophysiol. 1986; 56: 1439-1461. [PubMed]
208. Schultz W. A dopamin neuronok prediktív jutalmi jele. J Neurophysiol. 1998; 80: 1-27. [PubMed]
209. Schultz W. Több dopamin funkció különböző időpontokban. Az idegtudomány éves áttekintése. 2007; 30: 259-288. [PubMed]
210. Schultz W. Dopamin jelek a jutalom értékére és kockázatára: alapvető és legfrissebb adatok. Behav Brain Funct. 2010; 6: 24. [PMC ingyenes cikk] [PubMed]
211. Schultz W, Dayan P, Montague PR. Az előrejelzés és jutalom idegi szubsztrátja. Tudomány. 1997; 275: 1593-1599. [PubMed]
212. Schultz W, Romo R. A nigrostriatális dopamin neuronok reakciói az érzéstelenített majomban a nagy intenzitású szomatoszenzoros stimulációra. J Neurophysiol. 1987; 57: 201-217. [PubMed]
213. Schultz W, Romo R. A majom középső agyának dopamin idegsejtjei: azonnali viselkedési reakciókat kiváltó ingerekre adott reakciók. J Neurophysiol. 1990; 63: 607-624. [PubMed]
214. Seo H, Lee D. A jutalomjelek ideiglenes szűrése a hátsó elülső cingulate kéregben vegyes stratégiai játék során. J Neurosci. 2007; 27: 8366-8377. [PMC ingyenes cikk] [PubMed]
215. Shabel SJ, Janak PH. Lényeges hasonlóság az amygdala neuronális aktivitásában kondicionált étvágygerjesztő és riasztó érzelmi izgalom során. Az Amerikai Egyesült Államok Nemzeti Tudományos Akadémia folyóiratai. 2009; 106: 15031-15036. [PMC ingyenes cikk] [PubMed]
216. Shadmehr R, Smith MA, Krakauer JW. Hibajavítás, szenzoros előrejelzés és kiigazítás a motorvezérlésben. Az idegtudomány éves áttekintése. 2010 [PubMed]
217. Shen W, Flajolet M, Greengard P, Surmeier DJ. A striatális szinaptikus plaszticitás dihotóm dopaminerg szabályozása. Tudomány. 2008; 321: 848-851. [PMC ingyenes cikk] [PubMed]
218. Shimo Y, Wichmann T. A szubtalamás magban a neuronális aktivitás modulálja a dopamin felszabadulását a majom striatumában. Az idegtudományi európai folyóirat. 2009; 29: 104-113. [PMC ingyenes cikk] [PubMed]
219. Shippenberg TS, Bals-Kubik R, Huber A, Herz A. Neuroanatómiai szubsztrátok, amelyek a D-1 dopamin receptor antagonisták riasztó hatásait közvetítik. Pszichofarmakológia (Berl) 1991; 103: 209 – 214. [PubMed]
220. Shumake J, Ilango A, Scheich H, Wetzel W, Ohl FW. Az elkerülési tanulás megszerzésének és visszanyerésének differenciális neuromodulációja az oldalsó habenula és a ventrális tegmentális területen. J Neurosci. 2010; 30: 5876-5883. [PubMed]
221. Kicsi DM, Gregory MD, Mak YE, Gitelman D, Mesulam MM, Parrish T. Az intenzitás és az érzelmi érték neurális reprezentációjának disszociációja az emberi ízlésben. Idegsejt. 2003; 39: 701-711. [PubMed]
222. Stefani MR, Moghaddam B. A szabályok megtanulása és a jutalom-kontingencia a dopamin aktiválódásának disszociálható mintázataival társul a patkányok prefrontalis kéregében, nucleus akumbensben és a hátsó striatumban. J Neurosci. 2006; 26: 8810-8818. [PMC ingyenes cikk] [PubMed]
223. Steinfels GF, Heym J, Strecker RE, Jacobs BL. A macskában levő dopaminerg idegsejtek reagálása az alvás-ébrenlési ciklus során bemutatott hallóingerre. Brain Res. 1983; 277: 150-154. [PubMed]
224. Strecker RE, Jacobs BL. Substantia nigra dopaminerg egység aktivitás viselkedő macskákban: az izgalom hatása a spontán kisülésre és az érzékelés által kiváltott aktivitásra. Brain Res. 1985; 361: 339-350. [PubMed]
225. Stuber GD, Hnasko TS, Britt JP, Edwards RH, Bonci A. Dopaminerg terminálisok a nucleus activumbensben, de nem a hátsó striatum corelease glutamátban. Journal of Neuroscience. 2010; 30: 8229-8233. [PMC ingyenes cikk] [PubMed]
226. Stuber GD, Wightman RM, Carelli RM. A kokain önbeadásának kioltása funkcionálisan és időbeli szempontból megkülönböztetett dopaminerg jeleket derít fel a nucleus akumulánsokban. Idegsejt. 2005; 46: 661-669. [PubMed]
227. Sul JH, Kim H, Huh N, Lee D, Jung MW. A rágcsáló orbitofrontalis és a medialis prefrontalis cortex szerepe a döntéshozatalban. Idegsejt. 2010; 66: 449-460. [PMC ingyenes cikk] [PubMed]
228. Surmeier DJ, Ding J, M. nap, Wang Z, Shen W. D1 és D2 dopamin-receptor dopamin-receptor modulációja a striatális glutamatergikus jelátvitelhez striatális közepes tüskés idegsejtekben. Az idegtudomány alakulása. 2007; 30: 228-235. [PubMed]
229. Surmeier DJ, Shen W, M. nap, Gertler T, Chan S, Tian X, Plotkin JL. A dopamin szerepe a striatális áramkörök szerkezetének és működésének modulálásában. Előrelépés az agykutatásban. 2010; 183C: 148-167. [PubMed]
230. Sutton RS, Barto AG. Az adaptív hálózatok modern elmélete felé: elvárások és előrejelzések. Psychol Rev. 1981; 88: 135 – 170. [PubMed]
231. Takahashi YK, Roesch MR, Stalnaker TA, Haney RZ, Calu DJ, Taylor AR, Burke KA, Schoenbaum G. Az orbitofrontalis kéreg és a ventrális testmentális terület szükséges a váratlan eredményekből való tanuláshoz. Idegsejt. 2009; 62: 269-280. [PMC ingyenes cikk] [PubMed]
232. Takikawa Y, Kawagoe R, Hikosaka O. A középsó agy dopamin idegsejtjeinek lehetséges szerepe a zsákok rövid és hosszú távú adaptációjában a helyzet-jutalom térképezéshez. J Neurophysiol. 2004; 92: 2520-2529. [PubMed]
233. Tecuapetla F, Patel JC, Xenias H, angol D., Tadros I., Shah F, Berlin J, Deisseroth K, Rice ME, Tepper JM, Koos T. Glutamatergikus jelátvitel mesolimbikus dopamin idegsejtekkel a nucleus activumban. J Neurosci. 2010; 30: 7105-7110. [PMC ingyenes cikk] [PubMed]
234. Thierry AM, Tassin JP, Blanc G, Glowinski J. A mezokortikális DA rendszer szelektív aktiválása stressz által. Természet. 1976; 263: 242-244. [PubMed]
235. Tobler PN, Dickinson A, Schultz W. A dopamin neuronok előrejelzett juttatáskibocsátásának kódolása egy kondicionált gátlási paradigmában. J Neurosci. 2003; 23: 10402-10410. [PubMed]
236. Tobler PN, Fiorillo CD, Schultz W. Dopamin neuronok jutalmi értékének adaptív kódolása. Tudomány. 2005; 307: 1642-1645. [PubMed]
237. A Tsai HC, Zhang F, Adamantidis A, Stuber GD, Bonci A, Lecea L, Deisseroth K. A dopaminerg neuronokban a fázisos égés elegendő a viselkedés kondicionálásához. Tudomány. 2009 [PubMed]
238. Ullsperger M. A teljesítmény monitorozásának és a visszajelzésből való tanulás genetikai asszociációs tanulmányai: a dopamin és a szerotonin szerepe. Idegtudomány és biológiai viselkedés áttekintés. 2010; 34: 649-659. [PubMed]
239. Hacsak MA. Dopamin: a legfontosabb kérdés. Az idegtudomány alakulása. 2004; 27: 702-706. [PubMed]
240. Uylings HB, Groenewegen HJ, Kolb B. Van-e patkányok prefrontalis kéreg? Agyi viselkedéskutatás. 2003; 146: 3-17. [PubMed]
241. Ventura R, Cabib S, Puglisi-Allegra S. Ellentétes genotípus-függő mezokortikolimbikus dopamin válasz stresszre. Neuroscience. 2001; 104: 627-631. [PubMed]
242. Ventura R, Latagliata EC, Morrone C, La Mela I, Puglisi-Allegra S. A prefrontális noradrenalin meghatározza a „magas” motivációs törekvés hozzárendelését. PLOS ONE. 2008; 3: e3044. [PMC ingyenes cikk] [PubMed]
243. Ventura R, Morrone C, Puglisi-Allegra S. A prefrontalis / akumulációs katecholamin-rendszer meghatározza a motivációs ösztönzést mind a jutalom, mind az idegenséggel kapcsolatos ingerek számára. Az Amerikai Egyesült Államok Nemzeti Tudományos Akadémia folyóiratai. 2007; 104: 5181-5186. [PMC ingyenes cikk] [PubMed]
244. Vogt BA. Fájdalom és érzelem interakciók a cingulate gyrus alrégióiban. Nat Rev Neurosci. 2005; 6: 533-544. [PMC ingyenes cikk] [PubMed]
245. Voon V, Pessiglione M, Brezing C, Gallea C, Fernandez HH, Dolan RJ, Hallett M. A dopamin-közvetített jutalom-ias alapjául szolgáló mechanizmusok a kényszeres viselkedésben. Idegsejt. 2010; 65: 135-142. [PMC ingyenes cikk] [PubMed]
246. Waelti P, Dickinson A, Schultz W. Dopamin válaszok megfelelnek a formális tanuláselmélet alapfeltevéseinek. Természet. 2001; 412: 43-48. [PubMed]
247. Wallis JD, Kennerley SW. Heterogén jutalomjelek a prefrontalis kéregben. Jelenlegi vélemény a neurobiológiában. 2010; 20: 191-198. [PMC ingyenes cikk] [PubMed]
248. Walton ME, Behrens TE, Buckley MJ, Rudebeck PH, Rushworth MF. Elkülöníthető tanulási rendszerek a makákó agyban és az orbitofrontalis kéreg szerepe a kontingens tanulásban. Idegsejt. 2010; 65: 927-939. [PMC ingyenes cikk] [PubMed]
249. Wheeler RA, Twining RC, Jones JL, Slater JM, Grigson PS, Carelli RM. A negatív hatások viselkedési és elektrofiziológiai mutatói előrejelzik a kokain önadagolását. Idegsejt. 2008; 57: 774-785. [PubMed]
250. Wightman RM, Heien MLAV, Wassum KM, Sombers LA, Aragona BJ, Khan AS, Ariansen JL, Cheer JF, Phillips PE, Carelli RM. A dopamin felszabadulása heterogén a patkányok magjainak mikrobói környezetében. Az idegtudományi európai folyóirat. 2007; 26: 2046-2054. [PubMed]
251. Williams GV, Castner SA. A görbe alatt: A D1 receptor funkciójának a munkamemóriában történő meghatározásának kritikai kérdései. Neuroscience. 2006; 139: 263-276. [PubMed]
252. Williams SM, Goldman-Rakic ​​PS. A főemlős mezofrontalis dopamin rendszer széles körű eredete. Cereb Cortex. 1998; 8: 321-345. [PubMed]
253. Winn P. Hogyan lehet a pedunculopontine tegmental mag szerkezetét és funkcióját legjobban figyelembe venni: állatokon végzett kutatások bizonyítéka. A Neurological Sciences folyóirat. 2006; 248: 234-250. [PubMed]
254. Wise RA. Dopamin, tanulás és motiváció. Nat Rev Neurosci. 2004; 5: 483-494. [PubMed]
255. Wise RA. A jutalom és a motiváció előagyi szubsztrátjai. Az összehasonlító neurológiai folyóirat. 2005; 493: 115-121. [PMC ingyenes cikk] [PubMed]
256. Wise SP. Előzetes frontális mezők: filogenezis és alapvető funkció. Az idegtudomány alakulása. 2008; 31: 599-608. [PMC ingyenes cikk] [PubMed]
257. Yamada H, Matsumoto N, Kimura M. A főemlős caudate magjában és a putamenben tonikusan aktív neuronok eltérő módon kódolják a cselekvés motivációs eredményeit. J Neurosci. 2004; 24: 3500-3510. [PubMed]
258. Yamada H, Matsumoto N, Kimura M. A striatumban várható viselkedési kimenetelek történelem és jelenlegi utasítás-alapú kódolása. J Neurophysiol. 2007; 98: 3557-3567. [PubMed]
259. Yin HH, Knowlton BJ. A bazális ganglionok szerepe a szokások kialakulásában. Nat Rev Neurosci. 2006; 7: 464-476. [PubMed]
260. Young AM, Moran miniszterelnök, Joseph MH. A dopamin szerepe a kondicionálásban és a látens gátlásban: mi, mikor, hol és hogyan? Idegtudomány és biológiai viselkedés áttekintés. 2005; 29: 963-976. [PubMed]
261. Zaghloul KA, Blanco JA, Weidemann CT, McGill K, Jaggi JL, Baltuch GH, Kahana MJ. Az emberi põhjenia nigra neuronok váratlan pénzügyi hasznokat kódolnak. Tudomány. 2009; 323: 1496-1499. [PMC ingyenes cikk] [PubMed]
262. Zahniser NR, Sorkin A. A dopamin transzporter gyors szabályozása: szerepe az stimuláns függőségben? Neuropharmacology. 2004; 47 kellék 1: 80 – 91. [PubMed]
263. Zhang L, Doyon WM, Clark JJ, Phillips PE, Dani JA. A tonikus és fázisos dopamin átvitel szabályozása a hátsó és a ventrális striatumban. Molekuláris farmakológia. 2009; 76: 396-404. [PMC ingyenes cikk] [PubMed]
264. Zink CF, Pagnoni G, Martin ME, Dhamala M, Berns GS. Az emberi striatális válasz észlelhető nem visszatérítő ingerekre. Journal of Neuroscience. 2003; 23: 8092-8097. [PubMed]
265. Zweifel LS, Argilli E, Bonci A, Palmiter RD. Az NMDA receptorok szerepe a dopamin neuronokban a plaszticitás és az addiktív viselkedés szempontjából. Idegsejt. 2008; 59: 486-496. [PMC ingyenes cikk] [PubMed]
266. Zweifel LS, Parker JG, Lobb CJ, Rainwater A, Wall VZ, Fadok JP, Darvas M, Kim MJ, Mizumori SJ, Paladini CA, et al. A dopamin idegsejtek által az NMDAR-függő robbantási zavarok szelektív módon meghatározzák a fázisos dopamin-függő viselkedést. Az Amerikai Egyesült Államok Nemzeti Tudományos Akadémia folyóiratai. 2009; 106: 7281-7288. [PMC ingyenes cikk] [PubMed]