Dopamien in motiveringskontrole: beloonend, afkeerend en waarskuwend (2010)

Sien ander artikels in PMC dat noem die gepubliseerde artikel.

Dopamienneurone in die middelbrein is bekend vir hul sterk reaksies op belonings en hul kritieke rol in positiewe motivering. Dit het egter al hoe duideliker geword dat dopamienneurone ook seine oordra wat verband hou met opvallende maar nie-lonende ervarings soos afkeer en waarskuwingsgebeure. Hier hersien ons onlangse vooruitgang in die begrip van die beloning en nie-beloning funksies van dopamien. Op grond van hierdie data stel ons voor dat dopamienneurone in veelvuldige tipes voorkom wat met verskillende breinnetwerke verbind is en verskillende rolle in motiveringsbeheer het. Sommige dopamienneurone kodeer motiveringswaarde, wat breinnetwerke ondersteun vir soek, evaluasie en waardeleer. Ander kodeer motiverende opvallendheid, wat breinnetwerke ondersteun vir oriëntering, kognisie en algemene motivering. Beide tipes dopamienneurone word aangevul deur 'n waarskuwingsein wat betrokke is by vinnige opsporing van potensieel belangrike sensoriese leidrade. Ons veronderstel dat hierdie dopaminerge weë vir waarde, opvallendheid en waarskuwing saamwerk om aanpasbare gedrag te ondersteun.

Dopamien in motivering van beloningsoekende aksies

Dopamien is lank reeds bekend as belangrik vir die versterking en motivering van aksies. Dwelms wat inmeng met DA-oordrag, meng in met versterkingsleer, terwyl manipulasies wat DA-oordrag bevorder, soos breinstimulasie en verslawende middels, dikwels as versterkers optree (Wys, 2004). DA-oordrag is noodsaaklik vir die skep van 'n toestand van motivering om belonings te soek (Berridge en Robinson, 1998; Salamone et al., 2007) en vir die vestiging van herinneringe van cue-beloning assosiasies (Dalley et al., 2005). DA-vrystelling is nie nodig vir alle vorme van beloningsleer nie en word dalk nie altyd 'gelaaik' in die sin van plesier veroorsaak nie, maar dit is van kritieke belang om doelwitte 'gesoek' te laat word in die sin van motiverende aksies om dit te bereik (Berridge en Robinson, 1998; Palmiter, 2008).

Een hipotese oor hoe dopamien versterkingsleer ondersteun, is dat dit die sterkte van sinaptiese verbindings tussen neurone aanpas. Die eenvoudigste weergawe van hierdie hipotese is dat dopamien sinaptiese plastisiteit beheer volgens 'n gewysigde Hebbiese reël wat rofweg gestel kan word as "neurone wat saamvuur, solank hulle 'n sarsie dopamien kry". Met ander woorde, as sel A sel B aktiveer, en sel B 'n gedragsaksie veroorsaak wat 'n beloning tot gevolg het, sal dopamien vrygestel word en die A→B-verbinding sal versterk word (Montague et al., 1996; Schultz, 1998). Hierdie meganisme sal 'n organisme in staat stel om die optimale keuse van aksies aan te leer om belonings te kry, gegewe voldoende proef-en-fout-ervaring. In ooreenstemming met hierdie hipotese het dopamien 'n kragtige invloed op sinaptiese plastisiteit in talle breinstreke (Surmeier et al., 2010; Goto et al., 2010; Molina-Luna et al., 2009; Marowsky et al., 2005; Lisman en Grace, 2005). In sommige gevalle maak dopamien sinaptiese plastisiteit moontlik volgens die lyne van die Hebbiese reël wat hierbo beskryf is, op 'n wyse wat gekorreleer is met beloning-soekende gedrag (Reynolds et al., 2001). Benewens die uitwerking daarvan op langtermyn sinaptiese plastisiteit, kan dopamien ook onmiddellike beheer oor neurale stroombane uitoefen deur neurale spikaktiwiteit en sinaptiese verbindings tussen neurone te moduleer (Surmeier et al., 2007; Robbins en Arnsten, 2009), in sommige gevalle doen dit op 'n manier wat onmiddellike beloningsoekende aksies sal bevorder (Frank, 2005).

Dopamienneuronbeloningsseine

Om aksies te motiveer wat tot belonings lei, moet dopamien vrygestel word tydens lonende ervarings. Inderdaad, die meeste DA neurone word sterk geaktiveer deur onverwagte primêre belonings soos kos en water, wat dikwels fasiese 'uitbarstings' van aktiwiteit veroorsaak (Schultz, 1998) (fasiese opwekkings insluitend veelvuldige spykers (Grace and Bunney, 1983)). Die baanbrekerstudies van Wolfram Schultz het egter getoon dat hierdie DA-neuronreaksies nie deur beloningsverbruik veroorsaak word nie per se. In plaas daarvan lyk hulle soos 'n 'beloningsvoorspellingsfout', wat die verskil rapporteer tussen die beloning wat ontvang word en die beloning wat voorspel is om te voorkom (Schultz et al., 1997) (Figuur 1A). Dus, as 'n beloning groter is as wat voorspel is, is DA neurone sterk opgewonde (positiewe voorspellingsfout, Figuur 1E, rooi); as 'n beloning kleiner is as wat voorspel is of nie op die vasgestelde tyd plaasvind nie, word DA neurone fasies geïnhibeer (negatiewe voorspellingsfout, Figuur 1E, blou); en as 'n beloning vooraf aangedui word sodat die grootte daarvan ten volle voorspelbaar is, het DA-neurone min of geen reaksie nie (nul voorspellingsfout, Figuur 1C, swart). Dieselfde beginsel geld vir DA-reaksies op sensoriese leidrade wat nuwe inligting oor toekomstige belonings verskaf. DA neurone is opgewonde wanneer 'n aanduiding 'n toename in toekomstige beloningswaarde aandui (Figuur 1C, rooi), geïnhibeer wanneer 'n aanduiding 'n afname in toekomstige beloningswaarde aandui (Figuur 1C, blou), en het oor die algemeen min reaksie op leidrade wat geen nuwe beloningsinligting oordra nie (Figuur 1E, swart). Hierdie DA-reaksies lyk soos 'n spesifieke tipe beloningsvoorspellingsfout wat die temporele verskilfout of "TD-fout" genoem word, wat voorgestel is om as 'n versterkingssein te dien om die waarde van aksies en omgewingstoestande te leer (Houk et al., 1995; Montague et al., 1996; Schultz et al., 1997). Berekeningsmodelle wat 'n TD-agtige versterkingsein gebruik, kan baie aspekte van versterkingsleer by mense, diere en DA-neurone self verduidelik (Sutton en Barto, 1981; Waelti et al., 2001; Montague en Berns, 2002; Dayan en Niv, 2008).

 

Figuur 1

Dopamienkodering van beloningsvoorspellingsfoute en voorkeur vir voorspellende inligting

'n Indrukwekkende reeks eksperimente het getoon dat DA-seine beloningsvoorspellings verteenwoordig op 'n manier wat nou ooreenstem met gedragsvoorkeure, insluitend die voorkeur vir groot belonings bo klein (Tobler et al., 2005) waarskynlike belonings bo onwaarskynlikes (Fiorillo et al., 2003; Satoh et al., 2003; Morris et al., 2004) en onmiddellike belonings oor vertraagdes (Roesch et al., 2007; Fiorillo et al., 2008; Kobayashi en Schultz, 2008). Daar is selfs bewyse dat DA-neurone in mense die beloningswaarde van geld kodeer (Zaghloul et al., 2009). Verder kom DA-seine na vore tydens leer met 'n soortgelyke tydsverloop as gedragsmaatstawwe van beloningsvoorspelling (Hollerman en Schultz, 1998; Satoh et al., 2003; Takikawa et al., 2004; Dag et al., 2007) en word gekorreleer met subjektiewe maatstawwe van beloningsvoorkeur (Morris et al., 2006). Hierdie bevindinge het DA-neurone vasgestel as een van die beste verstaanbare en mees gerepliseerde voorbeelde van beloningskodering in die brein. Gevolglik het onlangse studies DA-neurone aan intensiewe ondersoek onderwerp om te ontdek hoe hulle beloningsvoorspellings genereer en hoe hul seine op stroomaf-strukture optree om gedrag te beheer.

Dopamienneuronbeloningsseine

Onlangse vooruitgang in die begrip van DA-beloningsseine kom uit die oorweging van drie breë vrae: Hoe leer DA-neurone beloningsvoorspellings? Hoe akkuraat is hul voorspellings? En presies wat behandel hulle as lonend?

Hoe leer DA-neurone beloningsvoorspellings? Klassieke teorieë dui daarop dat beloningsvoorspellings aangeleer word deur 'n geleidelike versterkingsproses wat herhaalde stimulus-beloning-parings vereis (Rescorla en Wagner, 1972; Montague et al., 1996). Elke keer wanneer stimulus A gevolg word deur 'n onverwagte beloning, word die beraamde waarde van A verhoog. Onlangse data toon egter dat DA-neurone verder gaan as eenvoudige stimulusbeloningleer en voorspellings maak gebaseer op gesofistikeerde oortuigings oor die struktuur van die wêreld. DA-neurone kan belonings korrek voorspel selfs in onkonvensionele omgewings waar belonings gepaard met 'n stimulus 'n verminder in die waarde van daardie stimulus (Satoh et al., 2003; Nakahara et al., 2004; Bromberg-Martin et al., 2010c) of 'n verandering in die waarde van 'n heeltemal ander stimulus veroorsaak (Bromberg-Martin et al., 2010b). DA-neurone kan ook hul beloningseine aanpas op grond van hoër-orde statistieke van die beloningverspreiding, soos skaalvoorspellingsfoutseine gebaseer op hul verwagte variansie (Tobler et al., 2005) en hul reaksies op uitgedoofde beloningswyses 'spontaan te herstel' (Pan et al., 2008). Al hierdie verskynsels vorm 'n merkwaardige parallel met soortgelyke effekte wat gesien word in sensoriese en motoriese aanpassing (Braun et al., 2010; Fairhall et al., 2001; Shadmehr et al., 2010), wat daarop dui dat hulle 'n algemene neurale meganisme vir voorspellende leer kan weerspieël.

Hoe akkuraat is DA-beloningsvoorspellings? Onlangse studies het getoon dat DA-neurone hul beloningseine getrou aanpas om rekening te hou met drie bronne van voorspellingsonsekerheid. Eerstens, mense en diere ly aan interne tydsberekening geraas wat hulle verhoed om betroubare voorspellings te maak oor lang cue-beloning tydintervalle (Gallistel en Gibbon, 2000). Dus, as cue-beloning vertragings kort is (1–2 sekondes), is tydsberekening voorspellings akkuraat en beloning aflewering veroorsaak min DA-reaksie, maar vir langer cue-beloning vertragings word tydsberekeningsvoorspellings minder betroubaar en belonings roep duidelike DA-sarsies op (Kobayashi en Schultz, 2008; Fiorillo et al., 2008). Tweedens, baie leidrade in die alledaagse lewe is onakkuraat, wat 'n breë verspreiding van beloning afleweringstye spesifiseer. DA-neurone weerspieël weer hierdie vorm van tydsberekeningsonsekerheid: hulle word progressief geïnhibeer tydens veranderlike beloningsvertragings, asof hulle toenemend negatiewe beloningsvoorspellingsfoute aandui op elke oomblik wat die beloning nie verskyn nie (Fiorillo et al., 2008; Bromberg-Martin et al., 2010a; Nomoto et al., 2010). Ten slotte, baie leidrade is perseptueel kompleks, wat gedetailleerde inspeksie vereis om 'n vaste gevolgtrekking oor hul beloningswaarde te bereik. In sulke situasies vind DA-beloningsseine plaas met lang latensies en op 'n geleidelike wyse, wat blykbaar die geleidelike vloei van perseptuele inligting weerspieël soos die stimuluswaarde gedekodeer word (Nomoto et al., 2010).

Presies watter gebeure behandel DA neurone as lonend? Konvensionele teorieë van beloningsleer dui daarop dat DA-neurone waarde toeken op grond van die verwagte hoeveelheid toekomstige primêre beloning (Montague et al., 1996). Selfs wanneer die koers van primêre beloning konstant gehou word, spreek mense en diere dikwels 'n bykomende voorkeur uit vir voorspelbaarheid – op soek na omgewings waar elke beloning se grootte, waarskynlikheid en tydsberekening vooraf bekend kan wees (Daly, 1992; Chew en Ho, 1994; Ahlbrecht en Weber, 1996). 'n Onlangse studie in ape het bevind dat DA-neurone hierdie voorkeur aandui (Bromberg-Martin en Hikosaka, 2009). Ape het 'n sterk voorkeur uitgespreek om insiggewende visuele leidrade te sien wat hulle in staat sal stel om die grootte van 'n toekomstige beloning te voorspel, eerder as oninsiggewende leidrade wat geen nuwe inligting verskaf nie. Terselfdertyd was DA neurone opgewonde oor die geleentheid om die insiggewende leidrade te sien op 'n wyse wat gekorreleer is met die dier se gedragsvoorkeur (Figuur 1B, D). Dit dui daarop dat DA-neurone nie net aksies motiveer om belonings te kry nie, maar ook aksies motiveer om akkurate voorspellings oor daardie belonings te maak, om te verseker dat belonings behoorlik verwag kan word en vooraf voorberei kan word.

Saamgevat toon hierdie bevindinge dat DA-beloningvoorspellingsfoutseine sensitief is vir gesofistikeerde faktore wat menslike en dierlike beloningsvoorspellings inlig, insluitend aanpassing by hoë-orde beloningstatistieke, beloningsonsekerheid en voorkeure vir voorspellende inligting.

Effekte van fasiese dopamienbeloningseine op stroomaf strukture

DA-beloningsreaksies vind plaas in sinchroniese fasiese sarsies (Joshua et al., 2009b), 'n reaksiepatroon wat DA-vrystelling in teikenstrukture vorm (Gonon, 1988; Zhang et al., 2009; Tsai et al., 2009). Daar is lank reeds teoretiseer dat hierdie fasiese uitbarstings leer en motivering op 'n ander manier beïnvloed as toniese DA-aktiwiteit (Grace, 1991; Grace et al., 2007; Schultz, 2007; Lapish et al., 2007). Onlangs ontwikkelde tegnologie het dit moontlik gemaak om hierdie hipotese te bevestig deur DA-neuronaktiwiteit met fyn ruimtelike en tydelike presisie te beheer. Optogenetiese stimulasie van VTA DA neurone veroorsaak 'n sterk gekondisioneerde plekvoorkeur wat slegs plaasvind wanneer stimulasie in 'n barsende patroon toegepas word (Tsai et al., 2009). Omgekeerd veroorsaak genetiese uitskakeling van NMDA-reseptore van DA-neurone, wat bars belemmer terwyl tonikumaktiwiteit grootliks ongeskonde gelaat word, 'n selektiewe inkorting in spesifieke vorme van beloningsleer (Zweifel et al., 2009; Parker et al., 2010) (hoewel let op dat hierdie uitklop ook DA neuron sinaptiese plastisiteit benadeel (Zweifel et al., 2008)). DA-uitbarstings kan beloningsleer verbeter deur plaaslike neurale stroombane te herkonfigureer. Veral, beloning-voorspellende DA-uitbarstings word na spesifieke streke van die nucleus accumbens gestuur, en hierdie streke het veral hoë vlakke van beloning-voorspellende neurale aktiwiteit (Cheer et al., 2007; Owesson-White et al., 2009).

In vergelyking met fasiese uitbarstings, is minder bekend oor die belangrikheid van fasiese pouses in spikaktiwiteit vir negatiewe beloningsvoorspellingsfoute. Hierdie pouses veroorsaak kleiner veranderinge in stygtempo, word minder gemoduleer deur beloningverwagting (Bayer en Glimcher, 2005; Joshua et al., 2009a; Nomoto et al., 2010), en kan kleiner effekte op leer hê (Rutledge et al., 2009). Sekere tipes negatiewe voorspellingsfoutleer vereis egter die VTA (Takahashi et al., 2009), wat daarop dui dat fasiese pouses steeds deur stroomaf strukture gedekodeer kan word.

Aangesien uitbarstings en pouses baie verskillende patrone van DA-vrystelling veroorsaak, sal dit waarskynlik stroomaf strukture beïnvloed deur verskillende meganismes. Daar is onlangse bewyse vir hierdie hipotese in een groot teiken van DA neurone, die dorsale striatum. Dorsale striatum-projeksieneurone kom in twee tipes voor wat verskillende DA-reseptore uitdruk. Een tipe druk D1-reseptore uit en projekteer na die basale ganglia 'direkte pad' om liggaamsbewegings te vergemaklik; die tweede tipe druk D2-reseptore uit en projekteer na die 'indirekte pad' om liggaamsbewegings te onderdruk (Figuur 2) (Albin et al., 1989; Gerfen et al., 1990; Kravitz et al., 2010; Hikida et al., 2010). Gebaseer op die eienskappe van hierdie weë en reseptore, is daar teoretiseer dat DA-uitbarstings toestande van hoë DA produseer, D1-reseptore aktiveer en veroorsaak dat die direkte roete hoëwaarde bewegings (Figuur 2A), terwyl DA-pouses toestande van lae DA veroorsaak, D2-reseptore inhibeer en veroorsaak dat die indirekte pad lae-waarde bewegings onderdruk (Figuur 2B) (Frank, 2005; Hikosaka, 2007). In ooreenstemming met hierdie hipotese bevorder hoë DA-reseptoraktivering potensiasie van kortiko-striatale sinapse op die direkte pad (Shen et al., 2008) en leer uit positiewe uitkomste (Frank et al., 2004; Voon et al., 2010), terwyl striatale D1-reseptorblokkade selektief bewegings na beloonde teikens belemmer (Nakamura en Hikosaka, 2006). Op 'n soortgelyke wyse bevorder lae DA-reseptoraktivering potensiasie van kortiko-striatale sinapse op die indirekte pad (Shen et al., 2008) en leer uit negatiewe uitkomste (Frank et al., 2004; Voon et al., 2010), terwyl striatale D2-reseptorblokkade selektief bewegings na nie-beloonde teikens onderdruk (Nakamura en Hikosaka, 2006). Hierdie verdeling van D1- en D2-reseptorfunksies in motiveringsbeheer verduidelik baie van die effekte van DA-verwante gene op menslike gedrag (Ullsperger, 2010; Frank en Fossella, 2010) en kan verder as die dorsale striatum strek, aangesien daar bewyse is vir 'n soortgelyke arbeidsverdeling in die ventrale striatum (Grace et al., 2007; Lobo et al., 2010).

 

Figuur 2

Dopamienbeheer van positiewe en negatiewe motivering in die dorsale striatum

Terwyl die bogenoemde skema 'n eenvoudige prentjie skets van fasiese DA-beheer van gedrag deur die uitwerking daarvan op die striatum, is die volledige prentjie baie meer kompleks. DA beïnvloed beloningsverwante gedrag deur op baie breinstreke op te tree, insluitend die prefrontale korteks (Hitchcott et al., 2007), renale korteks (Liu et al., 2004), hippocampus (Packard en White, 1991; Grecksch en Matties, 1981) en amigdala (Phillips et al., 2010). Die effekte van DA sal waarskynlik baie verskil tussen hierdie streke as gevolg van variasies in die digtheid van DA-innervering, DA-vervoerders, metaboliese ensieme, outoreseptore, reseptore en reseptorkoppeling aan intrasellulêre seinweë (Neve et al., 2004; Bentivoglio en Morelli, 2005; Frank en Fossella, 2010). Verder, ten minste in die VTA, kan DA-neurone verskillende sellulêre eienskappe hê, afhangende van hul projeksieteikens (Lammel et al., 2008; Margolis et al., 2008), en sommige het die merkwaardige vermoë om glutamaat sowel as dopamien oor te dra (Descarries et al., 2008; Chuhma et al., 2009; Hnasko et al., 2010; Tecuapetla et al., 2010; Stuber et al., 2010; Birgner et al., 2010). Die volle omvang van DA-neuronbeheer oor neurale verwerking begin dus eers geopenbaar word.

Diverse dopamienreaksies op afkerende gebeure

'n Neuron se reaksie op aversiewe gebeure bied 'n deurslaggewende toets van sy funksies in motiveringsbeheer (Schultz, 1998; Berridge en Robinson, 1998; Redgrave et al., 1999; Horvitz, 2000; Joseph et al., 2003). In baie opsigte behandel ons lonende en afkeerlike gebeurtenisse op teenoorgestelde maniere, wat die teenoorgestelde weerspieël motiveringswaarde. Ons soek belonings en gee positiewe waarde daaraan, terwyl ons afkerige gebeure vermy en negatiewe waarde daaraan toeken. In ander opsigte behandel ons lonende en afkeerlike gebeurtenisse op soortgelyke maniere, wat hul soortgelyke weerspieël motiverende opvallendheid [VOETNOTA1]. Beide lonende en afkeerlike gebeurtenisse veroorsaak oriëntering van aandag, kognitiewe verwerking en verhogings in algemene motivering.

Watter van hierdie funksies ondersteun DA-neurone? Dit is lank reeds bekend dat stresvolle en afkeerlike ervarings groot veranderinge in DA-konsentrasies in stroomaf breinstrukture veroorsaak, en dat gedragsreaksies op hierdie ervarings dramaties verander word deur DA agoniste, antagoniste en letsels (Salamone, 1994; Di Chiara, 2002; Pezze en Feldon, 2004; Young et al., 2005). Hierdie studies het egter 'n opvallende verskeidenheid resultate opgelewer (Levita et al., 2002; Di Chiara, 2002; Young et al., 2005). Baie studies stem ooreen met DA-neurone wat motiverende opvallendheid kodeer. Hulle rapporteer dat afkerende gebeure DA-vlakke verhoog en dat gedragsafkeuring ondersteun word deur hoë vlakke van DA-oordrag (Salamone, 1994; Joseph et al., 2003; Ventura et al., 2007; Barr et al., 2009; Fadok et al., 2009) insluitend fasiese DA-sarsies (Zweifel et al., 2009). Maar ander studies stem meer ooreen met DA-neurone wat motiveringswaarde kodeer. Hulle rapporteer dat afkerende gebeure DA-vlakke verlaag en dat gedragsafkeuring ondersteun word deur lae vlakke van DA-oordrag (Mark et al., 1991; Shippenberg et al., 1991; Liu et al., 2008; Roitman et al., 2008). In baie gevalle is hierdie gemengde resultate in enkele studies gevind, wat aandui dat afkeerlike ervarings verskillende patrone van DA-vrystelling in verskillende breinstrukture veroorsaak (Thierry et al., 1976; Besson en Louilot, 1995; Ventura et al., 2001; Jeanblanc et al., 2002; Bassareo et al., 2002; Pascucci et al., 2007), en dat DA-verwante middels 'n mengsel van neurale en gedragseffekte kan produseer soortgelyk aan dié wat veroorsaak word deur beide lonende en afkeerlike ervarings (Ettenberg, 2004; Wheeler et al., 2008).

Hierdie diversiteit van DA-vrystellingspatrone en -funksies is moeilik om te versoen met die idee dat DA-neurone 'n eenvormige motiveringssein na alle breinstrukture oordra. Hierdie uiteenlopende reaksies kan egter verduidelik word as DA-neurone self divers is - saamgestel uit veelvuldige neurale populasies wat verskillende aspekte van aversiewe verwerking ondersteun. Hierdie siening word ondersteun deur neurale opname studies in verdoofde diere. Hierdie studies het getoon dat skadelike stimuli opwekking in sommige DA neurone veroorsaak, maar inhibisie in ander DA neurone (Chiodo et al., 1980; Maeda en Mogenson, 1982; Schultz en Romo, 1987; Mantz et al., 1989; Gao et al., 1990; Coizet et al., 2006). Dit is belangrik dat beide opwindende en inhiberende response voorkom in neurone wat bevestig is dat dit dopaminergies is deur gebruik te maak van jukstasellulêre etikettering (Brischoux et al., 2009) (Figuur 3). 'n Soortgelyke diversiteit van afkerende reaksies vind plaas tydens aktiewe gedrag. Verskillende groepe DA-neurone word fasies opgewonde of geïnhibeer deur afkeerlike gebeurtenisse, insluitend skadelike stimulasie van die vel (Kiyatkin, 1988a; Kiyatkin, 1988b), sensoriese leidrade wat afkerende skokke voorspel (Guarraci en Kapp, 1999), aversiewe lugpoffertjies (Matsumoto en Hikosaka, 2009b), en sensoriese leidrade wat aversiewe lugpuffies voorspel (Matsumoto en Hikosaka, 2009b; Joshua et al., 2009a). Verder, wanneer twee DA-neurone gelyktydig aangeteken word, het hul aversiewe reaksies oor die algemeen min proef-tot-proef-korrelasie met mekaar (Joshua et al., 2009b), wat daarop dui dat afkerende reaksies nie oor die DA-bevolking as 'n geheel gekoördineer word nie.

 

Figuur 3

Diverse dopamienneuronreaksies op afkerende gebeure

Om die funksies van hierdie uiteenlopende aversiewe reaksies te verstaan, moet ons weet hoe hulle gekombineer word met beloningsreaksies om 'n betekenisvolle motiveringssein te genereer. 'n Onlangse studie het hierdie onderwerp ondersoek en aan die lig gebring dat DA-neurone in verskeie populasies verdeel word met duidelike motiveringsseine (Matsumoto en Hikosaka, 2009b). Een bevolking is opgewonde oor lonende gebeurtenisse en geïnhibeer deur afkeerlike gebeurtenisse, asof dit kodeer motiveringswaarde (Figuur 4A). 'n Tweede populasie is opgewonde oor beide lonende en afkeerlike gebeure op soortgelyke maniere, asof dit kodeer motiverende opvallendheid (Figuur 4B). In beide hierdie populasies is baie neurone sensitief vir belonings- en afkeervoorspellings: hulle reageer wanneer lonende gebeure meer lonend is as wat voorspel is en wanneer afkerige gebeure meer afkeer is as voorspel (Matsumoto en Hikosaka, 2009b). Dit wys dat hul afkerende reaksies werklik veroorsaak word deur voorspellings oor afkerende gebeure, wat die moontlikheid uitsluit dat dit veroorsaak kan word deur nie-spesifieke faktore soos rou sensoriese insette of algemene assosiasies met beloning (Schultz, 2010). Hierdie twee populasies verskil egter in die gedetailleerde aard van hul voorspellende kode. Motiveringswaarde-koderende DA-neurone kodeer 'n akkurate voorspellingsfoutsein, insluitend sterk inhibisie deur die weglating van belonings en ligte opwekking deur weglating van aversiewe gebeurtenisse (Figuur 4A, regs). Daarteenoor reageer motiverende opvallendheid koderende DA neurone wanneer opvallende gebeurtenisse teenwoordig is, maar nie wanneer hulle afwesig is nie (Figuur 4B, regs), in ooreenstemming met teoretiese idees van opwekking (Lang en Davis, 2006) [VOETNOTA2]. Bewyse vir hierdie twee DA neuron populasies is waargeneem selfs wanneer neurale aktiwiteit op 'n gemiddelde wyse ondersoek is. Studies wat verskillende dele van die DA-stelsel gerig het, het dus fasiese DA-seine gevind wat aversiewe gebeurtenisse met inhibisie kodeer (Roitman et al., 2008), soortgelyk aan kodering van motiveringswaarde, of met opwinding (Joshua et al., 2008; Anstrom et al., 2009), soortgelyk aan kodering van motiverende opvallendheid.

 

Figuur 4

Afsonderlike dopamienneuronpopulasies wat motiveringswaarde en opvallendheid kodeer

Hierdie onlangse bevindinge kan blykbaar 'n vroeë verslag weerspreek dat DA-neurone verkieslik reageer op beloningswyses eerder as aversiewe leidrade (Mirenowicz en Schultz, 1996). Wanneer dit noukeurig ondersoek word, stem selfs daardie studie egter ten volle ooreen met DA-waarde- en opvallende kodering. In daardie studie het beloningsaanwysings gelei tot beloningsuitkomste met 'n hoë waarskynlikheid (>90%), terwyl aversiewe aanwysings gelei het tot aversiewe uitkomste met 'n lae waarskynlikheid (<10%). Gevolglik sal waarde- en opvallendheid-koderende DA-neurone min reaksie hê op die aversiewe leidrade, wat hul lae vlak van afkeer akkuraat kodeer.

Funksionele rol van motiveringswaarde en opvallende seine

Saamgevat dui die bogenoemde bevindinge daarop dat DA-neurone verdeel word in veelvuldige populasies wat geskik is vir afsonderlike rolle in motiveringsbeheer. Motiveringswaardekoderende DA-neurone pas goed by huidige teorieë van dopamienneurone en beloningsverwerking (Schultz et al., 1997; Berridge en Robinson, 1998; Wys, 2004). Hierdie neurone kodeer 'n volledige voorspellingsfoutsein en kodeer lonende en aversiewe gebeurtenisse in teenoorgestelde rigtings. Hierdie neurone verskaf dus 'n toepaslike leersame sein vir soek, evaluasie en waardeleer (Figuur 5). As 'n stimulus veroorsaak dat waardekoderende DA-neurone opgewonde is, moet ons dit benader, dit 'n hoë waarde toeken en aksies leer om dit in die toekoms weer te soek. As 'n stimulus veroorsaak dat waardekoderende DA-neurone geïnhibeer word, moet ons dit vermy, dit 'n lae waarde toeken en aksies leer om dit weer in die toekoms te vermy.

 

Figuur 5

Gehipotetiseerde funksies van motiveringswaarde, opvallendheid en waarskuwingseine

Daarteenoor pas motiverende opvallendheid-koderende DA-neurone goed met teorieë van dopamienneurone en verwerking van opvallende gebeurtenisse (Redgrave et al., 1999; Horvitz, 2000; Joseph et al., 2003; Kapur, 2003). Hierdie neurone word opgewonde deur beide lonende en afkeerlike gebeure en het swakker reaksies op neutrale gebeure, wat 'n toepaslike leersame sein verskaf vir neurale stroombane om te leer om situasies van groot belang op te spoor, te voorspel en daarop te reageer. Hier sal ons drie sulke breinstelsels oorweeg (Figuur 5). Eerstens word neurale stroombane vir visuele en aandag-oriëntering gekalibreer om inligting oor alle soorte gebeurtenisse te ontdek, beide lonend en aversief. Byvoorbeeld, beide beloning en afkeer leidrade lok oriënterende reaksies meer effektief as neutrale leidrade (Lang en Davis, 2006; Matsumoto en Hikosaka, 2009b; Austin en Duka, 2010). Tweedens, beide lonende en afkeerende situasies betrek neurale sisteme vir kognitiewe beheer en aksieseleksie – ons moet werkgeheue betrek om inligting in gedagte te hou, konflikoplossing om op 'n aksie te besluit, en langtermyngeheue om die gevolglike uitkoms te onthou (Bradley et al., 1992; Botvinick et al., 2001; Savine et al., 2010). Derdens vereis beide lonende en afkeerlike situasies 'n toename in algemene motivering om aksies aan te wakker en om te verseker dat dit behoorlik uitgevoer word. Inderdaad, DA-neurone is van kritieke belang in die motivering van pogings om hoëwaarde-doelwitte te bereik en in die vertaling van kennis van taakeise in betroubare motoriese prestasie (Berridge en Robinson, 1998; Mazzoni et al., 2007; Niv et al., 2007; Salamone et al., 2007).

Dopamien-opwekking deur sensoriese leidrade te waarsku

Benewens hul seine wat motiveringswaarde en opvallendheid kodeer, het die meerderheid DA-neurone ook gebarste reaksies op verskeie tipes sensoriese gebeurtenisse wat nie direk met lonende of afkeerlike ervarings geassosieer word nie. Daar is teoretiseer dat hierdie reaksies afhang van 'n aantal neurale en psigologiese faktore, insluitend direkte sensoriese insette, verrassing, nuwigheid, opwekking, aandag, opvallendheid, veralgemening en pseudo-kondisionering (Schultz, 1998; Redgrave et al., 1999; Horvitz, 2000; Lisman en Grace, 2005; Redgrave en Gurney, 2006; Joshua et al., 2009a; Schultz, 2010).

Hier sal ons probeer om hierdie idees te sintetiseer en hierdie DA-reaksies in terme van 'n enkele onderliggende sein, 'n waarskuwingsein (Figuur 5). Die term 'waarskuwing' is deur Schultz (Schultz, 1998) as 'n algemene term vir gebeurtenisse wat aandag trek. Hier sal ons dit in 'n meer spesifieke sin gebruik. Met 'n waarskuwingsgebeurtenis bedoel ons 'n onverwagte sensoriese leidraad wat aandag vang op grond van 'n vinnige beoordeling van die potensiële belangrikheid daarvan, met behulp van eenvoudige kenmerke soos sy ligging, grootte en sensoriese modaliteit. Sulke waarskuwingsgebeurtenisse veroorsaak dikwels onmiddellike gedragsreaksies om dit te ondersoek en hul presiese betekenis te bepaal. Dus vind DA-waarskuwingseine tipies by kort latensies plaas, is gebaseer op die growwe kenmerke van 'n stimulus, en word die beste gekorreleer met onmiddellike reaksies soos oriënteringsreaksies (Schultz en Romo, 1990; Joshua et al., 2009a; Schultz, 2010). Dit is in teenstelling met ander motiveringsseine in DA neurone wat tipies by langer latensies voorkom, die presiese identiteit van die stimulus in ag neem en die beste gekorreleer word met oorwoë gedragsaksies soos besluite om te nader of te vermy (Schultz en Romo, 1990; Joshua et al., 2009a; Schultz, 2010).

DA-waarskuwingsreaksies kan veroorsaak word deur verrassende sensoriese gebeurtenisse soos onverwagte ligflitse en ouditiewe klikke, wat prominente uitbarstingsopwekkings in 60–90% van DA-neurone regdeur die SNc en VTA ontlok (Strecker en Jacobs, 1985; Horvitz et al., 1997; Horvitz, 2000) (Figuur 6A). Hierdie waarskuwingsreaksies reflekteer blykbaar die mate waarin die stimulus verrassend is en aandag trek; hulle word verminder as 'n stimulus op voorspelbare tye voorkom, as aandag elders gevestig word, of tydens slaap (Schultz, 1998; Takikawa et al., 2004; Strecker en Jacobs, 1985; Steinfels et al., 1983). Byvoorbeeld, 'n onverwagte klikgeluid roep 'n prominente DA-sarsie op wanneer 'n kat in 'n passiewe toestand van stil wakker is, maar het geen effek wanneer die kat besig is met aandag-eis-aktiwiteite soos om 'n rot te jag, te voer, te versorg, om getroetel te word nie. deur die eksperimenteerder, ensovoorts (Strecker en Jacobs, 1985) (Figuur 6A). Net so word DA-sarsie-reaksies veroorsaak deur sensoriese gebeure wat fisies swak is, maar waarskuwing is as gevolg van hul nuutheid (Ljungberg et al., 1992; Schultz, 1998). Hierdie reaksies habitueer soos die nuwe stimulus bekend raak, parallel met die habituering van oriënterende reaksies (Figuur 6B). In ooreenstemming met hierdie bevindinge, roep verrassende en nuwe gebeure DA-vrylating in stroomaf strukture op (Lisman en Grace, 2005) en aktiveer DA-verwante breinkringe op 'n manier wat beloningsverwerking vorm (Zink et al., 2003; Davidson et al., 2004; Duzel et al., 2010).

 

Figuur 6

Dopamienneuronopwekkingsreaksies op waarskuwingsgebeure

DA-waarskuwingsreaksies word ook veroorsaak deur onverwagte sensoriese leidrade wat die potensiaal het om nuwe inligting oor motiverend opvallende gebeure te verskaf. Soos verwag vir 'n kort-latensie waarskuwingsein, is hierdie reaksies taamlik nie-selektief: hulle word veroorsaak deur enige stimulus wat bloot lyk na 'n motiverend opvallende leidraad, selfs al is die ooreenkoms baie gering ('n verskynsel wat veralgemening genoem word) (Schultz, 1998). As gevolg hiervan reageer DA-neurone dikwels op 'n stimulus met 'n mengsel van twee seine: 'n vinnige waarskuwingsein wat kodeer vir die feit dat die stimulus potensieel belangrik, en 'n tweede sein wat sy huidige lonende of afkeerlike betekenis (Schultz en Romo, 1990; Waelti et al., 2001; Tobler et al., 2003; Dag et al., 2007; Kobayashi en Schultz, 2008; Fiorillo et al., 2008; Nomoto et al., 2010) (sien (Kakade en Dayan, 2002; Joshua et al., 2009a; Schultz, 2010) Vir hersiening). 'n Voorbeeld kan gesien word in 'n stel motiverende opvallendheid-koderende DA-neurone wat in Figuur 6C (Bromberg-Martin et al., 2010a). Hierdie neurone is opgewonde deur beloning en afkeerlike leidrade, maar hulle is ook opgewonde deur 'n neutrale leidraad. Die neutrale leidraad was nog nooit met motiveringsuitkomste gepaard nie, maar het wel 'n (baie geringe) fisiese ooreenkoms met die beloning en afwykende leidrade gehad.

Hierdie waarskuwingsreaksies lyk nou gekoppel aan 'n sensoriese leidraad se vermoë om oriënterende reaksies te aktiveer om dit verder te ondersoek en die betekenis daarvan te ontdek. Dit kan gesien word in drie noemenswaardige eiendomme. Eerstens, waarskuwingsreaksies vind slegs plaas vir sensoriese leidrade wat ondersoek moet word om hul betekenis te bepaal, nie vir intrinsiek lonende of afkeerlike gebeurtenisse soos aflewering van sap of lugblare nie (Schultz, 2010). Tweedens vind waarskuwingsreaksies slegs plaas wanneer 'n leidraad potensieel belangrik is en die vermoë het om oriënterende reaksies te aktiveer, nie wanneer die leidraad irrelevant is vir die taak op hande en nie oriënterende reaksies veroorsaak nie (Schultz en Romo, 1990). Derdens word waarskuwingsreaksies versterk in situasies wanneer leidrade 'n skielike verskuiwing van aandag sou veroorsaak - wanneer hulle op 'n onverwagte tyd of weg van die middel van blik verskyn (Bromberg-Martin et al., 2010a). Wanneer motiverende leidrade dus met onvoorspelbare tydsberekening aangebied word, veroorsaak dit onmiddellike oriënterende reaksies en 'n algemene DA-waarskuwingsreaksie – opwekking deur alle leidrade insluitend neutrale leidrade (Figuur 6C, swart). Maar as hul tydsberekening voorspelbaar gemaak word - byvoorbeeld deur die proefpersone vooraf te waarsku met 'n "proefbegin-aanwysing" wat 'n sekonde voor die leidrade verskyn, ontlok die leidrade nie meer 'n waarskuwende reaksie nie (Figuur 6D, grys). In plaas daarvan skuif die waarskuwingsreaksie na die proefbeginteken – die eerste gebeurtenis van die proef wat onvoorspelbare tydsberekening het en oriënterende reaksies ontlok (Figuur 6D, swart).

Wat is die onderliggende meganisme wat DA-neuronwaarskuwingseine genereer? Een hipotese is dat waarskuwingsreaksies bloot konvensionele beloningsvoorspellingsfoutseine is wat by kort latensies voorkom, wat die verwagte beloningswaarde van 'n stimulus kodeer voordat dit ten volle gediskrimineer is (Kakade en Dayan, 2002). Meer onlangse bewyse dui egter daarop dat waarskuwingseine gegenereer kan word deur 'n ander meganisme van konvensionele DA-beloningsseine (Satoh et al., 2003; Bayer en Glimcher, 2005; Bromberg-Martin et al., 2010a; Bromberg-Martin et al., 2010c; Nomoto et al., 2010). Die opvallendste is dat die waarskuwende reaksie op die proefbeginwyse nie beperk is tot lonende take nie; dit kan ewe sterk wees tydens 'n afkeerlike taak waarin geen belonings gelewer word nie (Figuur 6C,D, onderaan, "aversiewe taak"). Dit vind plaas alhoewel konvensionele DA-beloningsseine in dieselfde neurone korrek aandui dat die lonende taak 'n veel hoër verwagte waarde het as die aversiewe taak (Bromberg-Martin et al., 2010a). Hierdie waarskuwingseine is nie suiwer 'n vorm van waardekodering of suiwer 'n vorm van opvallende kodering nie, omdat hulle voorkom in die meerderheid van beide motiveringswaarde- en opvallende kodering DA-neurone (Bromberg-Martin et al., 2010a). 'n Tweede dissosiasie kan gesien word in die manier waarop DA neurone toekomstige belonings voorspel gebaseer op die geheue van vorige beloningsuitkomste (Satoh et al., 2003; Bayer en Glimcher, 2005). Terwyl konvensionele DA-beloningsseine beheer word deur 'n lang tydskaal geheuespoor wat geoptimaliseer is vir akkurate beloningsvoorspelling, word waarskuwingsreaksies op die proefbeginteken beheer deur 'n aparte geheuespoor wat lyk soos gesien in onmiddellike oriënterende reaksies (Bromberg-Martin et al., 2010c). 'n Derde dissosiasie kan gesien word in die manier waarop hierdie seine oor die DA-neuronpopulasie versprei word. Terwyl konvensionele DA-beloningsseine die sterkste is in die ventromediale SNc, word waarskuwingsreaksies op die proefbeginaanwysing (en op ander onverwagte tydsbewyse) regdeur die SNc uitgesaai (Nomoto et al., 2010).

In teenstelling met hierdie dissosiasies van konvensionele beloningseine, word DA-waarskuwingseine gekorreleer met die spoed van oriëntering en benaderingsreaksies op die waarskuwingsgebeurtenis (Satoh et al., 2003; Bromberg-Martin et al., 2010a; Bromberg-Martin et al., 2010c). Dit dui daarop dat waarskuwingseine gegenereer word deur 'n neurale proses wat vinnige reaksies motiveer om potensieel belangrike gebeurtenisse te ondersoek. Op die oomblik is daar ongelukkig relatief min bekend oor presies watter gebeure hierdie proses as 'belangrik' hanteer. Is waarskuwingsreaksies byvoorbeeld ewe sensitief vir lonende en afkeerlike gebeure? Dit is bekend dat daar waarskuwingsreaksies plaasvind vir stimuli wat soos beloningswyses lyk of wat na beide belonings- en aversiewe leidrade lyk (bv. deur dieselfde sensoriese modaliteit te deel). Maar dit is nog nie bekend of waarskuwingsreaksies voorkom vir stimuli wat uitsluitlik soos aversiewe leidrade lyk nie.

Funksionele rol van dopamienwaarskuwingseine

Soos ons gesien het, sal waarskuwingseine waarskynlik gegenereer word deur 'n afsonderlike meganisme van motiveringswaarde en opvallende seine. Waarskuwingseine word egter gestuur na beide motiveringswaarde- en opvallende koderende DA-neurone, en sal dus waarskynlik breinverwerking en -gedrag reguleer op 'n soortgelyke wyse as waarde- en opvallende seine (Figuur 5).

Waarskuwingseine wat gestuur word na DA-neurone wat motiverend opvallend kodeer, sal die oriëntering van aandag op die waarskuwingstimulus ondersteun, die inskakeling van kognitiewe hulpbronne om die betekenis daarvan te ontdek en op 'n plan vir aksie te besluit, en motiveringsvlakke te verhoog om hierdie plan doeltreffend te implementeer (Figuur 5). Hierdie effekte kan voorkom deur onmiddellike effekte op neurale verwerking of deur versterkende aksies wat gelei het tot die opsporing van die waarskuwingsgebeurtenis. Hierdie funksionele rol pas goed by die korrelasie tussen DA-waarskuwingsreaksies en vinnige gedragsreaksies op die waarskuwingstimulus, en met teorieë dat kort-latensie DA-neuronreaksies betrokke is by oriëntering van aandag, opwekking, verbetering van kognitiewe prosessering en onmiddellike gedragsreaksies (Redgrave et al., 1999; Horvitz, 2000; Joseph et al., 2003; Lisman en Grace, 2005; Redgrave en Gurney, 2006; Joshua et al., 2009a).

Die teenwoordigheid van waarskuwingseine in motiveringswaardekoderende DA-neurone is moeiliker om te verduidelik. Hierdie neurone stuur motiveringswaardeseine oor wat ideaal is vir die soeke, evaluering van uitkomste en waardeleer; tog kan hulle ook opgewonde wees deur gebeurtenisse te waarsku soos onverwagte klikgeluide en die begin van afkeerlike beproewings. Volgens ons veronderstelde pad (Figuur 5), sal dit veroorsaak dat waarskuwingsgebeurtenisse positiewe waarde toegeken word en op 'n soortgelyke wyse as belonings gesog word! Alhoewel dit met die eerste oogopslag verbasend is, is daar rede om te vermoed dat waarskuwingsgebeure as positiewe doelwitte hanteer kan word. Waarskuwingseine verskaf die eerste waarskuwing dat 'n potensieel belangrike gebeurtenis gaan plaasvind, en bied dus die eerste geleentheid om op te tree om daardie gebeurtenis te beheer. As waarskuwingsaanwysings beskikbaar is, kan motiverend opvallende gebeure opgespoor, voorspel en vooraf voorberei word; as waarskuwingstekens afwesig is, vind motiverend opvallende gebeure altyd plaas as 'n onverwagte verrassing. Inderdaad, mense en diere spreek dikwels 'n voorkeur uit vir omgewings waar lonende, aversiewe en selfs motiverend neutrale sensoriese gebeurtenisse vooraf waargeneem en voorspel kan word (Badia et al., 1979; Herry et al., 2007; Daly, 1992; Chew en Ho, 1994) en baie DA-neurone dui die gedragsvoorkeur aan om beloning-voorspellende inligting te sien (Bromberg-Martin en Hikosaka, 2009). DA-waarskuwingseine kan hierdie voorkeure ondersteun deur positiewe waarde toe te ken aan omgewings waar potensieel belangrike sensoriese leidrade vooraf verwag kan word.

Anatomiese liggings van waarde- en opvallende koderende neurone

'n Onlangse studie het die liggings van DA-beloning en afkeerseine in die laterale middelbrein gekarteer, insluitend die SNc en die mees laterale deel van die VTA (Matsumoto en Hikosaka, 2009b). Motiveringswaarde en motiverende opvallende seine is oor hierdie streek in 'n anatomiese gradiënt versprei. Motiveringswaarde-seine is meer algemeen in neurone in die ventromediale SNc en laterale VTA gevind, terwyl motiverende opvallende seine meer algemeen gevind is in neurone in die dorsolaterale SNc (Figuur 7B). Dit stem ooreen met berigte dat DA-beloningswaardekodering die sterkste is in die ventromediale SNc (Nomoto et al., 2010) terwyl aversiewe opwekkings geneig is om die sterkste meer lateraal te wees (Mirenowicz en Schultz, 1996). Ander studies het die meer mediale middelbrein ondersoek. Hierdie studies het 'n mengsel van opwindende en inhiberende aversiewe reaksies gevind met geen beduidende verskil in hul liggings nie, alhoewel met 'n neiging dat aversiewe opwekkings meer ventraal geleë is (Guarraci en Kapp, 1999; Brischoux et al., 2009) (Figuur 7C).

Bestemmings van motiveringswaardeseine

Volgens ons hipotese behoort motiveringswaardekoderende DA-neurone te projekteer na breinstreke wat betrokke is by benadering en vermydingsaksies, evaluering van uitkomste en waardeleer (Figuur 5). Inderdaad, die ventromediale SNc en VTA projek na die ventromediale prefrontale korteks (Williams en Goldman-Rakic, 1998) insluitend die orbitofrontale korteks (OFC) (Porrino en Goldman-Rakic, 1982) (Figuur 7A). Die OFC is deurgaans betrek by waardekodering in funksionele beeldingstudies (Anderson et al., 2003; Klein et al., 2003; Jensen et al., 2007; Litt et al., 2010) en enkel neuron opnames (Morrison en Salzman, 2009; Roesch en Olson, 2004). Daar word gedink dat die OFC keuse-opsies evalueer (Padoa-Schioppa, 2007; Kable en Glimcher, 2009), kodeer uitkomsverwagtinge (Schoenbaum et al., 2009), en werk hierdie verwagtinge op tydens leer (Walton et al., 2010). Verder is die OFC betrokke by die leer van negatiewe beloningsvoorspellingsfoute (Takahashi et al., 2009) wat die sterkste is in waardekoderende DA-neurone (Figuur 4).

Daarbenewens projekteer die mediale gedeeltes van die dopaminergiese middelbrein na die ventrale striatum, insluitend die nucleus accumbens dop (NAc dop) (Haber et al., 2000) (Figuur 7A). 'n Onlangse studie het getoon dat die NAc-dop fasiese DA-seine ontvang wat die motiveringswaarde van smaakuitkomste kodeer (Roitman et al., 2008). Hierdie seine sal waarskynlik waardeleer veroorsaak omdat direkte infusie van DA-middels in die NAc-dop sterk versterk (Ikemoto, 2010) terwyl behandelings wat DA-insette na die dop verminder afkeer kan veroorsaak (Liu et al., 2008). Een waarskuwing is dat studies van NAc dop DA vrystelling oor lang tydskale (minute) gemengde resultate opgelewer het, sommige in ooreenstemming met waardekodering en ander met opvallende kodering (bv.Bassareo et al., 2002; Ventura et al., 2007)). Dit dui daarop dat waardeseine beperk kan word tot spesifieke liggings binne die NAc-dop. Verskillende streke van die NAc-dop is veral gespesialiseerd vir die beheer van aptyt- en afkeergedrag (Reynolds en Berridge, 2002), wat albei insette van DA-neurone vereis (Faure et al., 2008).

Ten slotte stuur DA neurone regdeur die omvang van die SNc swaar projeksies na die dorsale striatum (Haber et al., 2000), wat daarop dui dat die dorsale striatum beide motiveringswaarde en opvallende kodering DA-seine kan ontvang (Figuur 7A). Motiveringswaardekoderende DA-neurone sal 'n ideale leersame sein verskaf vir striatale stroombane wat betrokke is by waardeleer, soos die aanleer van stimulus-respons-gewoontes (Faure et al., 2005; Yin en Knowlton, 2006; Balleine en O'Doherty, 2010). Wanneer hierdie DA neurone bars, sou hulle die direkte pad betree om te leer om beloningsuitkomste te verkry; wanneer hulle pouseer, sou hulle die indirekte pad betree om te leer om afkerende uitkomste te vermy (Figuur 2). Inderdaad, daar is onlangse bewyse dat die striatale paaie presies hierdie verdeling van arbeid volg vir beloning en afkerende verwerking (Hikida et al., 2010). Dit is egter nog onbekend hoe neurone in hierdie weë reageer op lonende en afkeerlike gebeurtenisse tydens gedrag. Ten minste in die dorsale striatum as 'n geheel, reageer 'n subset van neurone op sekere lonende en afkeerlike gebeurtenisse op duidelike maniere (Ravel et al., 2003; Yamada et al., 2004, 2007; Joshua et al., 2008).

Bestemmings van motiverende opvallende seine

Volgens ons hipotese behoort motiverende opvallendheid-koderende DA-neurone te projekteer na breinstreke wat betrokke is by oriëntering, kognitiewe prosessering en algemene motivering (Figuur 5). Inderdaad, DA neurone in die dorsolaterale middelbrein stuur projeksies na dorsale en laterale frontale korteks (Williams en Goldman-Rakic, 1998) (Figuur 7A), 'n streek wat geïmpliseer is by kognitiewe funksies soos aandagsoektog, werkgeheue, kognitiewe beheer en besluitneming tussen motiveringsuitkomste (Williams en Castner, 2006; Lee en Seo, 2007; Wys, 2008; Kable en Glimcher, 2009; Wallis en Kennerley, 2010). Dorsolaterale prefrontale kognitiewe funksies word streng gereguleer deur DA-vlakke (Robbins en Arnsten, 2009) en word teoretiseer om afhanklik te wees van fasiese DA-neuronaktivering (Cohen et al., 2002; Lapish et al., 2007). Veral, 'n subset van laterale prefrontale neurone reageer op beide lonende en aversiewe visuele leidrade, en die groot meerderheid reageer in dieselfde rigting wat lyk soos kodering van motiverende opvallendheid (Kobayashi et al., 2006). Verder is die aktiwiteit van hierdie neurone gekorreleer met gedragsukses by die uitvoering van werkgeheue take (Kobayashi et al., 2006). Alhoewel hierdie dorsolaterale DA→dorsolaterale frontale korteksbaan spesifiek vir primate blyk te wees (Williams en Goldman-Rakic, 1998), kan 'n funksioneel soortgelyke pad in ander spesies bestaan. In die besonder, baie van die kognitiewe funksies van die primaat dorsolaterale prefrontale korteks word uitgevoer deur die knaagdier mediale prefrontale korteks (Uylings et al., 2003), en daar is bewyse dat hierdie streek DA motiverende opvallende seine ontvang en opvallendheidverwante gedrag beheer (Mantz et al., 1989; Di Chiara, 2002; Joseph et al., 2003; Ventura et al., 2007; Ventura et al., 2008).

Gegewe die bewyse dat die VTA beide opvallende en waardekoderende neurone bevat en dat waardekoderende seine na die NAc-dop gestuur word, kan opvallende seine na die NAc-kern gestuur word (Figuur 7A). Inderdaad, die NAc-kern (maar nie dop nie) is van kardinale belang om motivering in staat te stel om reaksiekoste soos fisiese inspanning te oorkom; vir die uitvoering van stelverskuiwingstake wat kognitiewe buigsaamheid vereis; en om beloningswyses in staat te stel om 'n verbetering van algemene motivering te veroorsaak (Ghods-Sharifi en Floresco, 2010; Floresco et al., 2006; Hall et al., 2001; Kardinaal, 2006). In ooreenstemming met kodering van motiverende opvallendheid, ontvang die NAc-kern fasiese uitbarstings van DA tydens beide lonende ervarings (Dag et al., 2007) en aversiewe ervarings (Anstrom et al., 2009).

Ten slotte, soos hierbo bespreek, kan sommige opvallende koderende DA-neurone na die dorsale striatum projekteer (Figuur 7A). Terwyl sommige streke van die dorsale striatum betrokke is by funksies wat verband hou met die aanleer van aksiewaardes, is die dorsale striatum ook betrokke by funksies wat betrokke moet wees vir alle belangrike gebeurtenisse, soos oriëntering, aandag, werkgeheue en algemene motivering (Hikosaka et al., 2000; Klingberg, 2010; Palmiter, 2008). Inderdaad, 'n subset van dorsale striatale neurone reageer sterker op lonende en afkeerlike gebeure as op neutrale gebeure (Ravel et al., 1999; Blazquez et al., 2002; Yamada et al., 2004, 2007), hoewel hul oorsaaklike rol in gemotiveerde gedrag nog nie bekend is nie.

Bronne van motiveringswaardeseine

'n Onlangse reeks studies dui daarop dat DA-neurone motiveringswaardeseine ontvang vanaf 'n klein kern in die epitalamus, die laterale habenula (LHb) (Hikosaka, 2010) (Figuur 8). Die LHb oefen kragtige negatiewe beheer oor DA neurone uit: LHb stimulasie inhibeer DA neurone by kort latensies (Christoph et al., 1986) en kan leer reguleer op 'n teenoorgestelde wyse as VTA-stimulasie (Shumake et al., 2010). In ooreenstemming met 'n negatiewe beheersein, het baie LHb-neurone spieël-omgekeerde fasiese reaksies op DA-neurone: LHb-neurone is geïnhibeer deur positiewe beloning voorspelling foute en opgewonde deur negatiewe beloning voorspelling foute (Matsumoto en Hikosaka, 2007, 2009a; Bromberg-Martin et al., 2010a; Bromberg-Martin et al., 2010c). In verskeie gevalle kom hierdie seine voor by korter latensies in die LHb, in ooreenstemming met LHb → DA transmissie (Matsumoto en Hikosaka, 2007; Bromberg-Martin et al., 2010a).

 

Figuur 8

Gehipotese bronne van motiveringswaarde, opvallendheid en waarskuwingseine

Die LHb is in staat om DA-neurone regdeur die middelbrein te beheer, maar verskeie bewyse dui daarop dat dit voorkeurbeheer uitoefen oor motiveringswaarde-koderende DA-neurone. Eerstens, LHb-neurone kodeer motiveringswaarde op 'n wyse wat waardekoderende DA-neurone nou weerspieël - hulle kodeer beide positiewe en negatiewe beloningsvoorspellingsfoute en reageer in teenoorgestelde rigtings op lonende en afkeerlike gebeure (Matsumoto en Hikosaka, 2009a; Bromberg-Martin et al., 2010a). Tweedens het LHb-stimulasie sy sterkste effekte op DA-neurone wie se eienskappe ooreenstem met waardekodering, insluitend inhibisie deur geen-beloning-aanwysings en anatomiese ligging in die ventromediale SNc (Matsumoto en Hikosaka, 2007, 2009b). Derdens, letsels aan die LHb benadeel DA-neuron-inhiberende reaksies op aversiewe gebeure, wat 'n oorsaaklike rol vir die LHb voorstel in die generering van DA-waarde-seine (Gao et al., 1990).

Die LHb is deel van 'n meer uitgebreide neurale pad waardeur DA neurone deur die basale ganglia beheer kan word (Figuur 8). Die LHb ontvang seine wat lyk soos beloningsvoorspellingsfoute deur 'n projeksie van 'n populasie neurone wat rondom die globus pallidus-grens (GPb) geleë is (Hong en Hikosaka, 2008). Sodra hierdie seine die LHb bereik, sal hulle waarskynlik na DA neurone gestuur word deur 'n disinaptiese pad waarin die LHb middelbrein GABA neurone opwek wat op hul beurt DA neurone inhibeer (Ji en Shepard, 2007; Omelchenko et al., 2009; Brinschwitz et al., 2010). Dit kan plaasvind deur LHb-projeksies na interneurone in die VTA en na 'n aangrensende GABA-ergiese kern genaamd die rostromediale tegmentale kern (RMTg) (Jhou et al., 2009b) (ook genoem die 'kaudale stert van VTA' (Kaufling et al., 2009)). RMTg-neurone het veral reaksie-eienskappe soortgelyk aan LHb-neurone, kodeer motiveringswaarde en het 'n sterk inhiberende projeksie na dopaminergiese middelbrein (Jhou et al., 2009a). Dus, die volledige basale ganglia-weg om motiveringswaardeseine na DA-neurone te stuur, kan GPb→LHb→RMTg→DA wees (Hikosaka, 2010).

'n Belangrike vraag vir toekomstige navorsing is of motiveringswaardeseine uitsluitlik deur die LHb gekanaliseer word en of dit deur verskeie insetpaaie gedra word. Veral, DA-inhibisies deur aversiewe voetskokke word beheer deur aktiwiteit in die mesopontine parabrachiale kern (PBN) (Coizet et al., 2010) (Figuur 8). Hierdie kern bevat neurone wat direkte insette van die rugmurg ontvang wat skadelike sensasies kodeer en DA neurone kan inhibeer deur opwindende projeksies na die RMTg (Coizet et al., 2010; Gauriau en Bernard, 2002). Dit dui daarop dat die LHb DA-neurone motiveringswaarde-seine stuur vir beide lonende en aversiewe leidrade en uitkomste, terwyl die PBN 'n komponent van die waardesein verskaf wat spesifiek verband hou met aversiewe uitkomste.

Bronne van motiverende opvallende seine

Minder is bekend oor die bron van motiverende opvallende seine in DA-neurone. Een interessante kandidaat is die sentrale kern van die amygdala (CeA) wat konsekwent geïmpliseer is in oriëntering, aandag en algemene motiveringsreaksies tydens beide lonende en afkeerlike gebeurtenisse (Holland en Gallagher, 1999; Baxter en Murray, 2002; Merali et al., 2003; Balleine en Killcross, 2006) (Figuur 8). Die CeA en ander amygdala-kerne bevat baie neurone wie se seine ooreenstem met motiverende opvallendheid: hulle sein lonende en afkerende gebeure in dieselfde rigting, word versterk wanneer gebeure onverwags plaasvind, en word gekorreleer met gedragsmaatreëls van opwekking (Nishijo et al., 1988; Belova et al., 2007; Shabel en Janak, 2009). Hierdie seine kan na DA-neurone gestuur word omdat die CeA dalende projeksies na die breinstam het wat lonende en aversiewe inligting dra (Lee et al., 2005; Pascoe en Kapp, 1985) en die CeA is nodig vir DA-vrylating tydens beloningsverwante geleenthede (Phillips et al., 2003a). Verder neem die CeA deel met DA-neurone in weë wat ooreenstem met ons voorgestelde anatomiese en funksionele netwerke vir motiverende opvallendheid. 'n Pad wat die CeA, SNc en dorsale striatum insluit, is nodig vir aangeleerde oriëntering na voedselleidrade (Han et al., 1997; Lee et al., 2005; El-Amamy en Holland, 2007). In ooreenstemming met ons verdeling van opvallendheid vs. waardeseine, is hierdie pad nodig om te leer om na voedselleidrade te oriënteer, maar nie om te leer om voedseluitkomste te benader nie (Han et al., 1997). 'n Tweede pad, insluitend die CeA-, SNc-, VTA- en NAc-kern, is nodig vir beloningswyses om 'n toename in algemene motivering te veroorsaak om beloningsoekende aksies uit te voer (Hall et al., 2001; Corbit en Balleine, 2005; El-Amamy en Holland, 2007).

Benewens die CeA, kan DA-neurone motiverende opvallende seine van ander bronne ontvang, soos opvallendheid-koderende neurone in die basale voorbrein (Lin en Nicolelis, 2008; Richardson en DeLong, 1991) en neurone in die PBN (Coizet et al., 2010), hoewel hierdie paaie nog ondersoek moet word.

Bronne van waarskuwingseine

Daar is verskeie goeie kandidate om DA-neurone van waarskuwingseine te voorsien. Miskien is die aantreklikste kandidaat die superior colliculus (SC), 'n middelbrein kern wat kort-latensie sensoriese insette van veelvuldige sensoriese modaliteite ontvang en oriënterende reaksies en aandag beheer (Redgrave en Gurney, 2006) (Figuur 8). Die SC het 'n direkte projeksie na die SNc en VTA (Mei et al., 2009; Comoli et al., 2003). In verdoofde diere is die SC 'n belangrike kanaal vir kort-latency visuele seine om DA neurone te bereik en DA vrystelling in stroomaf strukture te aktiveer (Comoli et al., 2003; Dommett et al., 2005). Die SC-DA-weg is die beste geskik om waarskuwingseine oor te dra eerder as beloning- en afkeerseine, aangesien SC-neurone min reaksie op beloningslewering het en slegs 'n ligte invloed op DA-afkerende reaksies het (Coizet et al., 2006). Dit dui op 'n volgorde van gebeure waarin SC neurone (1) 'n stimulus opspoor, (2) dit as potensieel belangrik kies, (3) 'n oriënterende reaksie ontlok om die stimulus te ondersoek, en (4) gelyktydig 'n DA-waarskuwingsreaksie ontketen wat veroorsaak 'n uitbarsting van DA in stroomaf strukture (Redgrave en Gurney, 2006).

'n Tweede kandidaat vir die stuur van waarskuwingseine na DA-neurone is die LHb (Figuur 8). Opmerklik, die onverwagte aanvang van 'n proefbeginteken inhibeer baie LHb-neurone op 'n omgekeerde wyse teenoor die DA-neuronwaarskuwingsein, en hierdie reaksie vind plaas met korter latensie in die LHb wat ooreenstem met 'n LHb→DA-oordragrigting (Bromberg-Martin et al., 2010a; Bromberg-Martin et al., 2010c). Ons het ook anekdoties waargeneem dat LHb-neurone gewoonlik geïnhibeer word deur onverwagte visuele beelde en klanke op 'n omgekeerde manier tot DA-opwekkings (MM, ESB-M., en OH, ongepubliseerde waarnemings), hoewel dit op 'n meer sistematiese ondersoek wag.

Laastens, 'n derde kandidaat vir die stuur van waarskuwingseine na DA-neurone is die pedunculopontine tegmental nucleus (PPTg), wat na beide die SNc en VTA projekteer en betrokke is by motiveringsverwerking (Winn, 2006) (Figuur 8). Die PPTg is belangrik om VTA DA neuronuitbarstings moontlik te maak (Grace et al., 2007) insluitend sarsie-reaksies op beloningswyses (Pan en Hyland, 2005). In ooreenstemming met 'n waarskuwingsein, het PPTg-neurone kort-latentiereaksies op veelvuldige sensoriese modaliteite en is aktief tydens oriënteringsreaksies (Winn, 2006). Daar is bewyse dat PPTg sensoriese reaksies beïnvloed word deur beloningswaarde en deur vereistes vir onmiddellike optrede (Dormont et al., 1998; Okada et al., 2009) (maar sien (Pan en Hyland, 2005)). Sommige PPTg-neurone reageer ook self op lonende of afkerende uitkomste (Dormont et al., 1998; Kobayashi et al., 2002; Ivlieva en Timofeeva, 2003b, a). Dit sal belangrik wees om te toets of die seine wat die PPTg na DA-neurone stuur spesifiek verband hou met waarskuwing en of dit ander motiveringsseine soos waarde en opvallendheid bevat.

Hierdie werk is ondersteun deur die binnemuurse navorsingsprogram by die National Eye Institute. Ons bedank ook Amy Arnsten vir waardevolle besprekings.

Disclaimer van die uitgewer: Hierdie is 'n PDF-lêer van 'n ongeredigeerde manuskrip wat aanvaar is vir publikasie. As 'n diens aan ons kliënte voorsien ons hierdie vroeë weergawe van die manuskrip. Die manuskrip sal kopieëring, tikwerk en hersiening van die gevolglike bewys ondergaan voordat dit in sy finale citable vorm gepubliseer word. Let asseblief daarop dat tydens die produksieproses foute ontdek kan word wat die inhoud kan beïnvloed, en alle wettige disklaimers wat van toepassing is op die tydskrif betrekking het.

^VOETNOTA1By motiverende opvallendheid ons bedoel 'n hoeveelheid wat hoog is vir beide lonende en afkeerlike gebeurtenisse en laag is vir motiveringsneutrale (nie-lonende en nie-afkeerlike) gebeurtenisse. Dit is soortgelyk aan die definisie gegee deur (Berridge en Robinson, 1998). Let daarop dat motiverende opvallendheid verskil van ander begrippe van opvallendheid wat in neurowetenskap gebruik word, soos aansporingsopvallendheid (wat slegs van toepassing is op gewenste gebeurtenisse; (Berridge en Robinson, 1998)) en perseptuele opvallendheid (wat van toepassing is op motiverend neutrale gebeure soos bewegende voorwerpe en gekleurde ligte; (Bisley en Goldberg, 2010))]

^VOETNOTA2Let daarop dat motiverende opvallende kodering DA neuronseine verskil van die klassieke begrippe van "assosieerbaarheid" en "verandering in assosieerbaarheid" wat voorgestel is om die tempo van versterkingsleer te reguleer (bv.Pearce en Hall, 1980)). Sulke teorieë stel dat diere leer (en leertempo's aanpas) uit beide positiewe en negatiewe voorspellingsfoute. Alhoewel hierdie DA neurone kan bydra om uit positiewe voorspellingsfoute te leer, waartydens hulle 'n sterk reaksie kan hê (bv. op onverwagte beloningslewering), kan hulle nie bydra om uit negatiewe voorspellingsfoute te leer nie, waartydens hulle min of geen reaksie kan hê nie ( bv tot onverwagte beloning weglating) (Fig. 4B).

1. Ahlbrecht M, Weber M. Die oplossing van onsekerheid: 'n eksperimentele studie. Tydskrif vir institusionele en teoretiese ekonomie. 1996;152:593–607.
2. Albin RL, Young AB, Penney JB. Die funksionele anatomie van basale ganglia versteurings. Tendense in neurowetenskappe. 1989;12:366–375. [PubMed]
3. Anderson AK, Christoff K, Stappen I, Panitz D, Ghahremani DG, Glover G, Gabrieli JD, Sobel N. Gedissosieerde neurale voorstellings van intensiteit en valensie in menslike reuk. Nat Neurosci. 2003;6:196–202. [PubMed]
4. Anstrom KK, Miczek KA, Budygin EA. Verhoogde fasiese dopamiensein in die mesolimbiese pad tydens sosiale nederlaag by rotte. Neurowetenskap. 2009;161:3–12. [PubMed]
5. Aragona BJ, Day JJ, Roitman MF, Cleaveland NA, Wightman RM, Carelli RM. Streeksspesifisiteit in die intydse ontwikkeling van fasiese dopamienoordragpatrone tydens die verkryging van 'n cue-kokaïen-assosiasie by rotte. Die Europese tydskrif vir neurowetenskap. 2009;30:1889–1899. [PMC gratis artikel] [PubMed]
6. Austin AJ, Duka T. Meganismes van aandag vir aptytwekkende en aversiewe uitkomste in Pavloviaanse kondisionering. Gedragsbreinnavorsing. 2010;213:19–26. [PubMed]
7. Badia P, Harsh J, Abbott B. Kies tussen voorspelbare en onvoorspelbare skoktoestande: data en teorie. Sielkundige Bulletin. 1979;86:1107–1131.
8. Balleine BW, Killcross S. Parallelle aansporingsverwerking: 'n geïntegreerde siening van amygdala-funksie. Tendense in neurowetenskappe. 2006;29:272–279. [PubMed]
9. Balleine BW, O'Doherty JP. Menslike en knaagdierhomologieë in aksiebeheer: kortikostriatale determinante van doelgerigte en gewoonteaksie. Neuropsigofarmakologie. 2010;35:48–69. [PMC gratis artikel] [PubMed]
10. Barr GA, Moriceau S, Shionoya K, Muzny K, Gao P, Wang S, Sullivan RM. Oorgange in babaleer word deur dopamien in die amigdala gemoduleer. Nat Neurosci. 2009;12:1364–1366. [PMC gratis artikel] [PubMed]
11. Bassareo V, De Luca MA, Di Chiara G. Differensiële uitdrukking van motiveringstimulus-eienskappe deur dopamien in Nucleus Accumbens Shell versus Core en Prefrontal Cortex. J Neurosci. 2002;22:4709–4719. [PubMed]
12. Bassareo V, Di Chiara G. Differensiële responsiwiteit van dopamienoordrag na voedselstimuli in nucleus accumbens dop / kern kompartemente. Neurowetenskap. 1999;89:637–641. [PubMed]
13. Baxter MG, Murray EA. Die amigdala en beloning. Nat Rev Neurosci. 2002;3:563–573. [PubMed]
14. Bayer HM, Glimcher PW. Midbrein dopamien neurone kodeer 'n kwantitatiewe beloning voorspelling fout sein. Neuron. 2005;47:129–141. [PMC gratis artikel] [PubMed]
15. Belova MA, Paton JJ, Morrison SE, Salzman CD. Verwagting moduleer neurale reaksies op aangename en aversiewe stimuli in primaat amygdala. Neuron. 2007;55:970–984. [PMC gratis artikel] [PubMed]
16. Bentivoglio M, Morelli M. Die organisasie en stroombane van mesenfaliese dopaminerge neurone en die verspreiding van dopamienreseptore in die brein. Handboek van Chemiese Neuroanatomie. 2005:1–107.
17. Berridge KC, Robinson TE. Wat is die rol van dopamien in beloning: hedoniese impak, beloonleer, of aansporing opvallend? Breinnavorsing. 1998;28:309–369. [PubMed]
18. Besson C, Louilot A. Asimmetriese betrokkenheid van mesolimbiese dopaminerge neurone in affektiewe persepsie. Neurowetenskap. 1995;68:963–968. [PubMed]
19. Birgner C, Nordenankar K, Lundblad M, Mendez JA, Smith C, le Greves M, Galter D, Olson L, Fredriksson A, Trudeau LE, et al. VGLUT2 in dopamienneurone word benodig vir psigostimulant-geïnduseerde gedragsaktivering. Verrigtinge van die Nasionale Akademie van Wetenskappe van die Verenigde State van Amerika. 2010;107:389–394. [PMC gratis artikel] [PubMed]
20. Bisley JW, Goldberg ME. Aandag, bedoeling en prioriteit in die pariëtale lob. Jaarlikse oorsig van neurowetenskap. 2010;33:1–21. [PMC gratis artikel] [PubMed]
21. Bjorklund A, Dunnett SB. Dopamienneuronstelsels in die brein: 'n opdatering. Tendense in neurowetenskappe. 2007;30:194–202. [PubMed]
22. Blazquez PM, Fujii N, Kojima J, Graybiel AM. 'n Netwerkvoorstelling van reaksiewaarskynlikheid in die striatum. Neuron. 2002;33:973–982. [PubMed]
23. Botvinick MM, Braver TS, Barch DM, Carter CS, Cohen JD. Konflikmonitering en kognitiewe beheer. Psychol Rev. 2001;108:624–652. [PubMed]
24. Bradley MM, Greenwald MK, Petry MC, Lang PJ. Onthou van prente: plesier en opwinding in herinnering. J Exp Psychol Leer Mem Cogn. 1992;18:379–390. [PubMed]
25. Braun DA, Mehring C, Wolpert DM. Struktureer leer in aksie. Gedragsbreinnavorsing. 2010;206:157–165. [PMC gratis artikel] [PubMed]
26. Brinschwitz K, Dittgen A, Madai VI, Lommel R, Geisler S, Veh RW. Glutamatergiese aksone van die laterale habenula eindig hoofsaaklik op GABAergiese neurone van die ventrale middelbrein. Neurowetenskap. 2010;168:463–476. [PubMed]
27. Brischoux F, Chakraborty S, Brierley DI, Ungless MA. Fasiese opwekking van dopamienneurone in ventrale VTA deur skadelike stimuli. Verrigtinge van die Nasionale Akademie van Wetenskappe van die Verenigde State van Amerika. 2009;106:4894–4899. [PMC gratis artikel] [PubMed]
28. Bromberg-Martin ES, Hikosaka O. Midbrain dopamien neurone sein voorkeur vir vooraf inligting oor komende belonings. Neuron. 2009;63:119–126. [PMC gratis artikel] [PubMed]
29. Bromberg-Martin ES, Matsumoto M, Hikosaka O. Verskillende toniese en fasiese antisipatoriese aktiwiteit in laterale habenula en dopamienneurone. Neuron. 2010a;67:144–155. [PMC gratis artikel] [PubMed]
30. Bromberg-Martin ES, Matsumoto M, Hong S, Hikosaka O. 'n Pallidus-habenula-dopamienbaan seine afgelei stimuluswaardes. J Neurophysiol. 2010b;104:1068–1076. [PMC gratis artikel] [PubMed]
31. Bromberg-Martin ES, Matsumoto M, Nakahara H, Hikosaka O. Veelvuldige tydskale van geheue in laterale habenula en dopamienneurone. Neuron. 2010c;67:499–510. [PMC gratis artikel] [PubMed]
32. Brown MTC, Henny P, Bolam JP, Magill PJ. Aktiwiteit van neurochemies heterogene dopaminerge neurone in die substantia nigra tydens spontane en gedrewe veranderinge in breintoestand. J Neurosci. 2009;29:2915–2925. [PubMed]
33. Kardinaal RN. Neurale sisteme betrokke by vertraagde en waarskynlike versterking. Neurale Netw. 2006;19:1277–1301. [PubMed]
34. Cheer JF, Aragona BJ, Heien ML, Seipel AT, Carelli RM, Wightman RM. Gekoördineerde akkumbale dopamienvrystelling en neurale aktiwiteit dryf doelgerigte gedrag aan. Neuron. 2007;54:237–244. [PubMed]
35. Cheramy A, Kemel ML, Gauchy C, Desce JM, Galli T, Barbeito L, Glowinski J. Rol van opwindende aminosure in die direkte en indirekte presinaptiese regulering van dopamienvrystelling vanaf senuweeterminale van nigrostriatale dopamienneurone. Aminosure. 1991;1:351–363. [PubMed]
36. Kou SH, Ho JL. Hoop: 'n empiriese studie van houding teenoor die tydsberekening van onsekerheidoplossing. Tydskrif vir Risiko en Onsekerheid. 1994;8:267–288.
37. Chiodo LA, Antelman SM, Caggiula AR, Lineberry CG. Sensoriese stimuli verander die ontladingskoers van dopamien (DA) neurone: bewyse vir twee funksionele tipes DA selle in die substantia nigra. Brein Res. 1980; 189: 544-549. [PubMed]
38. Christoph GR, Leonzio RJ, Wilcox KS. Stimulering van die laterale habenula inhibeer dopamienbevattende neurone in die substantia nigra en ventrale tegmentale area van die rot. J Neurosci. 1986;6:613–619. [PubMed]
39. Chuhma N, Choi WY, Mingote S, Rayport S. Dopamienneuron glutamaat-kotransmissie: frekwensie-afhanklike modulasie in die mesoventromediale projeksie. Neurowetenskap. 2009;164:1068–1083. [PMC gratis artikel] [PubMed]
40. Cohen JD, Braver TS, Brown JW. Rekenkundige perspektiewe op dopamienfunksie in prefrontale korteks. Huidige mening in neurobiologie. 2002;12:223–229. [PubMed]
41. Coizet V, Dommett EJ, Klop EM, Redgrave P, Overton PG. Die parabrachiale kern is 'n kritieke skakel in die oordrag van kort latensie nosiseptiewe inligting na middelbrein dopaminerge neurone. Neurowetenskap. 2010;168:263–272. [PMC gratis artikel] [PubMed]
42. Coizet V, Dommett EJ, Redgrave P, Overton PG. Nociceptiewe reaksies van middelbrein dopaminerge neurone word gemoduleer deur die superior colliculus in die rot. Neurowetenskap. 2006;139:1479–1493. [PubMed]
43. Comoli E, Coizet V, Boyes J, Bolam JP, Canteras NS, Quirk RH, Overton PG, Redgrave P. 'n Direkte projeksie van superior colliculus na substantia nigra vir die opsporing van opvallende visuele gebeurtenisse. Nat Neurosci. 2003;6:974–980. [PubMed]
44. Corbit LH, Balleine BW. Dubbele dissosiasie van basolaterale en sentrale amygdala letsels op die algemene en uitkomsspesifieke vorme van pavlovian-instrumentele oordrag. J Neurosci. 2005;25:962–970. [PubMed]
45. Dalley JW, Laane K, Theobald DE, Armstrong HC, Corlett PR, Chudasama Y, Robbins TW. Tydsbeperkte modulasie van aptytwekkende Pavloviaanse geheue deur D1- en NMDA-reseptore in die nucleus accumbens. Verrigtinge van die Nasionale Akademie van Wetenskappe van die Verenigde State van Amerika. 2005;102:6189–6194. [PMC gratis artikel] [PubMed]
46. Daly HB. Voorkeur vir onvoorspelbaarheid word omgekeer wanneer onvoorspelbare nie-beloning afkeer is: prosedures, data en teorieë van aptytwekkende waarnemende reaksie-verkryging. In: Gormezano I, Wasserman EA, redakteurs. Leer en geheue: Die gedrags- en biologiese substrate. LE Associates; 1992. pp. 81–104.
47. Davidson MC, Horvitz JC, Tottenham N, Fossella JA, Watts R, Ulug AM, Casey BJ. Differensiële caudate en cingulate aktivering na onverwagte nie-belonende stimuli. NeuroBeeld. 2004;23:1039–1045. [PubMed]
48. Dag JJ, Roitman MF, Wightman RM, Carelli RM. Assosiatiewe leer bemiddel dinamiese verskuiwings in dopamiensein in die nucleus accumbens. Nat Neurosci. 2007;10:1020–1028. [PubMed]
49. Dayan P, Niv Y. Versterking leer: die goeie, die slegte en die lelike. Huidige mening in neurobiologie. 2008;18:185–196. [PubMed]
50. Descarries L, Berube-Carriere N, Riad M, Bo GD, Mendez JA, Trudeau LE. Glutamaat in dopamienneurone: sinaptiese versus diffuse oordrag. Breinnavorsing resensies. 2008;58:290–302. [PubMed]
51. Di Chiara G. Nucleus accumbens dop en kern dopamien: differensiële rol in gedrag en verslawing. Gedragsbreinnavorsing. 2002;137:75–114. [PubMed]
52. Dommett E, Coizet V, Blaha CD, Martindale J, Lefebvre V, Walton N, Mayhew JE, Overton PG, Redgrave P. Hoe visuele stimuli dopaminerge neurone met kort latensie aktiveer. Wetenskap. 2005;307:1476–1479. [PubMed]
53. Dormont JF, Conde H, Farin D. Die rol van die pedunculopontine tegmentale kern in verhouding tot gekondisioneerde motoriese prestasie in die kat. I. Konteksafhanklike en versterkingsverwante enkeleenheidaktiwiteit. Eksperimentele breinnavorsing. Experimentelle Hirnforschung. 1998;121:401–410. [PubMed]
54. Duzel E, Bunzeck N, Guitart-Masip M, Duzel S. Novelty-verwante motivering van afwagting en verkenning deur dopamien (NOMAD): implikasies vir gesonde veroudering. Neurowetenskap en biogedrag resensies. 2010;34:660–669. [PubMed]
55. El-Amamy H, Holland PC. Dissosieerbare effekte van die ontkoppeling van amygdala sentrale kern van die ventrale tegmentale area of ​​substantia nigra op aangeleerde oriëntering en aansporingsmotivering. Die Europese tydskrif vir neurowetenskap. 2007;25:1557–1567. [PMC gratis artikel] [PubMed]
56. Ettenberg A. Teenstander verwerk eienskappe van self-toegediende kokaïen. Neurowetenskap en biogedrag resensies. 2004;27:721–728. [PubMed]
57. Fadok JP, Dickerson TM, Palmiter RD. Dopamien is nodig vir cue-afhanklike vrees kondisionering. J Neurosci. 2009;29:11089–11097. [PMC gratis artikel] [PubMed]
58. Fairhall AL, Lewen GD, Bialek W, de Ruyter Van Steveninck RR. Doeltreffendheid en dubbelsinnigheid in 'n aanpasbare neurale kode. Aard. 2001;412:787–792. [PubMed]
59. Faure A, Haberland U, Conde F, El Massioui N. Letsel aan die nigrostriatale dopamienstelsel ontwrig stimulus-reaksie gewoontevorming. J Neurosci. 2005;25:2771–2780. [PubMed]
60. Faure A, Reynolds SM, Richard JM, Berridge KC. Mesolimbiese dopamien in begeerte en vrees: wat motivering moontlik maak om gegenereer te word deur gelokaliseerde glutamaatversteurings in die nucleus accumbens. J Neurosci. 2008;28:7184–7192. [PMC gratis artikel] [PubMed]
61. Fiorillo CD, Newsome WT, Schultz W. Die temporale presisie van voorspelling vir beloning in dopamienneurone. Nat Neurosci. 2008; 11: 966-973. [PubMed]
62. Fiorillo CD, Tobler PN, Schultz W. Diskrete kodering van beloningswaarskynlikheid en onsekerheid deur dopamienneurone. Wetenskap. 2003; 299: 1898-1902. [PubMed]
63. Floresco SB, Ghods-Sharifi S, Vexelman C, Magyar O. Dissociable rolle vir die nucleus accumbens kern en dop in die regulering van stel verskuiwing. J Neurosci. 2006;26:2449–2457. [PubMed]
64. Ford CP, Gantz SC, Phillips PE, Williams JT. Beheer van ekstrasellulêre dopamien by dendriet- en aksonterminale. J Neurosci. 2010;30:6975–6983. [PMC gratis artikel] [PubMed]
65. Frank MJ. Dinamiese dopamienmodulasie in die basale ganglia: 'n neuroberekeningsrekening van kognitiewe tekorte in medisinale en nie-medisinale Parkinsonisme. Tydskrif vir kognitiewe neurowetenskap. 2005;17:51–72. [PubMed]
66. Frank MJ, Fossella JA. Neurogenetika en farmakologie van leer, motivering en kognisie. Neuropsigofarmakologie. 2010 [PMC gratis artikel] [PubMed]
67. Frank MJ, Seeberger LC, O'Reilly RC. Deur wortel of per stok: kognitiewe versterkingsleer in parkinsonisme. Wetenskap. 2004;306:1940–1943. [PubMed]
68. Gallistel CR, Gibbon J. Tyd, tempo en kondisionering. Psychol Rev. 2000;107:289–344. [PubMed]
69. Gao DM, Jeaugey L, Pollak P, Benabid AL. Intensiteitsafhanklike nociceptiewe reaksies van veronderstelde dopaminerge neurone van die substantia nigra, pars compacta in die rot en hul modifikasie deur laterale habenula-insette. Brein Res. 1990;529:315–319. [PubMed]
70. Gauriau C, Bernard JF. Pynbane en parabrachiale stroombane in die rot. Eksperimentele fisiologie. 2002;87:251–258. [PubMed]
71. Geisler S, Zahm DS. Afferente van die ventrale tegmentale area in die rot-anatomiese substratum vir integrerende funksies. Die Tydskrif vir vergelykende neurologie. 2005;490:270–294. [PubMed]
72. Gerfen CR, Engber TM, Mahan LC, Susel Z, Chase TN, Monsma FJ, Jr, Sibley DR. D1 en D2 dopamienreseptor-gereguleerde geenuitdrukking van striatonigrale en striatopallidale neurone. Wetenskap. 1990;250:1429–1432. [PubMed]
73. Ghods-Sharifi S, Floresco SB. Differensiële effekte op inspanningsvermindering veroorsaak deur inaktiverings van die nucleus accumbens kern of dop. Gedrag neurowetenskap. 2010;124:179–191. [PubMed]
74. Gonon FG. Nie-lineêre verhouding tussen impulsvloei en dopamien vrygestel deur dopaminerge neurone in die middelbrein van rotte soos bestudeer deur in vivo elektrochemie. Neurowetenskap. 1988;24:19–28. [PubMed]
75. Goto Y, Yang CR, Otani S. Funksionele en disfunksionele sinaptiese plastisiteit in prefrontale korteks: rolle in psigiatriese versteurings. Biologiese psigiatrie. 2010;67:199–207. [PubMed]
76. Grace AA. Fasiese versus toniese dopamien vrylating en die modulering van dopamienstelsel responsiwiteit: 'n hipotese vir die etiologie van skisofrenie. Neuroscience. 1991; 41: 1-24. [PubMed]
77. Grace AA, Bunney BS. Intrasellulêre en ekstrasellulêre elektrofisiologie van nigrale dopaminerge neurone-1. Identifikasie en karakterisering. Neurowetenskap. 1983;10:301–315. [PubMed]
78. Grace AA, Floresco SB, Goto Y, Lodge DJ. Regulering van die afvuur van dopaminerge neurone en beheer van doelgerigte gedrag. Tendense in neurowetenskappe. 2007;30:220–227. [PubMed]
79. Grecksch G, Matties H. Die rol van dopaminerge meganismes in die rot hippokampus vir die konsolidasie in 'n helderheidsdiskriminasie. Psigofarmakologie (Berl) 1981;75:165–168. [PubMed]
80. Guarraci FA, Kapp BS. 'n Elektrofisiologiese karakterisering van dopaminerge neurone in die ventrale tegmentale area tydens differensiële pavloviaanse vreeskondisionering in die wakker konyn. Gedragsbreinnavorsing. 1999;99:169–179. [PubMed]
81. Haber SN, Fudge JL, McFarland NR. Striatonigrostriatale weë in primate vorm 'n stygende spiraal vanaf die dop na die dorsolaterale striatum. J Neurosci. 2000; 20: 2369-2382. [PubMed]
82. Hall J, Parkinson JA, Connor TM, Dickinson A, Everitt BJ. Betrokkenheid van die sentrale kern van die amygdala en nucleus accumbens kern in die bemiddeling van Pavloviaanse invloede op instrumentele gedrag. Die Europese tydskrif vir neurowetenskap. 2001;13:1984–1992. [PubMed]
83. Han JS, McMahan RW, Holland P, Gallagher M. Die rol van 'n amygdalo-nigrostriatale pad in assosiatiewe leer. J Neurosci. 1997;17:3913–3919. [PubMed]
84. Harris GC, Aston-Jones G. Opwekking en beloning: 'n tweespalt in oreksienfunksie. Tendense in neurowetenskappe. 2006;29:571–577. [PubMed]
85. Herry C, Bach DR, Esposito F, Di Salle F, Perrig WJ, Scheffler K, Luthi A, Seifritz E. Verwerking van tydelike onvoorspelbaarheid in menslike en dierlike amygdala. J Neurosci. 2007;27:5958–5966. [PubMed]
86. Hikida T, Kimura K, Wada N, Funabiki K, Nakanishi S. Afsonderlike rolle van sinaptiese oordrag in direkte en indirekte striatale paaie om te beloon en afkerende gedrag. Neuron. 2010;66:896–907. [PubMed]
87. Hikosaka O. Basale ganglia meganismes van beloning-georiënteerde oogbeweging. Annale van die New York Academy of Sciences. 2007;1104:229–249. [PubMed]
88. Hikosaka O. Die habenula: van stres-ontduiking tot waarde-gebaseerde besluitneming. Nat Rev Neurosci. 2010;11:503–513. [PMC gratis artikel] [PubMed]
89. Hikosaka O, Takikawa Y, Kawagoe R. Rol van die basale ganglia in die beheer van doelgerigte sakadiese oogbewegings. Fisiologiese resensies. 2000;80:953–978. [PubMed]
90. Hitchcott PK, Quinn JJ, Taylor JR. Tweerigtingmodulasie van doelgerigte aksies deur prefrontale kortikale dopamien. Sereb Cortex. 2007;17:2820–2827. [PubMed]
91. Hnasko TS, Chuhma N, Zhang H, Goh GY, Sulzer D, Palmiter RD, Rayport S, Edwards RH. Vesikulêre glutamaatvervoer bevorder dopamienberging en glutamaatkernvrystelling in vivo. Neuron. 2010;65:643–656. [PMC gratis artikel] [PubMed]
92. Holland PC, Gallagher M. Amygdala-kringloop in aandag- en voorstellingsprosesse. Tendense in kognitiewe wetenskappe. 1999;3:65–73. [PubMed]
93. Hollerman JR, Schultz W. Dopamienneurone rapporteer 'n fout in die tydelike voorspelling van beloning tydens leer. Nat Neurosci. 1998;1:304–309. [PubMed]
94. Holroyd CB, Coles MG. Die neurale basis van menslike foutverwerking: versterkingsleer, dopamien en die foutverwante negatiwiteit. Psychol Rev. 2002;109:679–709. [PubMed]
95. Hong S, Hikosaka O. Die globus pallidus stuur beloningsverwante seine na die laterale habenula. Neuron. 2008;60:720–729. [PMC gratis artikel] [PubMed]
96. Horvitz JC. Mesolimbokortiese en nigrostriatale dopamienreaksies vir belangrike, nie-beloningsgebeurtenisse. Neuroscience. 2000; 96: 651-656. [PubMed]
97. Horvitz JC, Stewart T, Jacobs BL. Uitbarstingsaktiwiteit van ventrale tegmentale dopamienneurone word veroorsaak deur sensoriese stimuli in die wakker kat. Brein Res. 1997; 759: 251-258. [PubMed]
98. Houk JC, Adams JL, Barto AG. 'n Model van hoe die basale ganglia neurale seine genereer en gebruik wat versterking voorspel. In: Houk JC, Davis JL, Beiser DG, redakteurs. Modelle van inligtingverwerking in die basale ganglia. Cambridge, MA: MIT Press; 1995. pp. 249–274.
99. Ikemoto S. Breinbeloningkringe buite die mesolimbiese dopamienstelsel: 'n neurobiologiese teorie. Neurowetenskap en biogedrag resensies. 2010 [PMC gratis artikel] [PubMed]
100. Ito R, Dalley JW, Howes SR, Robbins TW, Everitt BJ. Dissosiasie in gekondisioneerde dopamienvrystelling in die kern Accumbens kern en dop in reaksie op kokaïenwyses en tydens kokaïensoekende gedrag by rotte. J Neurosci. 2000;20:7489–7495. [PubMed]
101. Ivlieva NY, Timofeeva NO. Neuronaktiwiteit in die pedunculopontine kern tydens 'n voedselverwante operante gekondisioneerde refleks. Neurowetenskap en Gedragsfisiologie. 2003a;33:919–928. [PubMed]
102. Ivlieva NY, Timofeeva NO. Neuronaktiwiteit in die pedunculopontine kern tydens 'n operante gekondisioneerde refleks. Neurowetenskap en Gedragsfisiologie. 2003b;33:499–506. [PubMed]
103. Jalabert M, Aston-Jones G, Herzog E, Manzoni O, Georges F. Rol van die bedkern van die stria terminalis in die beheer van ventrale tegmentale area dopamienneurone. Vordering in neuro-psigofarmakologie en biologiese psigiatrie. 2009;33:1336–1346. [PMC gratis artikel] [PubMed]
104. Jeanblanc J, Hoeltzel A, Louilot A. Dissosiasie in die betrokkenheid van dopaminergiese neurone wat die kern en dop substreke van die nucleus accumbens innerveer in latente inhibisie en affektiewe persepsie. Neurowetenskap. 2002;111:315–323. [PubMed]
105. Jensen J, Smith AJ, Willeit M, Crawley AP, Mikulis DJ, Vitcu I, Kapur S. Afsonderlike breinstreke kodeer vir opvallendheid vs. valensie tydens beloningsvoorspelling by mense. Menslike brein kartering. 2007;28:294–302. [PubMed]
106. Jhou TC, Fields HL, Baxter MG, Saper CB, Holland PC. Die rostromediale tegmentale kern (RMTg), 'n GABAergiese afferent tot middelbrein dopamienneurone, koördineer aversive stimuli en inhibeer motoriese response. Neuron. 2009a; 61: 786-800. [PMC gratis artikel] [PubMed]
107. Jhou TC, Geisler S, Marinelli M, Degarmo BA, Zahm DS. Die mesopontine rostromediale tegmentale kern: 'n Struktuur wat geteiken word deur die laterale habenula wat na die ventrale tegmentale area van Tsai en substantia nigra compacta uitsteek. Die Tydskrif vir vergelykende neurologie. 2009b;513:566–596. [PMC gratis artikel] [PubMed]
108. Ji H, Shepard PD. Laterale habenula stimulasie inhibeer rat midbrain dopamienneurone deur middel van 'n GABA (A) reseptor-gemedieerde meganisme. J Neurosci. 2007; 27: 6923-6930. [PubMed]
109. Jin X, Costa RM. Begin/stop seine kom in nigrostriatale stroombane na vore tydens volgordeleer. Aard. 2010;466:457–462. [PMC gratis artikel] [PubMed]
110. Johansen JP, Fields HL. Glutamatergiese aktivering van anterior cingulate korteks produseer 'n aversiewe onderrigsein. Nat Neurosci. 2004;7:398–403. [PubMed]
111. Joseph MH, Datla K, Young AM. Die interpretasie van die meting van nucleus accumbens dopamien deur in vivo dialise: die skop, die drang of die kognisie? Neurowetenskap en biogedrag resensies. 2003;27:527–541. [PubMed]
112. Joshua M, Adler A, Bergman H. Die dinamika van dopamien in beheer van motoriese gedrag. Huidige mening in neurobiologie. 2009a;19:615–620. [PubMed]
113. Joshua M, Adler A, Mitelman R, Vaadia E, Bergman H. Midbrein dopaminergiese neurone en striatale cholinergiese interneurone kodeer die verskil tussen beloning en aversiewe gebeure by verskillende tydperke van probabilistiese klassieke kondisionering proewe. J Neurosci. 2008;28:11673–11684. [PubMed]
114. Joshua M, Adler A, Prut Y, Vaadia E, Wickens JR, Bergman H. Sinchronisasie van middelbrein dopaminerge neurone word verbeter deur lonende gebeure. Neuron. 2009b;62:695–704. [PubMed]
115. Kable JW, Glimcher PW. Die neurobiologie van besluit: konsensus en kontroversie. Neuron. 2009;63:733–745. [PMC gratis artikel] [PubMed]
116. Kakade S, Dayan P. Dopamien: veralgemening en bonusse. Neurale netwerke. 2002;15:549–559. [PubMed]
117. Kapur S. Psigose as 'n toestand van afwykende opvallendheid: 'n raamwerk wat biologie, fenomenologie en farmakologie in skisofrenie verbind. Die Amerikaanse joernaal vir psigiatrie. 2003;160:13–23. [PubMed]
118. Kaufling J, Veinante P, Pawlowski SA, Freund-Mercier MJ, Barrot M. Afferente aan die GABAergiese stert van die ventrale tegmentale area in die rot. Die Tydskrif vir vergelykende neurologie. 2009;513:597–621. [PubMed]
119. Kennerley SW, Wallis JD. Evaluering van keuses deur enkele neurone in die frontale lob: uitkomswaarde gekodeer oor verskeie besluitveranderlikes. Die Europese tydskrif vir neurowetenskap. 2009;29:2061–2073. [PMC gratis artikel] [PubMed]
120. Kim H, Sul JH, Huh N, Lee D, Jung MW. Rol van striatum in die opdatering van waardes van gekose aksies. J Neurosci. 2009;29:14701–14712. [PubMed]
121. Kiyatkin EA. Funksionele eienskappe van veronderstelde dopamienbevattende en ander ventrale tegmentale area neurone in bewuste rotte. Int J Neurosci. 1988a;42:21–43. [PubMed]
122. Kiyatkin EA. Morfien-geïnduseerde wysiging van die funksionele eienskappe van ventrale tegmentale area neurone in bewuste rot. Intern J Neurowetenskap. 1988b;41:57–70. [PubMed]
123. Klingberg T. Opleiding en plastisiteit van werkende geheue. Tendense in kognitiewe wetenskappe. 2010;14:317–324. [PubMed]
124. Kobayashi S, Nomoto K, Watanabe M, Hikosaka O, Schultz W, Sakagami M. Invloede van lonende en aversiewe uitkomste op aktiwiteit in makaak laterale prefrontale korteks. Neuron. 2006;51:861–870. [PubMed]
125. Kobayashi S, Schultz W. Invloed van beloningsvertragings op reaksies van dopamienneurone. J Neurosci. 2008;28:7837–7846. [PMC gratis artikel] [PubMed]
126. Kobayashi Y, Inoue Y, Yamamoto M, Isa T, Aizawa H. Bydrae van pedunculopontine tegmentale kernneurone tot die uitvoering van visueel geleide sakkadetake by ape. J Neurophysiol. 2002;88:715–731. [PubMed]
127. Koyama T, Tanaka YZ, Mikami A. Nociceptive neurone in die macaque anterior cingulate aktiveer tydens afwagting van pyn. Neuroreport. 1998;9:2663–2667. [PubMed]
128. Kravitz AV, Freeze BS, Parker PR, Kay K, Thwin MT, Deisseroth K, Kreitzer AC. Regulering van Parkinsoniese motoriese gedrag deur optogenetiese beheer van basale ganglia-kringe. Aard. 2010 [PMC gratis artikel] [PubMed]
129. Lammel S, Hetzel A, Hackel O, Jones I, Liss B, Roeper J. Unieke eienskappe van mesoprefrontale neurone binne 'n dubbele mesokortikolimbiese dopamienstelsel. Neuron. 2008;57:760–773. [PubMed]
130. Lang PJ, Davis M. Emosie, motivering en die brein: refleksgrondslae in diere- en menslike navorsing. Vordering in breinnavorsing. 2006;156:3–29. [PubMed]
131. Lapish CC, Kroener S, Durstewitz D, Lavin A, Seamans JK. Die vermoë van die mesokortikale dopamienstelsel om in afsonderlike temporale modusse te werk. Psigofarmakologie (Berl) 2007;191:609–625. [PubMed]
132. Lee D, Seo H. Meganismes van versterking leer en besluitneming in die primaat dorsolaterale prefrontale korteks. Annale van die New York Academy of Sciences. 2007;1104:108–122. [PubMed]
133. Lee HJ, Groshek F, Petrovich GD, Cantalini JP, Gallagher M, Holland PC. Rol van amygdalo-nigrale stroombane in die kondisionering van 'n visuele stimulus gepaard met kos. J Neurosci. 2005;25:3881–3888. [PMC gratis artikel] [PubMed]
134. Levita L, Dalley JW, Robbins TW. Nucleus accumbens dopamien en geleerde vrees hersien: 'n oorsig en 'n paar nuwe bevindings. Gedragsbreinnavorsing. 2002;137:115–127. [PubMed]
135. Lin SC, Nicolelis MA. Neuronale ensemble wat in die basale voorbrein bars enkodeer opvallend ongeag valensie. Neuron. 2008;59:138–149. [PMC gratis artikel] [PubMed]
136. Lisman JE, Grace AA. Die hippocampus-VTA-lus: beheer die inskrywing van inligting in die langtermyngeheue. Neuron. 2005; 46: 703-713. [PubMed]
137. Litt A, Plassmann H, Shiv B, Rangel A. Dissosierende waardasie- en opvallende seine tydens besluitneming. Sereb Cortex. 2010 in pers. [PubMed]
138. Liu Z, Richmond BJ, Murray EA, Saunders RC, Steenrod S, Stubblefield BK, Montague DM, Ginns EI. DNA-teiken van renale korteks D2-reseptorproteïen blokkeer omkeerbaar die leer van leidrade wat beloning voorspel. Verrigtinge van die Nasionale Akademie van Wetenskappe van die Verenigde State van Amerika. 2004;101:12336–12341. [PMC gratis artikel] [PubMed]
139. Liu ZH, Shin R, Ikemoto S. Dubbele rol van mediale A10 dopamienneurone in affektiewe kodering. Neuropsigofarmakologie. 2008;33:3010–3020. [PMC gratis artikel] [PubMed]
140. Ljungberg T, Apicella P, Schultz W. Reaksies van aapdopamienneurone tydens die leer van gedragsreaksies. J Neurofisiolo. 1992; 67: 145-163. [PubMed]
141. Lobo MK, Covington HE, 3rd, Chaudhury D, Friedman AK, Sun H, Damez-Werno D, Dietz DM, Zaman S, Koo JW, Kennedy PJ, et al. Seltipe-spesifieke verlies van BDNF-sein naboots optogenetiese beheer van kokaïenbeloning. Wetenskap. 2010;330:385–390. [PMC gratis artikel] [PubMed]
142. Maeda H, Mogenson GJ. Effekte van perifere stimulasie op die aktiwiteit van neurone in die ventrale tegmentale area, substantia nigra en middelbrein retikulêre vorming van rotte. Breinnavorsingsbulletin. 1982;8:7–14. [PubMed]
143. Mantz J, Thierry AM, Glowinski J. Effek van skadelike stertknyp op die ontslagtempo van mesokortikale en mesolimbiese dopamienneurone: selektiewe aktivering van die mesokortikale stelsel. Brein Res. 1989;476:377–381. [PubMed]
144. Margolis EB, Lock H, Hjelmstad GO, Fields HL. Die ventrale tegmentale area herbesoek: is daar 'n elektrofisiologiese merker vir dopaminerge neurone? Tydskrif vir fisiologie. 2006;577:907–924. [PMC gratis artikel] [PubMed]
145. Margolis EB, Mitchell JM, Ishikawa J, Hjelmstad GO, Fields HL. Midbrain dopamienneurone: projeksie-teiken bepaal aksiepotensiaal duur en dopamien D (2) reseptor inhibisie. J Neurosci. 2008; 28: 8908-8913. [PubMed]
146. Mark GP, Blander DS, Hoebel BG. 'N gekondisioneerde stimulus verminder ekstrasellulêre dopamien in die nucleus accumbens na die ontwikkeling van 'n geleerde smaak aversie. Brein Res. 1991; 551: 308-310. [PubMed]
147. Marowsky A, Yanagawa Y, Obata K, Vogt KE. 'n Gespesialiseerde subklas van interneurone bemiddel dopaminergiese fasilitering van amygdala-funksie. Neuron. 2005;48:1025–1037. [PubMed]
148. Matsumoto M, Hikosaka O. Laterale habenula as 'n bron van negatiewe beloningseine in dopamienneurone. Aard. 2007;447:1111–1115. [PubMed]
149. Matsumoto M, Hikosaka O. Voorstelling van negatiewe motiveringswaarde in die primaat laterale habenula. Nat Neurosci. 2009a;12:77–84. [PMC gratis artikel] [PubMed]
150. Matsumoto M, Hikosaka O. Twee tipes dopamienneuron dra duidelik positiewe en negatiewe motiveringsseine oor. Aard. 2009b;459:837–841. [PMC gratis artikel] [PubMed]
151. Matsumoto M, Matsumoto K, Abe H, Tanaka K. Mediale prefrontale selaktiwiteit wat voorspellingsfoute van aksiewaardes aandui. Nat Neurosci. 2007;10:647–656. [PubMed]
152. May PJ, McHaffie JG, Stanford TR, Jiang H, Costello MG, Coizet V, Hayes LM, Haber SN, Redgrave P. Tektonigrale projeksies in die primaat: 'n pad vir pre-oplettende sensoriese insette na middelbrein dopaminergiese neurone. Die Europese tydskrif vir neurowetenskap. 2009;29:575–587. [PMC gratis artikel] [PubMed]
153. Mazzoni P, Hristova A, Krakauer JW. Hoekom beweeg ons nie vinniger nie? Parkinson se siekte, bewegingskrag en implisiete motivering. J Neurosci. 2007;27:7105–7116. [PubMed]
154. Merali Z, Michaud D, McIntosh J, Kent P, Anisman H. Differensiële betrokkenheid van amygdaloïde CRH-stelsel(s) in die opvallendheid en valensie van die stimuli. Vordering in neuro-psigofarmakologie en biologiese psigiatrie. 2003;27:1201–1212. [PubMed]
155. Mirenowicz J, Schultz W. Voorkeuraktivering van middelbrein dopamienneurone deur aptytlike eerder as aversiewe stimuli. Aard. 1996;379:449–451. [PubMed]
156. Molina-Luna K, Pekanovic A, Rohrich S, Hertler B, Schubring-Giese M, Rioult-Pedotti MS, Luft AR. Dopamien in motoriese korteks is nodig vir vaardigheidsleer en sinaptiese plastisiteit. PLoS EEN. 2009;4:e7082. [PMC gratis artikel] [PubMed]
157. Montague PR, Berns GS. Neurale ekonomie en die biologiese substrate van waardasie. Neuron. 2002;36:265–284. [PubMed]
158. Montague PR, Dayan P, Sejnowski TJ. 'N Raamwerk vir mesensfaliese dopamienstelsels gebaseer op voorspellende Hebreeuse leer. J Neurosci. 1996; 16: 1936-1947. [PubMed]
159. Morris G, Arkadir D, Nevet A, Vaadia E, Bergman H. Toevallige maar duidelike boodskappe van middelbrein dopamien en striatale tonies aktiewe neurone. Neuron. 2004;43:133–143. [PubMed]
160. Morris G, Nevet A, Arkadir D, Vaadia E, Bergman H. Midbrain dopamien neurone kodeer besluite vir toekomstige optrede. Nat Neurosci. 2006;9:1057–1063. [PubMed]
161. Morrison SE, Salzman CD. Die konvergensie van inligting oor lonende en aversiewe stimuli in enkele neurone. J Neurosci. 2009;29:11471–11483. [PMC gratis artikel] [PubMed]
162. Nakahara H, Itoh H, Kawagoe R, Takikawa Y, Hikosaka O. Dopamienneurone kan konteksafhanklike voorspellingsfout verteenwoordig. Neuron. 2004;41:269–280. [PubMed]
163. Nakamura K, Hikosaka O. Rol van dopamien in die primaat caudate nukleus in beloning modulasie van sakkades. J Neurosci. 2006;26:5360–5369. [PubMed]
164. Neve KA, Seamans JK, Trantham-Davidson H. Dopamienreseptor sein. Tydskrif vir reseptor- en seintransduksie-navorsing. 2004;24:165–205. [PubMed]
165. Nishijo H, Ono T, Nishino H. Enkele neuronreaksies in amygdala van wakker aap tydens komplekse sensoriese stimulasie met affektiewe betekenis. J Neurosci. 1988;8:3570–3583. [PubMed]
166. Niv Y, Daw ND, Joel D, Dayan P. Toniese dopamien: geleentheidskoste en die beheer van reaksiekrag. Psigofarmakologie. 2007;191:507–520. [PubMed]
167. Nomoto K, Schultz W, Watanabe T, Sakagami M. Tydelike verlengde dopamienreaksies op perseptueel veeleisende beloning-voorspellende stimuli. J Neurosci. 2010;30:10692–10702. [PMC gratis artikel] [PubMed]
168. Okada K, Toyama K, Inoue Y, Isa T, Kobayashi Y. Verskillende pedunculopontine tegmentele neurone sein voorspel en werklike taakbelonings. J Neurosci. 2009;29:4858–4870. [PubMed]
169. Omelchenko N, Bell R, Sesack SR. Laterale habenula-projeksies na dopamien- en GABA-neurone in die rot ventrale tegmentale area. Die Europese tydskrif vir neurowetenskap. 2009;30:1239–1250. [PMC gratis artikel] [PubMed]
170. Owesson-White CA, Ariansen J, Stuber GD, Cleaveland NA, Cheer JF, Wightman RM, Carelli RM. Neurale enkodering van kokaïen-soekende gedrag val saam met fasiese dopamienvrystelling in die accumbens kern en dop. Die Europese tydskrif vir neurowetenskap. 2009;30:1117–1127. [PMC gratis artikel] [PubMed]
171. Oyama K, Hernadi I, Iijima T, Tsutsui K. Beloning voorspelling foutkodering in dorsale striatale neurone. J Neurosci. 2010;30:11447–11457. [PubMed]
172. Packard MG, Wit NM. Dissosiasie van hippokampus en kaudaatkerngeheuestelsels deur na-opleiding intraserebrale inspuiting van dopamienagoniste. Gedrag neurowetenskap. 1991;105:295–306. [PubMed]
173. Padoa-Schioppa C. Orbitofrontale korteks en die berekening van ekonomiese waarde. Annale van die New York Academy of Sciences. 2007;1121:232–253. [PubMed]
174. Palmiter RD. Dopamiensein in die dorsale striatum is noodsaaklik vir gemotiveerde gedrag: lesse van dopamien-tekorte muise. Annale van die New York Academy of Sciences. 2008;1129:35–46. [PMC gratis artikel] [PubMed]
175. Pan WX, Hyland BI. Pedunculopontine tegmentale kern beheer gekondisioneerde reaksies van middelbrein dopamienneurone in rotte wat optree. J Neurosci. 2005;25:4725–4732. [PubMed]
176. Pan WX, Schmidt R, Wickens JR, Hyland BI. Drieledige meganisme van uitsterwing voorgestel deur dopamienneuronaktiwiteit en temporele verskilmodel. J Neurosci. 2008;28:9619–9631. [PubMed]
177. Parker JG, Zweifel LS, Clark JJ, Evans SB, Phillips PE, Palmiter RD. Afwesigheid van NMDA-reseptore in dopamienneurone verswak dopamienvrystelling maar nie gekondisioneerde benadering tydens Pavloviaanse kondisionering nie. Verrigtinge van die Nasionale Akademie van Wetenskappe van die Verenigde State van Amerika. 2010 [PMC gratis artikel] [PubMed]
178. Pascoe JP, Kapp BS. Elektrofisiologiese kenmerke van amygdaloïde sentrale kernneurone tydens Pavloviaanse vreeskondisionering in die haas. Gedragsbreinnavorsing. 1985;16:117–133. [PubMed]
179. Pascucci T, Ventura R, Latagliata EC, Cabib S, Puglisi-Allegra S. Die mediale prefrontale korteks bepaal die accumbens dopamien reaksie op stres deur die opponerende invloede van norepinefrien en dopamien. Sereb Cortex. 2007;17:2796–2804. [PubMed]
180. Pearce JM, Hall G. 'n Model vir Pavloviaanse leer: variasies in die effektiwiteit van gekondisioneerde maar nie van ongekondisioneerde stimuli nie. Psychol Rev. 1980;87:532–552. [PubMed]
181. Pezze MA, Feldon J. Mesolimbiese dopaminerge paaie in vrees kondisionering. Vordering in neurobiologie. 2004;74:301–320. [PubMed]
182. Phillips AG, Ahn S, Howland JG. Amygdalar beheer van die mesokortikolimbiese dopamienstelsel: parallelle paaie na gemotiveerde gedrag. Neurowetenskap en biogedrag resensies. 2003a;27:543–554. [PubMed]
183. Phillips GD, Salussolia E, Hitchcott PK. Rol van die mesoamygdaloïde dopamienprojeksie in emosionele leer. Psigofarmakologie. 2010 [PubMed]
184. Phillips PE, Stuber GD, Heien ML, Wightman RM, Carelli RM. Subsekonde dopamien vrystelling bevorder kokaïen soek. Aard. 2003b;422:614–618. [PubMed]
185. Porrino LJ, Goldman-Rakic ​​PS. Breinstam-innervering van prefrontale en anterior cingulate korteks in die rhesus-aap geopenbaar deur retrograde vervoer van HRP. Die Tydskrif vir vergelykende neurologie. 1982;205:63–76. [PubMed]
186. Puryear CB, Kim MJ, Mizumori SJ. Konjunktiewe enkodering van beweging en beloning deur ventrale tegmentale area neurone in die vry navigerende knaagdier. Gedrag neurowetenskap. 2010;124:234–247. [PMC gratis artikel] [PubMed]
187. Ravel S, Legallet E, Apicella P. Tonies aktiewe neurone in die aapstriatum reageer nie verkieslik op aptytstimuli nie. Eksperimentele breinnavorsing. Experimentelle Hirnforschung. 1999;128:531–534. [PubMed]
188. Ravel S, Legallet E, Apicella P. Reaksies van tonies aktiewe neurone in die aapstriatum onderskei tussen motiverende opponerende stimuli. J Neurosci. 2003;23:8489–8497. [PubMed]
189. Ravel S, Richmond BJ. Dopamienneuronale reaksies by ape wat visueel aangeduide beloningskedules uitvoer. Die Europese tydskrif vir neurowetenskap. 2006;24:277–290. [PubMed]
190. Redgrave P, Gurney K. Die kort-latency dopamien sein: 'n rol in die ontdekking van nuwe aksies? Nat Rev Neurosci. 2006;7:967–975. [PubMed]
191. Redgrave P, Prescott TJ, Gurney K. Is die kort-latency dopamien reaksie te kort om beloning fout aan te dui? Tendense in neurowetenskappe. 1999;12:146–151. [PubMed]
192. Rescorla RA, Wagner AR. 'n Teorie van Pavloviaanse kondisionering: variasies in die doeltreffendheid van versterking en nie-versterking. In: Black AH, Prokasy WF, redakteurs. Klassieke kondisionering II: Huidige navorsing en teorie. New York, New York: Appleton Century Crofts; 1972. pp. 64–99.
193. Reynolds JNJ, Hyland BI, Wickens JR. 'n Sellulêre meganisme van beloningsverwante leer. Aard. 2001;413:67–70. [PubMed]
194. Reynolds SM, Berridge KC. Positiewe en negatiewe motivering in nucleus accumbens dop: bivalente rostrocaudale gradiënte vir GABA-ontlokte eet, smaak "hou van"/"hou nie van" reaksies, plekvoorkeur/vermyding en vrees. J Neurosci. 2002;22:7308–7320. [PubMed]
195. Richardson RT, DeLong MR. Elektrofisiologiese studies van die funksies van die nucleus basalis by primate. Vooruitgang in eksperimentele medisyne en biologie. 1991;295:233–252. [PubMed]
196. Robbins TW, Arnsten AF. Die neuropsigofarmakologie van fronto-uitvoerende funksie: monoaminergiese modulasie. Jaarlikse oorsig van neurowetenskap. 2009;32:267–287. [PMC gratis artikel] [PubMed]
197. Robinson DL, Hermans A, Seipel AT, Wightman RM. Monitering van vinnige chemiese kommunikasie in die brein. Chemiese resensies. 2008;108:2554–2584. [PMC gratis artikel] [PubMed]
198. Roesch MR, Calu DJ, Schoenbaum G. Dopamienneurone kodeer die beter opsie in rotte wat tussen verskillende vertraagde of grootte belonings besluit. Nat Neurosci. 2007;10:1615–1624. [PMC gratis artikel] [PubMed]
199. Roesch MR, Olson CR. Neuronale aktiwiteit wat verband hou met beloningswaarde en motivering in primate frontale korteks. Wetenskap. 2004; 304: 307-310. [PubMed]
200. Roitman MF, Wheeler RA, Wightman RM, Carelli RM. Intydse chemiese reaksies in die nucleus accumbens onderskei lonende en aversiewe stimuli. Nat Neurosci. 2008;11:1376–1377. [PMC gratis artikel] [PubMed]
201. Rutledge RB, Lazzaro SC, Lau B, Myers CE, Gluck MA, Glimcher PW. Dopaminergiese middels moduleer leertempo en volharding by Parkinson-pasiënte in 'n dinamiese kossoektaak. J Neurosci. 2009;29:15104–15114. [PMC gratis artikel] [PubMed]
202. Salamone JD. Die betrokkenheid van nucleus accumbens dopamien in aptytwekkende en aversiewe motivering. Gedragsbreinnavorsing. 1994;61:117–133. [PubMed]
203. Salamone JD, Correa M, Farrar A, Mingote SM. Poging-verwante funksies van nukleus volg dopamien en geassosieerde voorloopbane. Psigofarmakologie (Berl) 2007; 191: 461-482. [PubMed]
204. Satoh T, Nakai S, Sato T, Kimura M. Gekorreleerde kodering van motivering en uitkoms van besluit deur dopamienneurone. J Neurosci. 2003;23:9913–9923. [PubMed]
205. Savine AC, Beck SM, Edwards BG, Chiew KS, Braver TS. Verbetering van kognitiewe beheer deur benadering en vermyding van motiveringstoestande. Kognisie en emosie. 2010;24:338–356. [PMC gratis artikel] [PubMed]
206. Schoenbaum G, Roesch MR, Stalnaker TA, Takahashi YK. 'n Nuwe perspektief op die rol van die orbitofrontale korteks in aanpasbare gedrag. Nat Rev Neurosci. 2009;10:885–892. [PMC gratis artikel] [PubMed]
207. Schultz W. Reaksies van middelbrein dopamienneurone op gedragssnellerstimuli in die aap. J Neurophysiol. 1986;56:1439–1461. [PubMed]
208. Schultz W. Voorspellende beloning sein van dopamienneurone. J Neurofisiolo. 1998; 80: 1-27. [PubMed]
209. Schultz W. Veelvuldige dopamienfunksies by verskillende tydkursusse. Jaarlikse oorsig van neurowetenskap. 2007;30:259–288. [PubMed]
210. Schultz W. Dopamien seine vir beloningswaarde en risiko: basiese en onlangse data. Gedra breinfunksie. 2010;6:24. [PMC gratis artikel] [PubMed]
211. Schultz W, Dayan P, Montague PR. 'N Neurale substraat van voorspelling en beloning. Wetenskap. 1997; 275: 1593-1599. [PubMed]
212. Schultz W, Romo R. Reaksies van nigrostriatale dopamienneurone op hoë-intensiteit somatosensoriese stimulasie in die verdoofde aap. J Neurophysiol. 1987;57:201–217. [PubMed]
213. Schultz W, Romo R. Dopamienneurone van die aap-middelbrein: gebeurlikhede van reaksies op stimuli wat onmiddellike gedragsreaksies uitlok. J Neurophysiol. 1990;63:607–624. [PubMed]
214. Seo H, Lee D. Temporele filtering van beloningseine in die dorsale anterior cingulate korteks tydens 'n gemengde-strategie-spel. J Neurosci. 2007;27:8366–8377. [PMC gratis artikel] [PubMed]
215. Shabel SJ, Janak PH. Aansienlike ooreenkoms in amygdala-neuronale aktiwiteit tydens gekondisioneerde aptyt- en aversiewe emosionele opwekking. Verrigtinge van die Nasionale Akademie van Wetenskappe van die Verenigde State van Amerika. 2009;106:15031–15036. [PMC gratis artikel] [PubMed]
216. Shadmehr R, Smith MA, Krakauer JW. Foutkorreksie, sensoriese voorspelling en aanpassing in motoriese beheer. Jaarlikse oorsig van neurowetenskap. 2010 [PubMed]
217. Shen W, Flajolet M, Greengard P, Surmeier DJ. Dichotomiese dopaminerge beheer van striatale sinaptiese plastisiteit. Wetenskap. 2008;321:848–851. [PMC gratis artikel] [PubMed]
218. Shimo Y, Wichmann T. Neuronale aktiwiteit in die subtalamiese kern moduleer die vrystelling van dopamien in die aapstriatum. Die Europese tydskrif vir neurowetenskap. 2009;29:104–113. [PMC gratis artikel] [PubMed]
219. Shippenberg TS, Bals-Kubik R, Huber A, Herz A. Neuroanatomiese substrate wat die aversiewe effekte van D-1 dopamienreseptorantagoniste bemiddel. Psigofarmakologie (Berl) 1991;103:209–214. [PubMed]
220. Shumake J, Ilango A, Scheich H, Wetzel W, Ohl FW. Differensiële neuromodulasie van verkryging en herwinning van vermydingsleer deur die laterale habenula en ventrale tegmentale area. J Neurosci. 2010;30:5876–5883. [PubMed]
221. Small DM, Gregory MD, Mak YE, Gitelman D, Mesulam MM, Parrish T. Dissosiasie van neurale voorstelling van intensiteit en affektiewe waardasie in menslike smaak. Neuron. 2003;39:701–711. [PubMed]
222. Stefani MR, Moghaddam B. Reëlleer en beloning gebeurlikheid word geassosieer met dissosieerbare patrone van dopamienaktivering in die rot prefrontale korteks, nucleus accumbens en dorsale striatum. J Neurosci. 2006;26:8810–8818. [PMC gratis artikel] [PubMed]
223. Steinfels GF, Heym J, Strecker RE, Jacobs BL. Reaksie van dopaminerge neurone in kat op ouditiewe stimuli wat oor die slaap-wakker siklus aangebied word. Brein Res. 1983;277:150–154. [PubMed]
224. Strecker RE, Jacobs BL. Substantia nigra dopaminergiese eenheid aktiwiteit by katte wat optree: effek van opwekking op spontane ontlading en sensoriese opgewekte aktiwiteit. Brein Res. 1985;361:339–350. [PubMed]
225. Stuber GD, Hnasko TS, Britt JP, Edwards RH, Bonci A. Dopaminerge terminale in die nucleus accumbens maar nie dorsale striatum corelease glutamaat nie. Tydskrif vir Neurowetenskap. 2010;30:8229–8233. [PMC gratis artikel] [PubMed]
226. Stuber GD, Wightman RM, Carelli RM. Uitwissing van kokaïen-selfadministrasie openbaar funksionele en tydelike afsonderlike dopaminergiese seine in die nucleus accumbens. Neuron. 2005;46:661–669. [PubMed]
227. Sul JH, Kim H, Huh N, Lee D, Jung MW. Afsonderlike rolle van knaagdier orbitofrontale en mediale prefrontale korteks in besluitneming. Neuron. 2010;66:449–460. [PMC gratis artikel] [PubMed]
228. Surmeier DJ, Ding J, Dag M, Wang Z, Shen W. D1 en D2 dopamien-reseptor modulasie van striatale glutamatergiese sein in striatale medium stekelige neurone. Tendense in neurowetenskappe. 2007;30:228–235. [PubMed]
229. Surmeier DJ, Shen W, Day M, Gertler T, Chan S, Tian X, Plotkin JL. Die rol van dopamien in die modulering van die struktuur en funksie van striatale stroombane. Vordering in breinnavorsing. 2010;183C:148–167. [PubMed]
230. Sutton RS, Barto AG. Na 'n moderne teorie van aanpasbare netwerke: verwagting en voorspelling. Psychol Rev. 1981;88:135–170. [PubMed]
231. Takahashi YK, Roesch MR, Stalnaker TA, Haney RZ, Calu DJ, Taylor AR, Burke KA, Schoenbaum G. Die orbitofrontale korteks en ventrale tegmentale area is nodig om uit onverwagte uitkomste te leer. Neuron. 2009;62:269–280. [PMC gratis artikel] [PubMed]
232. Takikawa Y, Kawagoe R, Hikosaka O. 'n Moontlike rol van middelbrein dopamienneurone in kort- en langtermyn-aanpassing van sakkades na posisie-beloning kartering. J Neurophysiol. 2004;92:2520–2529. [PubMed]
233. Tecuapetla F, Patel JC, Xenias H, Engels D, Tadros I, Shah F, Berlin J, Deisseroth K, Rice ME, Tepper JM, Koos T. Glutamatergiese sein deur mesolimbiese dopamienneurone in die nucleus accumbens. J Neurosci. 2010;30:7105–7110. [PMC gratis artikel] [PubMed]
234. Thierry AM, Tassin JP, Blanc G, Glowinski J. Selektiewe aktivering van mesokortikale DA-stelsel deur stres. Aard. 1976;263:242–244. [PubMed]
235. Tobler PN, Dickinson A, Schultz W. Kodering van voorspelde beloning weglating deur dopamienneurone in 'n gekondisioneerde inhibisie-paradigma. J Neurosci. 2003;23:10402–10410. [PubMed]
236. Tobler PN, Fiorillo CD, Schultz W. Aanpasbare kodering van beloningswaarde deur dopamienneurone. Wetenskap. 2005;307:1642–1645. [PubMed]
237. Tsai HC, Zhang F, Adamantidis A, Stuber GD, Bonci A, de Lecea L, Deisseroth K. Fasiese afvuur in dopaminerge neurone is voldoende vir gedragskondisionering. Wetenskap. 2009 [PubMed]
238. Ullsperger M. Genetiese assosiasiestudies van prestasiemonitering en leer uit terugvoer: die rol van dopamien en serotonien. Neurowetenskap en biogedrag resensies. 2010;34:649–659. [PubMed]
239. Onlose MA. Dopamien: die belangrikste kwessie. Tendense in neurowetenskappe. 2004;27:702–706. [PubMed]
240. Uylings HB, Groenewegen HJ, Kolb B. Het rotte 'n prefrontale korteks? Gedragsbreinnavorsing. 2003;146:3–17. [PubMed]
241. Ventura R, Cabib S, Puglisi-Allegra S. Teenoor genotipe-afhanklike mesokortikolimbiese dopamienreaksie op stres. Neurowetenskap. 2001;104:627–631. [PubMed]
242. Ventura R, Latagliata EC, Morrone C, La Mela I, Puglisi-Allegra S. Prefrontale norepinefrien bepaal toeskrywing van "hoë" motiverende opvallendheid. PLoS EEN. 2008;3:e3044. [PMC gratis artikel] [PubMed]
243. Ventura R, Morrone C, Puglisi-Allegra S. Prefrontale / akkumbale katekolamienstelsel bepaal motiverende opvallende toeskrywing aan beide beloning- en afkeerverwante stimuli. Verrigtinge van die Nasionale Akademie van Wetenskappe van die Verenigde State van Amerika. 2007;104:5181–5186. [PMC gratis artikel] [PubMed]
244. Vogt BA. Pyn en emosie interaksies in substreke van die cingulate gyrus. Nat Rev Neurosci. 2005;6:533–544. [PMC gratis artikel] [PubMed]
245. Voon V, Pessiglione M, Brezing C, Gallea C, Fernandez HH, Dolan RJ, Hallett M. Meganismes onderliggend aan dopamien-gemedieerde beloning ias in kompulsiewe gedrag. Neuron. 2010;65:135–142. [PMC gratis artikel] [PubMed]
246. Waelti P, Dickinson A, Schultz W. Dopamienreaksies voldoen aan basiese aannames van formele leerteorie. Aard. 2001;412:43–48. [PubMed]
247. Wallis JD, Kennerley SW. Heterogene beloning seine in prefrontale korteks. Huidige mening in neurobiologie. 2010;20:191–198. [PMC gratis artikel] [PubMed]
248. Walton ME, Behrens TE, Buckley MJ, Rudebeck PH, Rushworth MF. Skeibare leerstelsels in die makaakbrein en die rol van orbitofrontale korteks in gebeurlike leer. Neuron. 2010;65:927–939. [PMC gratis artikel] [PubMed]
249. Wheeler RA, Twining RC, Jones JL, Slater JM, Grigson PS, Carelli RM. Gedrags- en elektrofisiologiese indices van negatiewe invloed voorspel kokaïen-selfadministrasie. Neuron. 2008; 57: 774-785. [PubMed]
250. Wightman RM, Heien MLAV, Wassum KM, Sombers LA, Aragona BJ, Khan AS, Ariansen JL, Cheer JF, Phillips PE, Carelli RM. Dopamienvrystelling is heterogeen binne mikro-omgewings van die rotnucleus accumbens. Die Europese tydskrif vir neurowetenskap. 2007;26:2046–2054. [PubMed]
251. Williams GV, Castner SA. Onder die kurwe: kritieke kwessies vir die toeligting van D1-reseptorfunksie in werkgeheue. Neurowetenskap. 2006;139:263–276. [PubMed]
252. Williams SM, Goldman-Rakic ​​PS. Wydverspreide oorsprong van die primaat mesofrontale dopamienstelsel. Sereb Cortex. 1998;8:321–345. [PubMed]
253. Winn P. Hoe om die struktuur en funksie van die pedunculopontine tegmentale kern die beste te oorweeg: bewyse uit dierestudies. Tydskrif vir die Neurologiese Wetenskappe. 2006;248:234–250. [PubMed]
254. Wise RA. Dopamien, leer en motivering. Nat Rev Neurosci. 2004; 5: 483-494. [PubMed]
255. Wyse RA. Voorbrein substrate van beloning en motivering. Die Tydskrif vir vergelykende neurologie. 2005;493:115–121. [PMC gratis artikel] [PubMed]
256. Wyse SP. Voorwaartse frontale velde: filogenie en fundamentele funksie. Tendense in neurowetenskappe. 2008;31:599–608. [PMC gratis artikel] [PubMed]
257. Yamada H, Matsumoto N, Kimura M. Tonies aktiewe neurone in die primaat caudate nucleus en putamen differensieel enkodeer opdrag motiverende uitkomste van aksie. J Neurosci. 2004;24:3500–3510. [PubMed]
258. Yamada H, Matsumoto N, Kimura M. Geskiedenis- en huidige instruksie-gebaseerde kodering van komende gedragsuitkomste in die striatum. J Neurophysiol. 2007;98:3557–3567. [PubMed]
259. Yin HH, Knowlton BJ. Die rol van die basale ganglia in gewoontevorming. Nat Rev Neurosci. 2006;7:464–476. [PubMed]
260. Young AM, Moran PM, Joseph MH. Die rol van dopamien in kondisionering en latente inhibisie: wat, wanneer, waar en hoe? Neurowetenskap en biogedrag resensies. 2005;29:963–976. [PubMed]
261. Zaghloul KA, Blanco JA, Weidemann CT, McGill K, Jaggi JL, Baltuch GH, Kahana MJ. Menslike substantia nigra neurone kodeer onverwagte finansiële belonings. Wetenskap. 2009;323:1496–1499. [PMC gratis artikel] [PubMed]
262. Zahniser NR, Sorkin A. Vinnige regulering van die dopamienvervoerder: rol in stimulantverslawing? Neurofarmakologie. 2004;47 Suppl 1:80–91. [PubMed]
263. Zhang L, Doyon WM, Clark JJ, Phillips PE, Dani JA. Beheer van toniese en fasiese dopamienoordrag in die dorsale en ventrale striatum. Molekulêre farmakologie. 2009;76:396–404. [PMC gratis artikel] [PubMed]
264. Zink CF, Pagnoni G, Martin ME, Dhamala M, Berns GS. Menslike striatale reaksie op opvallende nie-belonende stimuli. Tydskrif vir Neurowetenskap. 2003;23:8092–8097. [PubMed]
265. Zweifel LS, Argilli E, Bonci A, Palmiter RD. Rol van NMDA reseptore in dopamienneurons vir plastisiteit en verslawende gedrag. Neuron. 2008; 59: 486-496. [PMC gratis artikel] [PubMed]
266. Zweifel LS, Parker JG, Lobb CJ, Rainwater A, Wall VZ, Fadok JP, Darvas M, Kim MJ, Mizumori SJ, Paladini CA, et al. Ontwrigting van NMDAR-afhanklike uitbarsting deur dopamienneurone bied selektiewe assessering van fasiese dopamienafhanklike gedrag. Verrigtinge van die Nasionale Akademie van Wetenskappe van die Verenigde State van Amerika. 2009;106:7281–7288. [PMC gratis artikel] [PubMed]