Ishara za Dopamine kwa Thamani ya Tuzo na Hatari Takwimu za Msingi na za Hivi karibuni (2010)

Wolfram Schultz 1

Funzo ya ubongo ya Behav. 2010; 6: 24.

Imechapishwa mtandaoni 2010 Aprili 23. toa: 10.1186 / 1744-9081-6-24.

STUDY kamili: Dopamine Signals kwa Thamani ya Tuzo na Hatari Takwimu za Msingi na za Hivi karibuni

1Dafasi ya Physiolojia, Maendeleo na Neuroscience, Chuo Kikuu cha Cambridge, Downing Street, Cambridge CBXUMUMX 2DY, Uingereza

Mwandishi mwandishi.

Wolfram Schultz: [barua pepe inalindwa]

abstract

Historia

Vidonda vya nyuma, umeme wa kusisimua na masomo ya madawa ya kulevya zinaonyesha kwamba mifumo ya dopamine ya midbrain ni sehemu ya mfumo wa malipo ya ubongo. Mapitio haya hutoa maelezo ya jumla juu ya ishara za msingi za dopamine neurons kwa msukumo wa mazingira.

Mbinu

Majaribio yaliyoelezwa kutumika mbinu za kawaida za tabia na neurophysiolojia kurekodi shughuli ya neurons moja ya dopamini katika nyani macho wakati wa kazi maalum ya tabia.

Matokeo

Neopons ya Dopamini inaonyesha uanzishaji wa kipengee kwa msukumo wa nje. Ishara inadhibitisha tuzo, ujasiri wa kimwili, hatari na adhabu, kwa utaratibu wa kushuka kwa vipande vya neuroni zinazojibu. Thamani ya malipo ya kutarajia ni uamuzi muhimu wa uamuzi kwa ajili ya uchaguzi wa kiuchumi. Mapitio ya malipo ya malipo yanathamini thamani, uwezekano na bidhaa zao zilizotajwa, thamani inayotarajiwa. Nambari ya neurons malipo ya thamani kama inatofautiana na utabiri, hivyo kutimiza mahitaji ya msingi kwa ishara bidirectional uongofu mafundisho kosa iliyowekwa na nadharia ya kujifunza. Jibu hili linawekwa katika vitengo vya kupotoka kwa kawaida. Kinyume chake, chache cha dopamine neurons kinaonyesha uanzishaji wa phasi baada ya waadhibu na kupigana na uchochezi wa kizuizi, wakidai ukosefu wa uhusiano wa jibu la malipo kwa tahadhari ya jumla na kumfufua. Idadi kubwa ya neurons ya dopamine pia imeamilishwa na uchochezi mkali, kimwili kimsingi. Jibu hili linaimarishwa wakati msukumo ni riwaya; inaonekana kuwa tofauti na ishara ya thamani ya malipo. Neopons ya Dopamine pia inaonyesha maandamano yasiyo ya pekee kwa vitendo visivyofaa ambavyo vinawezekana kutokana na generalization na uchochezi sawa na pseudoconditioning na malipo ya msingi. Maandamano haya ni mafupi kuliko majibu ya malipo na mara nyingi hufuatiwa na unyogovu wa shughuli. Dalili tofauti, ya polepole ya dopamini hujulisha juu ya hatari, tofauti nyingine ya uamuzi. Majibu ya kosa la utabiri hutokea tu kwa malipo; ni kwa hatari ya kutabiri malipo.

Hitimisho

Masomo ya neurophysiolojia yanaonyesha ishara ya dopamini ya phasic ambayo hupeleka habari zinazohusiana sana lakini si tu za malipo. Ingawa sio kabisa sawa, ishara ya dopamini inazuiliwa zaidi na inaonekana zaidi kuliko shughuli za neuronal katika miundo mingi ya ubongo inayohusika na tabia iliyoongozwa na lengo.

Historia

Matokeo kutoka kwa masomo ya lesion na psychopharmacological yanaonyesha kazi mbalimbali za utendaji kwa mifumo ya dopamine ya midbrain. Swali muhimu ni, ni ipi kati ya kazi hizi nyingi ambazo zimeunganishwa kikamilifu na ishara ya dopamine ya phasi inayoambatana na mifumo ya haraka ya neuronal? Vidokezo vyema vinatoka kwa madawa ya kulevya na kusisimua ya umeme, huku wakionyesha kuwa shughuli za dopamini ina madhara yenye kuzalisha na njia ya kuzalisha [1,2].

Tunaweza kufafanua tuzo kama vitu au matukio yanayotokana na tabia na tabia ya kutosha, kuzalisha kujifunza kwa tabia hiyo, inawakilisha matokeo mazuri ya maamuzi ya kiuchumi na kushiriki hisia nzuri na hisia za hedonic. Mshahara ni muhimu kwa maisha ya mtu binafsi na gene na michakato ya msingi ya msingi kama vile kunywa, kula na kuzaa. Ufafanuzi huu wa tabia hutoa kazi ya malipo pia kwa vyombo vingine vya asilimia na vya kikabila, ikiwa ni pamoja na pesa, vifaa vya kiufundi, sifa za kuchochea aesthetic na matukio ya akili. Mshahara hujumuisha mawakala katika tabia tofauti kama vile chakula na biashara kwenye masoko ya hisa.

Dhana za msingi

Zawadi zina ukubwa maalum na hufanyika na uwezekano maalum. Mawakala wanalenga kuboresha chaguo kati ya chaguzi ambazo maadili yao huamuliwa na aina ya kitu cha kuchagua na ukubwa wake na uwezekano [3]. Kwa hivyo tuzo zinaweza kuelezewa vya kutosha na uwezekano wa usambazaji wa maadili ya tuzo. Katika ulimwengu mzuri usambazaji huu unafuata kazi ya Gaussian, na thawabu kali hufanyika mara kwa mara kuliko matokeo ya kati. Vipimo vya majaribio mara nyingi hutumia mgawanyo wa uwezekano wa binary na maadili yanayoweza kutekelezwa (kila thawabu ya thawabu inayotokea kwa p = 0.5). Mgawanyo wa uwezekano wa Gaussian na binary unaelezewa kikamilifu na thamani inayotarajiwa ya kihesabu (wakati wa kwanza wa usambazaji wa uwezekano) na utawanyiko au kupotoka kwa maadili kutoka kwa maana, ambayo ni (kutarajiwa) tofauti (dakika ya pili) au (inatarajiwa) kupotoka kwa kawaida (mzizi wa mraba ya tofauti). Tofauti na mkengeuko wa kawaida mara nyingi huzingatiwa kama hatua za hatari. Katika uchumi wa tabia, neno 'hatari' linamaanisha aina ya kutokuwa na uhakika ambayo usambazaji wa uwezekano unajulikana, wakati 'utata' unaonyesha ujuzi kamili wa uwezekano na mara nyingi hurejewa tu kama 'kutokuwa na uhakika'. Hatari inahusu nafasi ya kushinda au kupoteza, badala ya uhusiano mwembamba zaidi, wa akili ya kawaida na upotezaji.

Utabiri ni muhimu sana kwa kufanya uamuzi sahihi kwa kutoa taarifa za mapema kuhusu chaguo zilizochaguliwa, kinyume na nadhani zinazotokea wakati matokeo haijulikani. Kama malipo yanaweza kuthibitishwa na mgawanyo wa uwezekano wa thamani, utabiri wa thawabu hutaja kutofautiana kwa thamani na (inatarajiwa) au kupotoka kwa kawaida kwa usambazaji.

Shinikizo la mabadiliko hupendeza usindikaji wa nishati ufanisi wa habari. Sababu moja ya uwezekano ni kuweka utabiri kuhusu matukio ya baadaye katika vituo vya juu vya ubongo na kuhesabu katika vituo vya chini vya ubongo tofauti kati ya habari mpya ya mazingira na utabiri uliohifadhiwa. Tofauti kati ya tukio halisi na utabiri wake huitwa kosa la utabiri wa tukio. Kuendelea na mabadiliko ya hali ya mazingira na vituo vya juu vya ubongo vinahusisha tu uppdatering utabiri na habari chini zenye, na chini ya nishati ya matumizi, makosa ya utabiri badala ya usindikaji habari kamili ya pembeni wakati wowote kitu kidogo kidogo iliyopita [4]. Kwa njia hii vituo vya juu vya ubongo vina upatikanaji wa habari kamili kuhusu ulimwengu wa nje kwa maoni, maamuzi na athari za tabia kwa gharama kubwa ya nishati. Mali hii ya msingi ya utabiri husababisha uzushi unaoonekana wa kujifunza, kama inavyoelezwa na mabadiliko ya tabia kulingana na utabiri uliotabiriwa.

Nadharia ya ujifunzaji wa wanyama na mifano bora ya uimarishaji wa muda huonyesha kwamba makosa ya utabiri wa matokeo ni muhimu kwa hali ya Pavlovia na hali ya utendaji [5,6]. Maoni ya sasa hufikiria ujifunzaji wa Pavlovia kama aina yoyote ya upatikanaji wa utabiri ambao unasababisha athari za mimea iliyobadilishwa au kupunguzwa kwa misuli, maadamu matokeo hayana masharti ya athari ya tabia. Kwa hivyo, utabiri wa tuzo za Pavlovia huwasilisha habari sio tu juu ya thawabu ya thawabu (thamani inayotarajiwa) lakini pia juu ya hatari (tofauti) ya thawabu za siku za usoni, ambayo ni upanuzi muhimu wa dhana iliyopendekezwa na Pavlov miaka mia moja iliyopita. Umuhimu wa makosa ya utabiri unategemea athari ya kuzuia ya Kamin [7] ambayo inaonyesha kuwa ujifunzaji na kutoweka huendelea tu kwa kiwango ambacho kiboreshaji ni bora au mbaya kuliko ilivyotabiriwa; kujifunza hupungua polepole wakati utabiri unapokaribia bila dalili thamani ya kiboreshaji.

Jibu la Dopamine kulipa mapokezi

Wengi wa ubongo wa katikati ya ubongo (75-80%) huonyesha uanzishaji wa kimapenzi, wa kimapenzi na miinuko ya <100 ms na muda wa <200 ms kufuatia chakula na zawadi za kioevu ambazo hazijatabiriwa kwa muda mfupi (Kielelezo (Kielelezo1A) .1A). Jibu hili la kupasuka linategemea uanzishaji na umbo la plastiki ya glutamatergic NMDA na vipokezi vya AMPA vilivyo kwenye neurons za dopamine [8-12]. Kupasuka ni muhimu kwa ujifunzaji wa kitabia wa majukumu ya kupendeza kama vile upendeleo wa mahali na uchaguzi wa T-maze kwa chakula au malipo ya kokeni na majibu ya hofu [9].

Kielelezo 1

Uanzishaji wa phasic wa shughuli za msukumo wa neurophysiological ya neurons ya dopamine. J: Uanzishaji wa Phasic kufuatia tuzo za msingi. B: Uanzishaji wa kifasi kufuatia hali, malipo ya utabiri wa vichocheo. C: Juu: Ukosefu wa uanzishaji wa phasic kufuatia msingi (zaidi…)

Hitilafu ya utabiri wa kutabiri

Jibu la dopamini kwa utoaji wa malipo linaonekana kuwa na kosa la utabiri; tuzo iliyo bora zaidi kuliko ilivyotabiri inasababisha uanzishaji (kosa la utabiri lisilofaa), tuzo kamili ya utabiri haifai majibu, na tuzo mbaya zaidi kuliko inavyoelezewa inasababisha unyogovu (makosa hasi) [13-24]. Hivyo majibu ya dopamini hutumia kikamilifu muda muhimu wa mfano wa kujifunza wa Rescorla-Wagner na inafanana sana na ishara ya mafundisho ya mifano ya ufanisi wa kujifunza tofauti ya kuimarisha muda mfupi [6,23].

Mtazamo wa hitilafu unatofautiana kwa kiasi kikubwa na tofauti kati ya thamani ya malipo ya kupokea na thamani ya malipo ya thamani [18-23]. Majibu ya kosa la utabiri ni nyeti kwa wakati wa malipo; Tuzo la kuchelewa husababisha unyogovu wakati wake wa awali na uanzishaji wakati wake mpya [24,25]. Hitilafu ya upepoji wa kosa ni dhahiri kwa uanzishaji kuonyesha makosa mazuri ya utabiri. Kwa upande mwingine, unyogovu unaotokana na makosa mabaya ya utabiri huonyesha kawaida kwa kiwango kikubwa cha nguvu, kama shughuli ya neuronal haiwezi kuanguka chini ya sifuri, na tathmini sahihi ya kiasi inahitaji kuchukua muda kamili wa unyogovu katika akaunti [26].

Hivyo, neurons ya dopamine hujibu tu kwa kiwango ambacho inatofautiana na utabiri. Kama utabiri unatoka kwenye tuzo la awali la uzoefu, neurons za dopamine zimeanzishwa tu wakati malipo ya sasa ni bora zaidi kuliko malipo ya awali. Tuzo lile lile tena halitamsha neurons za dopamini. Ikiwa uanzishaji wa neurons ya dopamine ina athari nzuri ya kuimarisha tabia, tu kuongeza tuzo zitatoa uimarishaji unaoendelea kupitia njia za dopaminergic. Hii inaweza kuwa sababu moja kwa nini tuzo za mara kwa mara, zisizobadilika zinaonekana kupoteza ushawishi wao wenye kuchochea, na kwa nini sisi daima tunahitaji thawabu zaidi.

Vipimo vilivyo na pigo kwa kosa la utabiri wa utabiri

Nadharia ya kujifunza wanyama imeunda miundo rasmi ya kupima makosa ya utabiri wa malipo. Katika mtihani wa kuzuia [7], kichocheo ambacho kinapangiliwa na tuzo kamili kabisa hawezi kujifunza na kwa hiyo haitakuwa mchezaji halali wa malipo. Ukosefu wa tuzo baada ya kichocheo kilichozuiwa haitakuwa kosa la utabiri na haisababisha jibu katika dopamine neurons, hata baada ya kuunganishwa kwa muhtasari wa malipo [27]. Kwa upande mwingine, utoaji wa tuzo baada ya kichocheo kilichozuiwa hufanya hitilafu nzuri ya utabiri na kwa hiyo inasababisha uanzishaji wa dopamini.

Mfumo wa kuzuia maumbile [28] hutoa mtihani wa ziada kwa makosa ya utabiri. Katika kazi iliyojitumiwa katika majaribio yetu, kichocheo cha mtihani kinawasilishwa wakati huo huo na tuzo lililoanzishwa la kutangaza kichocheo lakini hakuna malipo yanayopatikana baada ya kiwanja, na kufanya kichocheo cha mtihani kuwa utabiri wa kukosekana kwa tuzo. Utoaji wa malipo baada ya kuzuia kizuizi hicho haipaswi kosa la utabiri hasi na kwa hiyo inashindwa kuhamasisha unyogovu katika dopamine neurons [29]. Kwa upande mwingine, utoaji wa tuzo baada ya kuzuia kizuizi hutoa hitilafu kali nzuri ya utabiri na ipasavyo uanzishaji wa nguvu wa dopamini.

Matokeo kutoka kwa vipimo viwili vya kitaaluma vinathibitisha kwamba dopamini neurons inaonyesha coding ya bidirectional ya makosa ya utabiri wa malipo.

Hitilafu ya kutabiri uharibifu wa utabiri

Kwa maana ya jumla, malipo ya utabiri wa malipo hufafanua thamani ya mapato ya baadaye kwa kuwajulisha kuhusu uwezekano wa usambazaji wa maadili ya malipo. Hivyo, kichocheo kinaonyesha thamani inayotarajiwa (dakika ya kwanza) na (kutarajiwa) kutofautiana (wakati wa pili) au kupotoka kwa kawaida kwa usambazaji.

Dopamine thamani ya utabiri wa hitilafu ya utabiri ni nyeti kwa mara ya kwanza na ya pili ya usambazaji wa malipo uliyotabiriwa baada ya sekunde mbili baada ya kuchochea. Katika jaribio, uchochezi tofauti wa Visual unaweza kutabiri mgawanyo wa uwezekano wa binary wa mapafu ya malipo ya equiprobable na maadili tofauti na tofauti. Kama ufumbuzi wa hitilafu ya utabiri unaonyesha tofauti kati ya thamani ya kupatikana na inayotarajiwa, malipo makubwa yanayotokana na malipo yanayotokana hutoa au ongezeko la shughuli za dopamini kulingana na kwamba malipo hayo ni kubwa au ndogo kuliko utabiri wake, kwa mtiririko huo [23]. Matokeo haya yanasema kwamba utambulisho wa kosa la utabiri wa thamani hutoa habari kuhusiana na rejea au thamani ya nanga.

Coding ya dopamini ya hitilafu ya thamani ya utabiri ya thamani inachukua tofauti au kupotoka kwa kawaida kwa usambazaji. Katika usambazaji wa binary wa tuzo za equiprobable, utoaji wa malipo na ukubwa mkubwa ndani ya kila usambazaji hufanya uanzishaji huo wa dopamine na kila usambazaji, licha ya tofauti za 10 tofauti kati ya mapato ya malipo yaliyopatikana (na makosa ya utabiri wa thamani) [23]. Mahesabu ya nambari yanadhibitisha kwamba jibu la dopamini linaashiria hitilafu ya utabiri wa thamani iliyogawanywa na kupotoka kwa kawaida kwa usambazaji uliotabiriwa. Hii ilifikia uhalali wa ufanisi au uingizaji wa jibu la hitilafu ya thamani ya utabiri kwa suala la kupotoka kwa kiwango, kuonyesha jinsi kiasi cha thamani kilichopatikana kinatofautiana na thamani inayotarajiwa katika vitengo vya kupotoka kwa kawaida. Masuala ya kinadharia yanasema kwamba ishara za mafundisho ya kosa ambazo zimefanyika kwa kutofautiana au kupotoka kwa kawaida badala ya maana zinaweza kupatanisha kujifunza imara ambayo inakabiliwa na matokeo ya matokeo ya hatari [30].

Jibu la Dopamine kulipa ufanisi wa kutabiri

Neuroni za Dopamine zinaonyesha uanzishaji ('msisimko') kufuatia malipo kutabiri vichocheo vya kuona, ukaguzi na vichocheo (Mchoro (Mchoro1B) 1B) [31-33]. Majibu yanatokea bila mpangilio wa hali ya hisia na nafasi za anga za vichocheo, na bila kupendeza ya watendaji ni harakati za mkono, mdomo au macho.

Maandamano yanaongeza monotonically na uwezekano wa malipo [18] na ukubwa wa malipo, kama vile kiasi kioevu [23]. Hata hivyo, majibu ya dopamine hayatofautishi kati ya uwezekano wa malipo na ukubwa kwa muda mrefu kama thamani inayotarajiwa inafanana [23]. Kwa hiyo uanzishaji huonekana kuashiria thamani ya kutarajiwa ya ugawaji wa uwezekano wa malipo. Thamani inayotarajiwa ni ufafanuzi zaidi zaidi, na kelele katika majibu ya neuronal huzuia sifa katika suala la matumizi yaliyotarajiwa (yenyewe). Kumbuka kwamba discounting ya muda ilivyoelezwa hapo chini inaonyesha coding subjective na inaweza kutoa mwanga juu ya suala hilo.

Ukubwa wa majibu huongezeka kwa kupungua kwa athari ya tabia, ikionyesha kuwa majibu ya dopamine ni nyeti kwa motisha ya mnyama [19]. Katika uchaguzi kati ya maadili tofauti ya thawabu au ucheleweshaji, majibu ya dopamine kwa uwasilishaji wa chaguzi za uchaguzi huonyesha tuzo ya mnyama iliyochaguliwa baadaye [34] au tuzo bora zaidi ya chaguzi mbili zinazopatikana za chaguo [35].

Wakati wa kujifunza, uanzishaji wa dopamine kwa thawabu hupungua kwa hatua kwa hatua katika majaribio ya kujifunza ya mfululizo, na uanzishaji kwa malipo ya utabiri unatengeneza kwa wakati mmoja [36,37]. Upatikanaji wa kukabiliana na hali hiyo ni nyeti kwa kuzuia, kuonyesha kwamba makosa ya kutabiri yanasaidia kushirikiana na majibu ya dopamine kwa msukumo wa hali ya juu [27]. Uhamisho wa kukabiliana na malipo ya kutabiri uhamasishaji unafanana na sifa kuu za ishara za kufundisha za mifano ya ufanisi wa kuimarisha wakati wa kawaida [38]. Kubadilisha mwitikio hakuhusishi tena upyaji wa makosa ya utabiri katika kipindi cha kichocheo-chawadi ya mifano ya awali ya tofauti ya muda [27,38] lakini imejitokeza katika mfano wa awali wa tofauti ya wakati na katika utekelezaji wa awali wa muda mfupi [6,37,39].

Kipaji cha thamani cha kutathmini thamani inayoonyeshwa na upunguzaji wa muda

Upimaji wa lengo la thamani ya kujitegemea ya malipo kwa mapendekezo ya uchaguzi unaonyesha kuwa tuzo zinapoteza baadhi ya thamani yao wakati zimechelewa. Kwa kweli, panya, njiwa, nyani na wanadamu mara nyingi wanapendelea tuzo ndogo za mapema juu ya tuzo kubwa zaidi baadaye [40-42]. Kwa hivyo, thamani ya kujitegemea ya malipo inaonekana kuoza kwa kuchelewa muda wa kuchelewa, ingawa malipo ya kimwili, na hivyo lengo la malipo ya lengo, ni sawa.

Hatua za kisaikolojia za uchaguzi wa kitamaduni kati ya mapema na baadaye zawadi zinaweza kurekebisha ukubwa wa malipo ya mapema mpaka tukio la kutojali, linalotafsiriwa kama uwezekano wa kuchagua kila chaguo na p = 0.5. Kwa hiyo, malipo ya chini ya mapema katika kutojali kwa uchaguzi huonyesha thamani ya chini ya chini ya malipo ya baadaye. Katika majaribio yetu ya hivi karibuni juu ya nyani, maadili ya kutofautiana ya malipo ya malipo yamechelewa na 4, 8 na 16 s ilipungua monotonically kwa kuhusu 25%, 50% na 75%, kwa mtiririko huo, ikilinganishwa na malipo baada ya 2 s [43]. Kupungua kunapendeza kazi ya kupunguza hyperbolic.

Majibu ya dopamine ya malipo ya kutabiri uhamasishaji hupunguza monotonically katika ucheleweshaji wa malipo ya 2 kwa 16 s [25,43], licha ya kiasi kiwili cha malipo kinachotolewa baada ya kuchelewa kila. Takwimu hizi zinaonyesha kuwa ucheleweshaji wa muda unaathiri majibu ya dopamini ili kulipa utabiri wa kutabiri kwa namna ile ile kama inavyoathiri thamani ya malipo ya kujitegemea iliyopangwa na uchaguzi wa intertemporal. Kwa kushangaza, kupungua kwa majibu ya dopamini na ucheleweshaji wa malipo ni kutoweza kuondokana na kupungua kwa majibu na ukubwa wa malipo ya chini. Ufanana huu unaonyesha kuwa ucheleweshaji wa muda unaathiri majibu ya dopamini kupitia mabadiliko katika thamani ya malipo. Kwa hiyo, kwa neurons ya dopamini, tuzo za kuchelewa huonekana kama zilikuwa ndogo.

Kwa hiyo, neurons za dopamini zinaonekana kuwa na kanuni ya subjective kuliko thamani ya kimwili, ya lengo la malipo ya kuchelewa. Kutokana na kwamba huduma hiyo ni kipimo cha kujitegemea badala ya thamani ya thawabu, kupungua kwa majibu kwa kupunguzwa kwa muda inaweza kuashiria kuwa dopamine neurons code ya malipo kama (subjective) matumizi badala ya (lengo) thamani. Majaribio zaidi yanaweza kusaidia kupima matumizi ya usaidizi zaidi kwa moja kwa moja.

Jibu la Dopamine kwa msukumo wa aversive

Vichocheo vya kupindukia kama vile uvutaji wa hewa, salini ya hypertonic na mshtuko wa umeme hushawishi majibu ya 'kusisimua' katika sehemu ndogo ya neurons ya dopamine katika wanyama walioamka (14% [33]; 18-29% [44]; 23% [45] ; 11% [46]), na wengi wa dopamine neurons wamevunjika moyo katika shughuli zao au hawaathiriwi na hafla za kupindukia (Kielelezo (Kielelezo1C1C juu) .Tofauti na tuzo, pumzi za hewa haziwezi kushawishi majibu ya makosa ya utabiri wa pande mbili kama malipo. ; utabiri unashughulikia tu uanzishaji wa kuchukiza [45,46].

Kichocheo cha kupendeza katika wanyama wasiohesabiwa hutoa digrii tofauti lakini mara nyingi chini ya polepole, hufanya majibu (50% [47]; 18% [48]; 17% [49]; 14% [50]) na mara nyingi husababisha shughuli. Uchunguzi wa neurophysiological na utambulisho bora wa neurons ya dopamini ulithibitisha matukio ya chini ya jumla ya uanzishaji wa dopamini wa wanyama katika anesthetized [51] na unaojiunga na dopamine neurons kwa njia ya upepo katika eneo la mzunguko wa midbrain [52].

Uliofanywa, hewa ya kutabiri utabiri katika nyani za macho husababisha maandamano katika wachache wa neurons ya dopamine, na vifungo katika sehemu kubwa ya dopamine neurons (11% [33]; 13% [45]; 37% [46]). Majibu yanayofadhaika yanaondoa maandamano machache katika majibu ya idadi ya watu ya dopamine neurons kwa mshambuliaji wa wasiwasi [33] (tazama Mchoro wa KielelezoXXXMUMXC1C chini, nyeusi). Katika uchunguzi mmoja, kichocheo kilichochochewa na aversive kilichochochea neurons zaidi kuliko kijivu cha hewa yenyewe (1% vs. 37% [11]), ingawa kichocheo kilichopangwa ni chache kidogo zaidi kuliko tukio la msingi la aversive linatabiri, kama vile pigo la hewa. Nambari kubwa ya uanzishaji kwenye kichocheo kilichosimamishwa ikilinganishwa na kivuli cha hewa kinapendekeza uhusiano usio katikati ya upungufu na uanzishaji (zaidi ya aversive stimulus chini ya activation) au ziada, yasiyo ya aversive kichocheo sehemu inayohusika na kuongeza idadi ya ulioamilishwa neurons kutoka 46% hadi 11%. Ingawa maandamano ya kuchochea yameunganishwa vizuri na uwezekano wa uwezekano wa hewa katika idadi ya watu, hawakuwa tathmini katika neuroni za mtu binafsi [37]. Uwiano wa idadi ya watu huweza kutokea kutoka kwa idadi ndogo ya neurons iliyosawazishwa ndani ya idadi hiyo, na uanzishaji wa kweli wa aversive unaweza kuwa karibu na 46% kuliko 11%. Katika somo jingine, idadi kubwa ya neurons ya dopamini ilionyesha uendeshaji wa kipengee ili kupigana na uchochezi wa aversive wakati haya yaliwasilishwa kwa mbadala ya random na thawabu kutabiri maandamano ya hali sawa ya kihisia (Kielelezo (kielelezo cha kielelezo37C1C, kijivu) (1% [65]); walikuwa chini ya mara kwa mara wakati aina mbili za uchochezi uliopangwa ulikuwa na njia tofauti za kusikia (Kielelezo (chini ya Kielelezo33C1C, nyeusi) (1%). Sura inayofuata itazungumzia sababu ambazo zinawezekana kwa uanzishaji huu usioelezea kwa maadili ya kupinga na mengine, yaliyotarajiwa.

Ijapokuwa baadhi ya neurons ya dopamine hufanywa na matukio ya aversive, uanzishaji mkubwa wa dopamini unahusiana na malipo. Takwimu zilizopatikana kwa njia nyingine husababisha hitimisho sawa. Kufuta kwa kasi ya voltammetry katika panya za tabia inaonyesha kutolewa kwa dopamini kwa sababu ya malipo na mabadiliko ya tuzo ya kutabiri matukio baada ya hali [53], ikidai kuwa majibu ya msukumo wa dopamine neurons husababisha kutolewa kwa dopamine kutoka kwa vurugu. Kuongezeka kwa dopamine hudumu sekunde chache tu na hivyo ina muda mfupi zaidi wa njia zote za neurochemical, karibu na uanzishaji wa electrophysiological. Toleo la dopamini ni tofauti kwa malipo (sucrose) na inashindwa kutokea kwa adhabu (quinine) [54]. Kama voltammetry inapima wastani wa mkusanyiko wa dopamini, kutokuwepo kwa kutolewa kupimwa na quinine kunaweza kujificha maandamano machache yaliyosababishwa na vikwazo katika majibu ya idadi ya watu wa dopamini [33]. Mafunzo ya kutumia nyeti sana katika microdialysis vivo kuchunguza dopamine kutolewa kufuatia mshambuliaji aversive [55].

Jibu hili linaweza kutafakari mabadiliko ya dopamine yaliyotokana na neurons chache ambazo zimeandaliwa na uchochezi wa aversive, ingawa wakati wa vipimo vya microdialysis ni kuhusu muda wa 300-500 mfupi kuliko majibu ya msukumo na inaweza kuwa na kutosha kwa kuruhusu ushirikiano wa presynaptic kuwashawishi kutolewa kwa dopamine [56] . Kuvunjika kwa kupasuka kwa kupasuka kwa neoponini ya dopamine huharibu kazi kadhaa za kujipima hamu lakini pia hali ya hofu [9]. Matokeo yanaweza kupendekeza kazi ya kujifunza ya majibu ya dopamine ya aversive ikiwa athari isiyojulikana, kwa ujumla ya kulemaza ya ukolezi wa chini ya dopamini inatajwa nje, ambayo inabaki kuonyeshwa. Kusisimua maalum ya neurons ya dopamini na mbinu za optogenetic kupitia channelrhodopsin iliyoingizwa kwa maumbile inasababisha hali ya upendeleo wa mahali pa Pavlovia katika panya [57]. Kwa upande mwingine, athari ya athari ya uvuvi wa kuchochea dopamini ingeweza kuzalisha kujifunza kuepuka mahali. Matokeo haya yanathibitisha dhana ya kazi nzuri ya kuimarisha kimataifa ya mifumo ya dopamini inayotokana na upungufu wa awali, umeme wa kuchochea na dawa za kulevya [1,2]. Hata hivyo, hoja hizi hazielezei kwamba malipo ni kazi pekee ya mifumo ya dopamine wala kwamba kazi zote za malipo zinahusisha neurons ya dopamine.

Ushawishi wa pasic dopamine usiojikuza malipo

Kichocheo kinaweza kushawishi athari ya tahadhari na ya umakini wakati ni muhimu kimwili (ujasiri wa mwili) au wakati zinahusiana na viboreshaji ('kuhamasisha' au ujasiri wa 'kuathiri'). Athari za kitabia kwa vichocheo muhimu hupangwa na nguvu ya mwili ya vichocheo na thamani ya kiboreshaji, mtawaliwa. Utegemezi wa mwili hautegemei kuimarishwa kabisa, na ujasiri wa kuhamasisha hautegemei valence ya wanaoimarisha (malipo na adhabu).

Majibu kwa uchochezi wa kimwili

Vidokezo vya kimwili visivyoonekana na vyema vya uchunguzi husababisha uendeshaji katika neurons za dopamini (Kielelezo (Kielelezo1D) .1D). Majibu haya yanasimamishwa na uzuri wa kichocheo [58-60] lakini huendelea kwa kiwango cha chini kwa miezi kadhaa ikitoa msamaha kwa kutosha kimwili. Majibu yanapangwa kulingana na ukubwa wa msisitizo (Kielelezo 4 katika [15]). Salience kimwili inaweza pia kuelezea majibu kwa wapigaji wa msingi na nguvu kubwa ya kimwili [45]. Majibu haya yanaweza kuunda aina tofauti ya majibu ya dopamine kuhusiana na ujasiri wa kimwili wa uangalifu unaosababishwa na mazingira, au yanahusiana na sifa nzuri zinazohamasisha na kuimarisha sifa za makali na riwaya.

Utekelezaji wa uchochezi wa kimwili hauonekani kutafakari tabia ya jumla ya neurons ya dopamini kuanzishwa na tukio lolote la kuzalisha tahadhari. Hasa, matukio mengine yenye nguvu ya kuzalisha tahadhari kama vile malipo ya malipo, inhibitors yaliyosimamiwa na uchochezi wa aversive husababisha kupunguzwa kwa kiasi kikubwa na uanzishaji wa dopamini wa kawaida [14,29]. Kwa hiyo uanzishaji wa dopamini kwa uchochezi wa kimwili hauwezi kuunda majibu ya jumla ya kubadili. Jibu la malipo ni uwezekano wa kuunda jibu tofauti ambalo haliwezi kutafakari kipaumbele kilichozalishwa na ujasiri wa motisha wa malipo.

Matukio yasiyo ya malipo ya coding mengine

Vikwazo vingine husababisha maandamano katika neurons ya dopamine bila kuandika wazi kwa thamani ya malipo. Utekelezaji huu ni mdogo na mfupi zaidi kuliko majibu ya malipo ya kutabiri uhamasishaji na mara nyingi hufuatiwa na unyogovu wakati msisitizo haulipatiwa (Kielelezo (Figure1E1E).

Neopons ya Dopamini inaonyesha uanzishaji kufuatia uharibifu wa udhibiti ambao umewasilishwa katika mchanganyiko wa udanganyifu na msukumo wa malipo [27,29,32]. Matukio ya uanzishaji inategemea namba ya mbadala iliyopendezwa, iliyofadhiliwa katika kazi ya tabia; maandamano mara nyingi wakati kazi tatu za kazi nne zinalipwa (25% -63% [27]) na huwa mara chache wakati moja tu ya kazi nne ambayo haipatikani (1% [29]). Utegemea huu unasema dhidi ya asili ya hisia ya majibu.

Neurons ya Dopamine inaonyesha sehemu ya uanzishaji wa awali ya kushindwa kwa kushawishi kutabiri malipo ambayo hutokea baada ya ucheleweshaji tofauti [43]. Utekelezaji wa awali unatofautiana sana na ucheleweshaji wa malipo, na hivyo hauonekani kuwapa thamani ya malipo. Kwa upande mwingine, sehemu ya majibu inayofuata inapungua kwa ucheleweshaji wa kuongezeka na hivyo kanuni (subjective) ya malipo ya thamani (tazama hapo juu).

Neopons ya Dopamini huonyesha uanzishaji wa mara kwa mara baada ya hali iliyosababishwa na athari iliyosababishwa na mbadala ya random na malipo ya kutabiri maandamano; uendeshaji hupotea kwa kiasi kikubwa wakati utaratibu tofauti wa hisia hutumiwa (65% vs. 11% ya neurons [33]), unaonyesha kupakua kwa vipengele vya kuchochea yasiyo ya aversive. Hata wakati uchochezi wa kupinga na wa kupindukia hutenganishwa katika vitalu tofauti vya majaribio, neurons za dopamini zinaamilishwa sana na msukumo wa hali ya hewa. Hata hivyo, maandamano ya mara kwa mara kwa uchochezi uliofanywa na ikilinganishwa na mchezaji wa hewa ya msingi wa aversive (37% vs. 11% [46]) unaonyesha uhusiano usio na upunguzaji wa vipengele vya majibu na uwezekano wa majibu yasiyo ya aversive.

Sababu za uanzishaji hizi tofauti za dopamini zinaweza kuenea katika uzalishaji, pseudoconditioning au motivational stimulus salience. Ujumla hutokea kwa kufanana kati ya msisitizo. Inawezekana kuelezea uanzishaji wa dopamini katika hali kadhaa, yaani uanzishaji wa msukumo wa visu zisizolipwa wakati hizi zinapatikana na malipo ya kutabiri maonyesho ya Visual (Kielelezo (Kielelezo1E1E kushoto) [27,29,32] na sehemu ya awali, iliyoshirikishwa kwa uanzishaji duni ili kutoa ucheleweshaji kutabiri utambuzi (Kielelezo (Kielelezo1E1E kulia) [GNUMX]. Ujumla inaweza kuwa na jukumu wakati uchochezi na njia tofauti za hisia huzalisha uendeshaji mdogo wa dopamini kwenye msisitizo usio na malipo zaidi kuliko msisitizo kwa njia sawa, kama inavyoonekana na msukumo wa kupendeza wa kupendeza unaoonekana (Kielelezo (Faili43C1C chini) [1] .

Pseudoconditioning inaweza kutokea wakati msisitizo wa msingi huweka background ya mazingira na hufanya majibu ya tabia isiyo ya kawaida kwa matukio yoyote ndani ya muktadha huu [61]. Kama neurons ya dopamini ni nyeti sana kwa malipo, mazingira yenye malipo yanaweza kushawishi pseudoconditioning kwa stimuli kuweka katika muktadha huu na hivyo activation neuronal. Utaratibu huu unaweza kuimarisha maandamano ya neuronal kwa madai yasiyo ya malipo yanayotokea katika muktadha unaofaa, kama vile maabara ambayo mnyama hupokea thawabu ya kila siku, bila kujali msisitizo unaotolewa kwa njia ya random na uchochezi uliopatikana au katika vitengo tofauti vya majaribio [46]. Pseudoconditioning inaweza kuelezea uanzishaji kwa uharibifu usio na malipo wa udhibiti [27,29,32], uanzishaji zaidi unaofuata kizuizi kikubwa [33,45,46] na kipengele cha awali, kilichopangwa kwa uharibifu kwa malipo ya ucheleweshaji kutabiri kizuizi [43]. Kwa hiyo pseudoconditioning inaweza kutokea kutokana na malipo ya msingi badala ya kichocheo kilichopangwa na kuathiri uanzishaji wa dopamini kwa vizuizi vilivyo na hali ya msingi ambazo hutokea katika mazingira yenye malipo.

Ingawa msisitizo na ujasiri mkubwa wa kimwili huonekana kuendesha neurons za dopamine [15,58-60] (tazama hapo juu), msisitizo unaosababishwa na uanzishaji wa dopamini zisizo za malipo mara nyingi ni ndogo na sio kimwili sana. Ushawishi wa uhamasishaji ni kwa ufafanuzi wa kawaida wa tuzo na waadhibu na kwa uwezo wake mwenyewe kuelezea maandamano ya malipo na adhabu katika 10-20% ya dopamine neurons. Vikwazo visivyoweza kuimarisha vinaweza kuwa motisha kwa njia ya ukaribu wao na malipo na kupitia pseudoconditioning. Hata hivyo, uanzishaji wa dopamini huonekana kuwa nyeti zaidi kuliko malipo. Kama ujasiri wa uhamasishaji unahusisha uelewa kwa wasimarishaji wote wawili, ujasiri wa motisha uliopatikana kupitia pseudoconditioning huenda usieleze vizuri uanzishaji wa dopamini isiyo ya malipo ya kuandika.

Kuchukuliwa pamoja, uanzishaji wa dopamini wengi usio na malipo unaweza kuwa kutokana na kuzalisha umeme au, hasa, pseudoconditioning. Hata hivyo, inaonekana kubaki uanzishaji wa kweli kwa msisitizo wa udhibiti usio na malipo na kwa sababu ya msingi na yenye hali ya kupumua kwa kiwango kidogo cha dopamine neurons wakati mambo haya yataondolewa nje. Majaribio zaidi ya kuchunguza majibu hayo yanapaswa kutumia udhibiti bora na kuondoa kabisa vyama vyote vya malipo ya contextual na maonyesho katika maabara.

Kutokana na tukio la uanzishaji wa malipo yasiyo ya malipo, ni busara kuuliza jinsi mnyama angeweza kutofautisha malipo kutokana na msukumo uliopokea kutokana na majibu ya dopamine. Sehemu ya haraka sana, ya awali, isiyosababishwa na isiyo ya ubaguzi ya kibaguzi inaweza kutoa ziada ya muda kwa kuhusisha athari za tabia za haraka ambazo husaidia wanyama kupata haraka malipo [62]. Kinyume chake, sehemu ya majibu yafuatayo hutambua asili ya kweli ya tukio kupitia uanzishaji wake wa thamani na thamani ya malipo [43] na unyogovu wake wa mara kwa mara na uchochezi usiofaa na wa aversive [27,29,32,33] (Kielelezo (Kielelezo1E) .1E). Aidha, mfumo wa dopamini sio tu muundo wa ubongo wa coding malipo, na mifumo mingine ya neuronal kama cortex orbitofrontal, striatum na amygdala inaweza kutoa maelezo ya ziada ya ubaguzi.

Dopamine malipo ya hatari ya ishara

Ikiwa ishara ya malipo huonyesha kosa la utabiri lenye maana la malipo lililopigwa na ugawaji wa kawaida wa mgawanyo wa uwezekano wa malipo, na ikiwa tunaangalia kupotoka kwa kawaida kama kipimo cha hatari, inaweza kuwa na ishara moja kwa moja ya neuronal ya hatari? Wakati uwezekano wa malipo unatofautiana kutoka 0 hadi 1 na ukubwa wa malipo unabakia mara kwa mara, thamani ya malipo ya maana huongeza monotonically na uwezekano, wakati kiwango cha hatari kinachofuata baada ya uingizaji wa kazi U kuingilia kwenye p = 0.5 (Kielelezo (Figure2,2, inset) 0.5, kuna fursa nzuri sana ya kupata tuzo kama ukosekana tuzo, wakati uwezekano wa juu na chini kuliko p = 0.5 hufanya faida na hasara zaidi, kwa mtiririko huo, na hivyo huhusishwa na hatari ndogo.

Kielelezo 2

Uanzishaji endelevu unaohusiana na hatari. Jibu la hatari hufanyika wakati wa muda wa malipo ya kichocheo (mshale) baadaye kwa phasic, uanzishaji unaohusiana na thamani na kichocheo (pembetatu). Ujazo, juu kulia, unaonyesha kuwa hatari (kuamuru) inatofautiana kulingana (zaidi…)

Karibu theluthi moja ya neurons ya dopamini inaonyesha ufanisi wa kiasi kidogo, wa wastani, na muhimu sana ambao huongezeka hatua kwa hatua wakati wa kipindi kati ya malipo ya utabiri na malipo; jibu hili linatofautiana na monotonically na hatari (Kielelezo (Kielelezo2) 2) [18]. Utekelezaji hutokea katika majaribio ya mtu binafsi na hauonekani kuwa ni majibu ya uhalifu wa utabiri yanayotokana na malipo kutoka kwa malipo ya utabiri wa malipo. Utekelezaji huongeza monotonically pia na kupotoka kwa kawaida au tofauti wakati mgawanyiko wa binary wa tofauti za vifaa vya kutosha, zisizo za zero za malipo zinatumiwa. Kwa hivyo, kupotoka kwa kawaida au tofauti huonekana kuwa hatua nzuri za hatari kama zimehifadhiwa na dopamine neurons. Uendeshaji unaohusiana na hatari huwa na latencies zaidi (kuhusu 1 s), kozi za muda mfupi na kilele cha chini ikilinganishwa na majibu ya thamani ya malipo kwa msisitizo na malipo.

Kutokana na ukubwa wake wa chini, ishara ya hatari ni uwezekano wa kuondokana na kutolewa kwa dopamini chini katika vimelea vya dopamine ikilinganishwa na uanzishaji wa phasic zaidi unaosajili thamani ya malipo. Ukolezi mdogo wa dopamini ambayo inaweza kusababisha na ishara ya hatari inaweza kuamsha receptors D2 ambazo huwa katika hali ya juu ya mshikamano lakini sio mshikamano wa chini D1 receptors [63]. Kwa kulinganisha, majibu ya thamani ya juu ya malipo ya malipo yanaweza kusababisha viwango vingi vya dopamini vya kutosha ili kuamsha kwa muda mfupi wapokeaji wa D1 katika hali yao ya chini ya ushirika. Kwa hiyo ishara hizo mbili zinaweza kutofautishwa na neurons za postsynaptic kwa misingi ya tofauti za dopamini receptors iliyoanzishwa. Kwa kuongeza, thamani ya dopamini na ishara za hatari pamoja itasababisha kuanzishwa kwa wakati mmoja wa D1 na D2 receptors ambayo katika hali nyingi za kawaida na za kliniki ni muhimu kwa kazi za kutosha za dopamini.

Dalili ya hatari ya dopamini inaweza kuwa na kazi kadhaa. Kwanza, inaweza kushawishi ukubwa wa majibu ya hitilafu ya utabiri mara moja baada ya malipo [23]. Pili, inaweza kuongeza uhuru wa dopamine ikiwa ni pamoja na majibu ya uongofu ya uongofu mara moja. Kwa kuwa hatari husababisha tahadhari, kuimarisha uwezo wa kufundisha uwezekano kwa hatari itakuwa sambamba na jukumu la tahadhari katika kujifunza kulingana na nadharia ya kujifunza ya kujihusisha [64,65]. Tatu, inaweza kutoa pembejeo kwenye miundo ya ubongo inayohusika katika tathmini ya hatari ya malipo kwa se. Nne, inaweza kuchanganya na ishara ya thamani ya kiuchumi inayotarajiwa kuwakilisha taarifa kubwa juu ya matumizi yaliyotarajiwa katika watu wenye hatarini kulingana na mbinu ya maana-tofauti katika nadharia ya uamuzi wa kifedha [66]. Hata hivyo, latency ya juu ya 1 s ni muda mrefu sana kwa ishara ya kucheza nafasi ya haraka wakati wa uchaguzi chini ya kutokuwa na uhakika.

Mashindano ya maslahi ya

Mwandishi anasema kwamba hana maslahi ya mashindano.

Michango ya Waandishi

WS aliandika karatasi.

Shukrani

Mapitio haya yaliandikwa wakati wa Mkutano huo juu ya Matatizo ya Ukosefu wa Uharibifu wa Dalili (ADHD) huko Oslo, Norway, Februari 2010. Kazi yetu ilitegemea na Wellcome Trust, Uswisi wa Taifa wa Sayansi Foundation, Mpango wa Sayansi ya Wanadamu wa Mipaka na mashirika mengine ya ruzuku na ushirika.

Marejeo

1. Rawa wa hekima, Rompre PP. Dopamine ya ubongo na tuzo. Ann Rev Psychol. 1989; 40: 191-225. toa: 10.1146 / annurev.ps.40.020189.001203.

2. Everitt BJ, Robbins TW. Mifumo ya Neural ya kuimarisha madawa ya kulevya: kutoka kwa vitendo na tabia kwa kulazimishwa. Nat Neurosci. 2005; 8: 1481-1489. toa: 10.1038 / nn1579. [PubMed] [Msalaba wa Msalaba]

3. Bernoulli D. Mchapishaji maelezo Theoriae novae de mensura sortis. Comentarii Academiae Scientiarum Imperialis Petropolitanae (Papers Imp Acad Acad S. Sci St. Petersburg) 1738; 5: 175-192. Ilitafsiriwa kama: Kuonyeshwa kwa nadharia mpya juu ya kipimo cha hatari. Uchumi wa 1954, 22: 23-36.

4. Rao RPN, Ballard DH. Coding Predictive katika cortex Visual: tafsiri ya kazi ya madhara ya ziada ya kawaida ya kupokea-shamba. Nat Neurosci. 1999; 2: 79-87. toa: 10.1038 / 4580. [PubMed] [Msalaba wa Msalaba]

5. Rescorla RA, Wagner AR. Katika: Kikao cha Kikawaida II: Utafiti wa Sasa na Nadharia. Black AH, Prokasy WF, mhariri. New York: Appleton Century Crofts; 1972. Nadharia ya hali ya Pavlovian: Tofauti katika ufanisi wa kuimarisha na kutokuwa na nguvu; pp. 64-99.

6. Sutton RS, Barto AG. Karibu na nadharia ya kisasa ya mitandao inayofaa: matumaini na utabiri. Mshauri wa Psycho 1981; 88: 135-170. toa: 10.1037 / 0033-295X.88.2.135. [PubMed] [Msalaba]

7. Kamin LJ. Katika: Masuala ya Msingi katika Kujifunza Vifaa. Mackintosh NJ, Honig WK, mhariri. Halifax: Press ya Chuo Kikuu cha Dalhousie; 1969. Chaguo cha kuchagua na hali; pp. 42-64.

8. Blythe SN, Atherton JF, Bevan MD. Utekelezaji wa Synaptic wa receptors dendritic AMPA na NMDA huzalisha kasi ya muda mrefu ya kupiga risasi kwa substantia nigra dopamine neurons katika vitro. J Neurophysiol. 2007; 97: 2837-2850. toa: 10.1152 / jn.01157.2006. [PubMed] [Msalaba]

9. Zweifel LS, Parker JG, Lobb CJ, Maji ya mvua A, Wall VZ, Fado JP, Darvas M, Kim MJ, Mizumori SJ, Paladini CA, Phillips PEM, Palmiter RD. Uharibifu wa kupasuka kwa NMDAR kwa kutegemeana na dopamine neurons hutoa tathmini ya kuchagua ya tabia ya tegemezi ya dopamini. Proc Natl Acad Sci. 2009; 106: 7281-7288. Nenda: 10.1073 / pnas.0813415106. [Makala ya bure ya PMC] [PubMed] [Ref Cross]

10. Harnett MT, Bernier BE, Ahn KC, Plastiki ya Morikawa H. Burst-Time-Dependent ya Uhamisho wa Medium Receptor-Mediated katika Midbrain Dopamine Neurons. Neuron. 2009; 62: 826-838. toa: 10.1016 / j.neuron.2009.05.011. [Makala ya bure ya PMC] [PubMed] [Ref Cross]

11. Jones S, Bonci A. Synaptic plastiki na madawa ya kulevya. Curr Opin Pharmacol. 2005; 5: 20-25. toa: 10.1016 / j.coph.2004.08.011. [PubMed] [Msalaba]

12. Kauer JA, Malenka RC. Synaptic plastiki na kulevya. Nat Rev Neurosci. 2007; 8: 844-858. toa: 10.1038 / nrn2234. [PubMed] [Msalaba]

13. Ljungberg T, Apicella P, Schultz W. Majibu ya monkey midbrain ya dopamine neurons wakati wa utendaji wa mchanganyiko wa kuchelewa. Resin ya ubongo. 1991; 586: 337-341. do: 10.1016 / 0006-8993 (91) 90816-E.

14. Schultz W, Apicella P, Ljungberg T. Majibu ya neurons ya monkey dopamine kutoa thawabu na hali nzuri wakati wa hatua zinazofuata za kujifunza kazi ya kukabiliana na kuchelewa. J Neurosci. 1993; 13: 900-913. [PubMed]

15. Schultz W. Ishara ya malipo ya malipo ya neurons ya dopamine. J Neurophysiol. 1998; 80: 1-27. [PubMed]

16. Schultz W, Dayan P, Montague RR. Substrate ya neural ya utabiri na malipo. Sayansi. 1997; 275: 1593-1599. do: 10.1126 / sayansi.275.5306.1593. [PubMed] [Msalaba]

17. Hollerman JR, Schultz W. Dopamine neurons huripoti kosa katika utabiri wa wakati wa malipo wakati wa kujifunza. Hali ya Neurosci. 1998; 1: 304-309. toa: 10.1038 / 1124. [PubMed] [Msalaba wa Msalaba]

18. Fiorillo CD, Tobler PN, Schultz W. Kuandika coding ya uwezekano wa malipo na kutokuwa na uhakika na dopamine neurons. Sayansi. 2003; 299: 1898-1902. do: 10.1126 / sayansi.1077349. [PubMed] [Msalaba]

19. Satoh T, Nakai S, Sato T, Kimura M. Kuunganishwa kwa coding ya motisha na matokeo ya uamuzi wa dopamine neurons. J Neurosci. 2003; 23: 9913-9923. [PubMed]

20. Morris G, Arkadir D, Nevet A, Vaadia E, Bergman H. Coincident lakini ujumbe tofauti wa dopamine ya midbrain na neurons zinazosababisha matiti. Neuron. 2004; 43: 133-143. toa: 10.1016 / j.neuron.2004.06.012. [PubMed] [Msalaba]

21. Nakahara H, Itoh H, Kawagoe R, Takikawa Y, Hikosaka O. Dhana ya Dopamine inaweza kuwakilisha kosa la utabiri wa kutegemea mazingira. Neuron. 2004; 41: 269-280. do: 10.1016 / S0896-6273 (03) 00869-9. [PubMed] [Msalaba]

22. Bayer HM, Glimcher PW. Midbrain dopamine neurons inakuta ishara ya uharibifu wa utabiri wa malipo. Neuron. 2005; 47: 129-141. toa: 10.1016 / j.neuron.2005.05.020. [Makala ya bure ya PMC] [PubMed] [Ref Cross]

23. Tobler PN, CD ya Fiorillo, Schultz W. Coding ya kupatanisha ya thamani ya malipo na neurons ya dopamine. Sayansi. 2005; 307: 1642-1645. do: 10.1126 / sayansi.1105370. [PubMed] [Msalaba]

24. Zaghloul KA, Blanco JA, Weidemann CT, McGill K, Jaggi JL, Baltuch GH, Kahana MJ. Binadamu substantia nigra neurons encode malipo zisizotarajiwa za kifedha. Sayansi. 2009; 323: 1496-1499. toa: 10.1126 / sayansi.1167342. [Makala ya bure ya PMC] [PubMed] [Ref Cross]

25. Fiorillo CD, WT Newsome, Schultz W. Usahihi wa muda wa utabiri wa malipo katika neurons ya dopamine. Nat Neurosci. 2008; 11: 966-973. do: 10.1038 / nn.2159.

26. Bayer HM, Lau B, Glimcher PW. Takwimu za treni za dopamine neuron spike katika kiti cha macho. J Neurophysiol. 2007; 98: 1428-1439. toa: 10.1152 / jn.01140.2006. [PubMed] [Msalaba]

27. Waelti P, Dickinson A, majibu ya Schultz W. Dopamine yanazingatia mawazo ya msingi ya nadharia rasmi ya kujifunza. Hali. 2001; 412: 43-48. toa: 10.1038 / 35083500. [PubMed] [Msalaba wa Msalaba]

28. Rescorla RA. Uzuiaji wa vifurushi wa Pavlovia. Psychol Bull. 1969; 72: 77-94. doa: 10.1037 / h0027760.

29. Tobler PN, Dickinson A, Schultz W. Ukodishaji wa malipo yaliyotabiriwa na dopamine neurons katika dhana ya kuzuia uharibifu. J Neurosci. 2003; 23: 10402-10410. [PubMed]

30. Preuschoff, Bossaerts P. Kuongeza hatari ya utabiri kwa nadharia ya kujifunza malipo. Ann NY Acad Sci. 2007; 1104: 135-146. do: 10.1196 / annals.1390.005. [PubMed] [Msalaba]

31. Romo R, Schultz W. Dopamine neurons ya midbrain ya tumbili: Upungufu wa majibu kwa kugusa kwa nguvu wakati wa harakati za mkono zilizoanzishwa. J Neurophysiol. 1990; 63: 592-606. [PubMed]

32. Schultz W, Romo R. Dopamine neurons ya midbrain ya tumbili: Uwezekano wa majibu kwa msisitizo unaosababisha athari za haraka za tabia. J Neurophysiol. 1990; 63: 607-624. [PubMed]

33. Mirenowicz J, Schultz W. Utekelezaji wa upendeleo wa midbrain dopamine neurons kwa hamu ya kulazimisha badala ya msukumo wa aversive. Hali. 1996; 379: 449-451. toa: 10.1038 / 379449a0. [PubMed] [Msalaba]

34. Morris G, Nevet A, Arkadir D, Vaadia E, Bergman H. Midbrain dopamine neurons huingiza maamuzi kwa ajili ya hatua za baadaye. Nat Neurosci. 2006; 9: 1057-1063. toa: 10.1038 / nn1743. [PubMed] [Msalaba wa Msalaba]

35. Roesch MR, DJ Calu, Schoenbaum G. Dopamine neurons inakuta chaguo bora katika panya kuamua kati ya tofauti kuchelewa au ukubwa tuzo. Nat Neurosci. 2007; 10: 1615-1624. toa: 10.1038 / nn2013. [Makala ya bure ya PMC] [PubMed] [Ref Cross]

36. Takikawa Y, Kawagoe R, Hikosaka O. Jukumu linalowezekana la neurons ya midbrain ya dopamine katika mwelekeo wa muda mfupi na wa muda mrefu wa mikabibu ya kupigia kura. J Neurophysiol. 2004; 92: 2520-2529. toa: 10.1152 / jn.00238.2004. [PubMed] [Msalaba]

37. Pan WX, Schmidt R, Wickens JR, Hyland BI. Vipengele vya Dopamini huitikia matukio yaliyotabiriwa wakati wa hali ya kikabila: Ushahidi wa sifa za ustahiki katika mtandao wa kujifunza malipo. J Neurosci. 2005; 25: 6235-6242. toa: 10.1523 / JNEUROSCI.1478-05.2005. [PubMed] [Msalaba]

38. Montague PR, Dayan P, Sejnowski TJ. Mpangilio wa mifumo ya dopamini ya mesencephalic kulingana na kujifunza kwa Ubelgiji. J Neurosci. 1996; 16: 1936-1947. [PubMed]

39. Suri R, Schultz W. Mtandao wa neural na dopamini-kama ishara ya kuimarisha ambayo inajifunza kazi ya majibu ya kuchelewa kwa nafasi. Neuroscience. 1999; 91: 871-890. do: 10.1016 / S0306-4522 (98) 00697-6. [PubMed] [Msalaba]

40. Ainslie G. Zawadi maalum: nadharia ya tabia ya msukumo na udhibiti wa msukumo. Bull Bongo. 1975; 82: 463-496. doa: 10.1037 / h0076860.

41. Rodriguez ML, Logue AW. Kurekebisha kuchelewa kwa kuimarisha: kulinganisha uchaguzi katika njiwa na wanadamu. J Exp Psychol Anim Behav Mchakato. 1988; 14: 105-117. toa: 10.1037 / 0097-7403.14.1.105. [PubMed] [Msalaba]

42. Richards JB, Mitchell SH, de Wit H, Seiden LS. Uamuzi wa kazi za kupunguza kwenye panya na utaratibu wa kurekebisha kiasi. J Exp Anal Behav. 1997; 67: 353-366. Nenda: 10.1901 / jeab.1997.67-353. [Makala ya bure ya PMC] [PubMed] [Ref Cross]

43. Kobayashi S, Schultz W. Ushawishi wa ucheleweshaji wa malipo juu ya majibu ya dopamine neurons. J Neurosci. 2008; 28: 7837-7846. toa: 10.1523 / JNEUROSCI.1600-08.2008. [PubMed] [Msalaba]

44. Guarraci FA, Kapp BS. Tabia ya electrophysiological ya neurons ya dopaminergic ya eneo la kijivu wakati wa hali tofauti ya hofu ya pavlovian katika sungura ya awake. Behav Ubongo Res. 1999; 99: 169-179. do: 10.1016 / S0166-4328 (98) 00102-8. [PubMed] [Msalaba]

45. Joshua M, Adler A, Mitelman R, Vaadia E, Bergman H. Midbrain neurons ya dopaminergic na interneurons ya uzazi wa kizazi hutofautiana kati ya malipo na matukio ya aversive katika wakati tofauti wa majaribio ya hali ya kawaida ya uwezekano. J Neurosci. 2008; 28: 1673-11684. toa: 10.1523 / JNEUROSCI.3839-08.2008.

46. Matsumoto M, Hikosaka O. Aina mbili za dopamine neuron zinaonyesha tofauti nzuri na zisizo za kuchochea. Hali. 2009; 459: 837-841. doa: 10.1038 / asili08028. [Makala ya bure ya PMC] [PubMed] [Ref Cross]

47. Chiodo LA, Antelman SM, Caggiula AR, Lineberry CG. Vidokezo vya kupima kubadilisha kiwango cha kutokwa kwa dopamine (DA) neurons: Ushahidi kwa aina mbili za kazi za seli za DA katika substantia nigra. Resin ya ubongo. 1980; 189: 544-549. doa: 10.1016 / 0006-8993 (80) 90366-2. [PubMed] [Ref Ref]

48. Mantz J, Thierry AM, Glowinski J. Athari ya mkia mshtuko wa mkia juu ya kiwango cha kutokwa kwa neurons ya mesocortical na mesolimbic neurons: uamuzi wa kuchagua mfumo wa mesocortical. Resin ya ubongo. 1989; 476: 377-381. doa: 10.1016 / 0006-8993 (89) 91263-8. [PubMed] [Ref Ref]

49. Schultz W, Romo R. Majibu ya neurodi ya nigrostriatal ya dopamine kwa msukumo mkubwa wa somatosensory katika tumbili isiyotiwa na ngozi. J Neurophysiol. 1987; 57: 201-217. [PubMed]

50. Coizet V, Dommett EJ, Redgrave P, Overton PG. Majibu ya nociceptive ya neurones ya dopaminergic midbrain yanawekwa na colliculus bora katika panya. Neuroscience. 2006; 139: 1479-1493. tuma: 10.1016 / j.neuroscience.2006.01.030. [PubMed] [Msalaba]

51. Brown MTC, Henny P, Bolam JP, Magill PJ. Shughuli za neuroni za dopaminergic zisizo na kisaikolojia za nyuzi za kijivu katika substantia nigra wakati wa mabadiliko ya kutofautiana na yanayoendeshwa katika hali ya ubongo. J Neurosci. 2009; 29: 2915-2925. toa: 10.1523 / JNEUROSCI.4423-08.2009. [PubMed] [Msalaba]

52. Brischoux F, Kikraborty S, Brierley DI, Ungless MA. Msisimko wa Phasic wa neopons ya dopamini katika VTA ya msingi kwa uchochezi. Proc Natl Acad Sci USA. 2009; 106: 4894-4899. Nenda: 10.1073 / pnas.0811507106. [Makala ya bure ya PMC] [PubMed] [Ref Cross]

53. Siku ya JJ, Roitman MF, Wightman RM, Carelli RM. Kujifunza kwa ushirikiano huhusisha mabadiliko ya nguvu katika ishara ya dopamini katika kiini cha kukusanyiko. Nat Neurosci. 2007; 10: 1020-1028. toa: 10.1038 / nn1923. [PubMed] [Msalaba wa Msalaba]

54. Roitman MF, Wheeler RA, Wightman RM, Carelli RM. Majibu ya kemikali ya muda halisi katika kiini cha kukusanyiko hufafanua uchochezi wenye ufanisi na wa aversive. Nat Neurosci. 2008; 11: 1376-1377. toa: 10.1038 / nn.2219. [PubMed] [Msalaba]

55. Vijana AMJ. Kuongezeka kwa dopamini ya ziada ya seli katika kiini kukusanyiko kwa kukabiliana na uchochezi usio na masharti na ya hali ya hewa: tafiti kwa kutumia microdialysis ya 1 katika panya. J Neurosci Meth. 2004; 138: 57-63. toa: 10.1016 / j.jneumeth.2004.03.003.

56. Schultz W. Kazi nyingi za dopamini wakati wa kozi tofauti. Ann Rev Neurosci. 2007; 30: 259-288. toa: 10.1146 / annurev.neuro.28.061604.135722. [PubMed] [Msalaba]

57. Hifadhi ya Tsai HC, Zhang F, Adamantidis A, Stuber GD, Bonci A, ya Lecea L, Deisseroth K. Phasic inayotaka neurons ya dopaminergic inatosha kwa hali ya tabia. Sayansi. 2009; 324: 1080-1084. do: 10.1126 / sayansi.1168878. [PubMed] [Msalaba]

58. Strecker RE, Jacobs BL. Substantia nigra dopaminergic kitengo shughuli katika tabia ya paka: Athari ya kuamka juu ya kutokwa kwa moja kwa moja na sensory shughuli evoked. Resin ya ubongo. 1985; 361: 339-350. doa: 10.1016 / 0006-8993 (85) 91304-6. [PubMed] [Ref Ref]

59. Ljungberg T, Apicella P, Schultz W. Majibu ya neurons ya monkey wakati wa kujifunza kwa athari za tabia. J Neurophysiol. 1992; 67: 145-163. [PubMed]

60. Horvitz JC, Stewart T, Jacobs BL. Shughuli ya kupasuka ya neurons ya tepial ya dopamini inakabiliwa na uchochezi wa hisia katika paka ya macho. Resin ya ubongo. 1997; 759: 251-258. do: 10.1016 / S0006-8993 (97) 00265-5. [PubMed] [Msalaba]

61. Sheafor PJ. Harakati za taya za udanganyifu wa sungura zinaonyesha vyama vinavyosimama kwenye cues za background. J Exp Psychol: Anim Behav Proc. 1975; 104: 245-260. Je: 10.1037 / 0097-7403.1.3.245.

62. Kakade S, Dayan P. Dopamine: generalization na bonuses. Neural Netw. 2002; 15: 549-559. do: 10.1016 / S0893-6080 (02) 00048-5. [PubMed] [Msalaba]

63. Richfield EK, Pennney JB, Young AB. Ulinganisho wa hali ya anatomical na mshikamano kati ya dopamine D1 na receptors D2 katika mfumo mkuu wa neva. Neuroscience. 1989; 30: 767-777. doa: 10.1016 / 0306-4522 (89) 90168-1. [PubMed] [Ref Ref]

64. Mackintosh NJ. Nadharia ya tahadhari: Tofauti katika ushirikiano wa kuchochea na kuimarisha. Mshauri wa Psycho 1975; 82: 276-298. doa: 10.1037 / h0076778.

65. Pearce JM, Hall G. Mfano wa hali ya Pavlovia: tofauti katika ufanisi wa hali iliyosababishwa lakini si ya msukumo usio na masharti. Mshauri wa Psycho 1980; 87: 532-552. toa: 10.1037 / 0033-295X.87.6.532. [PubMed] [Msalaba]

66. Levy H, Markowitz HM. Inapotanisha huduma inayotarajiwa kwa kazi ya maana na tofauti. Ni Econ Rev. 1979; 69: 308-317.