Dopamindan tashqari yadrodagi akumbensdagi mukofotlash bo'yicha qo'llanma: kortikoballi ganglion tarmoqlarining integral funktsiyalari (2008)

Eur J Neurosci. 2008 Oct;28(8):1437-48. doi: 10.1111/j.1460-9568.2008.06422.x.

Yin HH1, Ostlund SB, Ballein BW.

mavhum

Bu erda biz mukofotni boshqaradigan o'rganish nafaqat ventral tegmental sohadagi dopaminerjik neyronlardan kelib chiqadigan va yadro mo'ylovini ko'tarish vositasida prognoz qilingan mesoakmumbens yo'llari orqali nazorat qilinishini nazarda tutamiz. Ushbu keng tarqalgan nuqtai nazar, mukofotlar monolitik tushunchadir, lekin so'nggi ish aksini ko'rsatdi. Endi, mukofot bilan boshqariladigan ta'limda ventral va dorsal striataning funktsiyalari va ular bilan bog'liq bo'lgan kortikosvalli ganglionlar devorlari ajralib turishi mumkin. Yadro akumbenslari ba'zi bir ishtahani Pavlovning javoblarini olish va ifodalash uchun zarur va instrumental ishlashning motivatsion nazoratiga hissa qo'shishi bilanoq, dorsal striatum asboblar harakatlarini olish va ifodalash uchun zarurdir. Bunday topilmalar ko'plab mustaqil, ammo o'zaro ta'sir qiluvchi funktsional tizimlar mavjudligini ko'rsatib turibdi. Ular ierarxik va ierarxik tarzda tashkil qilingan kortiko-bazal gangliyaniya tarmoqlari, qobiliyatli ishtiyoq bilan shug'ullanadigan Pavlovning yondashuvidan kelib chiqadigan maqsadga yo'naltirilgan chora-tadbirlar bilan bog'liq.

Kalit so'zlar: striatum, dopamin, bazal ganglion, o'rganish, yadro gulxanlari, mukofot

So'nggi adabiyotlarda organizm uchun yaxshi bo'lgan narsalarni (odatda eksperiment markazining nuqtai nazaridan) belgilash yoki xohlash-qilmaslik kabi eskirgan so'zlar bilan bir-birining o'rniga ishlatish bo'ladimi - tuyadi xatti-harakatiga teng tatbiq etilgan 'mukofot' "mustahkamlash" yoki "rag'batlantirish". Bu holat, agar o'zi natijasi bo'lmasa, yadrodagi akumbenslarda dopamin (DA) ni chiqarishni o'z ichiga olgan "mukofot" uchun yagona neyral substratga e'tiborni qaratishiBerk va Hyman, 2000; Grace va boshq., 2007).

Bir necha o'n yillar oldin tan olingan mesoakkumzlar yo'llari va mukofotlari o'rtasidagi bog'lanish, daliliy DA signalining mukofot predmeti xatosini kodlayotgani haqidagi yangi dalillar bilan kuchaytirildi va bu, ehtimol, assotsiativ o'rganishdagi ta'lim signalidirg (Schultz va boshq., 1997). Eng mashhur izohga ko'ra, mukofot uchun bitta signal borligi singari, mukofot bilan boshqariladigan o'rganish uchun ham bitta signal bor, bu esa bu bilan rag'batlantiruvchi va mukofot (Montague va boshq., 2004). Ushbu turdagi ta'limning uyg'unlashtirilgan xatti-harakatlarning nazoratini qanday qilib bekor qilish haqida savol; faqat dopamin signalining predmetni o'rganish uchun etarli ekanligi va buning natijasida shartli javoblar va maqsadga qaratilgan harakatlar uchun ularni mukofot bilan bog'lash uchun etarli deb taxmin qilinadi. Shunday qilib, mukofotlar va giyohvandlik sohasidagi ko'plab tadqiqotlarning asosiy yo'nalishi - DA signalizatsiyasi va mezoaktsmens yo'lidagiBerridge va Robinson, 1998; Hyman va boshq., 2006; Grace va boshq., 2007).

Mukofot jarayonining bu ko'rinishi tobora ko'proq e'tirof etilmoqda (Kardinal va boshq., 2002; Balleine, 2005; Everitt va Robbins, 2005; Hyman va boshq., 2006), ham kam, ham chalg'ituvchi. Bu etarli emas, chunki maqsadga yo'naltirilgan xatti-harakatlarning qo'lga olinishi yoki bajarilishi rag'batlantiruvchi-mukofotni o'rganishga vositachilik qiladigan assotsiatsiya jarayonlari bilan izohlanishi mumkin emas.. Bu, shuningdek, maqsadga yo'naltirilgan harakatlar uchun kerakli yoki etarli bo'lmagan, mesoakkumnlar yo'lidagi faoliyatga alohida diqqat qaratib, aniq maqsadga yo'naltirilgan harakatlarning aniq yo'naltirilganligi va ularni qanday amalga oshirilayotganligi haqida ko'proq e'tibor qaratdi. miya tomonidan. Darhaqiqat, har xil eksperimental yondashuvlarning bir-biriga yaqinlashib kelayotgan dalillariga ko'ra, ilgari, yagona mukofot mexanizmi, aslida turli xil qiziqishlarga ega ta'sirlar va neyro substratlari (Corbit va boshq., 2001; O'Doherty va boshq., 2004; Yin va boshq., 2004; Delgado va boshq., 2005; Yin va boshq., 2005b; Haruno va Kawato, 2006a; Tobler va boshq., 2006; Jedynak va boshq., 2007; Robinson va boshq., 2007; Tobler va boshq., 2007).

Bu erda hozirgi mezoaccumbens modeliga taalluqli bo'lgan ayrim muammolarni ko'rib chiqamiz va uning o'rniga mukofotli yo'l bilan o'rganiladigan boshqa modelni taklif qilamiz. Striatum, har biri alohida kortikal, talamik, pallidal va midbrain komponentlari bilan alohida funktsional tarmoqdagi markazga aylangan kamida to'rt funktsional domenga bo'linishi mumkin bo'lgan yuqori heterojen struktur ekanligini ta'kidlaymiz. Ushbu tarmoqlarning integral funktsiyalari, mukofotning shubhali javoblarini ishlab chiqarishdan boshlab, maqsadga yo'naltirilgan harakatlar ustidan nazorat qilishgacha o'zgarishi mumkin va zamonaviy xatti-harakatlarni qo'llash orqali o'rganilishi mumkin.

Bashorat va nazorat

Mezoakmumbens yo'llari ko'pincha mukofoti va atrof-muhit ogohlantiruvchisi o'rtasidagi munosabatlarga ega bo'lish uchun zarur deb hisoblanadi. Misol uchun, ayrim mukofotlar, mukofot bilan qo'lga kiritilgan DA hujayralarining fazaviy faoliyatini tekshirganda, maymunlar bir ruxani sharbatni yetkazib berish bilan birlashtirishga o'rgatilgan (Waelti va boshq., 2001) va keyinchalik shartli javob (CR) - ishtirokchi yalama bilan rag'batlantirishga javob beradi. Maymunning yallig'lanishi maqsadga yo'naltirilgan bo'lishi mumkin, chunki u sharbatni olish kerak deb hisoblaydi. Shu bilan bir qatorda, suyuqlik bilan bog'langan oldingi ogohlantiruvchi tomonidan yalang'ochlash mumkin. Maymunlarning yalang'ochlanishining ushbu determinantlaridan qaysi biri xatti-harakatni nazorat qiladi har qanday muayyan vaziyatda noma'lum a prioriva yuzaki kuzatuvlar bilan aniqlanmagan; u faqat shu maqsadda mo'ljallangan sinovlardan foydalanishi mumkin. O'nlab yillar davomida rivojlanib borayotgan ushbu testlar o'rganish va xatti-harakatlarni o'rganishda asosiy zamonaviy yutuqlarning asosiy qismini shakllantiradi (1 stol). Ushbu testlardan foydalanishda quyida muhokama qilinishi kerak bo'lgan narsa, hozirgi kunda ham xuddi shunday xatti-harakatlar - ambulatoriya yondashuvi, qo'lni yo'naltirish yoki bosib olish - xoh eksperimental ravishda ajralib turadigan ko'plab ta'sirlardan paydo bo'lishi mumkinligini bilamiz.

1 stol  

Mukofotni boshqarish

Shunday qilib, xulq-atvorning haqiqiy determinantlarida markaziy noaniqlikka nisbatan befarqlik, mukofotni boshqaradigan o'rganishning mavjud neyroloqiy tahlillari bilan bog'liq asosiy muammo hisoblanadi. Tu ushbu muammoning ahamiyatini tushunib yetishi kerak, bashoratli (yoki Pavlovian) o'rganish va maqsadga yo'naltirilgan (yoki instrumental) o'rganishni nazorat qilish ishtahasi xatti-harakati o'rtasidagi farqlarni baholash kerak. Darhaqiqat, ushbu ikki jarayonning adabiyotda qanchalik tez-tez yuz berayotganiga qarab, bu farqni qisqacha tahlil qilish bizning muhokamamiz uchun foydali bir nuqtadir.

Pavlovning kuyikishida, mukofot (ya'ni shartsiz rag'batlantirish yoki AQSh) hayvonlarning xatti-harakatlaridan qat'i nazar, rag'batlantiruvchi (shartli stimul yoki CS) bilan bog'langan bo'lsa, unda hayvonlarning xatti-harakatlariga bog'liq ravishda mukofot beriladi. Ikkala holatda ham tanqidiy savol - bu rag'batlantiruvchi-mukofot uyushmasi yoki harakat-mukofot uyushmasi xatti-harakatni nazorat qiladimi.

Ko'rinib turganidek, bu savol tergovchilarni o'nlab yillar davomida yo'q qildi, chunki bu holatlardagi xatti-harakatlar bir xil ko'rinishi mumkin.

Shunday qilib, Pavlovning rag'batlantiruvchi-mukofoti assotsiatsiyasi tomonidan nazorat qilinadigan shartli javoblar (CRlar) ko'pincha ular haqida maqsadga yo'naltirilgan shpalga ega bo'lishi mumkin. Pavlovning asl CR-si, hatto tupurish ham, uning itlari tomonidan ishlab chiqarishni osonlashtirishga qaratilgan qasddan urinish sifatida ishlab chiqarilishi mumkin edi. Aynan shuning uchun bu noaniqlik sababli eng aniq tushuntirish, ya'ni Pavlovda konditsionerlikning rag'batlantiruvchi natijalari bilan bog'liq bo'lgan birlashma o'rganilgani, shunga qaramasdan, asbob-uskunalar sharoitida aksiya-natijalar assotsiatsiyasini o'rganish - o'nlab yillar mobaynida ko'p qo'llab-quvvatlana olmadi (Skinner, 1938; Ashby, 1960; Bolles, 1972; Mackintosh, 1974). Shunday bo'lsa-da, garchi ko'plab Pavloviylar CR-lari otonomik yoki iste'mol qiladigan bo'lsa-da, boshqa CRlar, masalan, mukofotga nisbatan yondashuv xatti-harakati juda qulay emas (Rescorla va Solomon, 1967); chindan ham, ular chora-tadbirlar uchun osonlikcha xatoga yo'l qo'yishadi (Jigarrang va Jenkins, 1968; Uilyams va Uilyams, 1969; Schwartz va Gamzu, 1977). Endi bilamizki, yuzaki o'xshash bo'lishiga qaramay, Pavlovyarov CR va maqsadga yo'naltirilgan instrumental harakatlar javobning bajarilishini nazorat qiluvchi vakillik tuzilmasida farq qiladi (Schwartz va Gamzu, 1977).

Javobni bajarishning rag'batlantiruvchi mukofot yoki harakat-mukofot uyushmasi vositachiligini belgilashning eng to'g'ridan-to'g'ri vositasi muayyan favqulodda vaziyat nazoratining ishlashini o'rganishdir. Bu erda salivatsiya misoli ibratli bo'ladi. Sheffield (1965) Pavlov konditsioneridagi tuprikni uning mukofotga bo'lgan munosabati yoki rag'batlantiruvchi-mukofot uyushmasi tomonidan nazorat qilinganmi yoxud tekshirilgandir. Tajribasida itlar ohang va oziq-ovqat mukofoti o'rtasidagi juftlikni oldi (Sheffield, 1965). Biroq, agar itlar ohangda osilib qolishgan bo'lsa, unda oziq-ovqat mahsuloti bu sinovga kiritilmagan. Ushbu kelishuv ohang va oziq-ovqat o'rtasida Pavlovning munosabatini saqlab qoldi, ammo tupurish va oziq-ovqat etkazib berish o'rtasidagi to'g'ridan-to'g'ri aloqani bekor qildi. Agar tupurik ovqatni oziq-ovqat bilan bo'lgan aloqasi bilan boshqaradigan bo'lsa, itlar salib yurishni to'xtatishi kerak, aslida ular hech qachon ohangda tupurishmasligi kerak. Sheffild, bu salivasyon CR'yi nazorat ostiga olgan Pavlovce ton va oziq-ovqat munosabatlari aniq ekanligini topgan. 800-tonna-oziq-ovqat juftliklari davomida, itlar tuprikni tuproqqa aylantirdilar va ushlab turishdi, garchi ularning salib boqmasliklari natijasida qo'lga kiritilgan oziq-ovqatlarning aksariyat qismini yo'qotishga olib keldi. Xuddi shunday xulosaga odamlarga (Pithers, 1985) va boshqa hayvonlarga (masalan,Jigarrang va Jenkins, 1968; Uilyams va Uilyams, 1969 yil; Holland, 1979); barcha holatlarda, ularning ko'pchilik turlariga qaramasdan, Pavlovning javoblari ularning mukofotga aloqasi - ya'ni, oqibat-natija ehtimolligi bilan bog'liq emas.

Vaziyat muddati "V" hodisasi bilan B va B vujudga keladigan shartli munosabatlarni anglatadi, B ning paydo bo'lishi A ga bog'liq bo'ladi. Ushbu turdagi munosabatlar A yo'q bo'lganda B bilan tanishish orqali osonlik bilan tanazzulga yuz tutishi mumkin. eksperimental manipulatsiya, kutilmagan zaiflik deb ataladi, odatda proekt yoki stimulyatordan mustaqil ravishda mukofotni taqdim etish orqali amalga oshiriladi. Ushbu yondashuv dastlab Pavlovianni o'rganish uchun ishlab chiqilgan bo'lsa-da (Rescorla, 1968), instrumental halokat degradatsiyasi ham keng tarqalgan vositaga aylandi (Hammond, 1980). Bunday imkoniyatlarni bevosita manipulyatsiya qilganda, ta'lim mazmuni oshkor bo'ladi: masalan, avtoustapingda, Pavloviy CR "instrumental operatsiya" sifatida instrumental operatsiyadan emas, balki Pavloviyning manipulyatsiyasi bilan buziladi (Schwartz va Gamzu, 1977).

Maqsadga yo'naltirilgan instrumental xatti-harakatlar ikkita mezon bilan tavsiflanadi: 1) natijaning o'zgarishiga sezgirlik va 2) harakatlar va natija o'rtasidagi ehtimollikdagi o'zgarishlarga sezuvchanlik (Dickinson, 1985; Dikkinson va Ballein, 1993). Faqatgina devalvatsiya natijalariga ta'sirchanligini ta'kidlash kerak, chunki maqsadga yo'naltirilgan javobni tavsiflash etarli emas, chunki ba'zi Pavlovning javoblari bu manipulatsiyaga sezgir bo'lishi mumkin (Gollandiya va Rescorla, 1975). Biroq, maqsadga yo'naltirilgan instrumental harakatlarning bajarilishi, shuningdek, oqibatlarga olib kelishi mumkin bo'lgan harakatlarning manipulyatsiyasiga ham sezgir bo'ladi, Pavlovning javoblari esa rag'batlantiruvchi oqibatlarga olib keladigan hodisalarning manipulyatsiyasiga sezgirRescorla, 1968; Davis va Bitterman, 1971; Dickinson va Charnock, 1985). Biroq, muhim istisnolardan biri, Pavlovning javoblariga ko'ra, ular anchadan buzilish holatlaridagi o'zgarishlarga nisbatan befarqligi jihatidan o'xshash odatlarga o'xshash odatlarda (pastga qarang), shuningdek, devalvatsiyaga olib kelishi mumkin emas, chunki natijalar qismi ishlashni nazorat qiluvchi vakolatli strukturaning Dickinson, 1985 va quyida muhokama qilish uchun).

Xulosa qilib aytganda, muayyan javobni javob formasi yoki uni o'rnatish uchun ishlatiladigan xatti-harakatlar emas, balki nazorat qilish ehtimoli muddati bilan aniq belgilash muhim ahamiyatga ega. Muayyan vaziyatda nazorat qilish imkoniyatini o'rganmasdan, xulq-atvori va neyron jarayonlari vositachiligida topilgan natijalar noto'g'ri talqin qilinishi mumkin. Nihoyat, biz e'tiroz bildirganimizdek, bu turli xil neyron tizimlar tomonidan o'rganilgan va amalga oshirilgan, ulardagi xatti-harakatlarning nazorat etilishi bilan shug'ullanadigan haqiqiy nazorat cheklovlar, ammo ular "oxirgi umumiy yo'lni" bo'lishishi mumkin. Shunday qilib, markaziy vazifa - mavjud vaziyatni nazorat qilish xatti-harakatlarini aniqlash uchun paydo bo'lishdan tashqariga chiqish 1 stol). Muayyan neyron tuzilmalar o'ziga xos psixologik imkoniyatlarga vositachilik qilishini talab qilish uchun, masalan, maqsadga yo'naltirilganlik, xulq-atvor holati to'g'ri xulq-atvor bilan baholanishi kerak. Boshqacha qilib aytganda, tartibsizliklarni turli xil hodisalarni o'lchash mumkinligini bilmagan holda guruhlar tegishli neyron determinantlar haqida munozara qilib, tartibsizlikni taklif qilishadi. Eng muhimi, hayvon o'rganishning o'zi nimani anglatadi, tajriba egasi hayvon o'rganishi mumkinligiga ishonmaydi va hayvon o'rganib olgan narsalar faqat o'rganish mazmunini to'g'ridan-to'g'ri tekshiradigan tahlillar orqali aniqlanishi mumkin.

Agar tajriba tadbirlari qanday bo'lishidan qat'iy nazar, hayvon xuddi shu narsani o'rganishga muvaffaq bo'lganda (rag'batlantiruvchi va mukofot o'rtasidagi munosabatni bildirsa), Pavlov-instrumental farqi juda ahamiyatsiz bo'lar edi. Bugungi kunda neuroscience uchun mavjud bo'lgan eng keng tarqalgan o'rganish chora-tadbirlarini ishlatishning o'zi yo'q. Shunday qilib, tadqiqotchilar odatda maqsadga yo'naltirilgan xulq-atvorni o'rganishadi. Turli xil "ta'lim" vazifalari yoki "paradigmalar" dan foydalanishning turli xil turlari ko'pincha odatda taxmin qilinayotgan bo'lsa-da, tadqiqotchilar o'z taxminlarini etarli asosga ega bo'lmaydilar.

Ushbu masalaning klassik namunasi - o'rganishni o'rganish uchun labirintlardan foydalanishdir. Mazeyli tajribalar va tegishli tajribalar bilan bog'liq bo'lgan muammo, shartli joy afzalligi kabi, Pavlovian (rag'batlantiruvchi-mukofot) va xatti-harakatlarga ta'sir qiladigan instrumental (harakatsiz-mukofot) kontingentlarning ta'sirini eksperimental ravishda ajratish qiyinligiDickinson, 1994; Yin va Knowlton, 2002). Shunday qilib, oziq-ovqat olish uchun T-labirinti orqali harakat qilish javob strategiyasini aks etishi mumkin (chapga burilish) yoki oddiygina ovqatlanish assotsiatsiyasiTik turing, 1957). Tajribaning ikkinchi usulini bajarish uchun test qilishning bir usuli - labirintni o'zgartirish; endi javob o'quvchilar chapga burilishni davom ettirishi kerak, holbuki, qo'shimcha labirint so'zlarini ishlatganlar o'ng tomonga burilib ketishi kerak. Biroq, chapga aylanishda davom etayotganlar, ehtimol javob strategiyasidan foydalanib yoki faqatgina ba'zi kishilarga yaqinlashadimi? ichiovqat bilan bog'liq emas Buni aniqlash oddiy narsa emas, chunki Pavlovning xatti-harakatlarini nazorat qilish odatdagidek labirent tadqiqotlarida osonlik bilan qo'llanilishi mumkin emas. Ulardan biri, ikki tomonlama nazorat, hayvonlar hayvonlarni mukofotlash uchun ushbu javob yo'nalishini o'zgartirishni talab qilib, muayyan javob ustidan nazoratni amalga oshirishi mumkinligini belgilaydiHershberger, 1986; Heyes va Dawson, 1990). Afsuski, labirintada, javobni bekor qilish hali maqsadga yo'naltirilgan harakatni belgilash uchun etarli bo'lmasligi mumkin, negaki, tiklanish mavjud rag'batlantiruvchi-mukofot munosabatlarini soqit qilish va uni boshqasi bilan almashtirish orqali amalga oshirilishi mumkin. Misol uchun, muayyan ich ichidagi labirintga yaqinlashib kelayotgan sichqonchani qayta tiklash vaqtida u endi mukofot bilan bog'lanmaganligini, biroq boshqa rag'batlantiruvchi vositani yangi rag'batlantiruvchi tomonga yaqinlashishiga olib keladi, deb bilishi mumkin. Shunday qilib, ular hech qanday reja-mukofot sovg'asini kodlashdan o'zlarining javoblarini farqlay olishadi. Ushbu imkoniyat amalda testdan o'tkazilmasligi tufayli, maqsadga yo'naltirilgan o'quv jarayonlarini o'rganish uchun labirintlarni, joylarni tanlash tartib-qoidalarini yoki oddiy lokomotor vazifalarni qo'llash juda xavfli va, ehtimol, har qanday neyronning o'ziga xos rolini nazorat qiluvchi jarayonlarni noto'g'ri aniqlashga olib keladi ishtirok etish uchun topilgan jarayonlar (Smit-Ro va Kelley, 2000; Hernandez va boshq., 2002; Atallah va boshqalar, 2007).

Nukleus akumbenslari instrumental o'rganish uchun zarur emas

Mavjud xatti-harakatlar tahlilining etarli emasligi yadro akselerlerinin o'rganishida ayniqsa aniq. Ko'pgina tadqiqotlar ushbu tuzilmaning maqsadga yo'naltirilgan harakatlarga erishish uchun juda muhim ekanligini ko'rsatdi (Hernandez va boshq., 2002; Goto va Greys, 2005; Hernandez va boshq., 2005; Pothuizen va boshq., 2005; Taha va Fields, 2006; Atallah va boshqalar, 2007; Cheer va boshq., 2007; Lerchner va boshq., 2007). Ammo, bu xulosaga asosan, faoliyatning o'zgaruvchanligini nazorat qiluvchi xatti-harakatlarning aniq bo'lmagan vazifalarini qo'llagan holda, faqat bajarishdagi o'zgarishlarni hisobga olgan holda erishildi. Garchi manipulyatsiyani ba'zi xatti-harakatlarga jalb qilishni zaiflashtirgan bo'lsa-da, o'rganish kamomadini ko'rsatishi mumkin bo'lsa-da, ular javobni boshlash yoki turtki berishga ta'sir ko'rsatishi mumkin. Misol uchun, qo'lni bosib olishni sotib olishda buzilish ko'pincha o'rganishga emas, balki ishlashga ta'sir ko'rsatadi (Smit-Ro va Kelley, 2000). Har qanday o'rganish jarayonining to'liq tasnifi sifatida faqat egri chiziqlari ehtiyotkorlik bilan talqin qilinishi kerak (Gallistel va boshq., 2004). Afsuski, o'rganish va ishlashning farqli o'laroq, ehtimol, o'rganishni o'rganishdagi eng qadimgi dars bugungi kunda ko'pincha e'tiborga olinmaydi.

Batafsilroq tahlil qilish shuni ko'rsatadiki, moslashuvchan vositalar asbob-uskunalar uchun zaruriy yoki etarli emas. Aytgens kabuklarının lezyonları devalüasyona nima uchun ishlash sezgirligini o'zgartirmaydi (ham Borchgrave va boshq., 2002; Corbit va boshq., 2001) yoki instrumental shoshilinch vaziyatlarning buzilishi (Corbit va boshq., 2001), shunga qaramasdan, akumbenslar yadrosi zararlanishi, kalamushlarning sezilarli darajada buzilish holatlariga ta'sirchanligini yo'qotmasdan devalvatsiyaga nisbatan sezuvchanlik darajasini pasaytiradi (Corbit va boshq., 2001). Konditsionerlarning takomillashuvi ishlarida yangi javobni olish bo'yicha shoshilinch manipulyatsiyalarning ta'sirini baholovchi boshqa tadqiqotlar, mukofotni bajarish bo'yicha ishlashga, xususan, amfetamin bilan ishlashni kuchaytirishga ta'sir qildi, ammo javobni qabul qilishda emas (Parkinson va boshq., 1999). Xuddi shunday, Kardinal va Cheungning muntazam o'tkazgan tadqiqotlari, shuningdek, takroran takomillashuv jadvali ostida qo'llarni bosim bilan javob berishga yordam bermagan. ziyonni sotib olish faqat kechiktirilgan mustahkamlash bilan kuzatildi (Kardinal va Cheung, 2005).

Garchi akumbenslar instrumental kutilmagan hodisalarni kodlamasa ham (Balleine & Killcross, 1994; Corbit, Muir va Balleine, 2001 yil), katta dalillar, u instrumentallikda asosiy rol o'ynayotganini ko'rsatadi bajarish, hozirgi paytda biz yaqinda amalga oshirilgan ish asosida yoritib beradigan rol. Bir necha tadkikotlarning natijalari bo'yicha, akumbenslar Pavlovning kassatsiya qilishning ma'lum turlari uchun juda muhimdir va ularning mukofotga bog'liq birikmalarining instrumental ishlashga bo'lgan o'ziga xos bo'lmagan eksitatory ta'siriga va shuningdek, ishlab chiqarilgan javob tanlovi natijalariga xos nosozliklar Bunday maslahatlar bilan. Yadro yadrosi yoki yadro uchun kortikal kirishning asosiy manbai bo'lgan yoki oldingi singulatning zararlanishi yoki bu ikki tuzilmalar orasidagi uzilishlar Pavlovning yondashuv xatti-harakatlariga putur etkazadi (Parkinson va boshq., 2000). D1 shunga o'xshash dopamin retseptorlari antagonisti yoki NMDA glutamat retseptorlari antagonistidan mahalliy mashg'ulotdan so'ng darhol mahalliy infuzion, ushbu ta'lim shakliga ishlashga ta'sir qilmasdan,Dalley va boshq., 2005). Ushbu ma'lumotlar o'lchovlarga mos keladi ning Vivo jonli Neyro faoliyati. Misol uchun, Carelli va uning hamkasblari Pavelning avtoshaping vazifasini o'rganish davomida, akumbenslardagi neyronlarning o'z faoliyatini muntazam ravishda o'zgartirishi mumkinligini aniqladilar (Day va boshqalar, 2006; Kun va Karelli, 2007).

Qobiq mintaqasidagi neyronlar, har qanday o'rganish tajribasidan oldin ham, stimulga uchrab turish va g'azablanish uchun sozlangan ko'rinadi; ular ushbu natijalarni prognoz qilish uchun CSga javoblarni ishlab chiqishga qodirRoitman va boshq., 2005). Berrij va uning hamkasblari bilan ishlash, yadro ichidagi ma'lum hududlar qobiqning yuqori qismida va pastki ventral pallidumda "gipertonik issiq nuqta" sifatida ifodalanishi mumkinligini ta'kidladi. Bu joylar to'g'ridan-to'g'ri ta'mi reaktivligi kabi mukofotlar uchun shartsiz hedonik javoblarni modulyatsiya qiladi. Misol uchun, ushbu hududlarda opiyoid retseptorlari agonistlari sukrozga sindiruvchi zaharli reaktivlikni sezilarli darajada kuchaytirishi mumkin. Bunday yuqori darajadagi mahalliy hududlar, iste'molchi tuyadi xatti-harakatlarida rol o'ynaydigan keng tarmoqlargaTaha va Fields, 2005; Pecina va boshq., 2006; Taha va Fields, 2006).

Yadro va qobiqning nisbiy rollarida farqlash navli navli Pavlov konditsionerlari orqali tajriba bilan osonlik bilan o'zgartirilishi mumkin bo'lgan tayyorgarlik va iste'mol qilish hissi xatti-harakatlari orasida ko'rinadi. Yondashuv kabi tayyorgarlik javoblari natijaning umumiy hissiy fazilatlari bilan bog'liq bo'lsa-da, iste'molchilarning xatti-harakatlari o'ziga xos sezgir fazilatlarga bog'liq; ular turli xil KS turlariga nisbatan sezgirdirlar, masalan, tayyorgarlik javoblari uzoq vaqt davomida rag'batlantirilishi mumkin (Konorski, 1967; Dickinson va Dearing, 1979; Balleine, 2001; Dikkinson va Ballein, 2002).

Nima bo'lganda ham, Pavlovning konditsionerligining ayrim jihatlarida aybdorlarni ayblovchi dalillar juda katta. Shu bilan birga, faqat bitta tuzilma emas, balki turli xil amigdaloid yadrolarni o'z ichiga olgan boshqa tarmoqlar ham, Pavlovning tirishqoqligining tayyorgarlik va iste'mol tarkibida asosiy rol o'ynaydi. (Ballein va Killkross, 2006).

Aytgenslarga aniq amal qilish mumkin bo'lgan vazifalardan biri - Pavlovning ta'siri instrumental xulq-atvorga aylanishi. Pavlovning CR-lari, jumladan, motivatsiya va uyg'unlik kabi markaziy motivatsion vaziyatlarni faollashtirishni aks ettiruvchi shaxslar, chora-tadbirlarning bajarilishiga kuchli ta'sir ko'rsatadi (Trapold va Overmier, 1972; Lovibond, 1983; Gollandiyalik, 2004). Misol uchun, oziq-ovqat etkazib berishni mustaqil ravishda bashorat qilgan CS, xuddi shu oziq-ovqat mahsulotlariga javob berishga yordam beradi. Ushbu ta'sir odatda Pavlov-instrumental transfer paradigmasi (PIT) yordamida o'rganiladi. PITda hayvonlar hayvonlarni oziq-ovqat bilan bog'lash va bir xil oziq-ovqat uchun qo'lni bosish uchun mustaqil ravishda Pavlov va asbob-uskunalar tayyorlash bosqichlarini oladi. So'ngra prob probiyoti paytida, belgisi mavjud bo'lgan qo'l bilan ta'minlanadi va CSning borligida javob stavkalari ko'tariladi. PITning ikki shakli aniqlangan; mukofoti bilan bog'liq bo'lgan qiziqishlarning umuman qiziqishini va ikkinchisiga qarshi o'ziga xos mukofotni hurmat qilish bilan prognozlashning predmeti maqomidan ishlab chiqariladigan tanlovga nisbatan ikkinchi tanlov ta'siriga bog'liq. Guvohlar qobig'ining bu oxirgi natija o'ziga xos PIT shakli uchun zarur bo'lishi kerak, lekin avvalgi, umumiy shakldagi va devalvatsiyaga ta'sirchan bo'lishi uchun zarur emas; Aksumbens nukleusining zararlanishi ham natijani devalvatsiyaga, ham PITning umumiy shakliga sezuvchanlikni pasaytiradi, lekin natijaga xos PITniCorbit va boshq., 2001; (Ballein va Corbit, 2005).

Yaqinda olib borilgan bir tekshiruv natijasida, natijada o'ziga xos PIT (akusherlik)Wiltgen va boshq., 2007). Striatumdagi faol kaltsiy / kalmodulinga qaram protein kinaz II (CaMKII) ning nazorat ostida ifodasi instrumental yoki Pavloviyani o'rganishga ta'sir qilmadi, lekin maxsus PITni bekor qildi. PITdagi bu nuqson doimiy bo'lmagan va transgen ekspresatsiyasini doksisiklin bilan o'chirib tashlab, bu defitsit faqat ishlash bilan bog'liqligini ko'rsatgan holda teskari bo'lib qolishi mumkin edi. Striatumdagi CaMKII darajasini sun'iy ravishda oshirish, shuning uchun Pavloviyadan instrumental tizimga rag'batlantiruvchi motivatsiya natijasini o'ziga xos tarzda uzatishni taqiqlaydi. Qizig'i shundaki, CaMKII transgensini ochish, shuningdek, akumbens qobig'idagi neyronlarning qo'zg'aluvchanligini kamaytiradigan, bazal uzatish yoki sinaptik kuchga ta'sir qilmaydigan darajada kamayganligi aniqlandi.

Dorsal striatum

Neostriatum yoki kaudat-pitamen deb nomlanadigan dorsal striatum, neokorteks deb ataladigan massiv proektsiyalarni oladi. Bundan tashqari, kemirgenlerde ventral striatum bilan medial va uzluksiz bo'lgan va yanada lateral bo'lgan sensorimotor mintaqa bo'lgan birlashtiruvchi mintaqaga bo'linishi mumkin (Groenewegen va boshq., 1990; Joel va Weiner, 1994). Umuman olganda, dorsal striatum asosan nigra telekorsatuvi kompaktasi (SNc) dan DA hujayralari tomonidan innervatsiya qilinadi va faqat VTA DA neyronlari (Joel va Weiner, 2000). Dorsal striatumdagi avvalgi ish asosan rag'batlantiruvchi javob (SR) odatlaridan foydalanishda uning roliga qaratildi (Miller, 1981; Oq, 1989). Ushbu fikr ta'siri qonuniga asoslanadi, unga ko'ra SR mukofoti ekologik ogohlantirishlar bilan SR o'rtasidagi munosabatni kuchaytirish yoki mustahkamlash uchun amal qiladi va buning natijasida javobni oshirish moyilligi ogohlantiruvchi (Thorndike, 1911; Xull, 1943; Miller, 1981). Shunday qilib, kortikostriatal yo'l, RaI bilan SR ga o'rganish vositasi bo'lib, kuchaytirish signallariMiller, 1981; Reynolds va Vickens, 2002).

SR modellari ta'limni ishlashga tarjima qilish uchun cheksiz qoidalarni o'z ichiga olgan afzalliklarga ega. Aksincha, kutilgan taxminlarga asoslangan model, aksincha, yanada murakkabroqdir, chunki "A harakati A natijasini keltiradi" degan e'tiqod shartlarga aylantirilishi shart emasGuthrie, 1935; Mackintosh, 1974); bunday ma'lumotni 'A' ni bajarish va 'A' ni bajarishdan foydalanish mumkin. Shu sababli, an'anaviy nazariyalar eng aniq tushuntirishdan uzoqlashdi - ya'ni hayvonlarning tanlov xatti-harakatini boshqaradigan harakatlarning natijasi bo'lishi mumkin. Biroq so'nggi bir necha o'n yillikda, qonunning muhim qonuniy qayta ko'rib chiqilishiAdams, 1982; Colwill va Rescorla, 1986; Dickinson, 1994; Dickinson va boshq., 1996). Tu ko'plab tadqiqotlarning natijalari shuni ko'rsatdiki, instrumental xatti-harakatlar haqiqiy maqsadga yo'naltirilgan bo'lishi mumkin, ya'ni mukofot qiymatining o'zgarishiga sezgir, shuningdek, harakatning samaradorligi (Qarang: Dikkinson va Ballein, 1994; 2002; Balleine, 2001 baholash uchun). Shunga qaramay, doimiy sharoitlarda keng ta'lim jarayonida yangi qabul qilingan harakatlar hatto nisbatan avtomatik va rag'batlantiruvchi omillarga aylanishi mumkin - odat shakllanishi deb nomlangan jarayon (Adams va Dikkinson, 1981; Adams, 1982; Yin va boshq., 2004). Shunday qilib, odatdagidek ogohlantiruvchi vositalar tomonidan avtomatik tarzda tuzilgan odatlar odatda kutish yoki natija berish bilan nazorat qilinmaydi; natijada natija qiymatining o'zgarishiga ta'sir ko'rsatmaydi. Shu nuqtai nazardan, ta'sir qonuni faqat odatiy xulq-atvorda qo'llanadigan alohida holatdir.

Instrumental xatti-harakatning joriy tasnifi uni ikki sinfga ajratadi. Tu birinchi sinf instrumental zaiflik bilan boshqariladigan maqsadli harakatlarni o'z ichiga oladi; natija qiymatining o'zgarishiga ta'sir qiladigan ikkinchi odatiy xatti-harakatlar (1 stol). Natijada devalvatsiya va instrumental ziddiyatning buzilishi kabi xatti-harakatlarni qo'llash orqali Yin va boshqalar dorsal striatumning sensorimotor (dorsolateral striatum, DLS) va assotiv hududlari (dorsomedial striatum, DMS) o'rtasida funktsional disosiytsiyaniYin va Knowlton, 2004; Yin va boshq., 2004, 2005a; Yin va boshq., 2005b; Yin va boshqalar, 2006a). DLSning zarari odatdagi rivojlanishni kamaytirdi, natijada maqsadga yo'naltirilgan xatti-harakatlarning nazorat tartibi paydo bo'ldi. DMS ning zararlanishi teskari ta'sirga ega bo'lib, odatiy nazoratga qaratilgan maqsadga o'tishga olib keladi. Yin va boshq. DLS va DMS ularning qo'llab-quvvatlaydigan assotsiatsiyaviy tuzilmalar uchun funktsional ravishda ajralib ketishi mumkin degan xulosaga keldi: DLS odatning shakllanishi uchun juda muhim, ammo DMS maqsadga yo'naltirilgan harakatlarning qo'lga olinishi va ifodalanishi uchun juda muhimdir. Ushbu tahlil, muayyan sharoitlarda (masalan, uzaytirilgan trening) DMSga qaram bo'lgan tizimdan DLSga bog'liq tizimga o'tish mumkinligini oldindan taxmin qilmoqda, bu primatlar bo'yicha muhim adabiyotlar bilan keng kelishuvga asoslangan, shu jumladan, inson neyroimaging (Hikosaka va boshq., 1989; Jueptner va boshq., 1997a; Miyachi va boshq., 1997; Miyachi va boshq., 2002; Delgado va boshq., 2004; Haruno va boshq., 2004; Tricomi va boshq., 2004; Delgado va boshq., 2005; Samejima va boshq., 2005; Haruno va Kawato, 2006a, b; Lohrenz va boshq., 2007; Tobler va boshq., 2007). Albatta, t eslash kerakyolg'iz jismoniy joylashuvi (masalan, dorsal yoki ventral) kemiruvchi striatum va primat striatumini solishtirishda ishonchli qo'llanma bo'lishi mumkin emas; bunday taqqoslash anatomik ulanishni diqqat bilan ko'rib chiqqandan keyin ehtiyotkorlik bilan amalga oshirilishi kerak.

Dorsal striatal lezyonlar ta'siri akumbensning zararlanishi bilan solishtirish mumkin (Smit-Ro va Kelley, 2000; Atallah va boshqalar, 2007). Yuqorida ta'kidlab o'tilganidek, xatti-harakatni "maqsadga yo'naltirilgan" deb belgilash uchun standart sinovlar natija qiymatini pasaytirish va oqibat-natija ehtimolliklariningDikkinson va Ballein, 1993). DMS ning lezyonlari har ikkala manipulatsiyaga ham sezgir emas (Yin va boshq., 2005b), shunda akumbens yadrosining yoki qobiqning zararlanishiCorbit va boshq., 2001). Bundan tashšari, ushbu xatti-ḱarakatlar tajriba testlari, odatda, yangi o'rganish bilan bulg'anishsiz o'rgatilgan narsani baholash uchun biron bir mukofotni taqdim etmasdan yo'q bo'lib ketadi. Shunday qilib, vakillik tuzilishini nazorat qilish xatti-harakatini bevosita tekshirishadi. Qo'shimcha eksperimental nazorat sifatida, pul mukofotlari aslida topshiriladigan alohida devalvatsiya testini o'tkazish foydalidir - "mukofotlangan test". DMS ning zararlanishi mukofotlash testidagi devalvatsiyaga erishish uchun sezgirlikni bekor qilmadi, chunki kutilganidek, harakatlarga ta'sir qiladigan devalüasyon natija ta'siri, ish-natija kodirovkasidan mustaqil harakatni bostiradi. Boshqa tomondan, akumbensning qobiqli lezyonlari, yo'qolish testida yoki mukofotlangan testlarda devalvatsiyaga olib kelishi mumkin bo'lgan sezuvchanlik darajasini pasaytirmadi, akumbensning asosiy lezyonlari esa har ikki testda devalvatsiyaga sezgirlikni yo'qotdiCorbit va boshq., 2001). Biroq, favqulodda vaziyatning buzilishi sezuvchanligi, zararlanishning ta'siri bilan bog'liq emas edi, shuning uchun sichqonlar shilimshiqlarning zararli ta'siridan keyin kodlashni va natijalarni aks ettirish natijalarini namoyon qilishlarini ko'rsatdi.

Dopaminning o'rni: Mesolimbik va nigrostriatal

DA neyronlarning maymunlarda fasik faoliyatiga oid kashshof tadqiqotlardan so'ng, sohada umumiy taxmin quyidagicha: barcha DA hujayralari asosan xuddi shunday yo'l tutadi (Shultz, 1998a; Montague va boshq., 2004). Biroq, mavjud ma'lumotlar, shuningdek, anatomik ulanish, aksini bildiradi. Aslida, striatumdagi funksional heterojenlikning yuqoriroq tahlili, midbrendagi DA hujayralariga ham berilishi mumkin.

ULARNING hujayralari ikkita asosiy guruhga bo'linadi: VTA va substantia nigra pars compacta (SNc). Agar VTA akademiklarga mukofot bilan bog'liq bilimlarni o'rganish sohasida e'tibor markazida bo'lib, juda katta miqyosli nigrostriatal yo'lni nisbatan e'tiborsiz qoldirdi, birinchi navbatda, Parkinson kasalligidagi roliga e'tibor qaratdi. Mavjud tushunchaning roli ULARNING o'qiyotgan sohasida DA hujayralarining fosik faoliyati mukofotni bashorat qilish erro'sini aks ettirish taklifi kuchli ta'sir ko'rsatdir (Ljungberg va boshq., 1992; Shultz, 1998b). MenSchultz va uning hamkasblari tomonidan qo'llaniladigan eng keng tarqalgan Pavlov konditsionasi vazifasi, bu neyronlarning mukofotga javoban o'qqa tutilishi (AQSh), ammo o'rganish bilan, AQSh tomonidan uyg'unlashtirilgan faoliyat CSga o'tkaziladi. AQSh ta'limdan so'ng yo'qolganida, DA hujayralari etkazib berishning kutilgan vaqtida faoliyatida qisqa tushkunlikni ko'rsatadi (Waelti va boshq., 2001; Fiorillo va boshq., 2003; Tobler va boshq., 2003). Bunday ma'lumotlar turli xil hisoblash modellari (Schultz va boshq., 1997; Shultz, 1998b; Brown va boshq., 1999; Montague va boshq., 2004).

Sintez va tarqatish mexanizmlarida bir nechta nazorat darajasini hisobga olgan holda, DA neyronlarning tarqalishi DAning ozod qilinishi bilan tenglasha olmaydi, biroq bu ikki chora-tadbirlar o'zaro bog'liq bo'lishi kerak. Haqiqatan ham, Carelli va uning hamkasblari yaqinda o'tkazilgan tezkor tekshiruv uslubiy voltammetriyasidan foydalanib, accumbens yadrosidagi haqiqiy VOZ nashriyoti tuyadi Pavlov konditsionasidagi taxminiy xato bilan bog'liq (Day va boshqalar, 2007). Pavlov avtomashinasida sukroz mukofotini olgach, darhol akumbenslar markazida fasik DA signalini topdilar. Biroq, Pavlovning konditsionerini kengaytirgandan so'ng, bu signal endi mukofotdan keyin topilmadi, balki CS o'rniga o'tadi. Ushbu topilma original "taxminiy xato" gipotezasini qo'llab-quvvatlaydi. Bundan tashqari, ilgari ishlaydigan, Pavlov kvilingini DA retseptorlari antagonizmi yoki ALARM nishonchasida zaiflashishi natijasida (Di Ciano va uning hamkorlari, 2001; Parkinson va boshq., 2002). Shu bilan birga, tadqiqotdan olingan bir kuzatish yangi va katta qiziqish uyg'otdi: mukofotni oldindan aniqlaydigan CS + bilan uzatishni boshlaganidan so'ng va mukofotni prognoz qiladigan CS - CS-dan keyin xuddi shunday, ammo kichikroq ULARNING signali ham kuzatilgan bo'lsa-da, boshlang'ich cho'qqidan keyin (masalan, nishon boshlanganidan keyin 500 ~ 800 millisekundga)Day va boshqalar, 2007, Shakl 4). O'quv jarayonida bu bosqichda hayvonlar hech qachon CS-ga yaqinlashmaydi, biroq doimiy ravishda CS + ga murojaat qilishadi. Shunday qilib, prognozdan keyin darhol Fasik DA signal yondashuv javobini ishlab chiqarishda nedensel rol o'ynashi mumkin emas, chunki javob bo'lmaganda ham u mavjud. Bunday ogohlantirishni o'rganish uchun hali ham zarur bo'lgan signal bo'ladimi-yo'qmi, hozirgi modellardan hech biri taxmin qilinmaydi.

Qizig'i shundaki, mahalliy DA ekspluatatsiyasi bu vazifada ishlashni pasaytiradi (Parkinson va boshq., 2002). CS ni ishlab chiqaradigan CS-dan so'ng, daliliy DA signallari kuzatilgan bo'lsa-da, CRning butunligini hosil qilmaydigan bo'lsa ham, fosik va tonik OAni lokal tükenme bilan bekor qilish, CRlarning ishlashini buzadi. Bunday natija Pavloviy CRni bajarish uchun accumbenslarda fasik DA signalining zarur emasligini ko'rsatadi, ammo ta'lim jarayonida rol o'ynashi mumkin, shuning uchun sekinroq, ko'proq tonik ULARNING signali (ehtimol sarf-xarajat ishlarida bekor qilingan) ishlash uchun muhimdir yondashuv javobining (Cagniard va boshq., 2006; Yin va boshq., 2006b; Niv va boshqalar, 2007). Bu imkoniyat sinovdan o'tmoqda.

Fazik DA signalining o'rganishdagi nedensel roli uchun to'g'ridan-to'g'ri dalillar mavjud bo'lmasa-da, "bashorat qilish xatosi" gipotezasi katta qiziqish uyg'otdi, chunki u aniq ta'lim modellarida qo'llaniladigan ta'lim signallarining turi, Rescorla-Wagner modeli va real vaqt uzayishi kabi vaqtinchalik farqni kuchaytirish o'rganish algoritmi (Shultz, 1998b). Ushbu izohga ko'ra, ishtahani o'rganish, qabul qilingan va kutilgan mukofot o'rtasidagi farq bilan belgilanadi (yoki vaqtincha bir-birini to'ldiruvchi ikkita mukofot predmeti). Bunday ta'lim signallari mukofotning barcha belgilaridan salbiy hisobot bilan tartibga solinadi (Shultz, 1998b). Predictorga hech qanday mukofot to'g'ri kelmasa, unda salbiy teskari aloqa mexanizmi DA neyronlarning faoliyatida chuqurlashib ketadi. Shunday qilib, o'rganish bashorat qilish xatoining progressiv qisqarishini o'z ichiga oladi.

Ushbu modellardagi ta'lim signallarining nozikligi, ehtimol, ayrimlari anatomik haqiqatdan chalg'itdi. Tadqiqotda Day va boshq. (2007)akumbensdagi DA signali asosan VTA hujayralaridan keladi, ammo butunlay boshqacha anatomik ulanishga ega bo'lgan boshqa TU hujayralarining bir xil javob profilini ko'rsatishi va bir xil signalni taqdim etishi ehtimoldan yiroq emas. DA hujayralari butunlay boshqacha funktsiyalari bo'lgan turli striatal hududlarga loyiha qilib, turli striatal hududlardan farqli salbiy qayta besleme signallarini ham qabul qilganligi sababli, DA hujayralarining signallari ko'proq gradientJoel va Weiner, 2000; Wickens va boshq., 2007). Dopaminning tarqalishini tartibga soluvchi presinaptik retseptorlari va qabul qilish va degradatsiyalash mexanizmlari, shuningdek, striatumCragg va boshq., 2002; Rays va Cragg, 2004; Wickens va boshq., 2007; Rays va Cragg, 2008).

Shu sababli, mesokaktsim yo'llari Pavlovning ta'limida, davlatlarning qiymatini va rag'batlantiruvchi kuchlarini sotib olishda chegaralangan rol o'ynaydi, shuning uchun nigrostriatal yo'l yo'ldan o'rganish, harakatlar qadriyatlarini qo'lga kiritish uchun muhim ahamiyatga ega. Tyo'naltirilsa, hozirgi vaqtda qabul qilinganidek, fazoviy DA signallari turli taxminiy xatolarni kodlashi mumkin. Ushbu dalilni uchta dalillar qo'llab-quvvatlaydi. Birinchidan, nigrostriatal yo'lda DA ning genetik kamayishi instrumental xarakatlarning bajarilishiga va bajarilishiga putur etkazadi, ammo Mezolimbik yo'lda DA ning kamayishiSotak va boshq., 2005; Robinson va boshq., 2007). Ikkinchidan, SNcdagi DA hujayralari maqsadli striatal mintaqadagi hujayralarga o'xshash harakatlarning qiymatini kodlashi mumkin (Morris va uning hamkorlari, 2006). Uchinchidan, DLSga nigrostriatal proektsiyani selektratsiyali lezyoni odatning shakllanishiga putur etkazadi (Faure va boshq., 2005).

Palmiter va uning hamkasblari tomonidan olib borilgan so'nggi ishda genetik usulda ishlab chiqilgan DA zaif sichqonlarning instrumental ta'lim va ishlashda jiddiy ravishda buzilganligini ko'rsatdi, ammo ularning ishlashi L-DOPA inyeksiyasi yoki nigrostriatal yo'lga virusli genlarni o'tkazish yo'li bilan tiklanishi mumkin edi (Sotak va boshq., 2005; Robinson va boshq., 2007). Buning aksincha, ventral striatumda DAning tiklanishi instrumental xulqni tiklash uchun zarur emas edi. Qanday DA signallari instrumental o'rganishga imkon berishiga qaramay, ochiq savol bo'lib qolsa-da, bu o'z-o'zidan paydo bo'lgan harakatlarning qiymatini kodlashi mumkinligi, ya'ni muayyan harakatlar rejasini hisobga olgan holda qanchadan-qancha mukofotni nazarda tutishi mumkinligi.

Dorsal striatum, umuman, miyada MR retseptorlari eng yuqori ifodasini o'z ichiga oladi va eng katta dopaminerjik proektsiyani oladi. DMSga bo'lgan DA prognozi DLSga nisbatan prognozdan farqli o'laroq, o'rganishda boshqacha rol o'ynashi mumkin, chunki bu ikki mintaqa DA ning bo'shatish, tortib olish va degradatsiyasining vaqtinchalik rejimida sezilarli darajada farqlanadi (Wickens va boshq., 2007). Biz meditsina SNc dan DMS uchun DAR prognozini aksiya natijalarini o'rganish uchun juda muhimligini taxmin qilmoqdamiz, shunga qaramay, lateral SNc dan DLSga bo'lgan DA prognozi odat shakllanishi uchun juda muhimdir. Agar bu to'g'ri bo'lsa, SNcdagi DA hujayralari CS-ga asoslangan emas, o'z-o'zini yaratgan harakatlar-instrumental prognostik xatolarga asoslangan holda mukofotni aniqlashda xatolarni kodlashni kutishlari kerak. Ushbu da'voni qo'llab-quvvatlovchi dastlabki dalillar Morris va boshqalarning SNc neyronlardan instrumental o'rganish vazifasi (Morris va uning hamkorlari, 2006). Maymunlar kamsituvchi rag'batlantiruvchi javob sifatida qo'llarini siljitish uchun o'qitildi (SD) muvofiq harakat va mukofotning ehtimoli borligini ko'rsatdi. SD muayyan harakatlarning kutilgan mukofoti ehtimoli asosida harakat qiymatiga mos keladigan DA neyronlarida fosik faollikni keltirib chiqaradi. Eng qiziqarli bo'lsa-da, Sga bo'lgan DA javobD harakat qiymati bilan arttıysa, teskari, bu nöronların, bu qiymat bilan bog'liq bo'lgan, bir taxmin xatolarini kodlayan degan fikr bilan mos keladigan mukofotning o'zi uchun DA javobini to'g'ri edi. Ajablanarli emaski, ushbu hujayralardagi asosiy striatal maqsad, kaudat yadrosi, harakat qiymatlarini kodlovchi neyronlarSamejima va boshq., 2005). Shuni ta'kidlash kerakki, ushbu tadqiqotda xatti-harakatlarning qadr-qimmatini aniq baholaydigan xatti-harakatlardan foydalanilmayapti. Bizning modelimizning aniq tasavvuriga ko'ra, aniqlik kiritilmagan SD. Misol uchun, biz o'zimiz o'zimiz boshlagan harakatni mukofotlashda nigratsion DA neyronlarning portlashini taxmin qilamiz.

Bizning fikrimizcha, mesoaccumbens ULARNING signali CSning qiymati, nigrostriatal signal, ehtimol DMSga prozalanadigan ushbu neyronlardan aks etadi, aksincha, uning ta'sirini aks ettiradi, yoki har qanday SD bu qiymatni oldindan belgilab beradi. Bundan tashqari, har ikkala instrumental va Pavloviyadagi o'rganish samarali o'qitish signalini boshqarish uchun salbiy hisobotning ba'zi shakllarini o'z ichiga oladi. Aslida, striatumdan midbrain DA neyronlariga to'g'ri proektsiyalar (Shakl 2) uzoq vaqt davomida ushbu turdagi salbiy geribildirimning neytral qo'llanilishiHouk va uning hamkorlari, 1995) va inhibitiv kirishning kuchi va tabiati hududdan hududga sezilarli darajada farq qilishi mumkin.

Shakl 2  

Kortik-bazal ganglion tarmoqlari

Hozirgi modellarga ko'ra, taxminiy xato, ta'limning qanchalik ko'p bo'lishini belgilaydigan ta'lim signalidir. Mavjud ekan, ta'lim davom etmoqda. Shunga qaramay, bu da'vo paydo bo'ladigan bo'lsa, harakatlarning qiymati uchun taxminiy xato, Pavlovning taxminiy xatolariga sintaktik ravishda o'xshash bo'lsa-da, keng qamrovli o'rganilmagan noyob xususiyatlarga ega. Rescorla-Wagner modeliga o'xshash an'anaviy modellarda, Pavlovning konditsionerini (cheklangan muvaffaqiyat bilan bo'lsa-da) eslab, asosiy xususiyati bashorat qilish xatosini tartibga soladigan salbiy hisobotdir. Ushbu chiqim, qo'lga kiritilgan prognozni, aniqrog'i jami odatda blokirovkalash tajribalarida ishlatiladigan aralashma ogohlantiruvchi tomonidanRescorla, 1988). Ushbu model sinfidagi bosh innovatsiya bo'lgan global xato atamasini yaratish uchun mavjud prognozlarni yig'ish. Biroq, instrumental harakatlar uchun, shaxsiy xato shartlari ko'proq ko'rinadi, chunki salbiy teskari aloqa bir vaqtning o'zida bir marotaba faqat bir harakatni bajarish mumkin bo'lgan bir nechta harakatlarning qiymatini qanday namoyon etishini ko'rish qiyin. Albatta, bir qator echim mavjud. Misol uchun, muayyan holatni hisobga olgan holda (eksperimental tarzda alohida S tomonidan amalga oshiriladi)D), mumkin bo'lgan harakatlar kurslari bir vaqtning o'zida qabul qilingan prognozlar sifatida ko'rsatilishi mumkin. Biroq, instrumental prognozlash xatolarining asosiy qiyinchiliki, harakatning o'ziga xos xususiyati bilan bog'liq. Pavlovning prognozi organizmdan mustaqil bo'lgan rag'batlantiruvchi namoyishni avtomatik ravishda kuzatib boradi. Instrumental prognozlash xatosi nazorat elementini ko'rib chiqishi kerak, chunki prognoz o'zini o'zi bajaradi va kontsentratsiyalangan harakat hayvonlarning oldingi harakatlardan kelib chiqadigan natijalarga emas, balki oqibatlarini bartaraf etishga asoslangan holda o'z-o'zidan chiqariladi. Natijada, neyroximlar va psixologiyada Pavloviy va instrumental o'quv jarayonlari o'rtasidagi farqni va shu bilan bog'liq bashorat qilish xatolarining tabiati buzilgan maqsadga yo'naltirilgan harakatlarning o'z-o'zidan paydo bo'lishiga mutlaqo noloyiqdir. Shu sababli, mavjud bo'lgan salbiy qayta besleme signalining turi, agar mavjud bo'lsa, ish qiymatlarini sotib olishni tartibga soladiDayan va Balleine, 2002).

Nihoyat, so'nggi ish, shuningdek, lateral SNc dan DLSga nigrostriatal proektsiyani odatdagi shakllantirishda ham taalluqladi. Faure va boshq. 6-OHDA yordamida DLS-ga tasavvur qilgan DA hujayralarini tanlab zararlangan va bu manipulyatsiya naychani devalvatsiya qilish usuli yordamida o'lchangan odatning shakllanishiga salbiy ta'sir ko'rsatgan bo'lsa-da, qo'lni bosish tezligiga hayratlanarli darajada kam ta'sir ko'rsatdiFaure va boshq., 2005). Boshqacha qilib aytganda, nazorat guruhida trening mashg'ulotlarni devalvatsiyaga olib keladigan odatiy xatti-harakatlarga olib kelmasa ham, zararlangan hayvonlarning maqsadga yo'naltirilgan tarzda javob berishi. Keyinchalik, DLSning eksototoksik zararlanishiga o'xshash Lokal Vu zo'riqishi shunga o'xshash, manipulyatsiyalar ham odatiy holga aylanadi va maqsadga yo'naltirilgan harakatlarYin va boshq., 2004). Xull va Spens ishlaridan ilhomlanib, zamonaviy temporal-farqi kuchaytirishni o'rganish algoritmlarida samarali mustahkamlash signallari allaqachon odat shakllanishi uchun muhim bo'lgan fasik DA signallariXull, 1943; Spence, 1947, 1960; Sutton va Barto, 1998).

Kortik-bazal ganglion tarmoqlari

Shu paytgacha biz striatumning funktsional heterojenligini muhokama qildik, lekin har qanday striatal mintaqa, harakat-natija ehtimolini o'z-o'zidan amalga oshiradigan harakatga aylantira olishi mumkin, deb taxmin qilish noto'g'ri bo'ladi. Aksincha, miya yarim sharlari kortik-bazal ganglion tarmoqlaridan tashkil topgan funktsional birliklarni (Swanson, 2000; Zaxm, 2005). Tbarcha bazal ganglionlarning kirish stantsiyasi bo'lgan striatum kortikal, talamik va midbrenli kirishlarni integrallashga qobiliyatli kortiko-bazal ganglion nashri bo'ylab noyob markazdir. Yuqorida ta'rif etilganidek, doimiy struktur bo'lishiga qaramasdan, turli xil striatal hududlar alohida funktsional tarmoqlarda ishtirok etishga o'xshaydi, masalan, akumbens limbik tarmoqdagi markaz va DMS sindromotor tarmog'ida ishlaydi. Bunday tarmoqlarning reentrantsiyali xususiyati tufayli, bu tuzilmaning hech bir komponenti mutlaq ma'noda yuqorida yoki pastda bo'ladi; Masalan, talamokortikal tizim ham striatum uchun katta kirish manbai, ham striato-pallidal va striato-nigral yo'llarning maqsadidir.

Parallel reentrant bazal ganglion looplari uzoq vaqt davomida tan olingan (Alexander va boshq., 1986), biz operatsion jihatdan aniqlangan vakillik tuzilmalari va integral xatti-harakatlarni yaratishda davrlar o'rtasidagi o'zaro bog'liqlik asosida ushbu davrlarning alohida funktsional rollarini ta'kidlaymiz. Shu asosda kamida to'rtta bunday tarmoqlarni ajratish mumkin: akkummblarning qobig'i va yadrosini o'z ichiga olgan limbik tarmoqlar, assotsiativ striatumni (DMS) o'z ichiga olgan assotsiatsiya tarmog'i va sensorimotor striatumni (DLS) o'z ichiga olgan sensorimotor tarmog'i. Ularning funktsiyalari tuyadi, Pavlov YR va CRlarning ta'siriga instrumental harakatlarga vositachilik qilishdan (masalan,Shakl 1).

Shakl 1  

Striatumning asosiy funktsional zonalari. Miyaning yarmini ko'rsatuvchi koronal qismdan olingan striatumning misoli (Paxinos va Franklin, 2003). Ushbu to'rt funktsional domen anatomik ravishda uzluksiz va nimaga mos keladiganligiga e'tibor bering ...

Yuqorida aytib o'tganimizdek, ventral striatum, asosan, yadroli akumbenslardan iborat bo'lib, ular keyinchalik alohida funktsional tarmoqda ishtirok etadigan qobiq va yadroga bo'linadi. Qobiqdagi kortikal (glutamaterjik) proektsiyalar infralimbik, markaziy va lateral orbital kortekslardan kelib chiqadi, yadro proektsiyalari ventral va dorsal prelimbik va old singulat kortekslari kabi prefrontal korteksning dorsal o'rta hatti hududlaridan kelib chiqadi (Groenewegen va boshq., 1990; Zaxm, 2000, 2005). Ushbu funktsiyalar tarmoqlarida yuqorida ko'rib chiqilgan dalillar shundan iboratki, qoramol foizi sarflanadigan narsalar va iste'molchi CRlarni sotib olishda ishtirok etadi; kashfiyotchi xatti-harakatlarning negizi, xususan, Pavlovning yondashuvlarini qabul qilish va ifodalash. Keyinchalik, kamida ikkita yirik tarmoqlar katta ventral yoki limbik kortiko-bazal ganglionlar tarmog'ida, biri iste'mol uchun, ikkinchisiga tayyorgarlik harakati va ularni Pavlovian shamollatish bilan almashtirish uchun ajratiladi (Shakl 1).

Dorsal striatum, xuddi shu tarzda, kamida ikkita asosiy hududga, assotsiativ va sensorimotorlarga bo'linishi mumkin. Birlashtiruvchi striatum (kaudat va primatlardagi old plyonenning qismlari) kutilgan sovg'alarni kutib turuvchi neyronlarni o'z ichiga oladi va kutilgan mukofotning kattaligiga ko'ra ularning otishini o'zgartiradi (Hikosaka va boshq., 1989; Hollerman va boshq., 1998; Kawagoe va boshq., 1998). Assotsiatsiya tarmog'ida prefrontal va parietal assotsiatsiyaning kortekslari va ularning DMS'dagi maqsadlari, natijaga erishish uchun, kutilgan natijalar ko'rinishidagi va vaqtinchalik xotirada, so'nggi natijalarga erishish nusxalari (Konorski, 1967). Boshqa tomondan, sensorimotor daraja sensorimotor kortekslarni va ularning bazal gangliondagi maqsadlarini o'z ichiga oladi. Ushbu o'chirib chiqqanlar vosita kortekslari va miya qaynoq motor tarmoqlariga yo'naltiriladi. Sensorimotor striatumdagi neytral faollik, odatda, kutilayotgan kutish muddati bilan modulyatsiyalanmagan, assotsiativ striatumdagi neyronlardan ko'ra ko'proq harakatga bog'liq faoliyatni ko'rsatadi (Kanazawa va boshq., 1993; Kimura va boshqalar, 1993; Kosta va boshq., 2004). Nihoyat, medial-lateral gradientga qo'shimcha ravishda, dorsal striatumning oldingi-orqa o'qi bo'ylab sezilarli funksional heterojenlik ham mavjud, biroq, har qanday batafsil tasniflashgaYin va boshq., 2005b).

Tadqiqotlar hozirgi kunga qadar ushbu tarmoqlarning kortikal va striatal qismlariga qaratilgan. Umuman olganda, kortikal soha lezyonlari uning striatal maqsadidagi (masalan,Ballein va Dikkinson, 1998; Corbit va Balleine, 2003; Yin va boshq., 2005b). Biroq, tarmoqdagi boshqa komponentlar shunga o'xshash vazifalarni bajarishi mumkin. Misol uchun, birlashma tarmog'ining tarkibiy qismlaridan biri bo'lgan talamus mediodoral yadrosi lezyonlari, DMS'ga va prelimbik korteksga (masalan, DMS) zarar etkazilishi bilan bir qatorda devalvatsiya va favqulodda vaziyatni yo'qotish natijalariga ta'sirchanligini yo'qotdiCorbit va boshq., 2003). Shunday ekan, bizning umumiy modelimiz tarmoqning har bir tarkibiy qismiga ziyon etkazganidan keyin xuddi shunga o'xshash xatti-harakatlarning kamchiliklarini taxmin qilsa-da, u pallidum yoki talamus kabi biron bir struktura uchun bir nechta funktsional domenlarni nazarda tutadi.

Tarmoqlar o'rtasidagi o'zaro aloqa

Aksariyat hollarda, Pavlov va instrumental ta'lim parallel ravishda amalga oshadi. Biroq PIT kabi hodisalar bu boshqa xil jarayonlarning o'zaro ta'sir qilishi mumkinligini ko'rsatadi. Mustaqil ishlab chikaruvchi tizimlarni aniklashning keyingi bosqichi ushbu tizimlarni xatti-xarakatlarni yaratish uchun qanday kelishilganligini tushunishdir. So'nggi anatomik ishlarga muvofiq jozibali taklif, yuqorida bayon qilingan tarmoqlar ierarxik ravishda tashkil etilgan bo'lib, ularning har biri ierarxiyadagi loyiq, funktsional vositachi bo'lib xizmat qiladi va ma'lumotlarning bir darajadan ikkinchi darajagacha tarqalishiga imkon beradi. Ayniqsa, striatum va midbrain o'rtasida yaqinda topilgan spiralli ulanishlar tarmoqlar orasidagi o'zaro ta'sirlarni amalga oshirishga imkon beradigan anatomik tashkilotni ko'rsatadi (Shakl 2). Habar va uning hamkasblari tomonidan ko'rinadiki, striatal neyronlar DA-neyronlarga to'g'ridan-to'g'ri inhibitiv proeksiyalar yuboradi, ulardan o'zaro DA prognozlari, shuningdek DA neyronlari loyihasi, bu esa o'z navbatida loyihani boshqa striatal hududga (Yangiliklar va boshq., 2000). Ushbu proektsiyalar axborotni uzatishning ilgarilashini bir yo'nalishda, limbik tarmoqlardan assotsiativ va sensorimotor tarmoqlarga yo'naltirish imkonini beradi. Misol uchun, Pavlovning prognozi (CSning olingan qiymati) limbik darajadagi samarali o'qitish signalini kamaytirishi mumkin, va tasodifan DA signalini keyingi bosqichda kuchaytiradi. Effektiv ta'lim sinyalinin bekor qilinishi odatda salbiy qayta besleme signali orqali inhibitiv proeksiyalar orqali amalga oshiriladi, masalan, striatumdan DA neyronlarga GABAergik o'rta tirqishli projektor neyronlardan. Shu bilan birga, anatomik tashkilot tomonidan tavsiya etilgan (Yangiliklar va boshq., 2000; Yangiliklar, 2003) qo'shni kortiko-bazal ganglionlar tarmog'i uchun DA signalining potensiatsiyasi (ierarxiyadagi keyingi daraja) disinhibitsion proektsiyalar (masalan, GABAergik striatal proyektsiya neyronlari GABAerjik interferonslarga DA neyronlarga yuboriladi) orqali amalga oshirilishi mumkin. Shunday qilib, limbik tarmog'ining o'rgatilgan qiymati birlashtiruvchi tarmoqqa o'tkazilishi mumkin, bu esa har bir iteratsiya bilan xulq-atvorga moslashishni takomillashtirish va kuchaytirish imkonini beradi (Ashby, 1960). Ushbu model shuning uchun turli xil neyron tarmoqlarning ta'limning turli bosqichlarida ilg'or ishtirokini, turli ma'lumotlar (Jueptner va boshq., 1997b; Miyachi va boshq., 1997; Miyachi va boshq., 2002; Yin, 2004; Everitt va Robbins, 2005; Yin va Knowlton, 2005; Belin va Everitt, 2008).

PIT kabi aniq funktsional jarayonlarning o'zaro ta'sirini talab qiluvchi hodisalar bunday turdagi modellar uchun samarali sinov maydonchasini beradi. Haqiqatan ham, ierarxik model PIT bo'yicha so'nggi tajribaviy topilmalarga mos keladi. Modelga ko'ra, Pavlov-instrumental o'zaro ta'sirlar striatum va DA neyronlari o'rtasidagi o'zaro bog'lanishlar orqali amalga oshiriladi. ULARNING antagonistlar tomonidan bekor qilingan va VTA ning mahalliy inaktivatsiyasi uchun umumiy transfer uchun juda muhimDickinson va boshq., 2000; Murschall va Hauber, 2006); shunga qaramay, amfetaminning mahalliy infüzyonu, ehtimol, DA darajasini oshiradi, shu bilan birga, akumbensga sezilarli darajada ta'sir qilishi mumkin (Wyvell va Berridge, 2000). Boshqa tomondan, ventral striatal dopaminning o'ziga xos uzatishdagi o'rni kamroq. Ba'zi dalillar VTAni inaktivatsiyalashdan so'ng saqlanib qolishi mumkinligini ko'rsatadi (Corbit va boshq., 2007), lekin, kabi Corbit va Janak (2007) yaqinda ma'lum qilinganidek, DLSni inaktivatsiya qilish yo'li bilan maxsus uzatish bekor qilindi va bu ta'sirni tanlashni rag'batlantirishning bu aspekti nigrostriatal proektsiyaniCorbit va Janak, 2007). Ierarxik nuqtai nazar bilan kelishib olgach, Corbit va Janak (2007) DLS ning inaktivatsiyasi Palovian iplari selektiv eksitatori ta'sirini bekor qilgan bo'lsa-da (shunga qaramay, Corbit va boshq., 2001), DMSni inaktivatsiya qilish faqat ushbu takliflarning umumiy eksitatori ta'sirini saqlab qolishda ko'rinadigan bo'lsa, transferning natijasini tanlanganligini bekor qildi, birlashtiruvchi kortikob-bazal ganglionlar tarmog'ining qismi bo'lgan mediodoral talamusningOstlund va Balleine, 2008). Ushbu dastlabki natijalarga asoslanib, DMS faqatgina o'ziga xos uzatish uchun vositachilik qiladi, DLS esa Pavlovning buyruqlaridagi instrumental harakatlar bo'yicha o'ziga xos va umumiy eksitatori ta'sirlari uchun zarur bo'lishi mumkin.

Qizig'i shundaki, limbik striatum, dorsal striatum'a loyiha qilgan DA hujayralariNauta va boshq., 1978; Nauta, 1989); striatumga dopaminerjik proektsiyalar va midbrenga qaytariladigan striatal proektsiyalar yuqori assimetrik (Yangiliklar, 2003). Limbic striatum DA neyronlari bilan cheklangan kirishni oladi, ammo hali ham ko'p DA neyronlar to'plamiga keng tarqalgan chiqimlarni yuboradi va aksincha, sensorimotor striatum uchun to'g'ri keladi. Shunday qilib, limbik tarmoqlar assotsiativ va sensorimotor tarmoqlarni boshqarish uchun mukammal holatda. Bu erda neuroanatomiya, Pavlovning instrumental xulq-atvorga yordam berishning teskarisidan ko'ra kuchliroq ekanligi haqidagi xulq-atvor ma'lumotlari bilan rozi. chindan ham muhim dalillar shundan dalolat beradiki, instrumental harakatlar, hanuzgacha Pavlovskiy CRlarni xavotirlantirmasdan emas, balki neyrobiologik tushuntirishlarni kutib turganEllison va Konorski, 1964; Uilyams, 1965).

Xulosa

Bu erda muhokama qilingan ierarxik modelni ta'kidlash joizki, faqat korteks va kortikal joylar orasidagi uzoq masofaga ulanishga tayanadigan boshqalardan farq qiladi (Fuster, 1995). Kortik modullarning potteriyasi sifatida qaramasdan, ma'lum bir tarkibiy funktsiyalarni amalga oshiradigan ma'lum bir tarkibiy qism va miya bog'lanishini o'z ichiga oladi. Bundan tashqari, 19 dan meros bo'lib o'tgan taxminlardan saqlaydith asrdagi nevrologiya, umumiy miya yarim korteks va ayniqsa, prefrontal korteks qandaydir tarzda "mushaklarni nazorat qiluvchi" yuqori " (Miller va Cohen, 2001).

Bundan tashqari, ushbu modeldan bir nechta o'ziga xos prognozlar paydo bo'lishi mumkin: (i) O'z-o'zidan hosil qilingan harakatlar va turli neyro substratlarini va funktsional rollarini aks ettiruvchi xususiyatlar bilan shov-shavqatsiz va ogohlantiruvchi xatolar bo'lishi kerak. (ii) Har bir alohida kortiko-bazal ganglionlar tarmog'ining pallidal va talamik tarkibiy qismlari nafaqat kortikal va striatal qismlarga emas, balki har bir tarmoq uchun o'ylangan xatti-harakatlarni nazorat qilish uchun kerak bo'ladi. (iii) o'rganishning turli bosqichlarida turli neyron tarmoqlarini ilgari surish kerak. (iv) Akumbens faoliyati DA neyronlarni to'g'ridan-to'g'ri boshqarishi va, o'z navbatida, dorsal striatal faoliyatni boshqarishi mumkin. Hisobotga asosan Gollandiya (2004) PITning instrumental tayyorgarlik bilan ortib borishini nazarda tutgan holda, assotsiativ va sensorimotor tarmoqlarning bu "cheklovli" nazorati kengaytirilgan treninglar bilan kuchayishi kutilmoqda.

Batafsil ma'lumotlarsiz, ierarxik modeli rasmiy hisobini taqdim etish hali ham erta. Shunga qaramasdan, yuqorida keltirilgan munozarada, mesoakumbens mukofotining joriy versiyalari, mukofot jarayonining tabiati va etarli bo'lmagan xatti-harakatlarni qo'llash bo'yicha muammoli taxminlarga asoslanadi. Birlashtiruvchi tamoyillar, har doim ilmiy korxona maqsadi faqat eksperimental ma'lumotlarning haqiqatiga asoslangan bo'lishi mumkin, ammo ular bunga befarq bo'lishi mumkin. Miyaning funktsiyasi, nihoyat, xulq-atvorni yaratish va nazorat qilishdir, batafsil xatti-harakatlar tahlillari neytral jarayonlarni tushunishning asosi bo'ladi, chunki tabiiy va immunitet tanqisligining batafsil tavsifi immun tizimining oshkor bo'lishiga imkon beradi. Ko'rinishidan haqiqat bo'lsa-da, ularning funktsiyalari aniqlangan va aniqlik bilan o'lchanadigan darajada miya mexanizmlarini tushunishimiz juda qiyin. Neyral funktsiyani o'rganish eksperimental tarzda yaratilgan psixologik imkoniyatlarga asoslangan holda, masalan, harakat natijasi va rag'batlantiruvchi oqibatlarga olib keladigan vaziyatlarning namoyishi, ma'lum anatomiya tashkiloti va fiziologik mexanizmlar yangi nurda namoyon bo'ladi va yangi farazlar va yangi eksperimentlar dizayni. Bu yo'nalishdagi dastlabki qadam bo'lib, biz bu erda muhokama qilingan ramka kelgusi tergov uchun foydali bo'lgan boshlang'ich nuqtaga xizmat qilishiga umid qilamiz.

rahmat

Deyl Lovingerga foydali maslahatlar uchun rahmat. HHY NIAA, NIAAA ichki kasalliklar klinik va fundamental tadqiqotlar bo'limi tomonidan qo'llab-quvvatlandi. SBI NIH granti MH 17140 va BWB tomonidan NIH tomonidan MH 56446 va HD 59257 tomonidan qo'llab-quvvatlanadi.

Manbalar

  1. Adams disk. Devalvatsiyani kuchaytirish uchun instrumental javobning sezgirligi o'zgarishlari. Uchinchi chorakda eksperimental psixologiya jurnali. 1982; 33b: 109-122.
  2. Adams CD, Dickinson A. Instrumental javob qaytarish, devalvatsiyani kuchaytiradi. Uchinchi chorakda eksperimental psixologiya jurnali. 1981; 33: 109-122.
  3. Aleksandr GE, DeLong MR, Strick PL. Bazal ganglion va korteksni bir-biriga bog'laydigan funktsional jihatdan ajratilgan aylanalarni parallel tashkil qilish. Annu Rev Neurosci. 1986; 9: 357-381. [PubMed]
  4. Ashby WR. Miya uchun dizayn. ikkinchi nashr. Chapman va Xoll; 1960 yil.
  5. Atalloh HE, Lopez-Paniagua D, Rudy JW, O'Reilly RC. Ventral va dorsal striatumda mahoratni o'rganish va ishlash uchun alohida neyron substratlar. Nat Neurosci. 2007; 10: 126-131. [PubMed]
  6. Ballein BW. Instrumental konditsionerlik jarayonida rag'batlantirish jarayoni. In: Mowrer RR, Klein SB, muharrirlar. Zamonaviy ta'lim nazariyalarining qo'llanmasi. Mahwah, NJ, AQSH: Lawrence Erlbaum Associates, Inc., Nashriyotlar; 2001. 307-366-sahif.
  7. Ballein BW. Oziq-ovqat izlashning asabiy asoslari: kortikostriatolimbik davrlarda ta'sir, uyg'otish va mukofot. Fiziol Behav. 2005; 86: 717-730. [PubMed]
  8. Ballein BW, Dikkinson A. Maqsadga yo'naltirilgan instrumental harakat: favqulodda va rag'batlantiruvchi ta'lim va ularning kortikal substratlar. Neyrofarmakologiya. 1998; 37: 407-419. [PubMed]
  9. Ballein BW, Corbit LH. Oksumbenslar yadrosi va qobig'ining leykozlari Palovian-instrumental transferning umumiy va natija-o'ziga xos shakllariga dissomatsiz ta'sir ko'rsatadi; Neuroscience jamiyatining yillik yig'ilishi; 2005.
  10. Ballein BW, Killkross S. Parallel rag'batlantirish jarayoni: amigdala funktsiyasining ajralmas ko'rinishi. Trends Neurosci. 2006; 29: 272-279. [PubMed]
  11. Belin D, Everitt BJ. Kokainni qidirib topish odatlariga Dopaminga bog'liq bo'lgan ketma-ket ulanishga bog'liq. Ventralni Dorsal Striatum bilan bog'lash. Neyron. 2008; 57: 432-441. [PubMed]
  12. Berke JD, Hyman SE. Qo'shadi, dopamin va xotiraning molekulyar mexanizmlari. Neyron. 2000; 25: 515-532. [PubMed]
  13. Berrij KC, Robinson TE. Dopaminning mukofotda qanday rol o'ynashi mumkin: hedonik ta'sir, mukofotni o'rganish yoki rag'batlantirishga intilishmi? Brain Res Brain Res Rev. 1998; 28: 309-369. [PubMed]
  14. Bolles R. Yordamni kuchaytirish, kutish va o'rganish. Hissiy chiqishlar. 1972; 79: 394-409.
  15. Jigarrang J, Bullock D, Grossberg S. Bazal ganglionlar qanday kutilmagan sovg'a belgilariga qay tarzda javob berish uchun parallel eksitatori va inhibitori o'rganish usullaridan foydalanadilar. J Neurosci. 1999; 19: 10502-10511. [PubMed]
  16. Jigarrang PL, Jenkins HM. Kabutarning kalit pekini avtomatik ravishda shakllantirish. Xulq-atvorni eksperimental tahlil qilish jurnali. 1968; 11: 1-8. [PMC bepul maqola] [PubMed]
  17. Cagniard B, Beeler JA, Britt JP, McGehee DS, Marinelli M, Zhuang X. Dopamin yangi o'rganishlarsiz ish faoliyatini oshiradi. Neyron. 2006; 51: 541-547. [PubMed]
  18. Kardinal RN, Cheung TH. Nucleus accumbens yadroli lezyonlar sichqonchani kechiktirilgan mustahkamlash yordamida instrumental o'rganish va ishlashni pasaytiradi. BMC Neurosci. 2005; 6: 9. [PMC bepul maqola] [PubMed]
  19. Kardinal RN, Parkinson JA, Hall J, Everitt BJ. Diqqat va motivatsiya: amigdala, ventral striatum va prefrontal korteksning ahamiyati. Neurosci Biobehav Rev. 2002; 26: 321-352. [PubMed]
  20. Cheer JF, Aragona BJ, Heien ML, Seipel AT, Carelli RM, Wightman RM. Uyg'unlashtirilgan akupumbal dopamin va neyrokompleks harakatga maqsadga yo'naltirilgan xatti-harakatlar. Neyron. 2007; 54: 237-244. [PubMed]
  21. Colwill RM, Rescorla RA. Instrumental ta'limda biriktirilgan tuzilmalar. In: Bower G, muharriri. O'qish va motivatsiya psixologiyasi. Nyu-York: Academic Press; 1986. 55-104-sahif.
  22. Corbit LH, Ballein BW. Instrumental sharoitda prelimbik korteksning roli. Behav Brain Res. 2003; 146: 145-157. [PubMed]
  23. Corbit LH, Janak PH. Yanal, ammo medial bo'lmagan dorsal striatumning inaktivatsiyasi Pavlovning ogohlantirishlaridagi instrumental ta'sirga ta'sirini yo'q qiladi. J Neurosci. 2007; 27: 13977-13981. [PubMed]
  24. Corbit LH, Muir JL, Ballein BW. Instrumental konditsionerda yadro aksumbenslarining roli: Oksumbenslar yadrosi va qobig'i orasidagi funktsional disosiyatsiyani isbotlash. Neuroscience jurnali. 2001; 21: 3251-3260. [PubMed]
  25. Corbit LH, Muir JL, Ballein BW. Mediomatal talamus va anterior talamik yadrolarining leykajlari kalamushlarda instrumental shamollatishning ajraladigan ta'sirini keltirib chiqaradi. Eur J Neurosci. 2003; 18: 1286-1294. [PubMed]
  26. Corbit LH, Janak PH, Ballein BW. Pavlov-instrumental transferning umumiy va natija o'ziga xos shakllari: motivatsion holatdagi o'zgarishlarning ta'siri va ventral tegmental maydonni inaktivatsiyasi. Eur J Neurosci. 2007; 26: 3141-3149. [PubMed]
  27. Kosta RM, Koen D, Nicolelis MA. Sichqonlardagi tez va sekin harakatlanadigan vosita qobiliyatini o'rganish davomida differensial kortikostriatel plastisit. Curr Biol. 2004; 14: 1124-1134. [PubMed]
  28. Cragg SJ, Hille CJ, Greenfield SA. Non-inson bo'lmagan primatning dorsal striatumidagi funktsional domenlar dopaminning dinamik harakati bilan aniqlanadi. J Neurosci. 2002; 22: 5705-5712. [PubMed]
  29. Dalley JW, Laane K, Theobald DE, Armstrong HC, Corlett PR, Chudasama Y, Robbins TW. D1 va NMDA retseptorlari tomonidan yadrodagi akumbensdagi Pavlovian xotirasini vaqtni cheklash modulyatsiyasi. Proc Natl Acad Sci AQSh A. 2005; 102: 6189-6194. [PMC bepul maqola] [PubMed]
  30. Davis J, Bitterman ME. Boshqa xatti-harakatlarning differentsial kuchayishi (DRO): Bir-nazoratli taqqoslash. Xatti-harakatni eksperimental tahlil qilish jurnali. 1971; 15: 237-241. [PMC bepul maqola] [PubMed]
  31. Kun JJ, Carelli RM. Nucleus accumbens va Pavlovian mukofotni o'rganish. Neuroscientist. 2007; 13: 148-159. [PMC bepul maqola] [PubMed]
  32. Kun JJ, Wheeler RA, Roitman MF, Carelli RM. Nucleus accumbens neurons Pavlovian yondashuv xatti-kodlaydi: otoshaping paradigma dalil. Eur J Neurosci. 2006; 23: 1341-1351. [PubMed]
  33. Kun JJ, Roitman MF, Wightman RM, Carelli RM. Assotsiativ ta'lim vositasi yadro gabaritlarida dopamin signalizatsiya jarayonida dinamik o'zgarishlarni amalga oshiradi. Nat Neurosci. 2007; 10: 1020-1028. [PubMed]
  34. Dayan P, Ballein BW. Mukofot, motivatsiya va mustahkamlashni o'rganish. Neyron. 2002; 36: 285-298. [PubMed]
  35. Delgado MR, Stenger VA, Fiez JA. Inson kaudatining yadrosida motivatsiyaga bog'liq qarorlar. Sereb Cortex. 2004; 14: 1022-1030. [PubMed]
  36. Delgado MR, Miller MM, Inati S, Felps EA. Mukofot bilan bog'liq ehtimollik o'rganishni o'rganish fMRI. Neuroimage. 2005; 24: 862-873. [PubMed]
  37. Di Ciano P, Kardinal RN, Cowell RA, Little SJ, Everitt BJ. PAVLOVANNING YO'NALIShNING YO'NALIShIDAGI YO'NALIShIDAGI NMDA, AMPA / kainat va dopamin retseptorlarining differentsial ishtiroki. J Neurosci. 2001; 21: 9471-9477. [PubMed]
  38. Dikkinson A. Amallar va odatlar: yurish-turish muxtoriyatini rivojlantirish. Royal Society jamiyatining falsafiy operatsiyalari. 1985; B308: 67-78.
  39. Dickinson A. Instrumental shamollatish. In: Mackintosh NJ, muharriri. Hayvonlarni o'rganish va bilish. Orlando: Akademik; 1994. 45-79-sahif.
  40. Dikkinson A, Dearing MF. Begona o'tkir ta'sirlar va inhibitorlar. In: Dickinson A, Boakes RA, tahrirlovchisi. O'qish mexanizmi va turtki. Hillsadale, NJ: Lawrence Erlbaum Associates; 1979.
  41. Dikkinson A, Charnock DJ. Favqulodda vaziyat ta'sirini saqlanadigan asbobni mustahkamlash bilan. Har chorakda eksperimental psixologiya jurnali. Qiyosiy va fiziologik psixologiya. 1985; 37: 397-416.
  42. Dickinson A, Ballein B. Amallar va javoblar: Ikkala xatti-harakatlarning psixologiyasi. Eilan N, McCarthy RA va boshq., Tahrirlovchisi. Mekansal vakolat: Falsafa va psixologiya muammolari. Malden, MA, AQSH: Blackwell Publishers Inc .; 1993. 277-293-sahif.
  43. Dikkinson A, Ballein B. Motivatsion tizimlar faoliyatida o'rganishning o'rni. In: Pashler H, Gallistel R, muharrirlar. Stivenning eksperimental psixologiya bo'yicha qo'llanmasi (3-nashr), jild. 3: o'rganish, motivatsiya va hissiyot. Nyu-York, Nyu-York, AQSh: John Wiley & Sons, Inc; 2002. 497-533 betlar.
  44. Dikkinson A, Smit J, Mirenovich J. Dopamin antagonistlari ostida Pavloviyning va instrumental rag'batlantiruvchi ta'limning dissotsiatsiyasi. Behav Neurosci. 2000; 114: 468-483. [PubMed]
  45. Dikkinson A, Campos J, Varga ZI, Balleine B. Ikki yo'nalishli instrumental konditsioner. Har chorakda eksperimental psixologiya jurnali: qiyosiy va fiziologik psixologiya. 1996; 49: 289-306. [PubMed]
  46. Ellison GD, Konorski J. Instrumental konditsiyadagi tuprik va vosita javoblarini ajratish. Ilmiy. 1964; 146: 1071-1072. [PubMed]
  47. Everitt BJ, Robbins TW. Narkomaniya uchun neyronli kuchlanish tizimlari: harakatlardan tortib to majburiyatlarga qadar. Nat Neurosci. 2005; 8: 1481-1489. [PubMed]
  48. Faure A, Haberland U, Conde F, El Massioui N. Lesionning nigrostriatal dopamin tizimiga ta'siri stimulga javoban odat shakllanishini buzadi. J Neurosci. 2005; 25: 2771-2780. [PubMed]
  49. Fiorillo CD, Tobler PN, Schultz W. Dopamin neyronlari tomonidan mukofotlash ehtimoli va noaniqlikning diskret kodlashi. Ilmiy. 2003; 299: 1898-1902. [PubMed]
  50. Fuster JM. Miya yarim korteksidagi xotira. Kembrij: MIT press; 1995.
  51. Gallistel CR, Fairhurst S, Balsam P. O'quv kursisi: miqdoriy tahlil natijalari. Proc Natl Acad Sci AQSh A. 2004; 101: 13124-13131. [PMC bepul maqola] [PubMed]
  52. Goto Y, Greys AA. Maqsadga yo'naltirilgan harakatlarda yadro akumbenslarining limbik va kortikal diskini dopaminerjik modulyatsiya. Nat Neurosci. 2005; 8: 805-812. [PubMed]
  53. Grace AA, Floresko SB, Goto Y, Lodge DJ. Dopaminerjik neyronlarning otishni boshqarish va maqsadli harakatlarni nazorat qilish. Trends Neurosci. 2007; 30: 220-227. [PubMed]
  54. Groenewegen HJ, Berendse HW, Wolters JG, Lohman AH. Prefrontal korteksning striatopallidal sistema, talamus va amigdala bilan anatomik munosabati: parallel tashkilot uchun dalillar. Prog Brain Res. 1990; 85: 95-116. munozarasi 116-118. [PubMed]
  55. Guthrie ER. O'qish psixologiyasi. Nyu-York: Harpers; 1935.
  56. Yangiliklar SN. Primat bazal ganglionlar: parallel va integral tarmoqlar. J Chem Neyroanat. 2003; 26: 317-330. [PubMed]
  57. Xaber SN, Fudge JL, McFarland NR. Primatlardagi striatonigrostriatal yo'llar qobiqdan dorsolateral striatuma ko'tarilgan spirali hosil qiladi. J Neurosci. 2000; 20: 2369-2382. [PubMed]
  58. Hammond LJ. Favqulodda vaziyatning erkinlik bilan ishlaydigan harakatlarning tetiklantiruvchi ta'siriga ta'siri. Xatti-harakatni eksperimental tahlil qilish jurnali. 1980; 34: 297-304. [PMC bepul maqola] [PubMed]
  59. Haruno M, Kawato M. Multipl kortiko-striatal looplarni integratsiyalash uchun heterarxik mustahkamlash-o'rganish modeli: rag'batlantirish-aksiya-mukofotlash assotsiatsiyasida fMRI imtihoni. Neural Networks. 2006a; 19: 1242-1254. [PubMed]
  60. Haruno M, Kawato M. Harakatsiz-harakatlar bilan mukofotlashni o'rganish davomida turli xil neyrallar pufam va kaudat yadrosida mukofotni kutish va mukofotni kutish xatolari bilan bog'liq. J Neurophysiol. 2006b; 95: 948-959. [PubMed]
  61. Haruno M, Kuroda T, Doya K, Toyama K, Kimura M, Samejim K, Imamizu H, Kawato M. Kvudent yadrodagi mukofotga asoslangan xulq-atvorli o'rganishning neytral korrelyatsiyasi: Stokastik qaror vazifasini ishlab magnit-rezonansli tomosha qilish. J Neurosci. 2004; 24: 1660-1665. [PubMed]
  62. Hernandez PJ, Sadeghian K, Kelley AE. Instrumental ta'limning erta birlashuvi yadro gilamlarda oqsil sintezini talab qiladi. Nat Neurosci. 2002; 5: 1327-1331. [PubMed]
  63. Hernandez PJ, Andrzejewski ME, Sadegyian K, Pansepp JB, Kelley AE. AMPA / kainat, NMDA va dopamin D1 retseptorlari funktsiyasi: Instrumental xotirani kodlash va konsolidatsiya qilishda kontekst bilan cheklangan rol. Mem. 2005; 12: 285-295. [PMC bepul maqola] [PubMed]
  64. Hershberger VA. Qaraydigan stakan orqali yaqinlashish. Hayvonlarni o'rganish va o'zini tutish. 1986; 14: 443-451.
  65. Heyes CM, Dawson GR. Ikkilamchi nazoratdan foydalanib, kalamushlarda kuzatuvli o'rganishni namoyish etish. "Eksperimental psixologiya" uch oylik jurnali. 1990; 42 (1): 59-71. [PubMed]
  66. Hikosaka O, Sakamoto M, Usui S. Monkey kaudat neuronlarining funktsional xususiyatlari. III. Maqsad va mukofotni kutish bilan bog'liq faoliyat. J Neurophysiol. 1989; 61: 814-832. [PubMed]
  67. Holland Kompyuter. Pavlov-instrumental transferlar o'rtasidagi munosabatlar va devalvatsiyani kuchaytirish. J Exp Psychol Animatsiya Behav jarayoni. 2004; 30: 104-117. [PubMed]
  68. Holland Kompyuter, Rescorla RA. Ilk va ikkinchi darajali achishtiruvchi shamollatishdan so'ng shartsiz ogohlantiruvchi vositalarni devalvatsiya qilishning ikki usulining ta'siri. J Exp Psychol Animatsiya Behav jarayoni. 1975; 1: 355-363. [PubMed]
  69. Hollerman JR, Tremblay L., Schultz V. Pratat striatumda xulq-atvorli neyronal faoliyatga mukofotni kutishning ta'siri. J Neurophysiol. 1998; 80: 947-963. [PubMed]
  70. Houk JK, Adams JL, Barto AG. Bazal ganglionning qanday shakllanayotgani va neyron signallarini qanday ishlatilishini taxmin qiladigan model. In: Houk JC, JD, JB, tahrirlovchisi. Bazal ganglionlarda axborotni qayta ishlash modellari. Kembrij, MA: MIT press; 1995. 249-270-sahif.
  71. Hull S Xulq-tamoyillari. Nyu-York: Appleton-Century-Crofts; 1943.
  72. Hyman SE, Malenka RC, Nestler EJ. Narkologik qaramlik mexanizmlari: mukofot bilan bog'liq o'rganish va xotiraning ahamiyati. Annu Rev Neurosci. 2006; 29: 565-598. [PubMed]
  73. Jedynak JP, Uslaner JM, Esteban JA, Robinzon T. Dorsal striatumda metamfetaminning tarkibiy strukturasi. Eur J Neurosci. 2007; 25: 847-853. [PubMed]
  74. Joel D, Weiner I. Bazal gangliyo-talamokortik davrlarini tashkil qilish: yopiq emas, balki bir-biriga bog'langan. Neuroscience. 1994; 63: 363-379. [PubMed]
  75. Joel D, Weiner I. Sichqoncha va primatlarda dopaminerjik tizimning striatum bilan bog'lanishi: striatumning funktsional va kompartiy tuzilishiga oid tahlil. Neuroscience. 2000; 96: 451-474. [PubMed]
  76. Jueptner M, Frith CD, Brooks DJ, Fraktsiak RS, Passingham RE. Avtomatlashtirilgan anatomiya. II. Subkortikal tuzilmalar va sinov va xato orqali o'rganish. J Neurophysiol. 1997a; 77: 1325-1337. [PubMed]
  77. Jueptner M, Stephan KM, Frith CD, Brooks DJ, Fraktsiak RS, Passingham RE. Avtomatlashtirilgan anatomiya. I. Frontal korteks va harakatga e'tibor. J Neurophysiol. 1997b; 77: 1313-1324. [PubMed]
  78. Kanazawa I, Murata M, Kimura M. Dopamin va uning retseptorlari rolini koreik harakatlarning hosil qilishida. Adv Nevrol. 1993; 60: 107-112. [PubMed]
  79. Kawagoe R, Takikawa Y, Hikosaka O. mukofotning kutilishi bazal ganglionlarda kognitiv signallarni modulyatsiya qiladi. Nat Neurosci. 1998; 1: 411-416. [PubMed]
  80. Kimura M, Aosaki T, Ishida A. Kvoten va kaudat yadrosining ixtiyoriy harakatda differentsial rollarini neyrofiziyaviy jihatlari. Adv Nevrol. 1993; 60: 62-70. [PubMed]
  81. Konorski J. Miyaning integral faoliyati. Chikago: Chikago universiteti matbuoti; 1967.
  82. Lerchner A, La-Camera G, Richmond B. Nat Neurosci. 2007; 10: 15-17. [PubMed]
  83. Ljungberg T, Apicella P, Schultz W. Xulqli reaktsiyalarni o'rganishda maymun dopamin neyronlarining javoblari. J Neurophysiol. 1992; 67: 145-163. [PubMed]
  84. Lohrenz T, MakKabe K, Camerer CF, Montague PR. Sinov jarayonida sinchkovlik bilan o'rganish signallari. Proc Natl Acad Sci AQSh A. 2007; 104: 9493-9498. [PMC bepul maqola] [PubMed]
  85. Lovibond PF. Pavlovning ishtahasi bilan shartli rag'batlantiruvchi instrumental xatti-harakatni osonlashtirish. J Exp Psychol Animatsiya Behav jarayoni. 1983; 9: 225-247. [PubMed]
  86. Mackintosh NJ. Hayvonlarni o'rganish psixologiyasi. London: Academic Press; 1974.
  87. Miller EK, Cohen JD. Prefrontal korteks funktsiyasining integral nazariyasi. Annu Rev Neurosci. 2001; 24: 167-202. [PubMed]
  88. Miller R. Intact Brainning ma'nosi va maqsadi. Nyu-York: Oksford universiteti matbuoti; 1981.
  89. Miyachi S, Xikosaka O, Lu X. Prokuroriy ta'limning erta va kech bosqichlarida maymun striatal neyronlarning differentsial faollashuvi. Exp Brain Res. 2002; 146: 122-126. [PubMed]
  90. Miyachi S, Hikosaka O, Miyashita K, Karadi Z, Rand MK. Orqali qo'l harakatini o'rganish uchun maymuncha striatumning differentsial rollari. Exp Brain Res. 1997; 115: 1-5. [PubMed]
  91. Montague PR, Hyman SE, Cohen JD. Xulq-atvorda dopamin uchun hisoblash rollari. Tabiat. 2004; 431: 760-767. [PubMed]
  92. Morris G, Nevet A, Arkadir D, Vaadia E, Bergman H. Midbrain dopamin neuronlari kelgusidagi harakatlar uchun qarorlarni kodlaydi. Nat Neurosci. 2006; 9: 1057-1063. [PubMed]
  93. Murschall A, Hauber W. Ventral tegmental maydonni inaktivatsiya qilish Pavlovning takliflarini instrumental ishlashga umumiy eksitatori ta'sirini bekor qildi. Mem. 2006; 13: 123-126. [PubMed]
  94. Nauta WJ, Smit GP, Faull RL, Domesick VB. Sichqondagi yadrolarning shilimshiq septiklarini samarali aloqalari va nigral afferentsiyalari. Neuroscience. 1978; 3: 385-401. [PubMed]
  95. Nauta WJH. Korpus striatumning miya yarim korteks va limbik tizim bilan o'zaro bog'liqliklari: Harakat va fikrlash uchun umumiy substratmi? In: Mueller, muharriri. Nöroloji va psixiatriya: aqllar yig'ilishi. Bazel: Karger; 1989. 43-63-sahif.
  96. Niv Y, Daw ND, Joel D, Dayan P. Tonic dopamin: imkoniyat narxlari va ta'sir kuchini nazorat qilish. Psixofarmakologiya (Berl) 2007; 191: 507-520. [PubMed]
  97. O'Doherty J, Dayan R, Schultz J, Deichmann R, Friston K, Dolan RJ. Ventral va dorsal striatumning instrumental shamollashdagi ajraladigan rollari. Ilmiy. 2004; 304: 452-454. [PubMed]
  98. Ostlund SB, Ballein BW. Bazalateral amigaldey va mediodoral talamusning instrumental ta'sirlarni tanlashda differentsial ishtiroki. J Neurosci. 2008; 28: 4398-4405. [PMC bepul maqola] [PubMed]
  99. Parkinson JA, Willoughby PJ, Robbins TW, Everitt BJ. Old singulat korteksining va yadroning akumbenslar yadrosi uzilishi Pavlovning yondashuv xatti-harakatiga olib keladi: limbik kortikal-ventral striatopallidal tizimlar uchun qo'shimcha dalillar. Behav Neurosci. 2000; 114: 42-63. [PubMed]
  100. Parkinson JA, Dalley JW, Kardinal RN, Bamford A, Fehnert B, Lacheenal G, Rudarakanchana N, Halkerston KM, Robbins TW, Everitt BJ. Nucleus accumbens dopaminning kamayishi, shuningdek, tuyadi, Pavlovning yondashuv xulq-atvorini bajarish va samaradorligini pasaytiradi: mesoakmomblarning dopamin funktsiyasi uchun ta'sir. Behav Brain Res. 2002; 137: 149-163. [PubMed]
  101. Paxinos G, Franklin K. Sichqoncha miyasi stereotaxik koordinatalarda. Nyu-York: Academic Press; 2003.
  102. Pekina S, Smit KS, Berrij K. Miyadagi Hedonik issiq joylar. Neuroscientist. 2006; 12: 500-511. [PubMed]
  103. Pothuizen HH, Jongen-Relo AL, Feldon J, Yee BK. Selektiv yadro akumbensi yadrosi va qobiqli lezyonlarning ikkilamchi tanlov xulq-atvori va kalamushlarda o'rganish ta'siri bo'yicha ikki tomonlama ajralib chiqishi. Eur J Neurosci. 2005; 22: 2605-2616. [PubMed]
  104. Rescorla RA. Qo'rqinchli vaziyatda CSni yo'qligi va yo'qligida shok ehtimolligi. J Comp Physiol Psychol. 1968; 66: 1-5. [PubMed]
  105. Rescorla RA. Pavlovning konditsionerlik xulq-atvori. Annu Rev Neurosci. 1988; 11: 329-352. [PubMed]
  106. Rescorla RA, Solomon RL. Ikki jarayonli ta'lim nazariyasi: Pavlovning shamollash va instrumental o'rganish o'rtasidagi munosabatlar. Psychol Rev. 1967; 74: 151-182. [PubMed]
  107. Restle F. Labirintlarda ko'rsatmalarning kamsitilishi: "joy-qarshi-javob" savolining echimi. Psixologik sharh. 1957; 64: 217. [PubMed]
  108. Reynolds JN, Vickens JR. Kortikostriatal sinapslarning dopaminga bog'liqligi. Neural Networks. 2002; 15: 507-521. [PubMed]
  109. Rays ME, Cragg SJ. Nikotin striatumda mukofot bilan bog'liq dopamin signallarini kuchaytiradi. Nat Neurosci. 2004; 7: 583-584. [PubMed]
  110. Rays ME, Cragg SJ. Kvalskadan so'ng dopaminning tarqalishi: nigrostriatal yo'lda dopaminning uzatilishi. Brain Res Rev. 2008 [PMC bepul maqola] [PubMed]
  111. Robinzon S, Yomg'ir suvlari AJ, Hnasko TS, Palmiter RD. Dopamin signallarini dorsal striatumga virusli qayta tiklash dopamin etishmaydigan sichqonlarga instrumental kondensatsiyani tiklaydi. Psixofarmakologiya (Berl) 2007; 191: 567-578. [PubMed]
  112. Roitman MF, Wheeler RA, Carelli RM. Nucleus accumbens neyronlari lazzatlanish va tetiklantiruvchi his-tuyg'ularni uyg'otish, ularning yaqqollari kodlanadigan va vosita chiqishi bilan bog'langan uchun aniq sozlangan. Neyron. 2005; 45: 587-597. [PubMed]
  113. Samejima K, Ueda Y, Doya K, Kimura M. Striatumda mukofotga oid maxsus mukofot qiymatlari. Ilmiy. 2005; 310: 1337-1340. [PubMed]
  114. Schultz V. Primat dopamin neyronlarining fazoviy mukofot signallari. Adv Pharmacol. 1998a; 42: 686-690. [PubMed]
  115. Schultz V. Dopamin neuronlarining prognozli mukofotlash belgisi. J Neurophysiol. 1998b; 80: 1-27. [PubMed]
  116. Schultz Vt, Dayan R, Montague PR. Bashorat va mukofot neytral substrat. Ilmiy. 1997; 275: 1593-1599. [PubMed]
  117. Shvarts B, Gamzu E. Pavlovyan operativ harakatlarning nazorati. In: Honig Vt, Staddon JER, muharrirlar. Operativ harakatlar risolasi. Nyu-Jersi: Prentice Hall; 1977. 53-97-sahif.
  118. Sheffield FD. Klassik va instrumental shamollatish o'rtasidagi munosabatlar. In: Prokasy WF, muharriri. Klassik shamollatish. Nyu-York: Appleton-Century-Crofts; 1965. 302-322-sahif.
  119. Skinner B. Organizmlarning xatti-harakatlari. Nyu-York: Appleton-Century-Crofts; 1938.
  120. Smit-Roe SL, Kelley AE. NMDA va dopamin D1 retseptorlarini nukleus akumbens yadrosidagi tasodifiy faollashishi tuyadi asboblarni o'rganish uchun talab qilinadi. J Neurosci. 2000; 20: 7737-7742. [PubMed]
  121. Sotak BN, Hnasko TS, Robinson S, Kremer EJ, Palmiter RD. Dorsal striatumda dopamin signalizatsiyasi regulyatsiyasi ovqatlanishni inhibe qiladi. Brain Res. 2005; 1061: 88-96. [PubMed]
  122. Spence K. Kechiktirilgan mukofotni olishda ikkinchi darajali kuchlarni o'rni. Hissiy chiqishlar. 1947; 54: 1-8.
  123. Spence K. Behavior nazariyasi va uni o'rganish. Englewood Cliffs, NJ: Prentice-Hall; 1960.
  124. Sutton RS, Barto AG. Takomillashtirish. Kembrij: MIT press; 1998.
  125. Swanson LW. Maqsadli harakatlarning miya yarim sharlari. Brain Res. 2000; 886: 113-164. [PubMed]
  126. Taha SA, Fields HL. Nucleus accumbens-da turli neyronal populyatsiyalar tomonidan tuxum va tuyadi xatti-harakatlarini kodlash. J Neurosci. 2005; 25: 1193-1202. [PubMed]
  127. Taha SA, Fields HL. Nucleus accumbens neurons inhibisyonu, mukofotga yo'naltirilgan xulq-atvor uchun darvoza signalini kodlaydi. J Neurosci. 2006; 26: 217-222. [PubMed]
  128. Qochoq Elyor. Hayvon zakovati: eksperimental tadqiqotlar. Nyu-York: Macmillan; 1911.
  129. Tobler PN, Dikkinson A, Schultz V. Konditsioner inhibisyon paradigmasida dopamin neyronlari tomonidan kutilgan mukofotni bekor qilish. J Neurosci. 2003; 23: 10402-10410. [PubMed]
  130. Tobler PN, O'Doherty JP, Dolan RJ, Schultz W. Insonning asabiy o'rganishi blokirovka paradigmasidagi mukofotni bashorat qilish xatolariga bog'liq. J neyrofiziol. 2006; 95: 301-310. [PMC bepul maqola] [PubMed]
  131. Tobler PN, O'Doherty JP, Dolan RJ, Schultz W. Reward qiymati kodlash, insonning mukofot tizimlarida xavf-xatar bilan bog'liq bo'lgan noaniqlik kodlashidan farq qiladi. J neyrofiziol. 2007; 97: 1621–1632. [PMC bepul maqola] [PubMed]
  132. Trapold MA, Overmier JB. Klassik Shartnoma II: Mavjud tadqiqot va nazariya. Appleton-Century-Crofts; 1972. Instrumental ta'limda ikkinchi o'quv jarayoni; 427-452-sahif.
  133. Trikomi EM, Delgado MR, Fiez JA. Harakatlarning keskin o'zgarishi bilan kaudat faolligini modulyatsiya qilish. Neyron. 2004; 41: 281-292. [PubMed]
  134. Waelti P, Dikkinson A, Schultz V. Dopaminning javoblari rasmiy ta'lim nazariyasining asosiy taxminlariga mos keladi. Tabiat. 2001; 412: 43-48. [PubMed]
  135. Oq NM. Striatal matritsa va yamalar bilan bog'liq funktsional gipoteza: SR xotirasidagi vositachilik va mukofot. Hayot sci. 1989; 45: 1943-1957. [PubMed]
  136. Wickens JR, Budd CS, Hyland BI, Arbuthnott GW. Striatal mukofotlar va qarorlar qabul qilishda hissa qo'shadi: takroriy qayta ishlash matritsasida mintaqaviy farqlarni his qilish. Ann NY Acad Sci. 2007; 1104: 192-212. [PubMed]
  137. Uilyams DR. Klassik shamollatish va rag'batlantirish motivatsiyasi. In: Prokasy WF, muharriri. Klassik shamollatish. Nyu-York: Appleton-Century-Crofts; 1965. 340-357-sahif.
  138. Uilyams DR, Uilyam X. Qora ichidagi avtomobillarni ta'mirlash: shartli mustahkamlamaganiga qaramasdan, doimiy pecking. Xatti-harakatni eksperimental tahlil qilish jurnali. 1969; 12: 511-520. [PMC bepul maqola] [PubMed]
  139. Wiltgen BJ, Law M, Ostlund S, Mayford M, Ballein BW. Pavlovning buyrug'ining instrumental ishlashga ta'siri striatumdagi CaMKII faoliyati bilan bog'liq. Eur J Neurosci. 2007; 25: 2491-2497. [PubMed]
  140. Wyvell CL, Berridge K. Intra-akumbens amfetamin sukroz mukofotining shartli rag'batlantiruvchi kuchini oshiradi: "yoqtirish" yoki javob choralarini kuchaytirmasdan "xohishni" beradigan mukofotni oshirish. J Neurosci. 2000; 20: 8122-8130. [PubMed]
  141. Yin HH. Psixologiya bo'limi. Los Anjeles: UCLA; 2004. Maqsadli harakatlarda dorsal striatumning roli.
  142. Yin HH, Knowlton BJ. Reinforcer devalvatsiyasi shartli imtiyozlarni bekor qiladi: ogohlantiruvchi-rag'batlantiruvchi assotsiatsiyalar uchun dalillar. Behav Neurosci. 2002; 116: 174-177. [PubMed]
  143. Yin HH, Knowlton BJ. Striatal subregionlarning joylashtirish va javob berishga yordami. Mem. 2004; 11: 459-463. [PMC bepul maqola] [PubMed]
  144. Yin HH, Knowlton BJ. Qo'shadi va o'rganish. In: Stacy A, muharriri. Yashirin idrok va giyohvandlik qo'llanmasi. Mingbokslar: shaxzoda; 2005.
  145. Yin HH, Knowlton BJ, Ballein BW. Dorsolateral striatumning zarari natijasini kutish davomiyligini saqlaydi, lekin instrumental o'rganishda odat shakllanishiga putur etkazadi. Eur J Neurosci. 2004; 19: 181-189. [PubMed]
  146. Yin HH, Knowlton BJ, Ballein BW. Dorsomedial striatumdagi NMDA retseptorlari blokadasi instrumental shamollashda aks-oqibatni o'rganishni oldini oladi. Eur J Neurosci. 2005a; 22: 505-512. [PubMed]
  147. Yin HH, Knowlton BJ, Ballein BW. Dorsolateral striatumni inaktivatsiya qilish instrumental kondensatsiyalanish oqibatidagi oqibatlarga sezgirlikni kuchaytiradi. Behav Brain Res. 2006a; 166: 189-196. [PubMed]
  148. Yin HH, Zhuang X, Ballein BW. Hiperdopaminerik sichqonlardagi instrumental ta'lim. Neurobiol Learn Mem. 2006b; 85: 283-288. [PubMed]
  149. Yin HH, Ostlund SB, Knowlton BJ, Ballein BW. Instrumental kondensatsiyalanishdagi dorsomedial striatumning roli. Eur J Neurosci. 2005b; 22: 513-523. [PubMed]
  150. Zahm DS. Nucleus accumbens-ga diqqat bilan moslashuvchan javob berishning ayrim subkortikal substratlariga integral neuroanatomik kuzatasiz. Neurosci Biobehav Rev. 2000; 24: 85-105. [PubMed]
  151. Zahm DS. Bazal old miya funktsional-anatomik 'makrosistemalari' rivojlanib borayotgan nazariyasi. Neurosci Biobehav Rev. 2005 [PubMed]