Motivasiya baxımında Dopamin: təltif, təhqiramiz və xəbərdarlıq (2010)

PMC-də digər məqalələrə baxın quote dərc edilmiş məqalə.

Midbrain dopamin nöronları mükafatlara və müsbət motivasiyasında onların mühüm rollarına güclü cavab verdikləri üçün yaxşı bilinir. Ancaq dopamin nöronları, həssas və həyəcan verici hadisələr kimi əhəmiyyətli, lakin qeyri-mükafatlandırıcı olmayan təcrübələrlə əlaqədar siqnalları ötürür. Burada dopaminin mükafat və qeyri-mükafat funksiyalarını anlamaqda son avanslar nəzərdən keçirilir. Bu məlumatlara əsaslanaraq, dopamin nöronlarının fərqli beyin şəbəkələri ilə əlaqəli və motivasion nəzarətdə fərqli rollara malik olan bir çox növdə olmasını təklif edirik. Bəzi dopamin nöronları motivasiya dəyərini kodlaşdırır, axtarış, qiymətləndirmə və dəyər öyrənmək üçün beyin şəbəkələrini dəstəkləyir. Digərləri, yönəldilməsi, idrak və ümumi motivasiya üçün beyin ağlarını dəstəkləyən motivasiya tələblərini şifrələyir. Dopamin neyronlarının hər iki növü potensial əhəmiyyətli sensorial ipuçlarının sürətli aşkarlanmasında iştirak edən xəbərdarlıq siqnalı ilə artır. Biz bu dopaminergik yolların dəyəri, ehtirası və xəbərdarlığı üçün adaptiv davranışı dəstəkləmək üçün əməkdaşlıq etdiyini fərz edirik.

Ödüllendirme tədbirlərini motivasiya edən Dopamin

Dopamin uzun müddət hərəkətlərin möhkəmləndirilməsi və motivasiyası üçün vacibdir. DA ötürülməsinə müdaxilə edən dərmanlar möhkəmləndirilməyə müdaxilə edir, beyin stimullaşdırılması və asılılıq dərmanları kimi DA ötürülməsini artıran manipulyasiyalar isə tez-tez gücləndiriciMüdrik, 2004). DA ötürülməsi mükafatları axtarmaq üçün motivasiya vəziyyətini yaratmaq üçün vacibdir (Berridge və Robinson, 1998; Salamone və digərləri, 2007) və mükafat-mükafat birliklərinin xatirələriniDalley və digərləri, 2005). DA sərbəstlik mükafat öyrənmənin bütün formaları üçün zəruri deyil və həmişə zövq vermək mənasında "xoşlanmır" ola bilər, amma məqsədlərə nail olmaq üçün hərəkətlərin motivasiya edilməsi məqsədində məqsədlərin "istəkli olmasına" səbəb olması vacibdir (Berridge və Robinson, 1998; Palmiter, 2008).

Dopaminin gücləndirilməsi öyrənilməsini necə dəstəklədiyinə dair bir hipotez, sinir nöqtələri arasında sinaptik əlaqələrin gücünü düzəldir. Bu hipotezin ən sadə versiyası, dopaminin, "dopaminin partlaması" olduğu müddətcə bir-birinə yanaşan neyronlar kimi kabaca ifadə edilə bilən "Hebbian" kəşfinə əsasən sinaptik plastisitə nəzarət edir. Başqa sözlə, A hüceyrəsi B hüceyrəsini aktivləşdirsə və B hüceyrəsi bir mükafata səbəb olan bir davranış hərəkətinə səbəb olursa, dopamin azad ediləcək və A → B əlaqəsi gücləndiriləcək (Montague və digərləri, 1996; Schultz, 1998). Bu mexanizm, orqanizmin kifayət qədər sınaq və səhv təcrübəsi nəzərə alınanda, mükafat qazanmaq üçün optimal seçim hərəkətlərini öyrənməyə imkan verəcəkdir. Bu hipotezə uyğun olaraq, dopamin çoxsaylı beyin bölgələrində sinaptik plastisiyaya güclü təsir göstərir (Surmeier və digərləri, 2010; Goto et al., 2010; Molina-Luna et al., 2009; Marowsky et al., 2005; Lisman və Grace, 2005). Bəzi hallarda dopamin, yuxarıda təsvir edilən Hebbian qayda xəttləri boyunca sinaptik plastisiyanı mükafat axtarış davranışı ilə əlaqəli şəkildə təmin edir (Reynolds və al., 2001). Uzunmüddətli sinaptik plastisitə təsiri ilə yanaşı, dopamin də neyron spiking fəaliyyəti və neyronlar arasında sinaptik əlaqələr modullaşdırılması ilə neyron dövrələr üzərində dərhal nəzarət edə bilər (Surmeier və digərləri, 2007; Robbins və Arnsten, 2009), bəzi hallarda dərhal mükafatlandırıcı tədbirləri təşviq edəcək şəkildə həyata keçirir (Frank, 2005).

Dopamin nöron mükafat sinyalleri

Təşəbbüslərə gətirib çıxaran hərəkətləri motivasiya etmək üçün, təltif təcrübəsi zamanı dopaminin sərbəst buraxılması lazımdır. Həqiqətən, ən çox DA nöronları qida və su kimi gözlənilməz əsas mükafatlarla güclü şəkildə aktivləşdirilir və tez-tez fəaliyyətin fasik "bursts"Schultz, 1998) (birdən çox çivili (fasik həyəcan)Grace və Bunney, 1983)). Lakin, Wolfram Schultz'ın qabaqcıl tədqiqatları göstərir ki, bu DA nöron cavabları mükafat istehlakı ilə tetiklenmez per se. Bunun əvəzində, mükafatın qəbul olunduğu mükafat və gözlənilən mükafat arasındakı fərqləri bildirən bir 'mükafat proqnozu səhv' bənzəyir (Schultz və digərləri, 1997) (Şəkil 1A). Beləliklə, bir mükafat proqnozlaşdırıldıqdan böyükdürsə, DA nöronları olduqca həyəcanlandırır (pozitiv proqnozlaşdırma səhvi, Şəkil 1E, qırmızı); bir mükafat öngörülenden daha azsa və ya müəyyən bir zamanda başarısız olursa, DA neuronları inhibe edilir (negatif tahmin hatası, Şəkil 1E, mavi); və bir mükafat qabaqcadan təqdir edildikdə, onun ölçüsü tamamilə proqnozlaşdırılır, DA nöronları az və ya heç bir cavab vermirlər (sıfır proqnozlaşdırma səhvi, Şəkil 1C, qara). Eyni prinsip, gələcək mükafatlar haqqında yeni məlumatlar verən sensor duyğulara DA cavablarını saxlayır. DA neyronları gələcək mükafat dəyərinin artdığını göstərir (Şəkil 1C, qırmızı), bir qolu gələcək mükafat dəyərinin azalmasınaŞəkil 1C, mavi) və ümumiyyətlə, heç bir yeni mükafat məlumatı verməyənŞəkil 1E, qara). Bu DA cavabları, müvəqqəti fərq xətası və ya "TD səhvi" adlanan xüsusi mükafat proqnozlaşdırma səhnəsinə bənzəyir və bu, hərəkətlərin və ətraf mühitin dövlətlərinin dəyərini öyrənmək üçün gücləndirici bir siqnal kimi çıxış etməyi təklif edir (Houk və digərləri, 1995; Montague və digərləri, 1996; Schultz və digərləri, 1997). Bir TD kimi gücləndirici siqnal istifadə edərək hesablama modellərində insanlar, heyvanlar və DA nöronların özlərini gücləndirmənin bir çox aspektlərini izah edə bilərik (Sutton və Barto, 1981; Waelti və digərləri, 2001; Montague və Burns, 2002; Dayan və Niv, 2008).

 

Şəkil 1

Ödül tahmin hatalarının Dopamin kodlaması ve öngörü verici bilgilerin tercih edilmesi

Etibarlı bir sıra eksperimentlər göstərir ki, DA sinyalleri mükafat proqnozlarını, kiçik üstünlüklərdən böyük mükafatların üstünlükləri də daxil olmaqla davranış üstünlükləri ilə yaxından izləyən bir şəkildə göstərir (Tobler və digərləri, 2005) inanılmaz olanlar üzərində ehtimal olunan mükafatlar (Fiorillo və digərləri, 2003; Satoh et al., 2003; Morris və digərləri, 2004) və gecikmiş olanlar üzərində dərhal mükafatlar (Roesch və digərləri, 2007; Fiorillo və digərləri, 2008; Kobayashi və Schultz, 2008). İnsanlarda DA nöronlarının pulun mükafat dəyərini kodlayan bir sübut var (Zaghloul et al., 2009). Bundan əlavə, DA mükafat proqnozlaşdırma davranış tədbirləri oxşar timecourse ilə öyrənmə zamanı DA siqnalları ortaya çıxır (Hollerman və Schultz, 1998; Satoh et al., 2003; Takikawa et al., 2004; Day et al., 2007) və mükafat üstünlüklərinin subyektiv tədbirləri ilə əlaqələndirilir (Morris və digərləri, 2006). Bu tapıntılar DA neyronlarını beyində kodlaşdırmanın mükəmməl kodlarının ən yaxşı başa düşülmüş və təkrarlanan nümunələrindən biri kimi təsbit etmişdir. Nəticədə, son tədqiqatlar DA neyronlarını mükafat proqnozlarını necə yaradanları və onların sinyallerinin aşağı səviyyəli strukturlarda davranışını idarə etmək üçün necə hərəkət etdiyini aşkar etmək üçün sıx araşdırmağa məruz qoymuşdur.

Dopamin nöron mükafat sinyalleri

DA mükafat sinyallerini anlamaqda son yeniliklər üç geniş sualdan ibarətdir: DA neuronları mükafat proqnozlarını necə öyrənir? Onların proqnozları necə dəqiqdir? Və yalnız nə təltif kimi müalicə?

DA nöronları mükafat proqnozlarını necə öyrənir? Klassik nəzəriyyələr mükafat proqnozlarının təkrarlanan stimul-mükafat cütləşmələrini tələb edən tədricən gücləndirici proses vasitəsilə öyrənildiyini göstərir (Rescorla və Wagner, 1972; Montague və digərləri, 1996). Hər dəfə stimul A gözlənilməz bir mükafatla təqib edilir, A-nın təxmin edilən dəyəri artır. Son məlumatlar isə, DA nöronlarının sadə stimul-mükafat öyrənməsindən kənara çıxdığını və dünyanın quruluşu ilə bağlı inkişaf etmiş inanclara əsaslanan proqnozları göstərir. DA nöronları mükafatları bir stimul ilə eşleşmiş olduğu qeyri-ənənəvi mühitlərdə belə mükafatların düzgün şəkildə proqnozlaşdıra bilər. azaltmaq bu stimulun dəyərində (Satoh et al., 2003; Nakahara və digərləri, 2004; Bromberg-Martin və digərləri, 2010c) və ya tamamilə fərqli bir stimulunBromberg-Martin və digərləri, 2010b). DA neyronları, mükafat paylamasının yüksək səviyyəli statistika əsasında, onların gözlənilən varyanslarına əsaslanan proqnozlaşdırma səhv siqnallarını miqyaslamaq kimi mükafat siqnallarını uyğunlaşdıra bilər (Tobler və digərləri, 2005) və söndürülmüş mükafat məbləğlərinə cavablarını 'öz-özünə qaytarmaq'Pan və digərləri, 2008). Bütün bu hadisələr sensor və motora uyğunlaşmada görülən oxşar təsirlərə paraleldir (Braun və digərləri, 2010; Fairhall və digərləri, 2001; Shadmehr və digərləri, 2010), sadələşdirilmiş öyrənmə üçün ümumi neyron mexanizmi əks etdirməyi təklif edir.

DA mükafat proqnozları necə dəqiqdir? Son tədqiqatlar göstərir ki, DA neyronları mükəmməl siqnalları sadəcə olaraq üç proqnozlaşdırma qeyri-müəyyənlik mənbəyi hesabına düzəldirlər. Birincisi, insanlar və heyvanlar uzun müddət-təzminat vaxt intervalı haqqında etibarlı proqnozlar vermələrinə mane olan daxili vaxtı səs-küydən əziyyət çəkir (Gallistel və Gibbon, 2000). Beləliklə, ifrat-mükafat gecikmələri qısadırsa (1-2 saniyə) zamanlama proqnozları dəqiqdir və mükafat təsdiqi az DA cavabını tetikler, lakin daha çox mükafat ödəmə gecikdirməsi üçün vaxtı proqnozlar daha az etibarlı olur və mükafatlar aydın DA burstsKobayashi və Schultz, 2008; Fiorillo və digərləri, 2008). İkincisi, gündəlik həyatda bir çox tapıntılar mükəmməl çatdırılma müddətlərinin geniş yayıldığını ifadə edərək qeyri-dəqiqdir. DA neyronları bu zamanlama qeyri-müəyyənlik formasını təkrar əks etdirirlər: mükafatın görünməməsi hər anda getdikcə mənfi mükafat proqnozlaşdırılması səhvlərini siqnal kimi göstərən dəyişkən mükafat gecikmələri zamanı tədricən mane olurFiorillo və digərləri, 2008; Bromberg-Martin və digərləri, 2010a; Nomoto və digərləri, 2010). Nəhayət, bir çox göstəriş mürəkkəbdir ki, onların mükafat dəyərləri haqqında dəqiq bir nəticə əldə etmək üçün ətraflı təftiş tələb olunur. Belə vəziyyətlərdə DA mükafat siqnalları uzun gecikmələrdə və tədricən bir şəkildə stimul dəyərinin şifrələndiyi kimi algısal məlumatın tədricən axını əks etdirən görünüşlərdə meydana gəlir (Nomoto və digərləri, 2010).

DA neyronlarının nə dərəcədə mükafatlandırıcı olduğunu düşünürsünüz? Qiymətləndirmə tədrisinin adi nəzəriyyələri DA nöronlarının gələcək ilkin mükafatın gözlənilən məbləğinə əsasən dəyər verdiyini göstərir (Montague və digərləri, 1996). Birincisi mükafatın dərəcəsi daimi olaraq davam edilsə belə, insanlar və heyvanlar tez-tez öngörülebilirlik üçün əlavə üstünlüklər verirlər - hər bir mükafatın ölçüsü, ehtimal və vaxtı əvvəlcədən bilinən mühitlərdə axtarma (Daly, 1992; Chew və Ho, 1994; Ahlbrecht və Weber, 1996). Maymunlarda edilən son bir araşdırmada DA nöronları bu üstünlüyüBromberg-Martin və Hikosaka, 2009). Monkeys onlara yeni məlumatlar verməyən informasiyadan daha çox mükafatın yerinə gələcək mükafatın ölçüsünü proqnozlaşdırmağa imkan verəcək informativ vizual ipuçlarını nəzərdən keçirmək üçün güclü üstünlük ifadə etdi. Buna paralel olaraq, DA nöronları informativ göstərişləri heyvanın davranış üstünlüyü ilə əlaqəli bir şəkildə keçirmək imkanı ilə heyecanlandılar (Şəkil 1B, D). Bu, DA neyronlarının yalnız mükafat qazanmaq üçün hərəkətləri motivasiya etmək deyil, həm də mükafatların əvvəlcədən nəzərdə tutulmasını və düzgün şəkildə hazırlanmasını təmin etmək üçün həmin mükafatlara dair dəqiq proqnozlar vermək üçün hərəkətləri motivasiya edir.

Birlikdə götürülən bu tapıntılar DA mükafat proqnozu səhv siqnallarının yüksək mükafat statistika statistikasına, mükafat qeyri-müəyyənliyinə və proqnozlaşdırıcı məlumatlar üçün üstünlüklərə uyğundur ki, insan və heyvan mükafat proqnozlarını məlumatlandırıcı inkişaf etmiş amillərə həssas olduğunu göstərir.

Fasik dopamin ödül siqnallarının aşağı istiqamətli strukturlara təsiri

DA mükafat reaksiyaları sinxron fasik partlayışlarda baş verir (Joshua et al., 2009b), hədəf strukturlarda DA sərbəstliyini formalaşdıran cavab nümunəsi (Gonon, 1988; Zhang et al., 2009; Tsai et al., 2009). Uzun müddətdir ki, bu fasik partlayışlar tonik DA fəaliyyətindən fərqli şəkildə öyrənmə və motivasiyaya təsir göstərmişdir (Grace, 1991; Grace və digərləri, 2007; Schultz, 2007; Lapish və s., 2007). Son zamanlar inkişaf etmiş texnologiya bu hipotezi DA neyron aktivitesini gözəl uzay və temporal həssaslıqla idarə etməklə təsdiqləməyə imkan vermişdir. VTA DA nöronlarının optogenetik stimullaşdırılması gücləndirilmiş bir yer seçimi meydana gətirir, bu yalnız stimullaşdırma patlama modelində tətbiq edildikdə baş verir (Tsai et al., 2009). Bunun əksinə, tonik aktivliyini böyük ölçüdə pozulmayan tərkibdə buraxan zərbəni pozan DA neyronlarından olan NMDA reseptorlarının genetik nöqtəsi, mükafat öyrənməsinin müəyyən formalarında seçici dəyərsizliyə səbəb olur (Zweifel və digərləri, 2009; Parker və digərləri, 2010) (baxmayaraq ki, bu nöqtə DA neuron sinaptik plastisiyanı (Zweifel və digərləri, 2008)). DA bursts, yerli neyron dövrünü yenidən quraraq mükafatın öyrənilməsini artıra bilər. Xüsusilə, mükafat-proqnozlaşdırıcı DA bursts çekirdek akumbenslərin xüsusi bölgələrinə göndərilir və bu bölgələr xüsusilə yüksək mükafat səviyyəsinə malikdirlər - proqnozlaşdırıcı sinir fəaliyyəti (Cheer və s., 2007; Owesson-White və digərləri, 2009).

Fasik partlayışlarla müqayisədə, mənfi mükafat proqnozlaşdırma səhvləri üçün fəaliyyət göstərən fasik dayandırmaların əhəmiyyəti daha az bilinir. Bu duraklamalar, sünbəcilik dərəcəsində daha kiçik dəyişikliklərə səbəb olur, mükafat gözləntəsi ilə daha az modulyasiya olunur (Bayer və Glimcher, 2005; Joshua et al., 2009a; Nomoto və digərləri, 2010) və öyrənmə üzrə kiçik təsirə malik ola bilər (Rutledge və digərləri, 2009). Bununla yanaşı, müəyyən mənfi proqnozlaşdırma səhvləri öyrənmək üçün VTA (Takahashi və digərləri, 2009), fasik dayandırmaları hələ də downstream strukturları tərəfindən şifrələnə bilər.

Bursts və pauses DA azad çox müxtəlif nümunələri səbəb olduğundan, onlar ayrı mexanizmləri vasitəsilə aşağı strukturları təsir edəcək. Bu hipotezə dair DA neyronlarının, dorsal striatumun bir əsas hədəfi var. Dorsal striatum proyeksiya nöronları müxtəlif DA reseptorlarını ifadə edən iki növdə olur. Bir növ D1 reseptorlarını və layihələrini bədən hərəkətlərini asanlaşdırmaq üçün bazal gangliona "birbaşa yol" göstərir; ikinci tip D2 reseptorlarını və layihələrini 'dolayı yola' gətirir, bədən hərəkətləriniŞəkil 2) (Albin və al., 1989; Gerfen və digərləri, 1990; Kravitz və digərləri, 2010; Hikida et al., 2010). Bu yolların və reseptorların xüsusiyyətlərinə əsaslanaraq, DA bursts yüksək DA şəraitləri yaratmaq, D1 reseptorlarını aktivləşdirmək və birbaşa yolun yüksək dəyərli hərəkətləri (Şəkil 2ADA) dayandırır, D2 reseptorlarını inhibe edir və dolayı yolun aşağı qiymətli hərəkətləriŞəkil 2B) (Frank, 2005; Hikosaka, 2007). Bu hipotezə uyğun olaraq yüksək DA reseptor aktivasiyası kortikosteriya sinapslarının birbaşa yola (Shen et al., 2008) və müsbət nəticələrdən öyrənmə (Frank və digərləri, 2004; Voon və digərləri, 2010), striatal D1 reseptor blokajı, hədəfləri ödüllendirmek üçün hərəkətləri zəiflədirsə (Nakamura və Hikosaka, 2006). Analoji bir şəkildə, aşağı DA reseptor aktivasiyası kortik striatal sinapsların indirekt yola (Shen et al., 2008) və mənfi nəticələrdən öyrənmək (Frank və digərləri, 2004; Voon və digərləri, 2010striatal D2 reseptor blokajı, mükafatlandırılmayan hədəflərə hərəkətləri seçici şəkildə bastırır (Nakamura və Hikosaka, 2006). D1 və D2 reseptor funksiyalarının motivasion nəzarətdə bölüşdürülməsi DA ilə əlaqəli genlərin insan davranışına təsirlərinin əksəriyyətini (Ullsperger, 2010; Frank və Fossella, 2010) və dorsal striatumdan kənara çıxa bilər, çünki ventral striatumda oxşar əmək bölgüsü üçün sübut varGrace və digərləri, 2007; Lobo et al., 2010).

 

Şəkil 2

Dorsal striatumda müsbət və mənfi motivasiyanı dopamin nəzarət

Yuxarıdakı sxem, striatuma təsiri ilə davranışın davranış nəzarətinin sadə görünüşünü əks etdirirsə, tam şəkil daha mürəkkəbdir. DA, prefrontal korteks (o cümlədən bir çox beyin regionunda hərəkət edərək, mükafatla əlaqəli davranışları təsir göstərir)Hitchcott et al., 2007), rinalı korteks (Liu və digərləri, 2004), hipokampus (Packard və White, 1991; Grecksch və Matties, 1981) və amigdala (Phillips və digərləri, 2010). DA nin təsiri, DA innervasiyası, DA daşıyıcıları, metabolik fermentlər, otoreqektorlar, reseptorlar və intraselluler sinyal yollarına retseptoriya əlaqələrinin sıxlığının dəyişməsi səbəbindən bu bölgələr arasında fərqlənə bilərNeve və digərləri, 2004; Bentivoglio və Morelli, 2005; Frank və Fossella, 2010). Bundan əlavə, ən azı VTA-da DA nöronların proqnozlaşdırma hədəflərinəLammel və digərləri, 2008; Margolis et al., 2008), bəziları isə glutamatı, eləcə də dopamini (Descarries və s., 2008; Chuhma və digərləri, 2009; Hnasko və digərləri, 2010; Tecuapetla et al., 2010; Stuber və al., 2010; Birgner et al., 2010). Beləliklə, neyron emalına dair DA nöronun tam nəzarəti yalnız aşkar olunmağa başlayır.

Çoxsaylı hadisələrə müxtəlif dopamin cavabları

Neyronun qəzəbli hadisələrə verdiyi cavab motivasion nəzarətdə onun funksiyalarının mühüm bir sınağını təmin edir (Schultz, 1998; Berridge və Robinson, 1998; Redgrave et al., 1999; Horvitz, 2000; Joseph və ark., 2003). Bir çox cəhətdə, əksinə, əksinə əks etdirən tərəddüdli hadisələrə qarşı mübarizə aparırıq motivasiya dəyəri. Biz hədsiz hadisələrdən qaçınmaq və onlara mənfi dəyər vermək baxımından mükafatları axtarmaq və onlara müsbət dəyər vermək. Digər tərəfdən, biz bənzərini əks etdirən, bənzər tərzdə təltif və səbirli hadisələri müalicə edirik motivasiya qayğısı [FOOTNOTE1]. Həm tərifli, həm də qəzəbli hadisələr diqqətin yönəldilməsi, bilişsel emal və ümumiyyətlə motivasiya artımlarını tetikler.

Bu funksiyalardan hansı DA neuronları dəstəkləyir? Uzun müddətdir ki, stresli və sürpriz təcrübələr downstream beyin strukturlarında DA konsentrasiyalarında böyük dəyişikliklərə səbəb olur və bu təcrübələrə dair davranış reaksiyaları DA agonistləri, antaqonistləri və lezyonları tərəfindən dramatik şəkildə dəyişirSalamone, 1994; Di Xiara, 2002; Pezze və Feldon, 2004; Young və digərləri, 2005). Bu işlər çox təəccüblü nəticələr əldə etmişdir, lakinLevita və al., 2002; Di Xiara, 2002; Young və digərləri, 2005). Bir çox tədqiqat motivasion səy göstərən DA nöronlarla uyğun gəlir. Onlar qəzəbli hadisələrin DA səviyyəsini artırdığını və davranışdan yayınma yüksək DA ötürülməsiSalamone, 1994; Joseph və ark., 2003; Ventura və digərləri, 2007; Barr və ark., 2009; Fadok et al., 2009Fasik DA burstsZweifel və digərləri, 2009). Lakin digər tədqiqatlar motivasion dəyəri kodlayan DA nöronlarla daha uyğun gəlir. Onlar qəzəbli hadisələrin DA səviyyəsini azaldığını və davranışdan yayınma DA-nın aşağı səviyyədə ötürülməsi ilə dəstəkləndiyini bildirirlər (Mark və digərləri, 1991; Shippenberg et al., 1991; Liu və digərləri, 2008; Roitman və digərləri, 2008). Bir çox hallarda bu qarışıq nəticələr vahid tədqiqatlarda aşkar olunmuşdur ki, əksər təcrübələr fərqli beyin strukturlarında DA azadlığının fərqli nümunələrinə səbəb olur (Thierry et al., 1976; Besson və Louilot, 1995; Ventura və digərləri, 2001; Jeanblanc et al., 2002; Bassareo və digərləri, 2002; Pascucci et al., 2007) və DA ilə əlaqəli dərmanlar həm tərifəlayiq, həm də qəzəbli təcrübələrə səbəb olan nüvə və davranış təsiri qarışığına səbəb ola bilər (Ettenberg, 2004; Wheeler və digərləri, 2008).

DA sərbəst buraxılış nümunələrinin və funksiyalarının bu müxtəlifliyi DA nöronlarının bütün beyin strukturlarına vahid motivasiya siqnalı ötürməsi fikri ilə barışmaq çətindir. Bununla yanaşı müxtəlif cavablar açıqlana bilər, lakin əgər DA nöronları özləri müxtəlifdirsə - qəzəbli emalın müxtəlif aspektlərini dəstəkləyən çoxsaylı neyron populyasiyalardan ibarətdir. Bu görünüş anesteziyalı heyvanlarda sinir qeydiyyatı işləri ilə dəstəklənir. Bu tədqiqatlar göstərir ki, zəhərli stimullar bəzi DA nöronlarında stimullaşdırır, ancaq digər DA nöronlarındaChiodo et al., 1980; Maeda və Mogenson, 1982; Schultz və Romo, 1987; Mantz və digərləri, 1989; Gao və digərləri, 1990; Coizet və digərləri, 2006). Əksəriyyətlə, hem hüceyrə və ya inhibitor reaksiyalar təkamül hüceyrəli etiketlemeyle dopaminerjik olaraq təsdiqlənmiş nöronlarda olur (Brischoux və digərləri, 2009) (Şəkil 3). Həddindən artıq cəza verən cavabların müxtəlif növləri aktiv davranış zamanı baş verir. DA nöronlarının müxtəlif qrupları, dərinin zəhərli stimullaşdırılması, o cümlədən dəvətli hadisələrlə,Kiyatkin, 1988a; Kiyatkin, 1988b), çirkin şokları öngörən duysal göstərişlər (Guarraci və Kapp, 1999), aversive airpuffs (Matsumoto və Hikosaka, 2009b), həssas hava təyyarələriniMatsumoto və Hikosaka, 2009b; Joshua et al., 2009a). Bundan əlavə, iki DA nöronunun eyni vaxtda qeyd edildiyi zaman, onların yayındırıcı cavabları ümumiyyətlə bir-birinə nisbətən sınaqdan-məhkəmə korrelyasiyasına malikdir (Joshua et al., 2009b), ümumilikdə Ümumdünya əhalisinin əksər respondentləri koordinasiya edilməməsini təklif edir.

 

Şəkil 3

Fərqli hadisələrə dair müxtəlif dopamin nöron reaksiyaları

Bu müxtəlif cəfəng cavabların funksiyalarını başa düşmək üçün, mənəvi motivasiya siqnalı yaratmaq üçün mükafat cavabları ilə necə birləşdiklərini bilməliyik. Yeni bir araşdırma bu mövzunu araşdırdı və DA nöronlarının fərqli motivasion siqnalları olan bir çox nüfusa bölündüklərini ortaya qoydu (Matsumoto və Hikosaka, 2009b). Bir populyar, hadisələri ödüllendirici və heyecan verici hadisələrlə həddindən artıq həyəcanlandırır motivasiya dəyəri (Şəkil 4A). İkinci bir populyar, şifrələmə kimi, həm də bənzər bir davranışla təltif və həvəsli hadisələrlə həyəcanlandırır motivasiya qayğısı (Şəkil 4B). Bu əhalinin hər ikisinde də bir çox neyronlar mükafat və hədsiz proqnozlara həssasdırlar: ödüllendirici hadisələr proqnozlaşdırıldıqdan daha səmərəli olduğunda cavab verirlər və əksər hadisələr təxminlərə nisbətən daha çirkindir (Matsumoto və Hikosaka, 2009b). Bu göstərir ki, onların cəzalandırıcı cavabları, həqiqətən, həddindən artıq həssas hadisələr haqqında proqnozlara gətirib çıxarır, belə ki, onlar xam sensor giriş və ya mükafatla ümumi birləşmələr kimi qeyri-spesifik amillərə səbəb ola bilərSchultz, 2010). Ancaq bu iki əhali fərqli olaraq, onların proqnozlaşdırma kodunun detalında fərqlənirlər. DA neyronların kodlaşdırma motivasiya dəyərləri, həddən artıq hadisələrin pozulmaması nəticəsində mükafatların və müsbət hərəkətlərin olmaması ilə güclü inhibisyon da daxil olmaqla dəqiq bir proqnozlaşdırma səhv siqnalını kodlaşdırır (Şəkil 4A, sağda). Əksinə, DA nöronlarını kodlayan motivasion tənzimləmə, həqiqi hadisələr mövcud olduqda, lakin olmadıqda deyil, cavab verir (Şəkil 4B, hüququ), nəzəri anlayışlara uyğundur (Lang və Davis, 2006) [FOOTNOTE2]. Bu iki DA nöron populyasiyasına dair sübut nöral fəaliyyət orta hesabla müayinə olunduqda da müşahidə edilmişdir. Beləliklə DA sisteminin müxtəlif hissələrini hədəf alan tədqiqatlar, endikasiyalı hadisələri inhibə ilə kodlayan fasik DA sinyallerini tapdı (Roitman və digərləri, 2008), motivasiya dəyərinin kodlaşdırılmasına və ya həyəcanlaJoshua et al., 2008; Anstrom və digərləri, 2009), motivasion sərtliyin kodlaşdırılmasına bənzəyir.

 

Şəkil 4

Motivasiya dəyərini və istəklərini kodlayan fərqli dopamin nöron populyasiyaları

Bu son tapıntılar DA neyronlarının önyargılarla müqayisə edilməkdən daha çox mükafatlandırmaq üçün üstünlük verdiyini ilk hesabata ziddirMirenowicz və Schultz, 1996). Ancaq diqqətlə araşdırıldıqda, hətta bu iş DA dəyəri və fərqlilik kodlaşdırması ilə tamamilə uyğundur. Bu işdə mükafat işarələri yüksək ehtimal (> 90%) ilə mükafatlandırıcı nəticələrə, azaldıcı işarələr isə aşağı ehtimal (<10%) ilə nəticələnən nəticələrə gətirib çıxardı. Beləliklə, dəyər və diqqətəlayiq kodlayan DA nöronları, aşağı səviyyəli həssaslıqlarını dəqiq bir şəkildə kodlayaraq aversiv işarələrə az reaksiya verəcəkdir.

Motivasiya dəyərinin və işarə siqnallarının funksional rolu

Birlikdə götürülən yuxarıda göstərilən nəticələr DA neyronlarının motivasion nəzarətdə fərqli rollara uyğun bir çox populyasiyaya bölündüyünü göstərir. DA nöronlarını kodlayan motivasiya dəyəri dopamin nöronlarının mövcud nəzəriyyələrinə uyğun gəlir və mükafatın emalı (Schultz və digərləri, 1997; Berridge və Robinson, 1998; Müdrik, 2004). Bu nöronlar tam bir proqnozlaşdırma səhv siqnalını kodlayır və əks istiqamətlərdə təltif və hiddətlənən hadisələri kodlaşdırırlar. Beləliklə, bu nöronlar axtarış, qiymətləndirmə və dəyər öyrənmə üçün müvafiq təlimatlı bir siqnal verir (Şəkil 5). Bir stimul DA nöronların həyəcanlandıracaq dəyər kodlaşdırmasına səbəb olarsa, ona yaxınlaşmalı, yüksək dəyər verə bilərik və gələcəkdə yenidən axtarmaq üçün hərəkətlər öyrənməliyik. Bir stimul DA nöronların dəyərini kodlaşdırmağı qadağan edərsə, ondan qaçınmalı, aşağı qiymətə təyin etməlidir və gələcəkdə yenidən qarşısını almaq üçün tədbirlər öyrənməliyik.

 

Şəkil 5

Motivasiya dəyərinin hipotezli funksiyaları, istəkləri və xəbərdarlıq siqnalları

Əksinə, DA nöronlarını kodlayan motivasion tənzimləmə, dopamin nöronlarının nəzəriyyələri ilə uyğun gəlir,Redgrave et al., 1999; Horvitz, 2000; Joseph və ark., 2003; Kapur, 2003). Bu nöronlar həm tərifli, həm də qəzəbli hadisələrlə həyəcanlandırırlar və neytral dövrə üçün yüksək səviyyəli vəziyyətləri aşkarlamaq, proqnozlaşdırmaq və cavab verməyə öyrənmək üçün müvafiq təlimatlı bir siqnal verərək nötral hadisələrə zəif cavab verirlər. Burada üç belə beyin sistemini nəzərdən keçirəcəyik (Şəkil 5). Birincisi, vizual və diqqətəlayiq yönümlü neyron sxemlər hər növ hadisələr haqqında məlumatları tapmaq üçün təqlid edilir, həm də mükafatlandırıcı və həyəcanlıdır. Məsələn, həm mükafat, həm də cazibədar istəklər nöqteyi-nəzərdən daha effektiv şəkildə yönümlü reaksiyaları cəlb edir (Lang və Davis, 2006; Matsumoto və Hikosaka, 2009b; Austin və Duka, 2010). İkincisi, həm təltif, həm də xoşagəlməz vəziyyətlər, idrak nəzarəti və hərəkət seçimi üçün sinir sistemlərini birləşdirir - məlumatları nəzərə almaq üçün iş yaddaşını, bir hərəkətə qərar vermək üçün münaqişənin həll edilməsini və nəticəni xatırlamaq üçün uzun müddətli yaddaşla əlaqələndirməliyik (Bradley və digərləri, 1992; Botvinick et al., 2001; Savine və digərləri, 2010). Üçüncüsü, həm mükafatlandırıcı, həm də həssas vəziyyətlər, hərəkətlərin enerjisini artırmaq və düzgün şəkildə yerinə yetirilməsini təmin etmək üçün ümumi motivasiya artımını tələb edir. Həqiqətən də, DA nöronları yüksək dəyərli məqsədlərə nail olmaq üçün səy göstərməkdə və vəzifə tələblərinin biliklərin etibarlı motor performansına çevrilməsində çox vacibdir (Berridge və Robinson, 1998; Mazzoni və digərləri, 2007; Niv və digərləri, 2007; Salamone və digərləri, 2007).

Duyğu tövsiyələrini xəbərdar edərək dopaminin stimullaşdırılması

Motivasiya dəyəri və zəifliyini kodlayan öz siqnallarına əlavə olaraq, DA nöronlarının əksəriyyəti də birbaşa ödüllendirici və ya çaşqın təcrübələrlə əlaqəli olmayan bir neçə sensor hadisələrə cavab verir. Bu cavablar birbaşa sensor nəzarəti, sürpriz, yenilik, arousal, diqqət, təhqir, ümumiləşdirmə və yalançı-kondisiyalaşdırma (daxil olmaqla) bir sıra neyron və psixoloji amillərdən asılıdır.Schultz, 1998; Redgrave et al., 1999; Horvitz, 2000; Lisman və Grace, 2005; Redgrave və Gurney, 2006; Joshua et al., 2009a; Schultz, 2010).

Burada, bu fikirlərin və bu DA cavablarını bir əsas siqnal baxımından sintez etməyə çalışacağıq xəbərdarlıq siqnalı (Şəkil 5). "Alerting" termini Schultz (Schultz, 1998) diqqətini cəlb edən hadisələr üçün ümumi bir müddətdir. Burada daha dəqiq bir mənada istifadə edəcəyik. Xəbərdarlıq verici bir hadisə ilə biz onun yerini, ölçüsünü və sensor modaliti kimi sadə xüsusiyyətləri istifadə edərək, potensial əhəmiyyətini tez bir qiymətləndirməyə əsaslanaraq diqqətini çəkən gözlənilməz bir duyğu tapşırıq deməkdir. Belə xəbərdarlıq hadisələri tez-tez onları araşdırmaq və onların dəqiq mənasını müəyyən etmək üçün dərhal davranış reaksiyalarına səbəb olur. Beləliklə DA xəbərdarlıq siqnalları adətən qısa gecikmələrdə meydana gəlir, bir stimulun kobud xüsusiyyətlərinə əsaslanır və reaksiyaların yönləndirilməsi kimi dərhal reaksiyalarla əlaqələndirilir (Schultz və Romo, 1990; Joshua et al., 2009a; Schultz, 2010). Bu DA neyronlarındakı digər motivasion siqnallardan fərqli olaraq, uzun gecikmələrdə baş verir, stimulun dəqiq şəxsiyyətini nəzərə alır və yaxınlaşmaq və ya qaçmaq üçün qəbul edilən qərarlar kimi davranış hərəkətləri ilə yaxşı əlaqələndirilir (Schultz və Romo, 1990; Joshua et al., 2009a; Schultz, 2010).

DA xəbərdarlıqları SNc və VTA boyunca DA neyronlarının 60-90% -də görkəmli partlayış həyəcanlarını doğuran gözlənilməz işıq flaşları və işitsel kliklər kimi təəccüblü duysal hadisələrə səbəb ola bilərStrecker və Jacobs, 1985; Horvitz et al., 1997; Horvitz, 2000) (Şəkil 6A). Bu uyarıcı cavablar, stimulun təəccüblü olduğunu və diqqəti çəkən dərəcəni əks etdirir; bir stimul proqnozlaşdırıla bilən zamanlarda baş verərsə, diqqət digər yerlərdə və ya yuxu zamanıSchultz, 1998; Takikawa et al., 2004; Strecker və Jacobs, 1985; Steinfels və digərləri, 1983). Məsələn, bir pişik sakit uyandığında passiv bir vəziyyətdə olduqda, gözlənilməz bir tıklama səs bir görkəmli DA partlayışına səbəb olur, lakin pişik sıçan, qidalanma, qidalandırmaq, avlanan kimi diqqət tələb edən fəaliyyətlərlə məşğul olduqda heç bir təsiri yoxdur Eksperimental tərəfindən və s.Strecker və Jacobs, 1985) (Şəkil 6A). Eynilə, DA burst cavabları fiziki cəhətdən zəif olan, lakin yenilikləri ilə xəbərdarlıq edən duysal hadisələrə səbəb olur (Ljungberg et al., 1992; Schultz, 1998). Bu reaksiyalar, yeni stimulun orientasiya reaksiyalarının habitüdüyünə paralel olaraq tanış olurŞəkil 6B). Bu bulgulara uyğun olaraq, təəccüblü və yeni hadisələr downstream strukturlarında DA sərbəst buraxdıLisman və Grace, 2005) və DA ilə əlaqəli beyin sxemlərini mükafatlandırma prosesini (Zink və digərləri, 2003; Davidson et al., 2004; Duzel və digərləri, 2010).

 

Şəkil 6

Dopamin neyronlarının həyəcan verici hadisələrə cavab verməsi

DA xəbərdarlıqçı cavabları da motivasiya baxımından əhəmiyyətli hadisələr haqqında yeni məlumatlar təqdim etmək üçün potensiala malik olan gözlənilməz duyğular ilə tetiklenir. Qısa bir gecikmənin xəbərdarlıq siqnalının gözlənildiyi kimi, bu cavablar çox qeyri-seçicidir: bunlar hər hansı stimul Bənzəyir motivasiyadan irəli gələn bir göstəriş, beləliklə də bənzərlik çox az olsa da (ümumiləşdirmə adlanan bir fenomen)Schultz, 1998). Nəticədə, DA neyronları tez-tez iki siqnalın qarışığı ilə stimuluna cavab verir: stimulun potensial olaraq vacibdir və onu kodlayan ikinci bir siqnaldır faktiki mükafatlandırıcı və ya aversive məna (Schultz və Romo, 1990; Waelti və digərləri, 2001; Tobler və digərləri, 2003; Day et al., 2007; Kobayashi və Schultz, 2008; Fiorillo və digərləri, 2008; Nomoto və digərləri, 2010) (görmək (Kakade və Dayan, 2002; Joshua et al., 2009a; Schultz, 2010) baxış üçün). Bir nümunə göstərilən DA nöronlarını kodlayan bir motivasion tənzimləmə qrupunda görünə bilər Şəkil 6C (Bromberg-Martin və digərləri, 2010a). Bu neyronlar mükafat və hirsli endirimlər ilə heyecanlandılar, lakin onlar da neytral bir qayda ilə heyecanlandılar. Neytral nişan motivasion nəticələrlə heç vaxt əlaqələndirilməmişdi, lakin mükafat və fəryad göstərişlərinə (çox kiçik) fiziki bənzərlik var idi.

Bu xəbərdarlıq reaksiyaları həssas nümunənin qabaqcıl reaksiyaların törətməsini tövsiyə etmək və onun mənasını tapmaq üçün qabiliyyətlə bağlıdır. Bu üç fərqli xüsusiyyətdə görülə bilər. Birincisi, xəbərdarlıq edən cavablar yalnız onların mənasını müəyyənləşdirmək üçün yoxlanılması lazım olan duyğulara aid istəklər üçün baş verir və bu, şirələrin və ya təyyarələrin (məsələn,Schultz, 2010). İkincisi, xəbərdarlıq edən cavablar yalnız bir replika potensial olaraq vacibdir və tapşırığın əlindəki tapşırığa aid olmadığı və istiqamətləndirmə reaksiyalarını tetiklemeyecek şekilde deyil, yönlendirme reaksiyonlarını tetikleyebilme yeteneğine sahip olduğunda meydana gelir (Schultz və Romo, 1990). Üçüncüsü, xəbərdarlıqların gözlənilməz bir zamanda və ya gözlərin mərkəzindən uzaqlaşdıqları zaman (məsələnin diqqətini kəskin bir şəkildə dəyişməyə səbəb olduqda)Bromberg-Martin və digərləri, 2010a). Beləliklə, motivasiya göstərişlərinin gözlənilməz vaxtı ilə təqdim edildikdə, dərhal istiqamətləndirici reaksiyalar və ümumiləşdirilmiş DA xəbərdarlıq reaksiyasını tetikler - nöqtə istəkləriŞəkil 6C, qara). Amma onların vaxtı təxmin edildikdə - məsələn, tapşırıqlar görünürdən bir saniyə əvvəl təqdim edilən "sınaq başlanğıc nöqtəsi" ilə subyektlərin ön qeyd edilməsi ilə əlaqədar - xəbərdarlıqlar artıq xəbərdarlıq cavab vermirŞəkil 6D, Boz). Bunun əvəzinə xəbərdarlıq cavabı sınaq başlanğıc nöqtəsinə keçəcək - gözlənilməz vaxtı olan mühakimənin ilk hadisə və istiqamətləndirici reaksiyalara səbəb olur (Şəkil 6D, qara).

DA neyron xəbərdarlıq siqnallarını yaradan əsas mexanizm nədir? Bir hipotez, xəbərdarlıq edən cavabların sadəcə qısamüddətli gecikmələrdə baş verən ənənəvi mükafat proqnozu səhv siqnallarıdır və bu, tamamilə ayrı-seçkilikdən əvvəl stimulun gözlənilən mükafat dəyərini kodlaşdırır (Kakade və Dayan, 2002). Daha yeni sübutlar isə, xəbərdarlıq siqnallarının adi DA mükafat siqnallarından fərqli bir mexanizmlə yaradıla biləcəyini göstərir (Satoh et al., 2003; Bayer və Glimcher, 2005; Bromberg-Martin və digərləri, 2010a; Bromberg-Martin və digərləri, 2010c; Nomoto və digərləri, 2010). Çox təəccüblü olaraq, məhkəmə prosesinə başlama xəbərdarlığı cavab tapşırıqlarını ödəməklə məhdudlaşmır; heç bir mükafat təslim olunmayan bir qəzəbli vəzifə dövründə bərabər gücə malik ola bilər (Şəkil 6C, D, altındakı "qəzəbli vəzifə"). Eyni neyronlarda şərti DA mükafat sinyalleri düzgün işarə edərsə də, bu mükafatlandırıcı tapşırıq sürətləndirici tapşırıqdan daha yüksək gözlənilən dəyərə malikdirBromberg-Martin və digərləri, 2010a). Bu xəbərdarlıq siqnalları tamamilə dəyər kodlaşdırma forması deyil və ya tamamilə şifrənin kodlaşdırma formasıdır, çünki onlar DA nöronlarının kodlaşdırılmasının həm motivasion dəyərinin çox hissəsində,Bromberg-Martin və digərləri, 2010a). DA nöronların keçmiş mükafat nəticələrinin yaddaşına əsaslanaraq gələcək mükafatların proqnozlaşdırıldığı kimi ikinci bir ayrışma görülə bilər (Satoh et al., 2003; Bayer və Glimcher, 2005). Konvensional DA mükafat sinyalleri dəqiq mükafat proqnozu üçün optimallaşdırılmış uzun müddətli bir yaddaş izi ilə nəzarət edilərkən, məhkəmə başlama tapşırığına cavab vermək dərhal istiqamətləndirmə reaksiyalarında görülən ayrı bir yaddaş izi ilə nəzarət edilir (Bromberg-Martin və digərləri, 2010c). Üçüncü disosiyasiya bu sinyallerin DA nöron populyasiyasında yayıldığı şəkildə görünə bilər. Konvensional DA mükafat siqnalları ventromedial SNc-də güclü olmasına baxmayaraq, başlanğıc başlanğıcına cavab verən (və digər gözlənilmədən təyin edilmiş qeydlərə) xəbərdarlıq SNcNomoto və digərləri, 2010).

Konvensional mükafat siqnallarından bu ayrışmalardan fərqli olaraq, DA xəbərdarlıq siqnalları xəbərdarlıq hadisəsinə yönəldilmiş və yanaşma sürəti ilə əlaqələndirilmişdir (Satoh et al., 2003; Bromberg-Martin və digərləri, 2010a; Bromberg-Martin və digərləri, 2010c). Bu, xəbərdarlıq siqnallarının potensial əhəmiyyətli hadisələri araşdıran sürətli reaksiyaları motivasiya edən bir neyron proses ilə meydana gəldiyini göstərir. Hal-hazırda, təəssüf ki, bu prosesin 'mühüm' kimi davranan hadisələrin tam olaraq nə qədər az olduğu bilinir. Məsələn, cavabları təltif və hiddətlənən hadisələrə bərabər həssas hesab edirsiniz? Alerting cavabları, mükafat istəklərinə bənzəyən və ya mükafat və aversive ipuçlarına bənzəyən stimullar üçün meydana gəldiyi bilinir (məsələn, eyni duyğu modalını paylaşmaqla). Ancaq xəbərdarlıq edən cavablar yalnız təkzibedici istəklərə bənzəyir ki, stimullar üçün baş verir.

Dopamin xəbərdarlıq siqnallarının funksional rolu

Gördüyümüz kimi, xəbərdarlıq edən siqnallar motivasion dəyər və işarə siqnallarından ayrı bir mexanizm tərəfindən yaranacaqdır. Buna baxmayaraq, xəbərdarlıq siqnalları DA neyronların kodlaşdırılmasında həm motivasion dəyərə, həm də sədaqətə göndərilir və buna görə də beyin emalını və davranışını dəyər və sükut sinyallerinə bənzər bir şəkildə tənzimləyirŞəkil 5).

DA neyronlarını kodlayan motivasion səylərə göndərilən siqnallar xəbərdarlıq stimuluna yönəldilməyə, bilik resurslarının mənasını tapmaqda və hərəkət planına qərar vermələrinə kömək edəcək və bu planı effektiv şəkildə həyata keçirmək üçün motivasiya səviyyələrini artırır (Şəkil 5). Bu təsirlər nöral emal üzərində dərhal təsirlər və ya xəbərdarlıq hadisəsinin aşkarlanmasına səbəb olan tədbirlərin gücləndirilməsi ilə baş verə bilər. Bu funksional rol xəbərdarlıq stimuluna DA xəbərdarlıq reaksiyaları və sürətli davranış reaksiyaları arasındakı əlaqə ilə yaxşı uyğundur və qısa müddətli DA nöron reaksiyalarının diqqəti, arousal, bilişsel emalın artırılması və dərhal davranış reaksiyalarına yönəldilməsində iştirak etdiyi nəzəriyyələrlə (Redgrave et al., 1999; Horvitz, 2000; Joseph və ark., 2003; Lisman və Grace, 2005; Redgrave və Gurney, 2006; Joshua et al., 2009a).

DA neyronların kodlaşdırılmasında motivasion dəyərlərdə xəbərdarlıq edən siqnalların olması daha çox izah etmək çətindir. Bu nöronlar axtarışları, nəticələrini qiymətləndirmək və dəyəri öyrənmək üçün ideal olan motivasion dəyər siqnallarını ötürür; ancaq gözlənilməz səslər və qəzəbli sınaqların başlanğıcı kimi hadisələri xəbərdar etməklə həyəcanlı ola bilər. Hipotezli yolumuza görə (Şəkil 5), bu tədbirlərin müsbət dəyər verilməsi və mükafatlara bənzər bir şəkildə aranmasına səbəb olacaq xəbərdarlıq! Birinci baxışda təəccüblü olsa da, xəbərdarlıq hadisələrinin müsbət məqsədlər kimi qəbul edilə biləcəyinə şübhə etmək üçün bir səbəb var. Alerting siqnalları, potensial əhəmiyyətli hadisə baş verəcəyi barədə ilk xəbərdarlığı təmin edir və bu səbəbdən hadisəni nəzarət etmək üçün ilk addımı təmin edir. Uyarıcı göstərişlər mövcud olsaydı, motivasiya halında baş verən hadisələr aşkar edilər, proqnozlaşdırılır və əvvəlcədən hazırlana bilər; xəbərdarlıq siqnalı olmadıqda, motivasiya halında baş verən hadisələr həmişə gözlənilməz bir sürpriz kimi baş verir. Həqiqətən insanlar və heyvanlar tez-tez tərbiyəli, həssas və hətta motivasiya halında həssas hadisələrin müşahidə oluna biləcəyi və əvvəlcədən proqnozlaşdırıldığı mühitlər üçün üstünlük verirlər (Badia və digərləri, 1979; Herry və digərləri, 2007; Daly, 1992; Chew və Ho, 1994) və bir çox DA nöronu, mükafat-proqnozlaşdırıcı məlumatları (davranış seçimini)Bromberg-Martin və Hikosaka, 2009). DA xəbərdarlıq siqnalları potensial mühüm duyğu endirimlərinin əvvəlcədən gözlənilən mühitlərdə müsbət dəyərin təyin edilməsi ilə bu üstünlükləri dəstəkləyə bilər.

Neyronların kodlaşdırma dəyərinin və sabitliyinin anatomik yerləri

Yeni bir tədqiqat, DA mükafatlarının yerləşdiyi yerləri və lateral midbraində VSA-nın SNc və lateralmost hissəsini əhatə edən siqnallarınMatsumoto və Hikosaka, 2009b). Anatomik bir gradientdə bu bölgədə motivasiya dəyəri və motivasion sərtlik siqnalları paylandı. Motivasiya dəyəri siqnalları ventromedial SNc və lateral VTA-da nöronlarda daha çox tapılmışdı, motivasiyalı çırpınma siqnalları dorsolateral SNc-də daha çox neyronlarda tapıldı (Şəkil 7B). Bu, DA mükafat dəyərinin kodlaşdırma ventromedial SNc-də güclü olduğunu bildirirNomoto və digərləri, 2010) həddindən artıq sürətləndirici həyəcanların daha lateral olmasına baxmayaraqMirenowicz və Schultz, 1996). Digər tədqiqatlar daha medial midbrain araşdırdı. Bu işlər, həyəcanlandırıcı həyəcanların daha ventrikal olaraq yerləşdirilməsinə baxmayaraq, yerlərdə heç bir əhəmiyyət kəsb etməyən həyəcanlı və maneə törədici cavabı yaradırGuarraci və Kapp, 1999; Brischoux və digərləri, 2009) (Şəkil 7C).

Motivasiya dəyər siqnallarının təyinatı

Hipotezimizə görə DA neyronların kodlaşdırma motivasion dəyəri yanaşma və qaçınma hərəkətləri ilə məşğul olan beyin bölgələrinə, nəticələrin qiymətləndirilməsinə və dəyər öyrənilməsinə (Şəkil 5). Həqiqətən ventromedial SNc və VTA proqnozu ventromedial prefrontal korteks (Williams və Goldman-Rakic, 1998) orbitofrontal korteks (OFC) daxil olmaqlaPorrino və Goldman-Rakic, 1982) (Şəkil 7A). OFC funksional görüntüləmə tədqiqatlarında dəyər kodlaşdırma prosesində ardıcıl olaraq tətbiq edilmişdir (Anderson və digərləri, 2003; Kiçik və s., 2003; Jensen və digərləri, 2007; Litt və s., 2010) və tək nöron qeydləri (Morrison və Salzman, 2009; Roesch və Olson, 2004). OFC seçim variantlarını qiymətləndirmək üçün düşünülür (Padoa-Schioppa, 2007; Kable və Glimcher, 2009), nəticə gözləntilərini kodlaşdırır (Schoenbaum et al., 2009) və öyrənmə zamanı bu gözləntiləri yeniləyir (Walton və digərləri, 2010). Bundan əlavə, OFC, mənfi mükafat proqnozlaşdırılması səhvlərindən öyrənməyə cəlb olunur (Takahashi və digərləri, 2009dəyərli kodlaşdırma DA nöronları olanŞəkil 4).

Bundan əlavə, dopaminergik midbrain layihəsinin ventral striatumun nüvəli akumbens qabığı (NAc kabuğu) (Xəbər və digərləri, 2000) (Şəkil 7A). Son bir işdə, NAc qabığının dad nəticələrinin motivasion dəyərini kodlayan fasik DA siqnallarını qəbul etdiyini göstərdi (Roitman və digərləri, 2008). Bu siqnallar dəyəri öyrənməyə səbəb ola bilər, çünki NAc qabığına DA dərmanlarının birbaşa infuziyası güclü şəkildə gücləndirir (İkemoto, 2010) qəfəsə DA girişini azaldacaq müalicələr isə aversionlarıLiu və digərləri, 2008). Bir xəbərdarlıq, uzunmüddətli (dəqiqə) ərzində NAc shell DA seriyasından edilən tədqiqatlar qarışıq nəticələrə gətirib çıxardı ki, bəziları dəyər kodlaşdırma ilə uyğunlaşdırılıb və sadələşdirmə kodlu digərləri (məsələn,Bassareo və digərləri, 2002; Ventura və digərləri, 2007)). Bu, dəyər siqnallarının NAc qabığının içərisində xüsusi yerlərə məhdudlaşdığını göstərir. Xüsusilə, NAc qabığının fərqli bölgələri iştahlı və sürpriz davranışları idarə etmək üçün ixtisaslaşmışdır (Reynolds və Berridge, 2002), həm də DA nöronlardanFaure et al., 2008).

Nəhayət, SNc səviyyəsində DA nöronları dorsal striatuma ağır proqnozlar göndərir (Xəbər və digərləri, 2000), dorsal striatumun DA sinyallerini kodlayan həm motivasion dəyər,Şəkil 7A). DA neyronlarının kodlaşdırma motivasiya dəyəri dəyər öyrənməsində iştirak edən striatal circuitry üçün stimul cavab tədbirlərini öyrənmək üçün ideal bir təlimatlı siqnal təmin edəcəkdir (Faure et al., 2005; Yin və Knowlton, 2006; Balleine və O'Doherty, 2010). Bu DA neyronları partladıqda, mükafat nəticələrini qazanmaq üçün birbaşa yolla məşğul olurdular; onlar dayandırdıqda, çirkin nəticələrdən qaçmaq üçün öyrənmək üçün dolayı yolla məşğul olurdular (Şəkil 2). Həqiqətən də, striatal yolların əməyin bu bölünməsi və mükəmməl işlənmə prosesiHikida et al., 2010). Bununla belə, bu yollardakı nöronların davranış zamanı təltif və təcavüzkar hadisələrə necə cavab verməsi hələ də məlum deyil. Ən azı dorsal striatumda bir nöronun bir alt dəsti ayrı-seçkilikli və həssas hadisələrə fərqlidirRavel və al., 2003; Yamada et al., 2004, 2007; Joshua et al., 2008).

Motivasiya əlamətlərinin siqnalları

Hipotezimizə görə, DA nöronlarını kodlayan motivasion tənzimləmə istiqamətləndirmə, bilişsel emal və ümumi motivasiya ilə məşğul olan beyin bölgələrini layihələndirməlidir (Şəkil 5). Həqiqətən, dorsolateral midbrain DA nöronların dorsal və lateral frontal korteks proqnozlarıWilliams və Goldman-Rakic, 1998) (Şəkil 7A), diqqətəlayiq axtarış, iş yaddaşı, idrak nəzarəti və motivasion nəticələr arasında qərar qəbul edilməsi kimi bilişsel funksiyalara zidd olan bir bölgəWilliams və Castner, 2006; Lee və Seo, 2007; Müdrik, 2008; Kable və Glimcher, 2009; Wallis və Kennerley, 2010). Dorsolateral prefrontal kognitiv funksiyalar DA səviyyələri ilə sıx şəkildə tənzimlənir (Robbins və Arnsten, 2009) və fasik DA nöron aktivasiyasından asılı olaraq nəzəriyyə olunur (Cohen və ark., 2002; Lapish və s., 2007). Xüsusilə, yanal prefrontal nöronların alt-üstü həm mükafatlandırıcı, həm də görməli vizual tapşırıqlara cavab verir və əksəriyyət motivasion sərtliyin kodlaşdırılmasına bənzər bir istiqamətdə cavab verir (Kobayashi və digərləri, 2006). Bundan əlavə, bu nöronların fəaliyyəti yaddaş yaddaşında olan vəzifələri yerinə yetirərkən davranışçı müvəffəqiyyətlə əlaqələndirilir (Kobayashi və digərləri, 2006). Bu dorsolateral DA → dorsolateral frontal korteks yolunun primatlara xüsusi olduğu görünür (baxmayaraq ki,Williams və Goldman-Rakic, 1998), digər növlərdə funksional olaraq oxşar yol ola bilər. Xüsusilə, primat dorsolateral prefrontal korteksin bir çox idrak funksiyaları kemirgen medial prefrontal korteks (Uylings və digərləri, 2003) və bu bölgənin DA motivasion tənzimləmə siqnallarını qəbul etdiyi və dürüstlüklə əlaqəli davranışlarıMantz və digərləri, 1989; Di Xiara, 2002; Joseph və ark., 2003; Ventura və digərləri, 2007; Ventura və digərləri, 2008).

VTA-nın həm nizam-intizamlı, həm də dəyərli kodlayıcı neyronları olan və kodlaşdırma siqnallarının NAc qabığına göndərildiyi sübutları nəzərə alınmaqla, zəiflik siqnalları NAc nüvəsinə göndərilə bilər (Şəkil 7A). Həqiqətən də, NAc nüvəsi (lakin kabuk deyil) fiziki səy kimi cavab xərclərini aradan qaldırmaq üçün motivasiyanı təmin etmək üçün vacibdir; Bilişsel esnekliği gerektiren set-değişen görevleri gerçekleştirmek; və mükafat istəklərinin ümumi motivasiyanın artırılmasına səbəb olması üçünGhods-Şərifi və Floresko, 2010; Floresco və digərləri, 2006; Hall və digərləri, 2001; Kardinal, 2006). Motivasiya təhlükəsizliyinin kodlaşdırılmasına uyğun olaraq, NAc səthi həm mükafatlandırıcı təcrübələr zamanı DA-nın fasik partlayışlarını qəbul edir (Day et al., 2007) və qəzəbli təcrübə (Anstrom və digərləri, 2009).

Nəhayət, yuxarıda müzakirə olunduğu kimi, DA neyronları kodlayan bəzi qüsurlar dorsal striatuma (Şəkil 7A). Dorsal striatumun bəzi bölgələri öyrənmə hərəkətləri dəyərləri ilə əlaqəli funksiyalara cəlb olunarkən, dorsal striatum da istiqamətləndirmə, diqqət, iş yaddaşı və ümumi motivasiya kimi bütün vacib hadisələrə cəlb edilməli olan funksiyalara da aiddir (Hikosaka et al., 2000; Klingberg, 2010; Palmiter, 2008). Həqiqətən, dorsal striatal nöronların bir alt qrupu neytral hadisələrə nisbətən daha mükəmməl və həyəcanlandıran hadisələrə daha çox cavab verirRavel və al., 1999; Blazquez et al., 2002; Yamada et al., 2004, 2007), əsaslandırılmış davranışda onların səbəbli rolu hələ bilinməyib.

Motivasiya dəyər siqnallarının mənbələri

Son zamanlardakı bir sıra araşdırmalar göstərir ki, DA nöronları epithalamus, lateral habenula (LHb) (kiçik bir nüvə)Hikosaka, 2010) (Şəkil 8). LHb DA nöronları üzərində güclü mənfi nəzarət göstərir: LHb stimullaşdırılması DA nöronları qısa latentlərdəChristoph et al., 1986) və VTA-nın stimullaşdırılmasına qarşı tərzdə öyrənməni tənzimləyə bilər (Shumake və digərləri, 2010). Mənfi nəzarət siqnalına uyğun olaraq, bir çox LHb nöronu DA neyronlara ayna ters çevrilmiş fasik cavab verir: LHb nöronları inhibe etdi müsbət mükafat proqnozu səhvləri və coşğun mənfi mükafat proqnozlaşdırılması səhvləri ilə (Matsumoto və Hikosaka, 2007, 2009a; Bromberg-Martin və digərləri, 2010a; Bromberg-Martin və digərləri, 2010c). Bir çox hallarda bu siqnallar LHb-də LHb → DA ötürülməsinə uyğun olaraq LHb-də daha qısa gecikmələrdə baş verir.Matsumoto və Hikosaka, 2007; Bromberg-Martin və digərləri, 2010a).

 

Şəkil 8

Motivasiya dəyərinin hipotezli mənbələri, istək və xəbərdarlıq siqnalları

LHb, midbrain boyunca DA nöronlarını idarə edə bilir, ancaq bir neçə dəlil xətti DA nöronlarını kodlayan motivasion dəyər üzərində imtiyazlı nəzarət göstərir. Birincisi, LHb nöronları dəyəri kodlayan DA neyronları yaxından izah edən motivasiya dəyərini kodlaşdırırlar - həm müsbət, həm də mənfi mükafat proqnozu səhvlərini şifrələyirlər və təltif və təcavüzkar hadisələrə qarşı əks istiqamətlərdə cavab verirlər (Matsumoto və Hikosaka, 2009a; Bromberg-Martin və digərləri, 2010a). İkincisi, LHb-nin stimullaşdırılması DA neyronları üzərində ən güclü effektə malikdir, xüsusiyyətləri codromedial SNc-də (heç bir mükafat istəkləri və anatomik yerləşmə)Matsumoto və Hikosaka, 2007, 2009b). Üçüncüsü, LHb pozğunluqları DA nöronun maneə törədici hadisələrə maneə törətməsinə mane olur, DA qiymət siqnallarının yaranmasında LHb üçün nəyin səbəb olduğunu göstərir (Gao və digərləri, 1990).

LHb, DA neyronlarının bazal ganglion tərəfindən idarə oluna biləcəyi daha geniş neyron yolun bir hissəsidir (Şəkil 8). LHb, globus pallidus sərhədinin (GPb) ətrafında yerləşən nöronların əhalisindən bir proyeksiya vasitəsilə mükafat proqnozu səhvlərinə bənzər siqnalları alır (Hong və Hikosaka, 2008). Bu sinyaller LHb'ye çatdıqda, onlar DA neyronlarına LHb'nin midbrain GABA neyronları ilə DA nöronlarını inhibe edən disynaptik yolla göndərilmələri ehtimalıJi və Shepard, 2007; Omelçenko et al., 2009; Brinschwitz və digərləri, 2010). Bu, LTA proqnozları vasitəsilə VTA-da internoreonlara və rostromedial tegmental nüvəli (RMTg) adlanan bir GABA-ergik nüvəsinəJhou və digərləri, 2009b) (həmçinin '' VTA '' kaudal quyruğu 'Kaufling və digərləri, 2009)). Xüsusilə, RMTg nöronlarının LHb nöronlarına bənzər cavab mübadiləsi xüsusiyyətləri vardır, motivasiya dəyərini kodlaşdırırlar və dopaminergik midbrainə ağır bir inhibitor proqnoz varJhou və digərləri, 2009a). Beləliklə DA neyronlarına motivasion dəyər siqnalları göndərmək üçün tam bazal ganglion yolları GPb → LHb → RMTg → DA (Hikosaka, 2010).

Gələcək tədqiqatlar üçün vacib bir sual, motivasion dəyər siqnallarının yalnız LHb vasitəsilə ötürülməsi və ya bir çox giriş yolları ilə nəqli olub-olmamasıdır. Xüsusilə, aversiv ayaqları ilə DA inhibisyonları mesopontin parabraxial nüvədə (PBN)Coizet və digərləri, 2010) (Şəkil 8). Bu nüvə zəhərli hissi kodlayan onurğa kordundan birbaşa daxil olan neyronları ehtiva edir və həyəcan proqnozları vasitəsilə DA neyronlarını RMTg (Coizet və digərləri, 2010; Gauriau və Bernard, 2002). Bu, LHb'nin DA nöronlarına motivasion dəyər siqnalları göndərdiyini göstərir və PBN, xüsusilə də aversiv nəticələrlə əlaqəli dəyər siqnalının bir komponenti təmin edərkən, həm də mükafatlandırıcı və aversiv istəklər və nəticələr verir.

Mühüm motivasiya siqnallarının mənbələri

DA neyronlarında motivasiya siqnalının siqnallarının mənbəyi haqqında daha az məlumat vardır. Bir maraqlı namizəd həm mükafatlandırıcı, həm də həyəcan verici hadisələr zamanı hərtərəfli yönəldici, diqqət və ümumi motivasion cavablarla əlaqəli olan amigdala (CeA) mərkəzinin nüvəsidir (Holland və Gallagher, 1999; Baxter və Murray, 2002; Merali və digərləri, 2003; Balleine və Killcross, 2006) (Şəkil 8). CeA və digər amygdala nüvələrində siqnalları motivasion ehtiyata uyğun bir çox neyronlar var: onlar eyni istiqamətdə təltif və qəzəbli hadisələri siqnaldırlar, hadisələr gözlənilmədən meydana gəldikdə artdıqda və davranış tədbirləri ilə uyğundurlarNishijo et al., 1988; Belova və digərləri, 2007; Şabel və Janak, 2009). Bu siqnallar DA neyronlarına göndərilə bilər, çünki CeA təltif və sürpriz informasiyanı (brauzer)Lee və digərləri, 2005; Pascoe və Kapp, 1985) və CeA mükafat ilə əlaqəli hadisələr zamanı DA sərbəst buraxılması üçün vacibdir (Phillips və digərləri, 2003a). Üstəlik CeA, DA neyronları ilə yanaşı, bizim təklif olunan anatomik və funksional şəbəkələrə uyğun motivasion qüsurlara uyğun şəkildə iştirak edir. Cəma, SNc və dorsal striatum da daxil olmaqla bir yol, yemək istəklərinə öyrənmə yönümlü olmalıdır (Han və digərləri, 1997; Lee və digərləri, 2005; El-Amami və Holland, 2007). Siqnalın dəyər siqnallarına qarşı bölüşdürülməsi ilə uyğun olaraq, bu yol yolda yemək istəklərinə yönəlməyi öyrənmək üçün deyil, qida nəticələrinəHan və digərləri, 1997). CeA, SNc, VTA və NAc nüvəsi daxil olmaqla ikinci bir yol, mükafat istəkləri üçün mükafat axtarış tədbirlərini yerinə yetirmək üçün ümumi motivasiya artımına səbəb olur (Hall və digərləri, 2001; Corbit və Balleine, 2005; El-Amami və Holland, 2007).

CeA'ya əlavə olaraq, DA nöronları, bazal önbaxanda şəfa-kodlayıcı nöronlar kimi digər mənbələrdən motivasiya siqnalları siqnalları əldə edə bilər (Lin və Nicolelis, 2008; Richardson və DeLong, 1991) və PBN-də nöronlarınCoizet və digərləri, 2010), baxmayaraq ki, bu yollar araşdırılmalıdır.

Siqnalların xəbərdarlıq mənbələri

DA nöronlarını xəbərdarlıq siqnalları ilə təmin etmək üçün bir neçə yaxşı namizəd var. Bəlkə də ən cəlbedici namizəd, çox duysal modalitələrdən qısa müddətdə gecikmənin duysal girdiyini alan və üstəlik reaksiyalar və diqqət yönəldən nəzarətçi ortalıq beyninin üstün kolikulusudur (SC)Redgrave və Gurney, 2006) (Şəkil 8). SC, SNc və VTA'ya birbaşa proyeksiyaya malikdir (May et al., 2009; Comoli və digərləri, 2003). Anesteziyalı heyvanlarda SC, DA neyronlarına çatmaq üçün qısa latensiya vizual siqnalları üçün vacib bir kanaldır və aşağı axın strukturlarında DA sərbəstliyini tetiklerComoli və digərləri, 2003; Dommett və digərləri, 2005). SC-DA yolu, SC neyronlarının mükafatın çatdırılmasına az cavab verdiyinə və DA-nın dərhal cavabları üzərində yumşaq bir təsirə malik olduğundan, xəbərdarlıq siqnalları deyil,Coizet və digərləri, 2006). Bu, SC neyronlarının (1) bir stimul aşkarladığı hadisələrin ardıcıllığını nəzərdə tutur (2), onu potensial olaraq vacib hesab edir (3) stimuli araşdırmaq üçün bir istiqamətləndirmə reaksiyası tetikler ve (4) eyni zamanda bir DA xəbərdarlıq cavabını səbəb olur Aşağıdakı strukturlarda DA-nin partlayışı (Redgrave və Gurney, 2006).

DA neyronlarına xəbərdarlıq siqnalları göndərmək üçün ikinci bir namizəd LHb (Şəkil 8). Xüsusilə, bir sınaq başlanğıcının gözlənilməz başlanğıcı çox LHb nöronlarını DA nöron xəbərdarlıq siqnasına tərs şəkildə maneə törədir və bu cavab LHb-də LHb → DA ötürülmə istiqamətinə uyğun olan LHb-də daha qısa gecikmə zamanı olurBromberg-Martin və digərləri, 2010a; Bromberg-Martin və digərləri, 2010c). Bundan əlavə, LHb neyronlarının gözlənilməz görmə şəkilləri və səslər, DA həyəcanlarına (MM, ESB-M və OH, nəşr olunmamış müşahidələr) tərs şəkildə səsləndiyini müşahidə etmişik, baxmayaraq ki, bu sistematik bir araşdırma gözləyir.

Nəhayət DA neyronlarına xəbərdarlıq edən siqnal göndərmək üçün üçüncü namizəd SNc və VTA-ya layihələndirən pedunculopontin tegmental nüvə (PPTg) və motivasiya prosesində iştirak edirWinn, 2006) (Şəkil 8). PPTg VTA DA nöron bursts imkan üçün vacibdir (Grace və digərləri, 2007mükafatların mükafatlandırılması üçün burst cavabları daxil olmaqla,Pan və Hyland, 2005). Uyarıcı siqnal ilə uyğun olaraq, PPTg nöronları birdən çox duysal modallıqlara qısa gecikməz cavab verir və reaksiyaların yönləndirilməsi zamanı aktivdir (Winn, 2006). PPTg duyğulu cavablarının mükafat dəyərindən və dərhal hərəkətə olan tələblərdən təsirləndiyinə dair bir sübut var (Dormont və digərləri, 1998; Okada və digərləri, 2009) (bax (baxPan və Hyland, 2005)). Bəzi PPTg nöronları da mükafatlandırıcı və ya çaşqın nəticələrə cavab verirlər (Dormont və digərləri, 1998; Kobayashi və digərləri, 2002; İvlieva və Timofeeva, 2003b, a). PPTg DA nöronlarına göndərdiyi siqnalların xəbərdarlıqla əlaqəli olub-olmaması və ya dəyəri və səy göstərməsi kimi digər motivasiya siqnalları olub-olmadığını yoxlamaq vacibdir.

Bu iş Milli Göz İnstitutunda intramural tədqiqat proqramı ilə dəstəklənmişdir. Qiymətli müzakirələr üçün də Amy Arnstenə təşəkkür edirik.

Yayımcının Rədd cavabı: Bu dərc üçün qəbul edilmiş edilmiş edilməmiş əlyazmanın bir PDF faylıdır. Müştərilərimizə xidmət olaraq, bu əlyazmanın bu erkən versiyasını təqdim edirik. Əlyazma, surətini çıxarmaq, tərtib etmək və son sübut şəklində dərc edildikdən sonra ortaya çıxan sübutların nəzərdən keçirilməsini təmin edəcəkdir. Xatırlayın ki, istehsal prosesi zamanı məzmuna təsir göstərə biləcək səhvlər aşkar edilə bilər və jurnala aid olan bütün hüquqi rəddlər aiddir.

^FOOTNOTE1By motivasiya qayğısı biz həm mükafatlandırıcı, həm də qəzəbli hadisələr üçün yüksək səviyyədədir və motivasiya cəhətdən neytral (qeyri-mükafatlandırıcı və qeyri-həssas) hadisələr üçün aşağı səviyyədədir. Bu, müəyyən bir tərifə bənzəyir.Berridge və Robinson, 1998). Qeyd edək ki, motivasiyalı sükunət nevrologiyada istifadə edilən digər narahatlıqlardan fərqlənir (məsələn, arzu olunan hadisələrə tətbiq edilir;Berridge və Robinson, 1998)) və algısal zəiflik (hərəkətli obyektlər və rəngli işıqlar kimi motivasiya edən nöqtəli hadisələrə tətbiq edilir;Bisley və Goldberg, 2010)).]

^FOOTNOTE2DA neyron sinyallerini kodlayan motivasion ehtiyatın gücləndirilməsi öyrənmənin dərəcəsini tənzimləmək üçün təklif olunan "əlaqəli" və "birləşmə dəyişikliyinin" klassik anlayışlarından fərqləndiyini (məsələn,Pearce və Hall, 1980)). Belə nəzəriyyələr heyvanların həm müsbət, həm də mənfi proqnozlaşdırma səhvlərindən öyrənməsini (öyrənmə dərəcələrini) müəyyənləşdirirlər. Bu DA neyronları, məsələn, gözlənilməyən mükafat çatdırılmasına (məsələn, gözlənilməz mükafat çatdırılmasına) sahib ola biləcək müsbət proqnozlaşdırma səhvlərindən öyrənməyə kömək edə bilər, baxmayaraq ki, onlar mənfi proqnozlaşdırma səhvlərindən öyrənməyə qatqı edə bilməzlər, gözlənilməz mükafat pozuntusu kimi) (Şəkil 4B).

1. Ahlbrecht M, Weber M. Belirsizlikin həlli: eksperimental bir araşdırma. İnstitusional və nəzəri iqtisadiyyat jurnalı. 1996; 152: 593-607.
2. Albin RL, Young AB, Penney JB. Bazal qanqlalı xəstəliklərin funksional anatomiyası. Neyroziya tendensiyaları. 1989; 12: 366-375. [PubMed]
3. Anderson AK, Christoff K, Stappen I, Panitz D, Ghahremani DG, Glover G, Gabrieli JD, Sobel N. İnsan qəlbində intensivliyin və valentliyin sinir təmsilçiliyinə ayrılır. Nat Neurosci. 2003; 6: 196-202. [PubMed]
4. Anstrom KK, Miczek KA, Budygin EA. Sıçanlarda sosial məğlubiyyət zamanı mezolimbik yolda fasik dopamin siqnalının artması. Neuroscience. 2009; 161: 3-12. [PubMed]
5. Aragona BJ, Gün JJ, Roitman MF, Cleaveland NA, Wightman RM, Carelli RM. Sıçanda cue-kokain birləşməsinin alınması zamanı fasik dopamin transmissiya nümunələrinin real vaxt inkişafında regional spesifiklik. Avropa sinirbilim dərsi. 2009; 30: 1889-1899. [PMC pulsuz məqalə] [PubMed]
6. Austin AJ, Duka T. Pavlovian kondisionerində iştah və aversiv nəticələrə diqqət mexanizmləri. Behavioral beyin araşdırması. 2010; 213: 19-26. [PubMed]
7. Badia P, Harsh J, Abbott B. Öngörülebilir və Unpredictable Shock şərtləri arasında seçim: Məlumat və nəzəriyyə. Psixoloji Bülleten. 1979; 86: 1107-1131.
8. Balleine BW, Killcross S. Paralel təşviq emalı: amigdala funksiyasının vahid bir görünüşü. Neyroziya tendensiyaları. 2006; 29: 272-279. [PubMed]
9. Balleine BW, O'Doherty JP. Fəaliyyət nəzarətində insan və gəmirici homologiyalar: hədəfə yönəlmiş və vərdişli fəaliyyətin kortikostriatal determinantları. Nöropsikofarmakologiya. 2010; 35: 48-69. [PMC pulsuz məqalə] [PubMed]
10. Barr GA, Moriceau S, Shionoya K, Muzny K, Gao P, Wang S, Sullivan RM. Körpənin öyrənilməsində keçidlər amigdalada dopaminlə modullaşdırılır. Nat Neurosci. 2009; 12: 1364-1366. [PMC pulsuz məqalə] [PubMed]
11. Bassareo V, De Luca MA, Di Chiara G. Nucleus Accumbens Shell ilə Core və Prefrontal Cortex qarşı Dopamin tərəfindən Motivasiya Stimulus xüsusiyyətləri Diferensiyel ifadə. J Neurosci. 2002; 22: 4709-4719. [PubMed]
12. Bassareo V, Di Chiara G. Dopamin ötürülməsinin çekirdek akumbens kabuğunda / çekirdek bölmelerinde qida stimulyasiyasına fərqli cavabdehliyi. Neuroscience. 1999; 89: 637-641. [PubMed]
13. Baxter MG, Murray EA. Amigdala və mükafat. Nat Rev Neurosci. 2002; 3: 563-573. [PubMed]
14. Bayer HM, Glimcher PW. Midbrain dopamin nöronları kəmiyyətsel mükafat proqnozlaşdırılması səhv siqnalını kodlar. Neuron. 2005; 47: 129-141. [PMC pulsuz məqalə] [PubMed]
15. Belova MA, Paton JJ, Morrison SE, Salzman CD'si. Gözlənilmə, primate amigdalada xoş və təcavüzkar stimullara neytral cavabları modullaşdırır. Neuron. 2007; 55: 970-984. [PMC pulsuz məqalə] [PubMed]
16. Bentivoglio M, Morelli M. Mezentsefalik dopaminergik nöronların təşkilatı və dövrələri və beyində dopamin reseptorlarının paylanması. Kimyəvi Nöroanatomiya Elmi Kitab. 2005: 1-107.
17. Berridge KC, Robinson TE. Dopaminin mükafatdakı rolu nədir: hedonik təsir, mükafat öyrənmə və ya təşviq zəifliyi? Brain tədqiqatı. 1998; 28: 309-369. [PubMed]
18. Besson C, Louilot A. Mesolimbik dopaminergik neyronların asimmetrik tutulma duyğu hissəsində. Neuroscience. 1995; 68: 963-968. [PubMed]
19. Birgner C, Nordenankar K, Lundblad M, Mendez JA, Smith C, le Greves M, Galter D, Olson L, Fredriksson A, Trudeau LE, et al. Dopamin neyronlarda VGLUT2 psixostimulyant təsirli davranış aktivləşməsi üçün tələb olunur. Amerika Birləşmiş Ştatlarının Milli Elmlər Akademiyasının tədqiqatları. 2010; 107: 389-394. [PMC pulsuz məqalə] [PubMed]
20. Bisley JW, Goldberg ME. Parietal lobda diqqət, niyyət və prioritet. Neyroloqların illik baxışları. 2010; 33: 1-21. [PMC pulsuz məqalə] [PubMed]
21. Bjorklund A, Dunnett SB. Beyində dopamin nöron sistemləri: bir yeniləmə. Neyroziya tendensiyaları. 2007; 30: 194-202. [PubMed]
22. Blazquez PM, Fujii N, Kojima J, Graybiel AM. Striatumda cavab ehtimalının şəbəkə təqdimatı. Neuron. 2002; 33: 973-982. [PubMed]
23. Botvinick MM, Braver TS, Barch DM, Carter CS, Cohen JD. Çatışmaların monitorinqi və bilişsel nəzarət. Psychol Rev. 2001; 108: 624-652. [PubMed]
24. Bradley MM, Greenwald MK, Petry MC, Lang PJ. Şəkillər xatırlayaraq: zövq və yaddaşda həyəcan. J Exp Psychol Mem Cogn öyrən. 1992; 18: 379-390. [PubMed]
25. Braun DA, Mehring C, Wolpert DM. Strukturda öyrənmə. Behavioral beyin araşdırması. 2010; 206: 157-165. [PMC pulsuz məqalə] [PubMed]
26. Brinschwitz K, Dittgen A, Madai VI, Lommel R, Geisler S, Veh RW. Yanal habenuladan olan glutamateriq aksonları əsasən ventral midbrenin GABAerqik nöronları üzərində dayanır. Neuroscience. 2010; 168: 463-476. [PubMed]
27. Brischoux F, Çakraborty S, Brierley DI, Ungless MA. Ventral VTA'ta dopamin nöronlarının zəhərli stimullar ilə fasik hərəkət edilməsi. Amerika Birləşmiş Ştatlarının Milli Elmlər Akademiyasının tədqiqatları. 2009; 106: 4894-4899. [PMC pulsuz məqalə] [PubMed]
28. Bromberg-Martin ES, Hikosaka O. Midbrain dopamin nöronları gələcək mükafatlar haqqında əvvəlcədən məlumat üçün siqnal seçimini edir. Neuron. 2009; 63: 119-126. [PMC pulsuz məqalə] [PubMed]
29. Bromberg-Martin ES, Matsumoto M, Hikosaka O. Yanal habenula və dopamin nöronlarında fərqli tonik və fasik anticipatory aktivlik. Neuron. 2010a; 67: 144-155. [PMC pulsuz məqalə] [PubMed]
30. Bromberg-Martin ES, Matsumoto M, Hong S, Hikosaka O. Bir pallidus-habenula-dopamin yolunun siqnalları stimullaşdırılan stimul dəyərləri. J Neurophysiol. 2010b; 104: 1068-1076. [PMC pulsuz məqalə] [PubMed]
31. Bromberg-Martin ES, Matsumoto M, Nakahara H, Hikosaka O. Yanal habenula və dopamin nöronlarında bir neçə dəfə vaxt yaddaşları. Neuron. 2010c; 67: 499-510. [PMC pulsuz məqalə] [PubMed]
32. Brown MTC, Henny P, Bolam JP, Magill PJ. Beyin dövlətində spontan və idarə olunan dəyişikliklər zamanı əsas nigrada nörokimyəvi heterogen dopaminergik nöronların fəaliyyəti. J Neurosci. 2009; 29: 2915-2925. [PubMed]
33. Kardinal RN. Neyron sistemləri təxirə salınmış və ehtimal olunan möhkəmləndirilməyə aiddir. Neural Netw. 2006; 19: 1277-1301. [PubMed]
34. Cheer JF, Aragona BJ, Heien ML, Seipel AT, Carelli RM, Wightman RM. Uyğunlaşdırılmış accumbal dopamin sərbəstliyi və sinir fəaliyyəti sürücüsünə məqsədli davranış. Neuron. 2007; 54: 237-244. [PubMed]
35. Cheramy A, Kemel ML, Gauchy C, Desce JM, Galli T, Barbeito L, Glowinski J. Nigrostriatal dopamin nöronların sinir terminallerindən dopaminin sərbəst və dolaysız presinaptik tənzimlənməsində həyəcanlanmış amin turşularının rolu. Amin turşuları. 1991; 1: 351-363. [PubMed]
36. Chew SH, Ho JL. Ümid: qeyri-müəyyənlik həllinin vaxtına münasibətdə ampirik bir araşdırma. Risk və qeyri-müəyyənlik jurnalı. 1994; 8: 267-288.
37. Chiodo LA, Antelman SM, Caggiula AR, Lineberry CG. Dəri stimulyatorları dopaminin (DA) nöronlarının axıdılma dərəcəsini dəyişir: əsasən nigrada DA funksiyasının iki funksiyası üçün sübut. Brain Res. 1980; 189: 544-549. [PubMed]
38. Christoph GR, Leonzio RJ, Wilcox KS. Yanal habenulanın stimullaşdırılması əsas nigra və siçovulun ventral tegmental sahəsi dopamin ehtiva neyronları inhibe edir. J Neurosci. 1986; 6: 613-619. [PubMed]
39. Chuhma N, Choi WY, Mingote S, Rayport S. Dopamin nöron glutamat kotransmission: mesoventromedial proyeksiyada tezlikə bağlı modulyasiya. Neuroscience. 2009; 164: 1068-1083. [PMC pulsuz məqalə] [PubMed]
40. Cohen JD, Braver TS, Brown JW. Prefrontal korteksdə dopamin funksiyasının hesablama perspektivləri. Nörobiologiyada cari rəy. 2002; 12: 223-229. [PubMed]
41. Coizet V, Dommett EJ, Klop EM, Redgrave P, Overton PG. Parabraxial nüvə midbrain dopaminergik neyronlara qısa latanslı nosiseptiv informasiyanın ötürülməsində kritik bir əlaqədir. Neuroscience. 2010; 168: 263-272. [PMC pulsuz məqalə] [PubMed]
42. Coizet V, Dommett EJ, Redgrave P, Overton PG. Midbrain dopaminergik nöronların nosiseptiv reaksiyaları siçovulda üstün kolikulus tərəfindən modulyasiya edilir. Neuroscience. 2006; 139: 1479-1493. [PubMed]
43. Comoli E, Coizet V, Boyes J, Bolam JP, Canteras NS, Quirk RH, Overton PG, Redgrave P. Üstün kolliculusdan əhəmiyyətli nigraya qədər birbaşa proyeksiyası, görkəmli görmə hadisələrini aşkar etmək üçün. Nat Neurosci. 2003; 6: 974-980. [PubMed]
44. Corbit LH, Balleine BW. Pavloviya-instrumental köçürmənin ümumi və nəticələrə uyğun formaları üzrə bazolateral və mərkəzi amigdala lezyonların ikiyə bölünməsi. J Neurosci. 2005; 25: 962-970. [PubMed]
45. Dalley JW, Laane K, Theobald DE, Armstrong HC, Corlett PR, Chudasama Y, Robbins TW. D1 və NMDA reseptorları tərəfindən iştaha hazırlanan Pavlovian yaddaşının müddətli məhdudlaşdırılması. Amerika Birləşmiş Ştatlarının Milli Elmlər Akademiyasının tədqiqatları. 2005; 102: 6189-6194. [PMC pulsuz məqalə] [PubMed]
46. Daly HB. Əvvəlcədən gözlənilməz olmayan irəliləyiş gözlənilmədikdə gözlənilməzliyə üstünlük verilir: prosedurlar, məlumatlar və iştahın cavab almalarını müşahidə edən nəzəriyyələr. Ilə: Gormezano I, Wasserman EA, redaktorları. Öyrənmə və yaddaş: Davranış və bioloji substratlar. LE Associates; 1992. 81-104.
47. Davidson MC, Horvitz JC, Tottenham N, Fossella JA, Watts R, Ulug AM, Casey BJ. Beklenmeyen irəliləməyən stimullardan sonra diferensial caudate və cingulate aktivasiyası. NeuroImage. 2004; 23: 1039-1045. [PubMed]
48. Gündüz JJ, Roitman MF, Wightman RM, Carelli RM. Birləşmənin öyrənilməsi nüvəli akumbensdə dopamin siqnallarında dinamik dəyişikliklərdən ibarətdir. Nat Neurosci. 2007; 10: 1020-1028. [PubMed]
49. Dayan P, Niv Y. Gücləndirici öyrənmə: yaxşı, pis və çirkin. Nörobiologiyada cari rəy. 2008; 18: 185-196. [PubMed]
50. Descarries L, Berube-Carriere N, Riad M, Bo GD, Mendez JA, Trudeau LE. Dopamin nöronlarında glutamat: diffüz transmissiya ilə sinaptik. Brain araşdırması baxır. 2008; 58: 290-302. [PubMed]
51. Di Chiara G. Nucleus, kabuk ve çekirdek dopamini akumbens: davranış ve bağımlılıkta ayırıcı rol. Behavioral beyin araşdırması. 2002; 137: 75-114. [PubMed]
52. Dommett E, Coizet V, Blaha CD, Martindale J, Lefebvre V, Walton N, Mayhew JE, Overton PG, Redgrave P. Qeyri-vizual stimullar qısa gecikmələrdə dopaminergik nöronları necə aktivləşdirir? Elm. 2005; 307: 1476-1479. [PubMed]
53. Dormont JF, Conde H, Farin D. Pedunculopontin tegmental nüvənin rolu kedideki mühərrik performansına bağlı olaraq. I. Kontekstə asılı və gücləndirici bir vahid vahid fəaliyyəti. Eksperimental beyin araşdırması. Experimentelle Hirnforschung. 1998; 121: 401-410. [PubMed]
54. Duzel E, Bunzeck N, Guitart-Masip M, Duzel S. NOvelty dopamin (NOMAD) tərəfindən gözlənilən və kəşfiyyat motivasiyası: sağlam yaşlanma təsiri. Neuroscience və biobevavioral baxır. 2010; 34: 660-669. [PubMed]
55. El-Amamy H, Holland PC. Amigdala mərkəzi nüvəsinin ventral tegmental bölgəsindən və ya əsas nigrardan öyrənilən yönümlü və təşviq motivasiyasından uzaqlaşması ilə bağlı təsirlər. Avropa sinirbilim dərsi. 2007; 25: 1557-1567. [PMC pulsuz məqalə] [PubMed]
56. Ettenberg A. Özünü idarə kokainin mübahisəli proses xüsusiyyətləri. Neuroscience və biobevavioral baxır. 2004; 27: 721-728. [PubMed]
57. Fadok JP, Dickerson TM, Palmiter RD. Dopamine əmələ gələn qorxu kondisionerinə ehtiyac vardır. J Neurosci. 2009; 29: 11089-11097. [PMC pulsuz məqalə] [PubMed]
58. Fairhall AL, Lewen GD, Bialek W, de Ruyter Van Steveninck RR. Adaptativ neyron kodunda məhsuldarlıq və qeyri-müəyyənlik. Təbiət. 2001; 412: 787-792. [PubMed]
59. Nörostriatal dopamin sisteminə Faure A, Haberland U, Conde F, El Massioui N. Lesion stimulus-cavab vərdiş formalaşmasını pozur. J Neurosci. 2005; 25: 2771-2780. [PubMed]
60. Faure A, Reynolds SM, Richard JM, Berridge KC. İstək və qorxu içində Mesolimbic dopamini: motivasiyanı nüvə akumbenslərində lokalize glutamat pozuntuları ilə meydana gətirmək mümkündür. J Neurosci. 2008; 28: 7184-7192. [PMC pulsuz məqalə] [PubMed]
61. Fiorillo CD, Newsome WT, Schultz W. Dopamin nöronlarında mükafat proqnozunun temporal həssaslığı. Nat Neurosci. 2008; 11: 966-973. [PubMed]
62. Fiorillo CD, Tobler PN, Schultz W. Dopamin nöronların mükafat ehtimalı və qeyri-müəyyənliyini diskret kodlaşdırma. Elm. 2003; 299: 1898-1902. [PubMed]
63. Floresco SB, Ghods-Sharifi S, Vexelman C, Magyar O. Nüvəli accumbens nüvəsi və qabığa ötürülmənin tənzimlənməsində tənzimlənən rollar. J Neurosci. 2006; 26: 2449-2457. [PubMed]
64. Ford CP, Gantz SC, Phillips PE, Williams JT. Dendrit və akson terminallarında ekstrasellüler dopaminin müalicəsi. J Neurosci. 2010; 30: 6975-6983. [PMC pulsuz məqalə] [PubMed]
65. Frank MJ. Bazal ganglionda dinamik dopamin modulyasiyası: dərmanlı və qeyri-qeyd olunan Parkinsonizmdə bilik çatışmazlığının nörokomputasiya hesabı. Bilişsel nörobilim dergisi. 2005; 17: 51-72. [PubMed]
66. Frank MJ, Fossella JA. Nörogenetik və öyrənmə, motivasiya və idrak farmakologiyası. Nöropsikofarmakologiya. 2010 [PMC pulsuz məqalə] [PubMed]
67. Frank MJ, Seeberger LC, O'Reilly RC. Havuçla və ya çubuqla: parkinsonizmdə bilişsel möhkəmləndirmənin öyrənilməsi. Elm. 2004; 306: 1940-1943. [PubMed]
68. Gallistel CR, Gibbon J. Vaxt, nisbət və kondisioner. Psychol Rev. 2000; 107: 289-344. [PubMed]
69. Gao DM, Jeaugey L, Pollak P, Benabid AL. Əsas sıçranın dopaminergik nöronlarından, sıçanda pars kompaktanın və lateral habenula girişləri ilə modifikasiyasından intensiv asılı nosiseptiv cavablar. Brain Res. 1990; 529: 315-319. [PubMed]
70. Gauriau C, Bernard JF. Sıçanda ağrı yolları və parabraxial dövrələr. Eksperimental fiziologiya. 2002; 87: 251-258. [PubMed]
71. Geisler S, Zahm DS. Integral funksiyalar üçün sümük-anatomik substratda ventral tegmental bölgəsinin afferentləri. Müqayisəli nevrologiya jurnalı. 2005; 490: 270-294. [PubMed]
72. Gerfen CR, Engber TM, Mahan LC, Susel Z, Chase TN, Monsma FJ, Jr, Sibley DR. Striatonigral və striatopallidal nöronların D1 və D2 dopamin reseptor tənzimlənən gen ifadəsi. Elm. 1990; 250: 1429-1432. [PubMed]
73. Ghods-Sharifi S, Floresco SB. Nüvə akumbens nüvəsinin və ya qabığının inaktivasiyası ilə nəticələnən səylərin diskontlaşdırılmasına dair fərqli təsirlər. Davranış nevrologiyası. 2010; 124: 179-191. [PubMed]
74. Gonon FG. In vivo elektrokimya tərəfindən tədqiq edilən siçovul orta dipaminerjik neyronların sızan impuls axını və dopamin arasında qeyri-xətti əlaqə. Neuroscience. 1988; 24: 19-28. [PubMed]
75. Goto Y, Yang CR, Otani S. Prefrontal korteksdə funksional və disfonksiyonel sinaptik plastisitə: psixiatrik pozğunluqlarda rollar. Bioloji psixiatriya. 2010; 67: 199-207. [PubMed]
76. Grace AA. Fazik qarşı tonik dopamin azadlığı və dopamin sisteminin məsuliyyətliliyinin modulyasiyası: şizofreniyanın etiologiyası üçün bir fərziyyə. Neuroscience. 1991; 41: 1-24. [PubMed]
77. Grace AA, Bunney BS. Nigral dopaminerjik neyronların hüceyrədaxili və hüceyrə xaricindəki elektrofizyologiyası – 1. Müəyyənləşdirmə və səciyyələndirmə. Nevrologiya. 1983; 10: 301-315. [PubMed]
78. Grace AA, Floresco SB, Goto Y, Lodge DJ. Dopaminergik nöronların atəşin tənzimlənməsi və məqsədli davranışların idarə edilməsi. Neyroziya tendensiyaları. 2007; 30: 220-227. [PubMed]
79. Grecksch G, Matties H. Bir parlaqlıq ayrı-seçkiliyində konsolidasiya üçün siçovul hipokampusunda dopaminergik mexanizmlərin rolu. Psixofarmakologiya (Berl) 1981; 75: 165-168. [PubMed]
80. Guarraci FA, Kapp BS. Uyğun dovşanda fərqli pavlovian qorxu kondisionerində ventral tegmental sahə dopaminergik nöronların elektrofizyoloji xarakteristikası. Behavioral beyin araşdırması. 1999; 99: 169-179. [PubMed]
81. Haber SN, Fudge JL, McFarland NR. Primatlardakı striatoniqrostriatal yollar qabıqdan dorsolateral striatuma qədər artan spiral təşkil edir. J Neurosci. 2000; 20: 2369-2382. [PubMed]
82. Hall J, Parkinson JA, Connor TM, Dickinson A, Everitt BJ. Amigdalanın mərkəzi nüvəsinin və nucleus accumbens nüvəsinin Pavlovianın instrumental davranışa təsir göstərməsinə cəlb edilməsi. Avropa sinirbilim dərsi. 2001; 13: 1984-1992. [PubMed]
83. Han JS, McMahan RW, Holland P, Gallagher M. Bir amigdalo-nigrostriatal yolun birləşməli öyrənmədə rolu. J Neurosci. 1997; 17: 3913-3919. [PubMed]
84. Harris GC, Aston-Jones G. Arousal və mükafat: orexin funksiyasında dichotomy. Neyroziya tendensiyaları. 2006; 29: 571-577. [PubMed]
85. Herry C, Bach DR, Esposito F, Di Salle F, Perrig WJ, Scheffler K, Luthi A., Seifritz E. İnsan və heyvan amigdala da müvəqqəti gözlənilməzliyi işlədilir. J Neurosci. 2007; 27: 5958-5966. [PubMed]
86. Hikida T, Kimura K, Wada N, Funabiki K, Nakanishi S. Sinaptik ötürülmənin birbaşa və dolayı striatal yollarda mükafatlandırılması və həssas davranışları üçün fərqli rolları. Neuron. 2010; 66: 896-907. [PubMed]
87. Hikosaka O. mükafata yönəldilmiş göz hərəkətinin bazal qanglion mexanizmləri. Nyu-York Elmlər Akademiyasının Annals. 2007; 1104: 229-249. [PubMed]
88. Hikosaka O. The habenula: stressdən yayınma dəyər əsaslı qərar verməyə. Nat Rev Neurosci. 2010; 11: 503-513. [PMC pulsuz məqalə] [PubMed]
89. Hikosaka O, Takikawa Y, Kawagoe R. Məqsədli sakkadik göz hərəkəti nəzarəti altında bazal ganglionun rolu. Fizioloji baxışlar. 2000; 80: 953-978. [PubMed]
90. Hitchcott PK, Quinn JJ, Taylor JR. Prefrontal kortikal dopamin tərəfindən məqsədli hərəkətlərin ikitərəfli modulyasiyası. Cereb Cortex. 2007; 17: 2820-2827. [PubMed]
91. Hnasko TS, Çuhma N, Zhang H, Goh GY, Sulzer D, Palmiter RD, Rayport S, Edwards RH. Vesikulyar glutamat nəqli in vivo dopamin saxlama və glutamat corelease təşviq edir. Neuron. 2010; 65: 643-656. [PMC pulsuz məqalə] [PubMed]
92. Holland PC, Gallagher M. Amygdala dövriyyəsi diqqət və təmsilçilik proseslərində. Bilişsel elmlərdə meyllər. 1999; 3: 65-73. [PubMed]
93. Hollerman JR, Schultz W. Dopamin nöronları, öyrənmə zamanı mükafatın müvəqqəti olaraq proqnozlaşdırılmasında səhv olduğunu bildirir. Nat Neurosci. 1998; 1: 304-309. [PubMed]
94. Holroyd CB, Coles MG. İnsan səhvinin neyro əsasları: möhkəmləndirilmə öyrənilməsi, dopamin və səhv ilə əlaqədar mənfilik. Psychol Rev. 2002; 109: 679-709. [PubMed]
95. Hong S, Hikosaka O. Globus pallidus, mükafatla əlaqəli siqnalları lateral habenula göndərir. Neuron. 2008; 60: 720-729. [PMC pulsuz məqalə] [PubMed]
96. Horvitz JC. Vacül olmayan mükafat hadisələrinə Mesolimbokortik və nigrostriatal dopamin reaksiyaları. Neuroscience. 2000; 96: 651-656. [PubMed]
97. Horvitz JC, Stewart T, Jacobs BL. Ventral tegmental dopamin nöronlarının partlayış fəaliyyəti uyanık pişik hissəsində stimulyator stimullaşdırır. Brain Res. 1997; 759: 251-258. [PubMed]
98. Houk JC, Adams JL, Barto AG. Bazal ganglionun necə inkişaf etdiyini və möhkəmləndirməyi nəzərdə tutan neyron siqnalların necə istifadə etdiyini bir model. In: Houk JC, Davis JL, Beiser DG, redaktorları. Bazal Ganglionda İnformasiya İşlənmə Modelleri. Cambridge, MA: MIT Press; 1995. 249-274.
99. Ikemoto S. Mezolimbik dopamin sistemindən kənar Beyin mükafat dövrü: Neyrobioloji nəzəriyyə. Neuroscience və biobevavioral baxır. 2010 [PMC pulsuz məqalə] [PubMed]
100. İto R, Dalley JW, Howes SR, Robbins TW, Everitt BJ. Kokain İpəklərinə Cavab Və Siçovullarda Kokain İstəmiş Davranışında Nüvə Akumbens Core və Shell-də Dozlanılan Dopamində Ayrışma. J Neurosci. 2000; 20: 7489-7495. [PubMed]
101. İvlieva NY, Timofeeva NO. Qida ilə əlaqəli operativ şərtləri olan reflekslər zamanı pedunculopontin nüvəsində neyron fəaliyyəti. Nörobilim və Davranış Fiziologiyası. 2003a; 33: 919-928. [PubMed]
102. İvlieva NY, Timofeeva NO. Operator şərtli refleks zamanı pedunculopontin nüvəsində neyron fəaliyyəti. Nörobilim və Davranış Fiziologiyası. 2003b; 33: 499-506. [PubMed]
103. Jalabert M, Aston-Jones G, Herzog E, Manzoni O, Georges F. Ventral tegmental sahə dopamin nöronlarının nəzarətində stria terminalisin yataq nüvəsinin rolu. Neyro-psixofarmakologiya və bioloji psixiatriyada irəliləyiş. 2009; 33: 1336-1346. [PMC pulsuz məqalə] [PubMed]
104. Jeanblanc J, Hoeltzel A, Louilot A. Dopaminergik neyronların nüvə və şüalanma subregionsunun latent inhibə və təsir duyğusunun içərisində olması ilə əlaqədardır. Neuroscience. 2002; 111: 315-323. [PubMed]
105. Jensen J, Smith AJ, Willeit M, Crawley AP, Mikulis DJ, Vitcu I, Kapur S. İnsanlardakı mükafat proqnozu zamanı fərdiləşdirmə və valence üçün ayrı beyin bölgələri kodu. İnsan beyin xəritəsi. 2007; 28: 294-302. [PubMed]
106. Jhou TC, Fields HL, Baxter MG, Saper CB, Holland PC. Midbrain dopamin nöronlarına bir GABAerqik afferent olan rostromedial tegmental nüvə (RMTg), həyəcan verici stimulları kodlayır və motorun reaksiyalarını maneə törədir. Neuron. 2009a; 61: 786-800. [PMC pulsuz məqalə] [PubMed]
107. Jhou TC, Geisler S, Marinelli M, Degarmo BA, Zahm DS. Mesopontin rostromedial tegmental nüvəsi: Tsai və substantia nigra kompaktanın ventral tegmental sahəsinə layihələndirən yanal nanələnin hədəf alan strukturu. Müqayisəli nevrologiya jurnalı. 2009b; 513: 566-596. [PMC pulsuz məqalə] [PubMed]
108. Ji H, Shepard PD. Yanal xəbərdarlıq stimulyasiyası siçovul orta dipamin nöronlarını bir GABA (A) reseptor vasitəçiliyi mexanizmi vasitəsilə inhibə edir. J Neurosci. 2007; 27: 6923-6930. [PubMed]
109. Jin X, Costa RM. Ardıcıl öyrənmə zamanı nigrostriatal sxemlərdə siqnalların başlanması / dayandırılması. Təbiət. 2010; 466: 457-462. [PMC pulsuz məqalə] [PubMed]
110. Johansen JP, Fields HL. Anterior sindrom corteksinin qlutamateriq aktivləşdirməsi təcili tədris siqnalını yaradır. Nat Neurosci. 2004; 7: 398-403. [PubMed]
111. Yusif MH, Datla K, Gənc AM. In vivo dializdə nüvə accumbens dopaminin ölçülməsinin təfsiri: vuruş, istək və ya idrak? Neuroscience və biobevavioral baxır. 2003; 27: 527-541. [PubMed]
112. Joshua M, Adler A, Bergman H. Dopaminin dinamikası motor davranışında nəzarət edir. Nörobiologiyada cari rəy. 2009a; 19: 615-620. [PubMed]
113. Yosua M, Adler A, Mitelman R, Vaadia E, Bergman H. Midbrain dopaminergik nöronlar və striatal kolinergik internöronlar, ehtimal olunan klassik kondisioner işlərinin müxtəlif dövrlərində mükafat və səbirli hadisələr arasındakı fərqləri kodlayır. J Neurosci. 2008; 28: 11673-11684. [PubMed]
114. Joshua M, Adler A, Prut Y, Vaadia E, Wickens JR, Bergman H. Midbrain dopaminergik nöronların sinxronlaşdırılması hadisələri ödüllendirerek artır. Neuron. 2009b; 62: 695-704. [PubMed]
115. Kable JW, Glimcher PW. Qərarın nörobiologiyası: konsensus və mübahisələr. Neuron. 2009; 63: 733-745. [PMC pulsuz məqalə] [PubMed]
116. Kakade S, Dayan P. Dopamin: ümumiləşdirmə və bonuslar. Sinir şəbəkələri. 2002; 15: 549-559. [PubMed]
117. Kapur S. Psixoz, şizofreniyada bioloji, fenomenoloji və farmakoloji birləşdirən bir qəsdən zəif dövlətdir. Psixiatriya Amerika jurnalı. 2003; 160: 13-23. [PubMed]
118. Kaufling J, Veinante P, Pawlowski SA, Freund-Mercier MJ, Barrot M. Sıçanda ventral tegmental bölgənin GABAerjik quyruğuna təsir göstərir. Müqayisəli nevrologiya jurnalı. 2009; 513: 597-621. [PubMed]
119. Kennerley SW, Wallis JD. Frontal lobda tək neyronların seçimlərini qiymətləndirmək: Çox qərar dəyişənləri arasında kodlanan nəticənin dəyəri. Avropa sinirbilim dərsi. 2009; 29: 2061-2073. [PMC pulsuz məqalə] [PubMed]
120. Kim H, Sul JH, Huh N, Lee D, Jung MW. Seçilən hərəkətlərin dəyərlərini yeniləyərkən striatumun rolu. J Neurosci. 2009; 29: 14701-14712. [PubMed]
121. Kiyatkin EA. Şüurlu sıçanlarda ehtimal olunan dopamin və digər ventral tegmental sahə neyronlarının funksional xüsusiyyətləri. Int J Neurosci. 1988a; 42: 21-43. [PubMed]
122. Kiyatkin EA. Şüurlu sıçanda ventral tegmental sahə neyronlarının funksional xüsusiyyətlərinin morfin səbəbli modifikasiyası. Stajyer J Neuroscience. 1988b; 41: 57-70. [PubMed]
123. Klingberg T. Təlim və iş yaddaşının plastisiyası. Bilişsel elmlərdə meyllər. 2010; 14: 317-324. [PubMed]
124. Kobayashi S, Nomoto K, Watanabe M, Hikosaka O, Schultz W, Sakagami M. Macaque lateral prefrontal korteksdə fəaliyyət göstərən tövsiyə və sürpriz nəticələrin təsiri. Neuron. 2006; 51: 861-870. [PubMed]
125. Kobayashi S, Schultz W. Dopamin nöronların cavablarına mükafat gecikmələrinin təsiri. J Neurosci. 2008; 28: 7837-7846. [PMC pulsuz məqalə] [PubMed]
126. Kobayashi Y, Inoue Y, Yamamoto M, İsa T, Aizawa H. Pedunculopontin tegmental nüvə nöronlarının maymunlarda görmə ilə idarə olunan saccad vəzifələrini yerinə yetirməsinə qatqısı. J Neurophysiol. 2002; 88: 715-731. [PubMed]
127. Koyama T, Tanaka YZ, Mikami A. Ağız gözləməsi zamanı macaque anterior sindromda nosiseptiv nöronlar aktivləşdirilir. Neuroreport. 1998; 9: 2663-2667. [PubMed]
128. Kravitz AV, Freeze BS, Parker PR, Kay K, Thwin MT, Deisseroth K, Kreitzer AC. Bazel ganglion dövrünün optogenetik nəzarəti ilə parkinsoniyalı motor davranışlarının tənzimlənməsi. Təbiət. 2010 [PMC pulsuz məqalə] [PubMed]
129. Lammel S, Hetzel A, Hackel O, Jones I, Liss B, Roeper J. Bir cüt mesokortikolimbik dopamin sistemində mesoprefrontal neyronların unikal xüsusiyyətləri. Neuron. 2008; 57: 760-773. [PubMed]
130. Lang PJ, Davis M. Duygusal, motivasiya və beyin: heyvan və insan tədqiqatında refleks əsasları. Beyin araşdırmalarında irəliləyiş. 2006; 156: 3-29. [PubMed]
131. Lapish CC, Kroener S, Durstewitz D, Lavin A, Seamans JK. Mezokortik dopamin sisteminin fərqli temporal rejimlərdə fəaliyyət göstərməsi qabiliyyəti. Psixofarmakologiya (Berl) 2007; 191: 609-625. [PubMed]
132. Lee D, Seo H. Primat dorsolateral prefrontal korteksdə gücləndirmə öyrənmə və qərar qəbuletmə mexanizmləri. Nyu-York Elmlər Akademiyasının Annals. 2007; 1104: 108-122. [PubMed]
133. Lee HJ, Groshek F, Petroviç GD, Cantalini JP, Gallagher M, Holland PC. Amigdalo-nigral devresinin qida ilə qoşulan bir vizual stimulun kondisionerində rolu. J Neurosci. 2005; 25: 3881-3888. [PMC pulsuz məqalə] [PubMed]
134. Levita L, Dalley JW, Robbins TW. Nucleus accumbens dopamin və qorxu yenidən öyrənildi: bir baxış və bəzi yeni tapıntılar. Behavioral beyin araşdırması. 2002; 137: 115-127. [PubMed]
135. Lin SC, Nicolelis MA. Neuronal Ansamblı Basal Forebrain-də Bursting Valence-dən asılı olmayaraq Sadələşdirir. Neuron. 2008; 59: 138-149. [PMC pulsuz məqalə] [PubMed]
136. Lisman JE, Grace AA. Hippocampal-VTA döngüsü: məlumatın uzunmüddətli yaddaşa daxil edilməsini nəzarət edir. Neuron. 2005; 46: 703-713. [PubMed]
137. Litt A, Plassmann H, Shiv B, Rangel A. Dissociating qiymətləndirmə və qərar qəbul zamanı saliency siqnalları. Cereb Cortex. 2010 mətbuatda. [PubMed]
138. Liu Z, Richmond BJ, Murray EA, Saunders RC, Steenrod S, Stubblefield BK, Montague DM, Ginns EI. Rəqəmli korteks D2 reseptor proteininin DNT hədəfinə mükəmməlliyi öngörən ipuçlarını öyrənmək ters çevrilir. Amerika Birləşmiş Ştatlarının Milli Elmlər Akademiyasının tədqiqatları. 2004; 101: 12336-12341. [PMC pulsuz məqalə] [PubMed]
139. Liu ZH, Shin R, Ikemoto S. Əhəmiyyətli kodlaşdırmada medial A10 dopamin nöronlarının ikili rolu. Nöropsikofarmakologiya. 2008; 33: 3010-3020. [PMC pulsuz məqalə] [PubMed]
140. Ljungberg T, Apicella P, Schultz W. Davamlı reaksiyaların öyrənilməsi zamanı maymun dopamin nöronlarının cavabları. J Neurophysiol. 1992; 67: 145-163. [PubMed]
141. Lobo MK, Covington HE, 3rd, Chaudhury D, Friedman AK, Sun H, Damez-Werno D, Dietz DM, Zaman S, Koo JW, Kennedy PJ, et al. BDNF siqnalının hüceyrə tipli xüsusi itkisi kokain mükafatının optogenetik nəzarətini təqlid edir. Elm. 2010; 330: 385-390. [PMC pulsuz məqalə] [PubMed]
142. Maeda H, Mogenson GJ. Ventral tegmental sahədə, əsas nigra və siçovulların midbrain retikulyar formasında neyronların fəaliyyətinə periferik stimulun təsirləri. Brain tədqiqat bülleteni. 1982; 8: 7-14. [PubMed]
143. Mantz J, Thierry AM, Glowinski J. Mezokortikal və mesolimbik dopamin nöronların axıdılması dərəcəsinə zəhərli quyruq çimdikliyi təsiri: mesokortikal sistemin selektiv aktivasiyası. Brain Res. 1989; 476: 377-381. [PubMed]
144. Margolis EB, Lock H, Hjelmstad GO, Fields HL. Ventral tegmental bölgəsi yenidən nəzərdən keçirildi: dopaminergik nöronlar üçün elektrofizyoloji marker varmı? Fiziologiya jurnalı. 2006; 577: 907-924. [PMC pulsuz məqalə] [PubMed]
145. Margolis EB, Mitchell JM, Ishikawa J, Hjelmstad GO, Fields HL. Midbrain dopamin nöronları: proqnozlaşdırma hədəfi potensial potensial müddəti və dopamin D (2) reseptor inhibisyonunu müəyyən edir. J Neurosci. 2008; 28: 8908-8913. [PubMed]
146. Mark GP, Blander DS, Hoebel BG. Kondisyonlu bir stimul, öyrənilən bir dad tökülməsinin inkişafından sonra, nüvəsindəki akumbensdə hüceyrə dopamini azaldır. Brain Res. 1991; 551: 308-310. [PubMed]
147. Marowsky A, Yanagawa Y, Obata K, Vogt KE. İnterneuronların xüsusi bir alt sinfi amigdala funksiyasının dopaminergik asanlaşdırılmasına vasitəçilik edir. Neuron. 2005; 48: 1025-1037. [PubMed]
148. Matsumoto M, Hikosaka O. Dopamin nöronlarında mənfi ödül siqnallarının mənbəyi kimi yanal xəbərlər. Təbiət. 2007; 447: 1111-1115. [PubMed]
149. Matsumoto M, Hikosaka O. Primat lateral habenula'da mənfi motivasiya dəyərinin təmsil edilməsi. Nat Neurosci. 2009a; 12: 77-84. [PMC pulsuz məqalə] [PubMed]
150. Matsumoto M, Hikosaka O. Dopamin nöronunun iki növü açıq şəkildə müsbət və mənfi motivasiya siqnallarını çatdırır. Təbiət. 2009b; 459: 837-841. [PMC pulsuz məqalə] [PubMed]
151. Matsumoto M, Matsumoto K, Abe H, Tanaka K. Medial prefrontal hüceyrə fəaliyyəti siqnalizasiya fəaliyyət dəyərlərinin proqnozlaşdırılması səhvləri. Nat Neurosci. 2007; 10: 647-656. [PubMed]
152. May PJ, McHaffie JG, Stanford TR, Jiang H, Costello MG, Coizet V, Hayes LM, Haber SN, Redgrave P. Primatdakı tektonikral proqnozlar: midbrain dopaminergik nöronlara əvvəlcədən diqqətli hissə daxil edilməsi üçün bir yol. Avropa sinirbilim dərsi. 2009; 29: 575-587. [PMC pulsuz məqalə] [PubMed]
153. Mazzoni P, Hristova A, Krakauer JW. Niyə daha sürətli hərəkət etmirik? Parkinson xəstəliyi, hərəkət gücü və gizli motivasiya. J Neurosci. 2007; 27: 7105-7116. [PubMed]
154. Merali Z, Michaud D, McIntosh J, Kent P, Anisman H. Amigdaloid CRH sisteminin (lərinin) stimulların fərqlənmə və valentliyində diferensial iştirakı. Neyro-psixofarmakologiya və bioloji psixiatriyada irəliləyiş. 2003; 27: 1201-1212. [PubMed]
155. Mirenowicz J, Schultz W. Midbrain dopamin neyronlarının təcəssüm etdirici stimulları deyil, iştahı ilə üstün aktivləşdirməsi. Təbiət. 1996; 379: 449-451. [PubMed]
156. Molina-Luna K, Pekanovic A, Rohrich S, Hertler B, Schubring-Giese M, Rioult-Pedotti MS, Luft AR. Mühərrik korteksində dopamin bacarıq öyrənmə və sinaptik plastisitə üçün vacibdir. PLOS ONE. 2009; 4: e7082. [PMC pulsuz məqalə] [PubMed]
157. Montague PR, Berns GS. Sinir iqtisadiyyatı və qiymətləndirmə bioloji substratları. Neuron. 2002; 36: 265-284. [PubMed]
158. Montague PR, Dayan P, Sejnowski TJ. Predental Hebbian öyrənməyə əsaslanan mesencephalic dopamin sistemləri üçün çərçivə. J Neurosci. 1996; 16: 1936-1947. [PubMed]
159. Morris G, Arkadir D, Nevet A, Vaadia E, Bergman H. Təsadüf, lakin midbrain dopamin və striatal tonik aktiv neyronların fərqli mesajları. Neuron. 2004; 43: 133-143. [PubMed]
160. Morris G, Nevet A, Arkadir D, Vaadia E, Bergman H. Midbrain dopamin nöronları gələcək fəaliyyət üçün qərarları şifreler. Nat Neurosci. 2006; 9: 1057-1063. [PubMed]
161. Morrison SE, Salzman CD. Tek neyronlarda təzminat və təcavüzkar stimullar haqqında məlumatların yaxınlaşması. J Neurosci. 2009; 29: 11471-11483. [PMC pulsuz məqalə] [PubMed]
162. Nakahara H, Itoh H, Kawagoe R, Takikawa Y, Hikosaka O. Dopamin nöronları kontekstə bağlı proqnozlaşdırma səhvini təmsil edə bilər. Neuron. 2004; 41: 269-280. [PubMed]
163. Nakamura K, Hikosaka O. Sakkadların mükafat modulyasiyasında primate caudate nüvəsində dopaminin rolu. J Neurosci. 2006; 26: 5360-5369. [PubMed]
164. Neve KA, Seamans JK, Trantham-Davidson H. Dopamin qəbuledicisi siqnalları. Reseptor və sinyal ötürülməsi tədqiqat jurnal. 2004; 24: 165-205. [PubMed]
165. Nishijo H, Ono T, Nishino H. Amigdala fərdi nöron reaksiyaları, təsirli əhəmiyyəti ilə kompleks duysal stimullaşdırma zamanı xəbərdar maymunun. J Neurosci. 1988; 8: 3570-3583. [PubMed]
166. Niv Y, Daw ND, Joel D, dur P. Tonic dopamin: fürsət xərcləri və cavab qüvvəsinin nəzarəti. Psixofarmakologiya. 2007; 191: 507-520. [PubMed]
167. Nomoto K, Schultz W, Watanabe T, Sakagami M. Dəyanətlə tələb edən mükafat-proqnozlaşdırıcı stimullara müvəqqəti olaraq dopamin cavablarını genişləndirdi. J Neurosci. 2010; 30: 10692-10702. [PMC pulsuz məqalə] [PubMed]
168. Okada K, Toyama K, Inoue Y, İsa T, Kobayashi Y. Fərqli pedunculopontin tegmental nöron sinyali proqnozlaşdırılmış və aktual vəzifələrə görə mükafatlandırır. J Neurosci. 2009; 29: 4858-4870. [PubMed]
169. Omelçenko N, Bell R, Sesack SR. Sıçan ventral tegmental sahədə dipamin və GABA nöronlarına yanal nebenula proqnozları. Avropa sinirbilim dərsi. 2009; 30: 1239-1250. [PMC pulsuz məqalə] [PubMed]
170. Owesson-White, Ariansen J, Stuber GD, Cleaveland NA, Cheer JF, Wightman RM, Carelli RM. Kokain axtarış davranışının sinir şifrələməsi accumbens nüvəsində və qabığında fasik dopamin sərbəstliyi ilə uyğun gəlir. Avropa sinirbilim dərsi. 2009; 30: 1117-1127. [PMC pulsuz məqalə] [PubMed]
171. Oyama K, Hernadi I, Iijima T, Tsutsui K. Dorsal striatal neyronlarda kodlayan proqnozlaşdırma xətası. J Neurosci. 2010; 30: 11447-11457. [PubMed]
172. Packard MG, Ağ NM. Dopamin agonistlərinin intraserebral inyeksiyası sonrası hipokampus və kaudat nüvəsi yaddaş sistemlərinin ayrılması. Davranış nevrologiyası. 1991; 105: 295-306. [PubMed]
173. Padoa-Schioppa C. Orbitofrontal korteks və iqtisadi dəyərin hesablanması. Nyu-York Elmlər Akademiyasının Annals. 2007; 1121: 232-253. [PubMed]
174. Palmiter RD. Dorsal striatumda dopamin siqnalları motivasiya olunmuş davranışlar üçün vacibdir: dopamin çatışmazlığı olan siçanlardan dərslər. Nyu-York Elmlər Akademiyasının Annals. 2008; 1129: 35-46. [PMC pulsuz məqalə] [PubMed]
175. Pan WX, Hyland BI. Pedunculopontin tegmental nüvəsi midbrain dopamin nöronların siçovulların davranışlarında cavablandırılmış nəzarət edir. J Neurosci. 2005; 25: 4725-4732. [PubMed]
176. Pan WX, Schmidt R, Wickens JR, Hyland BI. Dopamin nöron aktivliyi və müvəqqəti fərq modelləri tərəfindən təklif olunan üçtərəfli yoxlama mexanizmi. J Neurosci. 2008; 28: 9619-9631. [PubMed]
177. Parker JG, Zweifel LS, Clark JJ, Evans SB, Phillips PE, Palmiter RD. Dopamin nöronlarında NMDA reseptorlarının olmaması dopamin sərbəstliyini azaldır, lakin Pavlovian kondisionerində yanaşma şərtlərinə uyğun deyil. Amerika Birləşmiş Ştatlarının Milli Elmlər Akademiyasının tədqiqatları. 2010 [PMC pulsuz məqalə] [PubMed]
178. Pascoe JP, Kapp BS. Dovşanda Pavlovian qorxu kondisionerində amigdaloid mərkəzi nüvə nöronlarının elektrofizyoloji xüsusiyyətləri. Behavioral beyin araşdırması. 1985; 16: 117-133. [PubMed]
179. Medici prefrontal korteks, norepinefrin və dopaminin qarşılıqlı təsiri ilə stressə qarşı akumbens dopamin reaksiyasını təyin edir. Cereb Cortex. 2007; 17: 2796-2804. [PubMed]
180. Pearce JM, Hall G. Pavlovyen öyrənilməsi üçün bir model: şərti, lakin şərtsiz stimulların effektivliyində dəyişikliklər. Psychol Rev. 1980; 87: 532-552. [PubMed]
181. Pezze MA, Feldon J. Mesolimbicin qorxu kondisionerində dopaminergik yollar. Nörobiyoloji sahəsində irəliləyiş. 2004; 74: 301-320. [PubMed]
182. Phillips AG, Ahn S, Howland JG. Mezokortikolimbik dopamin sisteminin amygdalar nəzarəti: motivasiya davranışına paralel yollar. Neuroscience və biobevavioral baxır. 2003a; 27: 543-554. [PubMed]
183. Phillips GD, Salussolia E, Hitchcott PK. Duygusal öyrənmədə mesoamiqdaloid dopamin proyeksiyasının rolu. Psixofarmakologiya. 2010 [PubMed]
184. Phillips PE, Stuber GD, Heien ML, Wightman RM, Carelli RM. Subkontrollu dopamin sərbəstliyi kokain axtarışını təşviq edir. Təbiət. 2003b; 422: 614-618. [PubMed]
185. Porrino LJ, Goldman-Rakic ​​PS. İRP-nin retrograd nəqli nəticəsində ortaya çıxan rhesus maymununda prefrontal və anterior sindrom korteksinin beyindəki stenozu. Müqayisəli nevrologiya jurnalı. 1982; 205: 63-76. [PubMed]
186. Puryear CB, Kim MJ, Mizumori SJ. Sərbəst naviqasiya edən kemirgendə ventral tegmental sahə neyronları tərəfindən hərəkət və mükafatın konkensiv kodlanması. Davranış nevrologiyası. 2010; 124: 234-247. [PMC pulsuz məqalə] [PubMed]
187. Ravel S, Legallet E, Apicella P. Maymun striatumda tonik olaraq aktiv neyronlar iştahı stimullarına üstünlük vermir. Eksperimental beyin araşdırması. Experimentelle Hirnforschung. 1999; 128: 531-534. [PubMed]
188. Ravel S, Legallet E, Apicella P. Maymun striatumdakı tonik aktiv neyronların cavabı motivasiya qarşılıqlı stimullar arasında fərq qoyur. J Neurosci. 2003; 23: 8489-8497. [PubMed]
189. Ravel S, Richmond BJ. Maymunlarda görmə qabiliyyətli cəza proqramlarını həyata keçirən dopamin nöronal reaksiyalar. Avropa sinirbilim dərsi. 2006; 24: 277-290. [PubMed]
190. Redgrave P, Gurney K. Qısa latanslı dopamin siqnalı: yeni hərəkətləri aşkar etmənin rolu? Nat Rev Neurosci. 2006; 7: 967-975. [PubMed]
191. Redgrave P, Prescott TJ, Gurney K. mükafat səhvini siqnal etmək üçün qısa gecikmeli dopaminin cavabı çox qısa mıdır? Neyroziya tendensiyaları. 1999; 12: 146-151. [PubMed]
192. Rescorla RA, Wagner AR. Pavlovyanın kondisyonunun bir nəzəriyyəsi: möhkəmləndirmənin və qeyri-bərabərliyin effektivliyində dəyişikliklər. Qara AH, Prokasy WF, redaktorları. Klassik Kondisiyalaşdırma II: Cari Tədqiqat və Tədqiqat. New York, New York: Appleton Century Crofts; 1972. 64-99.
193. Reynolds JNJ, Hyland BI, Wickens JR. Mükafatla əlaqəli öyrənmənin mobil mexanizmi. Təbiət. 2001; 413: 67-70. [PubMed]
194. Reynolds SM, Berridge KC. Nüvə hüceyrələrinin qabığındakı pozitiv və mənfi motivasiya: GABA-dan qaynaqlanan yemək üçün ikitərəfli rostrokada qradiyentləri, dad "bəyənmə" / "bəyənməmək" reaksiyaları, yer seçimi / qaçınma və qorxu. J Neurosci. 2002; 22: 7308-7320. [PubMed]
195. Richardson RT, DeLong MR. Primatlardakı çekirdek bazalının funksiyalarının elektrofizyoloji tədqiqatları. Təcrübəli tibb və biologiyanın inkişafı. 1991; 295: 233-252. [PubMed]
196. Robbins TW, Arnsten AF. Fronto-icra funksiyasının nöropsikofarmakologiyası: monoaminergik modulyasiya. Neyroloqların illik baxışları. 2009; 32: 267-287. [PMC pulsuz məqalə] [PubMed]
197. Robinson DL, Hermans A, Seipel AT, Wightman RM. Beyində sürətli kimyəvi münasibətlərin monitorinqi. Kimyəvi baxışlar. 2008; 108: 2554-2584. [PMC pulsuz məqalə] [PubMed]
198. Roesch MR, Calu DJ, Schoenbaum G. Dopamin nöronları fərqli gecikmiş və ya ölçülü mükafatlar arasında qərar verən siçovulların daha yaxşı bir variantını kodlar. Nat Neurosci. 2007; 10: 1615-1624. [PMC pulsuz məqalə] [PubMed]
199. Roesch MR, Olson CR. Primat frontal korteksdə mükafat dəyəri və motivasiya ilə bağlı neyron fəaliyyəti. Elm. 2004; 304: 307-310. [PubMed]
200. Roitman MF, Wheeler RA, Wightman RM, Carelli RM. Nüvə adacığının real zamanlı kimyəvi reaksiyaları, mükafatlandırıcı və təcavüzkar stimulları fərqləndirir. Nat Neurosci. 2008; 11: 1376-1377. [PMC pulsuz məqalə] [PubMed]
201. Rutledge RB, Lazzaro SC, Lau B, Myers CE, Gluck MA, Glimcher PW. Dopaminerjik dərmanlar, dinamik bir yem işində Parkinson xəstələrində öyrənmə nisbətlərini və əzmkarlığı modulyasiya edir. J Neurosci. 2009; 29: 15104–15114. [PMC pulsuz məqalə] [PubMed]
202. Salamone JD. Nüvə accumbens dopaminin iştah və həvəsləndirici motivasiyaya cəlb olunması. Behavioral beyin araşdırması. 1994; 61: 117-133. [PubMed]
203. Salamone JD, Correa M, Farrar A, Mingote SM. Dopamin və əlaqəli forebren sxemlərinin nüvəli accumbenslərin səylərinə aid funksiyaları. Psixofarmakologiya (Berl) 2007; 191: 461-482. [PubMed]
204. Satoh T, Nakai S, Sato T, Kimura M. Motivasiya və dopamin nöronların qərarın nəticəsini kodlaşdırır. J Neurosci. 2003; 23: 9913-9923. [PubMed]
205. Savine AC, Beck SM, Edwards BG, Chiew KS, Braver TS. Yanaşma və qaçma motivasiya vəziyyətləri ilə idrak nəzarətinin artırılması. İdrak və duyğu. 2010; 24: 338-356. [PMC pulsuz məqalə] [PubMed]
206. Schoenbaum G, Roesch MR, Stalnaker TA, Takahashi YK. Adaptiv davranışlarda orbitofrontal korteksin rolu haqqında yeni bir perspektiv. Nat Rev Neurosci. 2009; 10: 885-892. [PMC pulsuz məqalə] [PubMed]
207. Schultz W. Midbrain dopamin nöronlarının maymunda davranışçı tetikleyici stimullara olan cavabları. J Neurophysiol. 1986; 56: 1439-1461. [PubMed]
208. Schultz W. Dopamin nöronlarının proqnozlaşdırıcı mükafat siqnalı. J Neurophysiol. 1998; 80: 1-27. [PubMed]
209. Schultz W. Müxtəlif vaxt kurslarında birdən çox dopamin funksiyası. Neyroloqların illik baxışları. 2007; 30: 259-288. [PubMed]
210. Schultz W. Ödəmə dəyər və riski üçün Dopamin siqnalları: əsas və son məlumatlar. Behav Brain Funct. 2010; 6: 24. [PMC pulsuz məqalə] [PubMed]
211. Schultz W, Dayan P, Montague PR. Proqnoz və mükafat neytral substrat. Elm. 1997; 275: 1593-1599. [PubMed]
212. Schultz W, Romo R. Nigrostriatal dopamin nöronların anesteziyalı maymunda yüksək intensiv somatosensor stimulyasiyasına cavabları. J Neurophysiol. 1987; 57: 201-217. [PubMed]
213. Schultz W, Romo R. Maymun midbraininin dopamin nöronları: təcili davranış reaksiyalarını ortaya qoyan xəbərdarlıqlara cavab tədbirləri. J Neurophysiol. 1990; 63: 607-624. [PubMed]
214. Seo H, Lee D. Qarışıq strategiya oyunu zamanı dorsal anterior sindrom corteksində mükafat siqnallarının müvəqqəti filtrlənməsi. J Neurosci. 2007; 27: 8366-8377. [PMC pulsuz məqalə] [PubMed]
215. Şabel SJ, Janak PH. Amigdala nöronal fəaliyyətində kondisyonlu iştah və həyəcan verici emosional arousal zamanı əhəmiyyətli oxşarlıq. Amerika Birləşmiş Ştatlarının Milli Elmlər Akademiyasının tədqiqatları. 2009; 106: 15031-15036. [PMC pulsuz məqalə] [PubMed]
216. Şadmehr R, Smith MA, Krakauer JW. Hata Düzeltmələri, Dəyişən Dəyişikliklər və Motor Mühərrikində Uyğunlaşma. Neyroloqların illik baxışları. 2010 [PubMed]
217. Shen W, Flajolet M, Greengard P, Surmeier DJ. Striatal sinaptik plastisitin dichotomous dopaminergik nəzarəti. Elm. 2008; 321: 848-851. [PMC pulsuz məqalə] [PubMed]
218. Shimo Y, Vichmann T. Subtalamik nüvədə neyronal aktivlik, maymun striatumda dopamin sindromunu modullaşdırır. Avropa sinirbilim dərsi. 2009; 29: 104-113. [PMC pulsuz məqalə] [PubMed]
219. Shippenberg TS, Bals-Kubik R, Huber A, Herz A. D-1 dopamin reseptor antagonistlərinin aversiv təsirlərinə vasitəçilik edən neyroanatomik substratlar. Psixofarmakologiya (Berl) 1991; 103: 209-214. [PubMed]
220. Shumake J, Ilango A, Scheich H, Wetzel W, Ohl FW. Yanal nebenula və ventral tegmental sahə tərəfindən öyrənilməmənin qarşısının alınması və alınmasının fərqli neyromodulyasiyası. J Neurosci. 2010; 30: 5876-5883. [PubMed]
221. Kiçik DM, Gregory MD, Mak YE, Gitelman D, Mesulam MM, Parrish T. İnsan qətiyyətində intensivliyin və təsirli qiymətləndirmənin neyro təmsilinin ayrılığı. Neuron. 2003; 39: 701-711. [PubMed]
222. Stefani MR, Moghaddam B. Rule öyrənmə və mükafat ehtimalları siçovulların prefrontal korteksində, nüvəli akumbenslərdə və dorsal striatumda dopamin aktivləşməsinin dissociable nümunələri ilə əlaqələndirilir. J Neurosci. 2006; 26: 8810-8818. [PMC pulsuz məqalə] [PubMed]
223. Steinfels GF, Heym J, Strecker RE, Jacobs BL. Dopaminergik nöronların uyuşturucu uyanma dövründə təqdim etdiyi eşitmə stimullarına peyvənd etmə müdaxiləsi. Brain Res. 1983; 277: 150-154. [PubMed]
224. Strecker RE, Jacobs BL. Substantia nigra dopaminerjik birləşmə fəaliyyətində pişik davranışları: arousalın spontan axıdılması və duyğulu uyanık fəaliyyətə təsiri. Brain Res. 1985; 361: 339-350. [PubMed]
225. Stuber GD, Hnasko TS, Britt JP, Edwards RH, Bonci A. Dopaminergik cərəyanların nüvəsindəki akumbenslərdə, lakin dorsal striatum corelease glutamata deyil. Nöroloji jurnalı. 2010; 30: 8229-8233. [PMC pulsuz məqalə] [PubMed]
226. Stuber GD, Wightman RM, Carelli RM. Kokainin özünü idarə etməsinin yox edilməsi, nüvəli akumbenslərdə funksional və müvəqqəti fərqli dopaminerjik siqnalları ortaya çıxarır. Neuron. 2005; 46: 661-669. [PubMed]
227. Sul JH, Kim H, Huh N, Lee D, Jung MW. Qərar verməsində kemirgen orbitofrontal və medial prefrontal korteksin fərqli rolu. Neuron. 2010; 66: 449-460. [PMC pulsuz məqalə] [PubMed]
228. Striatal orta şüurlu nöronlardakı striatal glutamateriqik siqnalın Surmeier DJ, Ding J, Day M, Wang Z, Shen W. D1 və D2 dopamin-reseptor modulyasiya. Neyroziya tendensiyaları. 2007; 30: 228-235. [PubMed]
229. Surmeier DJ, Shen W, Gün M, Gertler T, Chan S, Tian X, Plotkin JL. Striatal dövrələrin strukturunu və funksiyasını modullaşdırmaqda dopaminin rolu. Beyin araşdırmalarında irəliləyiş. 2010; 183C: 148-167. [PubMed]
230. Sutton RS, Barto AG. Uyğun şəbəkələrin müasir bir nəzəriyyəsinə gəldikdə: gözləmə və proqnozlaşdırma. Psychol Rev. 1981; 88: 135-170. [PubMed]
231. Takahashi YK, Roesch MR, Stalnaker TA, Haney RZ, Calu DJ, Taylor AR, Burke KA, Schoenbaum G. Orbitofrontal korteks və ventral tegmental sahəsi gözlənilməz nəticələrdən öyrənmək üçün lazımlıdır. Neuron. 2009; 62: 269-280. [PMC pulsuz məqalə] [PubMed]
232. Takikawa Y, Kawagoe R, Hikosaka O. Mövqe-mükafat xaritalaşdırılmasına saccadların qısamüddətli və uzunmüddətli adaptasiyasında midbrain dopamin nöronlarının rolu. J Neurophysiol. 2004; 92: 2520-2529. [PubMed]
233. Tecuapetla F, Patel JC, Xenias H, İngilis D, Tadros I, Şah F, Berlin J, Deisseroth K, Rice ME, Tepper JM, Koos T. Glutamatergic, çekirdek accumbens içərisində mesolimbik dopamin nöronları tərəfindən işıqlandırılır. J Neurosci. 2010; 30: 7105-7110. [PMC pulsuz məqalə] [PubMed]
234. Thierry AM, Tassin JP, Blanc G, Glowinski J. Stress tərəfindən mesokortikal DA sisteminin seçici aktivasiyası. Təbiət. 1976; 263: 242-244. [PubMed]
235. Tobler PN, Dickinson A, Schultz W. Konditer Inhibə Paradiqmasında Dopamin Neyronları tərəfindən Qiymətləndirilən Qiymətləndirmənin Qəbul edilməsi. J Neurosci. 2003; 23: 10402-10410. [PubMed]
236. Tobler PN, Fiorillo CD, Schultz W. Dopamin nöronlar tərəfindən mükafat dəyərinin uyğunlaşdırılması kodlaşdırma. Elm. 2005; 307: 1642-1645. [PubMed]
237. Tsai HC, Zhang F, Adamantidis A, Stuber GD, Bonci A, de Lecea L, Deisseroth K. Phasic Dopaminergik Neyronlarda Atəş Davranış Kondisyonu üçün yetərlidir. Elm. 2009 [PubMed]
238. Ullsperger M. Genetik birliyin fəaliyyətinin monitorinqi və geribildirimdən öyrənilməsi: dopamin və serotoninin rolu. Neuroscience və biobevavioral baxır. 2010; 34: 649-659. [PubMed]
239. Uğursuz MA. Dopamin: ən vacib məsələ. Neyroziya tendensiyaları. 2004; 27: 702-706. [PubMed]
240. Uylalar HB, Groenewegen HJ, Kolb B. Sıçanlarda prefrontal korteks var? Behavioral beyin araşdırması. 2003; 146: 3-17. [PubMed]
241. Ventura R, Cabib S, Puglisi-Allegra S. Stressə qarşı genotipten asılı mesocorticolimbic dopamin reaksiyasına qarşı. Neuroscience. 2001; 104: 627-631. [PubMed]
242. Ventura R, Latagliata EC, Morrone C, La Mela I, Puglisi-Allegra S. Prefrontal norepinefrin “yüksək” motivasion qabarıqlığın atributunu təyin edir. PLOS BİR. 2008; 3: e3044. [PMC pulsuz məqalə] [PubMed]
243. Ventura R, Morrone C, Puglisi-Allegra S. Prefrontal / accumbal katekolamin sistemi həm mükafat, həm də qəzəblənmə ilə əlaqəli stimullara motivasiya təhlükəsinin təsvirini müəyyənləşdirir. Amerika Birləşmiş Ştatlarının Milli Elmlər Akademiyasının tədqiqatları. 2007; 104: 5181-5186. [PMC pulsuz məqalə] [PubMed]
244. Vogt BA. Singulat girusunun alt hissələrində ağrı və emosional qarşılıqlı təsirlər. Nat Rev Neurosci. 2005; 6: 533-544. [PMC pulsuz məqalə] [PubMed]
245. Voon V, Pessiglione M, Brezing C, Gallea C, Fernandez HH, Dolan RJ, Hallett M. Kompulsiv davranışlarda dopaminin vasitəçiliyi ilə mükafatlandırılmış mexanizmlər. Neuron. 2010; 65: 135-142. [PMC pulsuz məqalə] [PubMed]
246. Waelti P, Dickinson A, Schultz W. Dopamin cavabları formal təhsil nəzəriyyəsinin əsas fərziyyələrinə uyğundur. Təbiət. 2001; 412: 43-48. [PubMed]
247. Wallis JD, Kennerley SW. Prefrontal korteksdə heterojen mükafat siqnalları. Nörobiologiyada cari rəy. 2010; 20: 191-198. [PMC pulsuz məqalə] [PubMed]
248. Walton ME, Behrens TE, Buckley MJ, Rudebeck PH, Rushworth MF. Macaque beyinində ayrılan təlim sistemi və şərti öyrənmədə orbitofrontal korteksin rolu. Neuron. 2010; 65: 927-939. [PMC pulsuz məqalə] [PubMed]
249. Wheeler RA, Twining RC, Jones JL, Slater JM, Grigson PS, Carelli RM. Qeyri-mənfi təsirlərin davranış və elektrofizyoloji göstəriciləri kokain özünü idarə etməyi öngörür. Neuron. 2008; 57: 774-785. [PubMed]
250. Wightman RM, Heien MLAV, Wassum KM, Sombers LA, Aragona BJ, Khan AS, Ariansen JL, Cheer JF, Phillips PE, Carelli RM. Dopaminin sərbəst buraxılması sıçan nüvəsi akumbenslərinin mikroorqanizmlərində heterogendir. Avropa sinirbilim dərsi. 2007; 26: 2046-2054. [PubMed]
251. Williams GV, Castner SA. Eğrilik altında: D1 reseptör funksiyasının iş yaddaşında aydınlaşdırılması üçün kritik məsələlər. Neuroscience. 2006; 139: 263-276. [PubMed]
252. Williams SM, Goldman-Rakic ​​PS. Primat mezofrontal dopamin sisteminin yayılmış mənşəyi. Cereb Cortex. 1998; 8: 321-345. [PubMed]
253. Winn P. Pedunculopontin tegmental nüvənin quruluşunu və funksiyasını necə qiymətləndirmək olar? Nöroloji Elmlər Dergisi. 2006; 248: 234-250. [PubMed]
254. Wise RA. Dopamin, öyrənmə və motivasiya. Nat Rev Neurosci. 2004; 5: 483-494. [PubMed]
255. Wise RA. Forebrain mükafat və motivasiya substratlar. Müqayisəli nevrologiya jurnalı. 2005; 493: 115-121. [PMC pulsuz məqalə] [PubMed]
256. Wise SP. Ön frontal sahələr: filogeniya və fundamental funksiya. Neyroziya tendensiyaları. 2008; 31: 599-608. [PMC pulsuz məqalə] [PubMed]
257. Yamada H, Matsumoto N, Kimura M. Primat kaudat nüvəsindəki tonik aktiv neyronlar və putamen fərqli olaraq hərəkət motivasion nəticələrini göstəriblər. J Neurosci. 2004; 24: 3500-3510. [PubMed]
258. Yamada H, Matsumoto N, Kimura M. Striatumdakı gələcək davranış nəticələrinin tarixi və mövcud təlimat-kodlu kodlaşdırılması. J Neurophysiol. 2007; 98: 3557-3567. [PubMed]
259. Yin HH, Knowlton BJ. Vərdiş formalaşmasında bazal ganglionun rolu. Nat Rev Neurosci. 2006; 7: 464-476. [PubMed]
260. Gənc AM, Moran PM, Yusif MH. Dopaminin kondisionerlə və latent inhibisyonda rolu: nə, nə vaxt, harada və necə? Neuroscience və biobevavioral baxır. 2005; 29: 963-976. [PubMed]
261. Zaghloul KA, Blanco JA, Weidemann CT, McGill K, Jaggi JL, Baltuç GH, Kahana MJ. İnsan əsaslı nigra neyronları gözlənilməz maliyyə mükafatlarını şifrələndirir. Elm. 2009; 323: 1496-1499. [PMC pulsuz məqalə] [PubMed]
262. Zahniser NR, Sorkin A. Dopamin nəqlçisinin sürətli tənzimlənməsi: stimulant asılılığında rol? Neurofarmakologiya. 2004; 47 Əlavə 1: 80-91. [PubMed]
263. Zhang L, Doyon WM, Clark JJ, Phillips PE, Dani JA. Dorsal və ventral striatumda tonik və fasik dopamin ötürülmələrinin nəzarət. Molekulyar farmakologiya. 2009; 76: 396-404. [PMC pulsuz məqalə] [PubMed]
264. Zink CF, Pagnoni G, Martin ME, Dhamala M, Berns GS. Qeyri-irəliləyən stimullara insan striatal cavab. Nöroloji jurnalı. 2003; 23: 8092-8097. [PubMed]
265. Zweifel LS, Argilli E, Bonci A, Palmiter RD. Dopamin nöronlarında plastisite və asılılıq davranışları üçün NMDA reseptorlarının rolu. Neuron. 2008; 59: 486-496. [PMC pulsuz məqalə] [PubMed]
266. Zweifel LS, Parker JG, Lobb CJ, Rainwater A, Wall VZ, Fadok JP, Darvas M, Kim MJ, Mizumori SJ, Paladini CA və s. Dopamin nöronları tərəfindən NMDAR-ə yanaşma partlamasının pozulması fasik dopaminə bağlı davranışın seçici qiymətləndirilməsini təmin edir. Amerika Birləşmiş Ştatlarının Milli Elmlər Akademiyasının tədqiqatları. 2009; 106: 7281-7288. [PMC pulsuz məqalə] [PubMed]