Dopamin ne anlama geliyor? (2018)

. Yazar el yazması; PMC 2019’de mevcuttur.
Son düzenleme formunda şu şekilde yayınlandı:

Çevrimiçi olarak 14 Mayıs 2018 tarihinde yayınlandı. doi: 10.1038/s41593-018-0152-y

Bulunamayan PMCID: PMC6358212
NIHMSID: NIHMS987662
Sayfalar: 29760524

Özet

Dopamin hem öğrenme hem de motivasyon için kritik bir modülatördür. Bu bir problem sunar: Hedef hücreler, artan dopaminin öğrenmek ya da hareket etmek için bir sinyal olup olmadığını nasıl bilebilir? Genellikle motivasyonun yavaş (“tonik”) dopamin değişiklikleri içerdiği varsayılırken, hızlı (“fazik”) dopamin dalgalanmaları öğrenme için ödül tahmin hatalarını iletir. Yine de yakın zamanda yapılan çalışmalar, dopaminin motivasyonel değer taşıdığını ve ikinci saniye zaman çizelgelerinde bile hareketi teşvik ettiğini göstermiştir. Burada dopaminin devam eden davranışı nasıl düzenlediğine dair alternatif bir hesap açıklarım. Motivasyonla ilgili dopamin salınımı, dopamin terminallerinde, dopamin hücre ateşlemesinden bağımsız olarak reseptörler tarafından hızlı ve lokal olarak şekillendirilir. Hedef nöronlar ani olarak öğrenme ve performans modları arasında geçiş yapar ve bir aday anahtar mekanizması sağlayan striatal kolinerjik internöronlarla birlikte. Dopaminin davranışsal etkisi alt bölgeye göre değişir, ancak her durumda dopamin, enerji, dikkat veya zaman gibi sınırlı bir iç kaynağı harcamayı hak edip etmediğinin dinamik bir tahminini sağlar.

Dopamin öğrenme, motivasyon ya da her ikisi için bir sinyal midir?

Dopamin hakkındaki anlayışımız geçmişte değişti ve bir kez daha değişiyor. Kritik bir ayrım, dopaminin mevcut davranış (performans) üzerindeki etkileri ile gelecekteki davranış (öğrenme) üzerindeki etkileri arasındadır. Her ikisi de gerçek ve önemlidir, ancak çeşitli zamanlarda biri tercih edilirken diğeri edilmemiştir.

(70'lerde) dopamin yollarının seçici ve tam lezyonlarının gerçekleştirilmesi mümkün hale geldiğinde, bunun bariz davranışsal sonucu hareketlerde ciddi bir azalma oldu¹ Bu, insanlarda ileri Parkinson hastalığı, toksik ilaçlar veya ensefalit nedeniyle ortaya çıkan dopamin kaybının akinetik etkileriyle örtüşüyordu² Ancak ne sıçanlarda ne de insanlarda temel bir hareket yetersizliği görülmemektedir. Dopamin lezyonlu sıçanlar soğuk suda yüzer³ akinetik hastalar yangın alarmı çaldığında kalkıp koşabilirler ("paradoksal" kinezi). Ödülleri takdir etmede de temel bir eksiklik yoktur: Dopamin lezyonlu sıçanlar ağızlarına konulan yiyecekleri tüketir ve bundan zevk aldıklarına dair işaretler gösterirler⁴ Aksine, aktif olarak ödül elde etmek için çaba göstermeyi tercih etmezler. Bu ve diğer birçok sonuç, dopamin ve motivasyon arasında temel bir bağlantı kurmuştur⁵ Parkinson hastalığının daha hafif vakalarında gözlemlenen hareket yavaşlaması bile, daha hızlı hareketler için gereken enerjiyi harcamaya değmeyeceğine dair örtük kararları yansıtan bir motivasyon eksikliği olarak değerlendirilebilir .

Daha sonra (80'lerde) davranış sergileyen maymunlarda dopamin nöronlarının öncü kayıtları yapıldı (beynin ön kısmına uzanan orta beyin bölgelerinde: ventral tegmental alan, VTA / substantia nigra pars compacta, SNc). Gözlemlenen ateşleme modelleri arasında, anlık hareketleri tetikleyen uyaranlara karşı kısa süreli aktivite patlamaları vardı. Bu "fazik" dopamin ateşlemesi başlangıçta "davranışsal aktivasyonu" ve "motivasyonel uyarılmayı" desteklediği şeklinde yorumlandı ; başka bir deyişle, hayvanın mevcut davranışını canlandırdığı şeklinde.

90'lı yıllarda, fazik dopamin patlamalarının ödül tahmin hatalarını (RPE'ler ) kodlayan unsurlar olarak yeniden yorumlanmasıyla radikal bir değişim yaşandı. Bu, önemli bir gözleme dayanıyordu: Dopamin hücreleri, gelecekteki ödülle ilişkili beklenmedik uyaranlara yanıt verir, ancak bu uyaranlar beklenir hale gelirse genellikle yanıt vermeyi bırakırlar RPE fikri, daha önceki öğrenme teorilerinde ve özellikle o zamanlar gelişmekte olan bilgisayar biliminin pekiştirmeli öğrenme alanında ortaya çıkmıştır Bir RPE sinyalinin amacı, değerleri (gelecekteki ödüllerin tahminlerini) güncellemektir . Bu değerler daha sonra, ödülü en üst düzeye çıkaran seçimler yapmaya yardımcı olmak için kullanılır. Dopamin hücresi ateşlemesi RPE'lere benzediğinden ve RPE'ler öğrenme için kullanıldığından, dopaminin öğrenmedeki rolünü vurgulamak doğal hale geldi. Daha sonraki optogenetik manipülasyonlar, RPE kodlayan hücrelerin dopaminerjik kimliğini doğruladı , ve gerçekten de öğrenmeyi modüle ettiklerini gösterdi , .

Dopaminin bir öğrenme sinyali sağladığı fikri, dopaminin birincil ön beyin hedefi olan striatumda sinaptik plastisiteyi modüle ettiği literatürüyle mükemmel bir şekilde örtüşmektedir. Örneğin, striatal dendrit dikeninin glutamat uyarımı, postsinaptik depolarizasyon ve dopamin salınımının üçlü eş zamanlılığı, dikenin büyümesine neden olur Uzun süreli öğrenme mekanizmalarının dopaminerjik modülasyonu, striatal dopamin salınımını artırma özelliğini paylaşan bağımlılık yapıcı ilaçların kalıcı davranışsal etkilerini açıklamaya yardımcı olur Dopamin kaybıyla ortaya çıkan derin akinezi bile kısmen bu tür öğrenme mekanizmalarıyla açıklanabilir Dopamin eksikliği, eylemlerin değerlerini kademeli olarak sıfıra doğru güncelleyen sürekli negatif bir RPE olarak ele alınabilir. Davranış üzerinde benzer ilerleyici, sönme benzeri etkiler, dopamin antagonistleri tarafından da üretilebilir , .

Ancak dopaminin devam eden motivasyonda kritik bir rol oynadığı fikri hiçbir zaman ortadan kalkmadı; aksine, davranışsal nörobilimciler tarafından yaygın olarak kabul görmektedir. Bu, dopaminin motivasyon/hareket/canlanmadaki işlevlerinin öğrenmeden ayrılabildiğine dair güçlü kanıtlar göz önüne alındığında uygundur , – . Daha az takdir edilen ise, bu motivasyonel rolü, DA'nın bir RPE öğrenme sinyali sağladığı teorisiyle uzlaştırmanın zorluğudur.

Motivasyon “ileriye bakar”: mevcut davranışa uygun şekilde enerji vermek için gelecekteki ödül (değerler) tahminlerini kullanır. Buna karşılık, öğrenme son zamanlarda devletlere ve eylemlere “geriye bakar” ve değerlerini günceller. Bunlar bir döngünün tamamlayıcı aşamalarıdır: eğer bu durumlarla yeniden karşılaşılırsa, sonra tekrar güncellenirse ve sonraki hallerde güncellenmiş değerler sonraki karar vermede kullanılabilir. Ancak, döngünün hangi aşaması dopamin ile ilgilidir - karar vermek için değerleri kullanmak (performans) veya değerleri güncellemek (öğrenme)?

Bazı durumlarda dopaminin her iki rolü de aynı anda oynadığını hayal etmek kolaydır. Beklenmedik, ödül tahmin edici ipuçları, dopamin hücresi ateşlemesini ve salınımını tetikleyen arketipik olaylardır ve bu tür ipuçları tipik olarak hem davranışı canlandırır hem de öğrenmeyi tetikler ( Şekil 1 ). Bu özel durumda, hem ödül tahmini hem de ödül tahmin hataları aynı anda artar – ancak bu her zaman böyle değildir. Sadece bir örnek olarak, insanlar ve diğer hayvanlar, şaşırtıcı bir şey olmasa bile ödüller için çalışmaya motive olurlar. Ödüle yaklaştıkça daha da çok çalışabilirler (ödüller yaklaştıkça değer artar). Önemli olan nokta, öğrenme ve motivasyonun kavramsal, hesaplamalı ve davranışsal olarak farklı olmasıdır – ve yine de dopamin her ikisini de yapıyor gibi görünmektedir.

Resim, çizim vb. İçeren harici bir dosya. Nesne adı nihms-987662-f0001.jpg

Dopamin: geçmişi güncellemek, bugünü canlandırmak.

Üstte , oklarla gösterilen daireler durumları ve bu durumlardan kaynaklanabilecek potansiyel eylemleri temsil eder. Ok genişlikleri, her bir eylemi gerçekleştirmenin öğrenilen değerlerini gösterir. Durumlar/eylemler geçmişe doğru kayboldukça, pekiştirme için giderek daha az uygun hale gelirler. Ortada , bir dopamin patlaması meydana gelir. Sonuç, mevcut durumdan elde edilebilen eylemlerin canlanması (kırmızı) ve yakın zamanda gerçekleştirilen eylemler için değer temsillerinin esnekliğidir (mor). Altta , esnekliğin sonucu olarak, bu durumlarla bir sonraki karşılaşıldığında, ilişkili değerleri artmıştır (ok genişlikleri). Tekrarlanan deneyim yoluyla pekiştirme öğrenmesi, durum uzayında "bir oluk açabilir" ve belirli yörüngeleri giderek daha olası hale getirebilir. Bu öğrenme rolüne ek olarak, dopaminin canlandırıcı, performans rolü, önceden öğrenilen yörüngeler boyunca akışı hızlandırıyor gibi görünmektedir.

Aşağıda, dopaminin hem öğrenme hem de motivasyon işlevlerini nasıl elde edebileceği hakkındaki güncel fikirleri eleştirel bir şekilde değerlendiriyorum. Üç temel gerçeğe dayanan güncellenmiş bir model öneriyorum: 1) Terminallerden dopamin salınımı sadece dopamin hücre ateşlemesinden kaynaklanmıyor, aynı zamanda yerel olarak da kontrol edilebilir; 2) dopamin, sırasıyla öğrenme ve performans için belirgin sonuçları olan, hedef hücrelerin hem sinaptik plastisitesini hem de uyarılabilirliğini etkiler; 3) Plastisite üzerindeki dopamin etkileri yakındaki devre elemanları tarafından açılabilir veya kapatılabilir. Birlikte, bu özellikler beyin devrelerinin sırasıyla öğrenme ve motivasyon için iki ayrı dopamin mesajı arasında geçiş yapmasına izin verebilir.

Farklı anlamları olan ayrı “fazik” ve “tonik” dopamin sinyalleri var mı?

Dopaminin öğrenme ve motivasyon rollerinin farklı zaman ölçeklerinde gerçekleştiği sıklıkla öne sürülmektedir Dopamin hücreleri, saniyede birkaç spike ile sürekli ("tonik") olarak ateşlenir ve ara sıra kısa ("fazik") patlamalar veya duraklamalar meydana gelir. Patlamalar, özellikle dopamin hücreleri arasında yapay olarak senkronize edilirse, ön beyin dopamininde karşılık gelen hızlı artışlara neden olur ve bu artışlar oldukça geçicidir (saniyenin altında bir süre ). Tonik dopamin hücresi ateşlemesinin ön beyin dopamin konsantrasyonlarına ayrı katkısı daha az açıktır. Bazı kanıtlar bu katkının çok küçük olduğunu göstermektedir Bu katkı , daha yüksek afiniteli D2 reseptörlerinin neredeyse sürekli uyarılmasını sağlamak için yeterli olabilir ve sistemin dopamin hücresi ateşlemesindeki kısa duraklamaları fark etmesine ve bu duraklamaları negatif tahmin hataları olarak kullanmasına olanak tanıyabilir.

Mikrodiyaliz, ön beyin dopamin seviyelerini doğrudan ölçmek için yaygın olarak kullanılmıştır, ancak zamansal çözünürlüğü düşüktür (tipik olarak birçok dakika boyunca ortalama alınarak). Dopaminin bu kadar yavaş ölçümlerinin davranışla tam olarak ilişkilendirilmesi zor olabilir. Bununla birlikte, nükleus akumbens'teki (NAc; ventral/medial striatum) dopaminin mikrodiyalizi, lokomotor aktivite ve diğer motivasyon göstergeleri ile pozitif korelasyonlar göstermektedir . Bu, dopamin konsantrasyonunda yavaş ("tonik") değişiklikler olduğu ve bu yavaş değişikliklerin motivasyonel bir sinyal ilettiği anlamına geldiği şeklinde yaygın olarak kabul edilmiştir. Daha spesifik olarak, hesaplamalı modeller, tonik dopamin seviyelerinin uzun vadeli ortalama ödül oranını izlediğini öne sürmüştür ; bu, zaman tahsisi ve yiyecek arama kararları için yararlı bir motivasyonel değişkendir. Çok az sayıda makalenin "tonik" dopamin seviyelerini açıkça tanımladığını vurgulamakta fayda var; genellikle dopamin konsantrasyonunun mikrodiyalizin çok dakikalık zaman ölçeğinde yavaşça değiştiğini varsayarlar.

Ancak bu “fazik dopamin=RPE/öğrenme, tonik dopamin=motivasyon” görüşü birçok sorunla karşı karşıyadır. Birincisi, tonik dopamin hücresi ateşlemesinin normalde yavaş zaman ölçeklerinde değiştiğine dair doğrudan bir kanıt yoktur. Tonik ateşleme oranları değişen motivasyonla değişmez , Tonik dopamin seviyelerinin, aktif dopamin hücrelerinin değişen oranı nedeniyle değiştiği öne sürülmüştür , Ancak ilaçsız, lezyonlu olmayan hayvanlarda yapılan birçok çalışmada, dopamin hücrelerinin sessiz ve aktif durumlar arasında geçiş yaptığı hiç bildirilmemiştir.

Dahası, mikrodiyalizin dopamin seviyelerini yavaş ölçmesi, dopamin seviyelerinin gerçekten yavaş değiştiği anlamına gelmez. Yakın zamanda, hem mikrodiyaliz hem de hızlı taramalı döngüsel voltametri kullanarak, sıçan NAc dopaminini olasılıksal ödül görevinde inceledik Mikrodiyaliz ile ölçülen mezolimbik dopaminin ödül oranıyla (ödül/dakika) korelasyon gösterdiğini doğruladık. Bununla birlikte, geliştirilmiş bir mikrodiyaliz zamansal çözünürlüğü (1 dakika) ile bile dopamin, örnekleme hızımız kadar hızlı dalgalandı: Doğ inherently yavaş bir dopamin sinyaline dair hiçbir kanıt görmedik.

Hala voltammetrinin daha ince zamansal çözünürlüğünü kullanarak, ikinci saniye dopamin dalgalanmaları ile motivasyon arasında yakın bir ilişki olduğunu gözlemledik. Sıçanlar, ödülleri elde etmek için gereken eylemlerin sırasını gerçekleştirdiklerinde, dopamin yükseldi ve yükseldi, ödülü kazandıkları gibi bir zirveye ulaştı (ve tükettikçe hızla düştü). Dopaminin, beklenen gelecekteki ödül olarak tanımlanan anlık durum değeri ile güçlü bir şekilde ilişkili olduğunu, onu almak için gereken zamanın azaldığını gösterdik. Bu hızlı dopamin dinamikleri, farklı zaman ölçeklerinde ayrı dopamin sinyalleri çağırmadan mikrodiyaliz sonuçlarını açıklayabilir. Hayvanlar daha fazla ödül yaşadıkça, deneme sırasındaki her adımda gelecekteki ödüllerin beklentilerini arttırırlar. Yavaş yavaş gelişen bir ortalama ödül oranı sinyalinden ziyade, dopamin ve ödül oranı arasındaki korelasyon en iyi şekilde, bu hızla gelişen durum değerlerinin uzamış mikrodiyaliz örneği toplama süresi boyunca ortalama olarak açıklanır.

Mezolimbik dopamin salınımının bu değer yorumu, ödüle yakınlığın artmasıyla dopamin salınımının da arttığını tekrar tekrar bulan diğer araştırma gruplarının voltametrik sonuçlarıyla tutarlıdır – ( Şekil 2 ). Bu motivasyonel sinyal doğası gereği "yavaş" değildir, aksine sürekli bir zaman ölçeği aralığında gözlemlenebilir. Yaklaşma davranışı da birkaç saniye sürdüğünde dopamin artışları birkaç saniye sürebilir , ancak bu, içsel dopamin dinamiklerinden ziyade davranışın zaman seyrini yansıtır. Mezolimbik dopamin salınımı ile dalgalanan değer arasındaki ilişki, kayıt tekniğinin izin verdiği kadar hızlı bir şekilde, yani akut voltametrik elektrotlarla ~100 ms'lik bir zaman ölçeğinde görülebilir .

Resim, çizim vb. İçeren harici bir dosya. Nesne adı nihms-987662-f0002.jpg

Hızlı dopamin dalgalanmaları, dinamik olarak gelişen ödül beklentilerini gösterir.

ac) Sıçanlar beklenen ödüllere yaklaştıkça mezolimbik dopamin salınımı hızla artar. d) Gelecekteki ödülün zamansal olarak iskonto edilmiş tahminleri olarak tanımlanan değer, ödül yaklaştıkça artar. Ödülün daha büyük, daha yakın veya daha kesin olduğunu gösteren ipuçları, değerde sıçramalara neden olur. Bir andan diğerine olan bu sıçramalar, zamansal fark RPE'leridir. e) "Temel çizgileri" çıkarmak, değer ve RPE sinyallerini karıştırabilir. Solda, geleneksel temel çizgi çıkarma yöntemiyle ödül tahmin edici ipucuna (sıfır zamanında) göre hizalanmış dopamin, ödül daha az beklendiğinde dopaminin daha yüksek seviyelere sıçradığını (kahverengi) ve bir RPE sinyaline benzediğini göstermektedir. Sağda, aynı verilerin alternatif bir sunumu, ipucundan sonraki dopamin seviyelerini eşitleyerek , bunun yerine ipucu öncesi dopamin seviyelerinin ödül beklentisine (değer) bağlı olduğunu gösterecektir. Ek analizler, sağ taraftaki sunumun gerçeğe daha yakın olduğunu belirlemiştir (ayrıntılar için bkz. referans ). Panel a, numaralı referanstan (Macmillan Publishers Limited) izin alınarak yeniden üretilmiştir ; panel b, numaralı referanstan (Elsevier) izin alınarak yeniden üretilmiştir ; panel ce, referanstan (Macmillan Publishers Limited) izin alınarak yeniden üretilmiştir.

Hızlı dopamin dalgalanmaları sadece motivasyonu yansıtmakla kalmaz, aynı zamanda motive edici davranışı da anında tetikler. Dopamin hücrelerinin tetikleyici ipuçlarına verdiği daha büyük fazik yanıtlar, aynı denemede daha kısa reaksiyon sürelerini öngörür VTA dopamin hücrelerinin optogenetik uyarımı, sıçanların olasılıksal ödül görevimizde çalışmaya başlama olasılığını artırır , tıpkı daha yüksek bir ödül beklentisine sahipmiş gibi. SNc dopamin nöronlarının veya dorsal striatumdaki aksonlarının optogenetik uyarımı, hareket olasılığını artırır , Kritik olarak, bu davranışsal etkiler, optogenetik uyarımın başlangıcından itibaren birkaç yüz milisaniye içinde belirgindir. Ödül öngörücü ipuçlarının motivasyonu artırma yeteneği, NAc dikenli nöronlarının uyarılabilirliğinin çok hızlı dopaminerjik modülasyonu yoluyla aracılık ediliyor gibi görünmektedir . Dopamin hızla değiştiği ve bu dopamin değişiklikleri motivasyonu hızla etkilediği için, dopaminin motivasyonel işlevleri yavaş ("tonik") değil, hızlı ("fazik") olarak tanımlanmalıdır.

Dahası, ayrı hızlı ve yavaş zaman ölçeklerini çağırmak kendi başına dopamin reseptörlü nöronların karşılaştığı kod çözme problemini çözmez. Dopamin öğrenmeyi işaret ediyorsa, sinaptik plastisitenin modülasyonu uygun bir hücresel yanıt gibi görünecektir. Ancak motive edilmiş davranış üzerindeki ani etkiler, ani etkilere işaret eder - örneğin, uyarılabilirlikteki hızlı değişiklikler yoluyla. Dopamin, bu postsinaptik etkilerin her ikisine de (ve daha fazlasına) sahip olabilir, peki belirli bir dopamin konsantrasyonunun belirli bir anlamı var mı? Veya bu anlamın oluşturulması gerekiyor mu - örneğin, zaman içinde dopamin seviyelerini karşılaştırarak veya hangi hücresel makinenin devreye gireceğini belirlemek için diğer çakışan sinyalleri kullanarak? Bu olasılık aşağıda daha ayrıntılı tartışılmaktadır.

Dopamin salınımı, dopamin hücre ateşlemesiyle aynı bilgiyi veriyor mu?

Hızlı dopamin dalgalanmaları ile motivasyonel değer arasındaki ilişki, dopamin hücresi ateşlemesinin algılanan efor düzeyine (RPE) benzediği göz önüne alındığında garip görünmektedir. Dahası, bazı çalışmalar mezolimbik dopamin salınımında RPE sinyalleri bildirmiştir Bazı nöral veri biçimlerinin yorumlanmasında bir zorluk olduğunu belirtmek önemlidir. Değer sinyalleri ve RPE'ler birbirleriyle ilişkilidir - bu şaşırtıcı değildir, çünkü RPE genellikle bir andan diğerine değerdeki değişim olarak tanımlanır ("zamansal fark" RPE). Bu korelasyon nedeniyle, değeri RPE açıklamalarından ayıran deneysel tasarımlar ve analizler kullanmak çok önemlidir. Mutlak değil, göreceli sinyal değişikliklerine dayanan bir nöral ölçüm kullanıldığında sorun daha da karmaşıklaşır. Voltametri analizleri genellikle, her denemede daha önceki bir "bazal" döneme göre, ilgi duyulan bir zaman noktasındaki dopamini karşılaştırır (her voltaj taramasında elektrot şarjı ve dakikalar ölçeğinde kayma dahil olmak üzere dopamine bağlı olmayan sinyal bileşenlerini ortadan kaldırmak için). Ancak bir bazal değeri çıkarmak, bir değer sinyalinin bir RPE sinyaline benzemesine neden olabilir. Bu, kendi voltametrik verilerimizde gözlemlediğimiz şeydir ( Şekil 2e ). Ödül beklentisindeki değişiklikler, her denemenin başlarında dopamin konsantrasyonundaki değişikliklere yansıdı ve eğer denemeler boyunca sabit bir temel çizgi varsayılırsa bu değişiklikler gözden kaçırılır Bu nedenle, dopamin salınımı ve RPE kodlaması hakkındaki sonuçlara ihtiyatla yaklaşılmalıdır. Bu veri yorumlama tehlikesi sadece voltametrik veriler için değil, göreceli değişikliklere dayanan herhangi bir analiz için de geçerlidir – potansiyel olarak bazı fMRI ve fotometri yöntemlerini de içerebilir .

Bununla birlikte, NAc çekirdeğindeki değerle ilgili dopamin salınımını, dopamin nöronlarının değerle ilgili ateşlemesinin tutarlı yokluğuyla uzlaştırmamız gerekiyor , hatta NAc çekirdeğine dopamin sağlayan lateral VTA bölgesinde bile Potansiyel bir faktör, dopamin hücrelerinin genellikle klasik koşullanma görevlerini yerine getiren başı sabitlenmiş hayvanlarda kaydedilmesi, dopamin salınımının ise tipik olarak çevrelerinde aktif olarak hareket eden serbest hayvanlarda ölçülmesidir. Mezoolimbik dopaminin özellikle "çalışmanın" değerini gösterebileceğini - yani ödülü elde etmek için zaman ve çaba harcama gerekliliğini yansıttığını öne sürdük. Buna uygun olarak, dopamin, hareket talimatı veren sinyallerle artar, ancak benzer gelecekteki ödülü gösterse bile hareketsizlik talimatı veren sinyallerle artmaz Eğer - birçok klasik koşullanma görevinde olduğu gibi - aktif "çalışmanın" bir faydası yoksa, çalışmanın değerini gösteren dopaminerjik değişiklikler daha az belirgin olabilir.

Daha da önemlisi, dopamin salınımının terminallerin kendilerinde lokal olarak kontrol edilebilmesi ve dolayısıyla hücre gövdesi ateşlemesinden bağımsız uzamsal-zamansal kalıplar gösterebilmesidir. Örneğin, bazalateral amigdala (BLA), VTA devre dışı bırakıldığında bile NAc dopamin salınımını etkileyebilir Tersine, BLA'nın devre dışı bırakılması, VTA ateşlemesini görünüşte etkilemeden NAc dopamin salınımını ve buna karşılık gelen motive edici davranışı azaltır Dopamin terminallerinde glutamat, opioidler ve asetilkolin dahil olmak üzere çeşitli nörotransmiterler için reseptörler bulunur. Nikotinik asetilkolin reseptörleri, striatal kolinerjik ara nöronların (CIN'ler) dopamin salınımını hızla kontrol etmesine olanak tanır , Dopamin salınımının lokal kontrolünün potansiyel olarak önemli olduğu uzun zamandır belirtilmiş olmasına rağmen , , dopamin fonksiyonunun hesaplamalı açıklamalarına dahil edilmemiştir. Dopamin salınım dinamiklerinin, değer kodlamasıyla ilişkili olarak, büyük ölçüde yerel kontrol yoluyla ortaya çıktığını, ancak dopamin hücresi ateşlemesinin öğrenme için önemli RPE benzeri sinyaller sağladığını öne sürüyorum .

Dopamin, karışıklık olmadan hem öğrenme hem de motivasyon anlamına nasıl gelir?

Prensip olarak, zamansal fark RPE'leri basitçe değerdeki hızlı değişiklikler olduğundan ( Şekil 2B ) , bir değer sinyali de RPE'yi iletmek için yeterlidir . Örneğin, hedef nöronlardaki farklı hücre içi yollar, dopaminin mutlak konsantrasyonuna (değeri temsil eden) ve konsantrasyondaki hızlı göreceli değişikliklere (RPE'yi temsil eden) karşı farklı duyarlılığa sahip olabilir. Bu şema, dikenli nöron fizyolojisinin karmaşık dopamin modülasyonu ve kalsiyum konsantrasyonunun zamansal kalıplarına duyarlılıkları göz önüne alındığında makul görünmektedir . Ancak bu da biraz gereksiz gibi görünüyor. Dopamin hücresi ateşlemesinde zaten RPE benzeri bir sinyal varsa, RPE'yi bir değer sinyalinden yeniden türetmek yerine bunu kullanmak mümkün olmalıdır.

Farklı RPE ve değer sinyallerini uygun şekilde kullanmak için, dopamin alıcı devreler dopamini nasıl yorumladıklarını aktif olarak değiştirebilirler. Asetilkolinin de bu değiştirme rolünü üstlenebileceğine dair ilgi çekici kanıtlar vardır. Dopamin hücreleri beklenmedik ipuçlarına karşı ani ateşleme patlamaları yaparken, CIN'ler ateşlemede kısa (~150 ms) duraklamalar gösterir ve bu duraklamalar RPE'lerle ölçeklenmez ve intralaminar talamustaki "sürpriz" ile ilgili hücreler tarafından yönlendirilebilir ve öğrenmeyi teşvik eden bir ilişkilendirilebilirlik sinyali olarak hareket ettiği öne sürülmüştür Morris ve Bergman , kolinerjik duraklamaların, dopaminin bir öğrenme sinyali olarak kullanılabileceği striatal plastisite için zamansal pencereler tanımladığını öne sürmüştür. Dopamin bağımlı plastisite, doğrudan yol striatal nöronlarındaki muskarinik m4 reseptörleri de dahil olmak üzere mekanizmalar tarafından sürekli olarak baskılanır . Hücre içi sinyalleme modelleri, CIN duraklamaları sırasında m4 bağlanmasının yokluğunun, PKA aktivasyonunu artırmak için fazik dopamin patlamalarıyla sinerjik olarak hareket edebileceğini ve böylece sinaptik değişimi teşvik edebileceğini öne sürmektedir.

Striatal kolinerjik hücreler, bu nedenle, çoklu dopaminerjik mesajın anlamını dinamik olarak değiştirmek için iyi bir konumdadır. CIN duraklamaları sırasında, sinaptik plastisite üzerindeki muskarinik blokajın ortadan kalkması, dopaminin öğrenme için kullanılmasına olanak tanır. Diğer zamanlarda, dopamin terminallerinden salınım, devam eden davranışsal performansı etkilemek için yerel olarak şekillendirilir. Şu anda, bu öneri hem spekülatif hem de eksiktir. CIN'lerin, entropi , üretmek ve ayrıca dopamin öğrenme sinyallerini kontrol etmek için kullanılabileceği hiç de açık değildir .

Dopamin, ön beyin boyunca aynı şeyi ifade ediyor mu?

RPE fikri yaygınlaştıkça, dopaminin striatal ve frontal kortikal hedeflere hata mesajı yayan küresel bir sinyal olduğu düşünülmeye başlandı. Schultz, VTA ve SNc'deki maymun dopamin hücrelerinin çok benzer tepkiler verdiğini vurguladı Tanımlanmış dopamin hücreleri üzerinde yapılan çalışmalar, en azından klasik koşullanma bağlamlarında lateral VTA nöronları için kemirgenlerde oldukça homojen RPE benzeri tepkiler bulmuştur dopamin hücreleri moleküler ve fizyolojik olarak çeşitlidir ve artık davranış sergileyen hayvanlarda çeşitli ateşleme modelleri gösterdiklerine dair birçok rapor bulunmaktadır. Bunlar, standart RPE açıklamasına pek uymayan olumsuz olaylara ve tetikleyici ipuçlarına karşı ateşlemede fazik artışları içerir. Birçok dopamin hücresi , spesifik RPE kodlamasından ziyade sürpriz veya "uyarıcı"yı yansıtan duyusal olaylara karşı başlangıçta kısa gecikmeli bir tepki gösterir , . Bu uyarıcı özellik, dopamin hücrelerinin daha çok “sensörimotor” dorsal/lateral striatuma (DLS , ) uzandığı SNc daha belirgindir . SNc dopamin hücrelerinin alt popülasyonlarının , dışsal ipuçları olmasa bile, kendiliğinden hareketlerle birlikte ateşlemeyi artırdığı veya azalttığı bildirilmiştir .

Birkaç grup, dopamin nöronlarının alt popülasyonlarının toplu aktivitesini incelemek için fiber fotometri ve kalsiyum göstergesi GCaMP kullandı , Dorsal/medial striatuma (DMS) uzanan dopamin hücreleri, beklenmedik kısa süreli şoklara geçici olarak baskılanmış aktivite gösterirken, DLS'ye uzananlar artmış aktivite gösterdi – bu da uyarıcı bir yanıtla daha tutarlıydı. GCaMP kullanılarak dopamin aksonlarının ve terminallerinin aktivitesini incelemek için farklı ön beyin alt bölgelerinde farklı dopaminerjik yanıtlar da gözlemlendi , , Başları sabitlenmiş farelerde iki fotonlu görüntüleme kullanan Howe ve Dombeck , spontan hareketlerle ilgili fazik dopamin aktivitesi bildirdi. Bu, ağırlıklı olarak dorsal striatumda sonlanan SNc'den gelen bireysel dopamin aksonlarında görülürken, NAc'deki VTA dopamin aksonları ödül verilmesine daha fazla yanıt verdi. Diğer araştırmacılar da NAc'de ödülle ilgili dopaminerjik aktivite bulmuşlardır; DMS ise bunun yerine kontralateral eylemlerle daha çok bağlantılıdır ve striatumun arka kuyruğu olumsuz ve yeni uyaranlara yanıt vermektedir .

Dopamin salınımının doğrudan ölçümleri de alt bölgeler arasında heterojenliği ortaya koymaktadır , Mikrodiyaliz ile dopaminin özellikle NAc çekirdeğinde ve ventral-medial frontal kortekste değerle ilişkili olduğunu, striatumun diğer medial kısımlarında (NAc kabuğu, DMS) veya frontal kortekste ise böyle bir ilişki bulunmadığını tespit ettik. Bu durum, insan fMRI çalışmalarında tutarlı bir şekilde görülen değer kodlamasının iki "sıcak noktasına" iyi bir şekilde eşleştiği için ilgi çekicidir , Özellikle dopamin sinyallemesiyle yakın bir ilişkiye sahip olan NAc BOLD sinyali , ödül beklentisi (değer) ile RPE'den daha fazla artmaktadır .

Bu mekansal dopamin salınımı modellerinin, farklı dopamin hücresi alt popülasyonlarının ateşlenmesinden mi, dopamin salınımının yerel kontrolünden mi yoksa her ikisinden mi kaynaklandığı, küresel bir dopamin mesajı fikrine meydan okuyor. Örneğin, dorsal striatumdaki dopaminin "hareket" sinyalini, ventral striatumdaki dopaminin ise "ödül" sinyalini verdiği gibi birçok farklı dopamin fonksiyonu olduğu sonucuna varılabilir Ancak ben başka bir kavramsal yaklaşımı tercih ediyorum. Farklı striatal alt bölgeler farklı kortikal bölgelerden girdi alırlar ve bu nedenle farklı bilgi türlerini işlerler. Yine de her striatal alt bölge, ayrı D1 ve D2 reseptör taşıyan dikenli nöronlar , CIN'ler ve benzerleri de dahil olmak üzere ortak bir mikro devre mimarisine sahiptir. Çeşitli striatal alt bölgelere (örneğin DLS, DMS, NAc çekirdeği) ayrı alanlarmış gibi atıfta bulunmak yaygın olsa da, aralarında keskin anatomik sınırlar yoktur (NAc kabuğu nörokimyasal olarak biraz daha farklıdır). Bunun yerine, reseptör yoğunluğunda, ara nöron oranlarında vb. sadece hafif gradyanlar var; bunlar daha çok ortak bir hesaplama algoritmasının parametrelerinde yapılan ince ayarlamalar gibi görünüyor. Bu ortak mimari göz önüne alındığında, her bir alt bölge tarafından işlenen spesifik bilgilerden soyutlanmış ortak bir dopamin fonksiyonu tanımlayabilir miyiz?

Striatal dopamin ve sınırlı kaynakların tahsisi.

Dopaminin devam eden davranışlar üzerindeki çeşitli farklı etkilerinin, kaynak tahsis kararlarının modülasyonu olarak anlaşılabileceğini öne sürüyorum . Özellikle, dopamin, sınırlı bir iç kaynağı harcamanın ne kadar değerli olduğuna dair tahminler sağlar; bu kaynak, striatal alt bölgeler arasında farklılık gösterir. “Motor” striatum (~DLS) için kaynak harekettir; bu da sınırlıdır çünkü hareket etmek enerji gerektirir ve birçok eylem birbiriyle uyumsuzdur Dopaminin artması, bir hayvanın hareket etmek veya daha hızlı hareket etmek için enerji harcamaya değer olduğuna karar verme olasılığını artırır , , “Hareket değerlidir” diye kodlayan bir dopamin sinyalinin, dopaminin “hareketi” doğrudan kodlamaması durumunda bile, dopamin ve hareket arasında korelasyonlar üreteceğini unutmayın.

“Bilişsel” striatum (~DMS) için kaynaklar, dikkat (tanımı gereği sınırlı kapasiteli ) ve çalışma belleği dahil olmak üzere bilişsel süreçlerdir . Dopamin olmadan, normalde yönlendirme hareketlerini tetikleyen belirgin dış ipuçları, daha az dikkat çekiciymiş gibi göz ardı edilir Dahası, bilişsel kontrol süreçlerini kasıtlı olarak harekete geçirmek zahmetlidir (maliyetlidir ). Dopamin – özellikle DMS'de – bu çabayı göstermeye değip değmeyeceğine karar vermede önemli bir rol oynar , Bu, daha bilişsel olarak zorlayıcı, bilinçli (“model tabanlı”) karar stratejileri kullanıp kullanmamayı da içerebilir .

“Motivasyonel” striatum (~NAc) için en önemli sınırlı kaynaklardan biri hayvanın zamanı olabilir. Hayvanlar ödülleri hızla elde etmek için basit, sabit bir eylem gerçekleştirdiğinde mezolimbik dopamine ihtiyaç duyulmaz Ancak birçok ödül türü yalnızca uzun süreli çalışma yoluyla elde edilebilir: yiyecek arama gibi, uzun süreli ödülsüz eylem dizileri. Çalışmaya katılmayı seçmek, zamanı geçirmenin diğer faydalı yollarından vazgeçmek anlamına gelir. Yüksek mezolimbik dopamin, zamansal olarak uzun süren, çaba gerektiren çalışmaya katılmanın değerli olduğunu gösterir, ancak dopamin azaldıkça hayvanlar zahmet etmez ve bunun yerine uyumaya hazırlanabilirler .

Her bir kortiko-striatal döngü devresi içinde dopaminin devam eden davranışa katkısı hem ekonomik (kaynak tahsisiyle ilgili) hem de motivasyoneldir ( kaynak harcamanın değerli olup olmadığı ). Bu devreler tamamen bağımsız değildir, aksine hiyerarşik, sarmal bir organizasyona sahiptir: striatumun daha ventral kısımları, daha dorsal kısımlara uzanan dopamin hücrelerini etkiler , Bu şekilde, işe giriş kararları, gerekli olan belirli, daha kısa hareketleri canlandırmaya da yardımcı olabilir. Ancak genel olarak, dopamin, kaynakların nasıl harcanması gerektiğini belirten "yönlendirici" sinyallerden ziyade, bir kararın alınma olasılığını artıran "aktivasyonel" sinyaller sağlar .

Kararlar alınırken dopaminin hesaplamalı rolü nedir?

Bu aktivasyonel rolü düşünmenin bir yolu, karar verme "eşikleri" açısından düşünmektir. Bazı matematiksel modellerde, karar süreçleri bir eşik seviyesine ulaşana kadar artar ve sistem bir eyleme bağlı hale gelir Daha yüksek dopamin, eşiğe olan mesafenin daha düşük olmasına eşdeğerdir, böylece kararlar daha hızlı alınır. Bu fikir basittir, ancak doğrulanmış nicel tahminler yapar. Hareket için eşiklerin düşürülmesi, amfetaminin sensörimotor striatuma enjekte edildiğinde görülen reaksiyon süresi dağılımının şeklinde belirli bir değişikliğe neden olur .

Sabit eşikler yerine, davranışsal ve nöral veriler, kararlar giderek daha acil hale geliyormuş gibi, eşiklerin zamanla azalması durumunda daha iyi uyum sağlayabilir. Bazal gangliyon çıktısının, korteksteki seçim mekanizmalarını canlandıran dinamik olarak gelişen bir aciliyet sinyali sağladığı öne sürülmüştür Gelecekteki ödüller zaman olarak daha yakın olduğunda aciliyet de daha yüksekti; bu da bu kavramı dopaminin değer kodlama, aktivasyon rolüne benzer kılıyor.

Böyle bir aktivasyonel rol, striatal dopaminin performansı düzenleyici etkilerini tanımlamak için yeterli midir? Bu, bazal gangliyon devrelerinin öğrenilmiş eylemler arasında doğrudan seçim yapıp yapmadığı veya sadece başka yerlerde yapılan seçimleri canlandırıp canlandırmadığı , sorusuyla ilgilidir . Dopaminin daha "yönlü" bir etkiye sahip gibi görünmesinin en az iki yolu vardır. Birincisi, dopaminin doğası gereği yönlü bilgileri işleyen bir beyin alt bölgesinde hareket etmesidir. Bazal gangliyon devreleri, potansiyel ödüllere yönelme ve yaklaşmada önemli, kısmen lateralize bir role sahiptir. Primat kaudatı (~DMS), göz hareketlerini kontralateral uzamsal alanlara doğru yönlendirmede rol oynar Kontralateral uzayda bir şeye yönelmenin değerli olduğuna dair dopaminerjik bir sinyal, DMS'deki dopaminerjik aktivite ile kontralateral hareketler arasındaki gözlemlenen korelasyonu ve dopamin manipülasyonları tarafından üretilen dönme davranışını açıklayabilir . Dopaminin ikinci bir “yönlü” etkisi, (iki taraflı) dopamin lezyonlarının sıçanları yüksek çaba/yüksek ödül alternatiflerinden ziyade düşük çaba/düşük ödül seçeneklerine yönlendirmesiyle ortaya çıkar Bu, bazı kararların paralel olmaktan ziyade seri olduğunu, sıçanların (ve insanların) seçenekleri tek tek değerlendirdiğini yansıtabilir Bu karar bağlamlarında dopamin, şu anda değerlendirilen seçeneğin değerini ileterek temel olarak aktivasyonel bir rol oynayabilir ve bu seçenek daha sonra kabul edilebilir veya reddedilebilir .

Aktif hayvanlar, genellikle yüksek hızlarda, birden fazla düzeyde karar verirler. Bireysel kararları düşünmenin ötesinde, bir dizi durum boyunca genel bir yörüngeyi göz önünde bulundurmak faydalı olabilir ( Şekil 1 ). Dopamin, bir durumdan diğerine geçişleri kolaylaştırarak, öğrenilmiş yörüngeler boyunca akışı hızlandırabilir Bu, dopaminin davranışın zamanlaması üzerindeki önemli etkisiyle ilgili olabilir , Gelecekteki çalışmalar için önemli bir alan, dopaminin devam eden davranış üzerindeki bu etkilerinin, tek hücreler, mikro devreler ve büyük ölçekli kortikal-bazal gangliyon döngüleri içindeki bilgi işlemeyi değiştirerek mekanik olarak nasıl ortaya çıktığını daha derinlemesine anlamaktır. Ayrıca, dopaminin striatal hedeflerin birçoğunda ortak hesaplama rollerini vurguladım, ancak kortikal hedefleri büyük ölçüde ihmal ettim ve dopaminin her iki yapıdaki işlevlerinin aynı çerçeve içinde tanımlanıp tanımlanamayacağı henüz belli değil.

Özetle , dopaminin yeterli bir tanımı, dopaminin öğrenme ve motivasyonu aynı hızlı zaman ölçeklerinde, karışıklık olmadan nasıl sinyalleyebildiğini açıklayacaktır. Dopamin hücresi ateşlemesi ödül beklentisiyle ilişkili olmasa bile, kilit hedeflerdeki dopamin salınımının neden ödül beklentisiyle birlikte değiştiğini açıklayacaktır. Ve hareket, biliş ve zamanlama üzerindeki farklı davranışsal etkileri açıklayan, striatum ve diğer yerlerdeki dopamin eylemlerinin birleşik bir hesaplamalı açıklamasını sağlayacaktır. Burada sunulan bazı spesifik fikirler spekülatiftir, ancak yenilenmiş tartışmayı, modellemeyi ve keskin yeni deneyleri canlandırmayı amaçlamaktadır.

Teşekkür.

Kent Berridge, Peter Dayan, Brian Knutson, Jeff Beeler, Peter Redgrave, John Lisman, Jesse Goldberg ve isimsiz Hakemler de dahil olmak üzere önceki metin taslakları hakkında derinlemesine yorumlar yapan birçok meslektaşıma teşekkür ediyorum. Uzay sınırlamalarının birçok önemli önceki çalışmanın tartışılmasını engellediğine pişmanım. Ulusal Nörolojik Bozukluklar ve İnme Enstitüsü, Ulusal Akıl Sağlığı Enstitüsü ve Ulusal Uyuşturucu Bağımlılığı Enstitüsü tarafından temel destek sağlanmıştır.

Referanslar:

1. Ungerstedt U 6-hidroksidopamin sonrası adipsi ve afazi nigro-striatal dopamin sisteminin dejenerasyonuna neden oldu. Açta Physiol Scand Suppl 367, 95 – 122 (1971). [PubMed] []
2. Çuvallar O Uyanmalar. awakenings (1973).
3. Marshall JF, Levitan D ve Stricker EM Dopamin tüketen beyin lezyonları olan sıçanlarda sensorimotor fonksiyonların aktivasyonla indüklenen restorasyonu. J Comp Physiol Psychol 90, 536 – 46 (1976). [PubMed] []
4. Berridge KC, Venier IL ve Robinson TE 6-hidroksidopamine bağlı afaginin tat reaktivite analizi: dopamin fonksiyonunun uyarılma ve anhedonia hipotezleri için çıkarımlar. Davranış Neurosci 103, 36 – 45 (1989). [PubMed] []
5. Salamone J ve Correa M Mesolimbic Dopaminin Gizemli Motive Edici İşlevleri. Nöron 76, 470–485 (2012).doi:10.1016/j.neuron.2012.10.021 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
6. Mazzoni P, Hristova A ve Krakauer JW Neden daha hızlı hareket etmiyoruz? Parkinson hastalığı, hareket gücü ve örtülü motivasyon. J Neurosci 27, 7105 – 16 (2007) .doi: 10.1523 / JNEUROSCI.0264-07.2007 [PubMed] [CrossRef] []
7. Schultz K Midbinde dopamin nöronlarının maymunda davranışsal tetikleyici uyaranlara verdiği yanıtlar. Nörofizyoloji Dergisi 56, 1439 – 1461 (1986). [PubMed] []
8. Schultz K ve Romo R Maymun orta beyin Dopamin nöronları: acil davranış reaksiyonlarını ortaya çıkaran uyaranlara yanıtların koşulsuzluğu. J Nörofizyol 63, 607 – 24 (1990). [PubMed] []
9. Montague PR, Dayan P ve Sejnowski TJ Tahmini İbranice öğrenmeye dayanan mezensefalik dopamin sistemleri için bir çerçeve. J Neurosci 16, 1936 – 47 (1996). [PubMed] []
10 Schultz K, Apicella P ve Ljungberg T Maymun dopamin nöronlarının gecikmiş bir cevap görevi öğrenme aşamasındaki aşamalarında uyarıcı ve koşullandırıcı uyaranlara verdiği yanıtlar. J Neurosci 13, 900 – 13 (1993). [PubMed] []
11 Sutton RS ve Barto AG Güçlendirme öğrenme: bir giriş. Güçlendirme öğrenme: giriş (MIT Press: Cambridge, Massachusetts, 1998). []
12 Cohen JY, Haesler S, Vong L, Lowell BB ve Uchida N Ventral tegmental alanda ödül ve ceza için nöron tipi spesifik sinyaller. Tabiat 482, 85–8 (2012).doi:10.1038/nature10754 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
13 Eshel N, Tian J, Bukwich M ve Uchida N Dopamin nöronları, ödül tahmin hatası için ortak tepki fonksiyonunu paylaşır. Nat Neurosci 19, 479–86 (2016).doi:10.1038/nn.4239 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
14 Steinberg EE, Keiflin R, Boivin JR, Witten IB, Deisseroth K ve Janak PH Tahmin hataları, dopamin nöronları ve öğrenme arasındaki nedensel bağlantı. Nat Neurosci (2013) .doi: 10.1038 / nn.3413 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
15 Hamid AA, Pettibone JR, Mabrouk İşletim Sistemi, Hetrick VL, Schmidt R, Vander Weele CM, Kennedy RT, Aragona BJ ve Berke JD Mesolimbic dopamine işin değerini gösterir. Nat Neurosci 19, 117–26 (2016).doi:10.1038/nn.4173 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
16 Yagishita S, Hayashi-Takagi A, Ellis-Davies GC, Urakubo H, Ishii S ve Kasai H Dopaminlerin dendritik dikenlerin yapısal plastisiteleri üzerindeki etkileri için kritik bir zaman penceresi. Bilim 345, 1616–20 (2014).doi:10.1126/science.1255514 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
17 Berke JD ve Hyman SE Bağımlılık, dopamin ve belleğin moleküler mekanizmaları. Nöron 25, 515 – 32 (2000). [PubMed] []
18 Beeler JA, Frank MJ, McDaid J, İskender E, Turkson S, Bernandez MS, McGehee DS ve Zhuang X Parkinson hastalığının patofizyolojisi ve tedavisinde dopamin kaynaklı öğrenmenin rolü. Hücre Temsilcisi 2, 1747–61 (2012).doi:10.1016/j.celrep.2012.11.014 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
19 Bilge RA Dopamin, öğrenme ve motivasyon. Nat Rev Neurosci 5, 483 – 94 (2004) .doi: 10.1038 / nrn1406 [PubMed] [CrossRef] []
20 Leventhal DK, Stoetzner C, İbrahim R, Pettibone J, DeMarco K ve Berke JD Dopaminin sensorimotor striatum içindeki öğrenme ve performans üzerine ayrılabilir etkileri. Bazal ganglion 4, 43–54 (2014).doi:10.1016/j.baga.2013.11.001 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
21 Wyvell CL ve Berridge KC Accumbens içi amfetamin, sakaroz ödülünün koşullandırıcı teşvik edici önemini arttırır: "sevme" veya yanıt güçlendirme olmadan "isteğin" arttırılması. J Neurosci 20, 8122 – 30. (2000). [PubMed] []
22 Cagniard B, Beeler JA, Britt JP, McGehee DS, Marinelli M ve Zhuang X Dopamin yeni öğrenmenin yokluğunda performansı ölçeklendirir. Nöron 51, 541 – 7 (2006) .doi: 10.1016 / j.neuron.2006.07.026 [PubMed] [CrossRef] []
23 Shiner T, Seymour B, Wunderlich K, Tepe C, Bhatia KP, Dayan P ve Dolan RJ Dopamin ve pekiştirici öğrenme görevinde performans: Parkinson hastalığından deliller. Beyin 135, 1871 – 1883 (2012). [PMC ücretsiz yazı] [PubMed] []
24 McClure SM, Daw ND ve Montague PR Teşvik belirginliği için hesaplamalı bir substrat. Trendler Neurosci 26, 423 – 8 (2003). [PubMed] []
25 Schultz K Farklı zaman dilimlerinde çoklu dopamin fonksiyonları. Annu Rev Neurosci 30, 259 – 88 (2007) .doi: 10.1146 / annurev.neuro.28.061604.135722 [PubMed] [CrossRef] []
26 Gonon F, Burie JB, Jaber M, Benoit-Marand M, Dumartin B ve Bloch B Sıçan striatumda ve dopamin taşıyıcı bulunmayan farelerde dopaminerjik iletimin geometrisi ve kinetiği. Prog Beyin Res 125, 291 – 302 (2000). [PubMed] []
27 Aragona BJ, Cleaveland NA, Stuber GD, Gün JJ, Carelli RM ve Wightman RM Çekirdek içerisindeki dopamin iletiminin tercihli olarak arttırılması, kokainin kabuğundaki kabarması, fazik dopamin salınım olaylarında doğrudan bir artışa bağlanabilir.. J Neurosci 28, 8821–31 (2008).doi:10.1523/JNEUROSCI.2225-08.2008 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
28 Owesson-Beyaz CA, Roitman MF, Kasvetli LA, Belle AM, Keithley RB, Peele JL, Carelli RM ve Wightman RM Çekirdeklerdeki dumbaminin ortalama hücre dışı konsantrasyonuna katkıda bulunan kaynaklar. J Neurochem 121, 252–62 (2012).doi:10.1111/j.1471-4159.2012.07677.x [PMC ücretsiz yazı] [PubMed] [CrossRef] []
29 Yapo C, Nair AG, Clement L, Castro LR, Hellgren Kotaleski J ve Vincent P Fazik dopaminin D1 ve D2 striatal orta spiny nöronları ile tespiti. J Physiol (2017) .doi: 10.1113 / JP274475 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
30 Freed CR ve Yamamoto BK Bölgesel beyin dopamin metabolizması: hareketli hayvanların hızı, yönü ve duruşu için bir belirteç. Bilim 229, 62 – 65 (1985). [PubMed] []
31 Niv Y, Daw ND, Joel D ve Dayan P Tonik dopamin: fırsat maliyetleri ve müdahale gücünün kontrolü. Psikofarmakoloji (Berl) 191, 507–20 (2007).doi:10.1007/s00213-006-0502-4 [PubMed] [CrossRef] []
32 Strecker RE, Steinfels GF ve Jacobs BL Serbestçe hareket eden kedilerde Dopaminerjik birim aktivitesi: beslenme, doygunluk ve glukoz enjeksiyonları ile ilişkinin olmaması. Brain Res 260, 317 – 21 (1983). [PubMed] []
33 Cohen JY, Amoroso MW ve Uchida N Serotonerjik nöronlar birçok zaman ölçeğinde ödül ve cezalandırmayı işaret eder. Elife 4, (2015) .doi: 10.7554 / eLife.06346 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
34 Floresco SB, Batı AR, Kül B, Moore H ve Grace AA Dopamin nöron yanmasının afferent modülasyonu, tonik ve fazik dopamin iletimini farklı şekilde düzenler. Nat Neurosci 6, 968 – 73 (2003) .doi: 10.1038 / nn1103 [PubMed] [CrossRef] []
35 Grace AA Şizofreni ve depresyon patofizyolojisinde dopamin sisteminin düzensizliği ve depresyon. Neuroscience Doğa ve Manzara 17, 524 (2016) .doi: 10.1038 / nrn.2016.57 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
36 Phillips PE, Stuber GD, Heien Ml, Wightman RM ve Carelli RM Subconcond dopamin salınımı, kokain aramayı teşvik eder. Tabiat 422, 614 – 8 (2003) .doi: 10.1038 / nature01476 [PubMed] [CrossRef] []
37 Wassum KM, Ostlund SB ve Hizmetçi NT Fazik mesolimbik dopamin sinyali, kendiliğinden başlatılan bir eylem dizisi görevinin performansından önce gelir ve tahmin eder.. Biol Psikiyatri 71, 846–54 (2012).doi:10.1016/j.biopsych.2011.12.019 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
38 Howe MW, Tierney PL, Sandberg SG, Phillips PE ve Graybiel AM Stripatumda uzun süreli dopamin sinyalizasyonu uzak ödüllerin yakınlığını ve değerini gösterir. Tabiat 500, 575–9 (2013).doi:10.1038/nature12475 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
39 Satoh T, Nakai S, Sato T ve Kimura M Dopamin nöronları tarafından verilen motivasyon kodlaması ve karar sonucu. J Neurosci 23, 9913 – 23 (2003). [PubMed] []
40 Howe MW ve Dombeck DA Hareket ve ödül sırasında farklı dopaminerjik aksonlarda hızlı sinyalleşme. Tabiat 535, 505–10 (2016).doi:10.1038/nature18942 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
41 Silva JAD, Tecuapetla F, Paixão V ve Costa RM Eylem başlamadan önce Dopamin nöron aktivitesi kapıları gelecek ve hareketleri canlandırıyor. Tabiat 554, 244 (2018) .doi: 10.1038 / nature25457 [PubMed] [CrossRef] []
42 du Hoffmann J ve Nicola SM Dopamin, çekirdekli kazalarda işaret uyarımlı uyarma teşvik ederek ödül arayışını canlandırır.. J Neurosci 34, 14349–64 (2014).doi:10.1523/JNEUROSCI.3492-14.2014 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
43 Hart AS, Rutledge RB, Işıklandırıcı PW ve Phillips PE Sıçan çekirdeğindeki fazik dopamin salınımı simetrik olarak bir ödül tahmin hata terimini simetrik olarak kodlar. J Neurosci 34, 698–704 (2014).doi:10.1523/JNEUROSCI.2489-13.2014 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
44 Soares S, Atallah BV ve Paton JJ Orta beyin dopamin nöronları zaman kararını kontrol eder. Bilim 354, 1273 – 1277 (2016) .doi: 10.1126 / science.aah5234 [PubMed] [CrossRef] []
45 Ikemoto S Dopamin ödül devresi: ventral orta beyinden çekirdeğe accumbens-olfaktör tüberkül kompleksine kadar iki projeksiyon sistemi. Brain Res Rev 56, 27–78 (2007).doi:10.1016/j.brainresrev.2007.05.004 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
46 Syed EC, Grima LL, Magill PJ, Bogacz R, Kahverengi P ve Walton ME Aksiyon başlangıcı, gelecekteki ödüllerin mesolimbic dopamin kodlamasını biçimlendirir. Nat Neurosci (2015) .doi: 10.1038 / nn.4187 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
47 Floresco SB, Yang CR, Phillips AG ve Blaha CD'si Bazolateral amigdala stimülasyonu, anestezi uygulanmış sıçanın çekirdeğinde bulunan glutamat reseptörüne bağlı dopamin akışını uyarır. Eur J Neurosci 10, 1241 – 51 (1998). [PubMed] []
48 Jones JL, Gündüz JJ, Aragona BJ, Wheeler RA, Wightman RM ve Carelli RM Bazolateral amigdala, çekirdek akumbenslerde terminal dopamin salınımını modüle eder ve cevaplandırılır. Biol Psikiyatri 67, 737–44 (2010).doi:S0006–3223(09)01327–4 [pii] 10.1016/j.biopsych.2009.11.006 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
49 Cachope R, Mateo Y, Mathur BN, Irving J, Wang HL, Morales M, Seven DM ve Tezahürat JF Kolinerjik internöronların seçici aktivasyonu, akumbal fazik dopamin salınımını arttırır: ödül işleme için tonu ayarlama. Hücre Temsilcisi 2, 33–41 (2012).doi:10.1016/j.celrep.2012.05.011 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
50 Threlfell S, Lalic, Platt NJ, Jennings KA, Deisseroth K ve Cragg SJ Striatal dopamin salınımı, kolinerjik internöronlardaki senkronize aktivite ile tetiklenir. Nöron 75, 58 – 64 (2012) .doi: 10.1016 / j.neuron.2012.04.038 [PubMed] [CrossRef] []
51 Grace AA Fazik ve tonik dopamin salınımı ve dopamin sistemi duyarlılığının modülasyonu: şizofreni etiyolojisi için bir hipotez. Neuroscience 41, 1 – 24 (1991). [PubMed] []
52 Moyer JT, Kurt JA ve Finkel LH Dopaminerjik modülasyonun ventral striatal orta spiny nöronun integratif özellikleri üzerine etkileri. J Nörofizyol 98, 3731 – 48 (2007). [PubMed] []
53 Jzedrzejewska-Szmek J, Damodaran S, Dorman DB ve Blackwell KT Kalsiyum dinamikleri, striatal dikenli projeksiyon nöronlarında sinaptik plastisitenin yönünü tahmin eder. Eur J Neurosci 45, 1044–1056 (2017).doi:10.1111/ejn.13287 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
54 Morris G, Arkadir D, Nevet A, Vaadia E ve Bergman H Tesadüfî ancak farklı beyin fırtınası dopamin ve striatal tonik aktif nöron mesajları. Nöron 43, 133 – 43 (2004). [PubMed] []
55 Kahverengi MT, Tan KR, O'Connor EC, Nikonenko I, Muller D ve Lüscher C Ventral tegmental alan GABA projeksiyonları, ilişkisel öğrenmeyi geliştirmek için accumbal kolinerjik internömenleri duraklatır. Tabiat (2012) .doi: 10.1038 / nature11657 [PubMed] [CrossRef] []
56 Yamanaka K, Hori Y, Minamimoto T, Yamada H, Matsumoto N, Enomoto K, Aosaki T, Graybiel AM ve Kimura M Dorsal striatumda çevresel olayların ilişkisel öğreniminde talamus ve kolinerjik internöronların centromedian parafasiküler çekirdeklerinin rolleri. J Neural Transm (Viyana) (2017).doi:10.1007/s00702-017-1713-z [PMC ücretsiz yazı] [PubMed] [CrossRef] []
57 Shen W, Plotkin JL, Francardo V, Ko WK, Xie Z, Li Q, Fieblinger T, Wess J, Neubig RR, Lindsley CW, Conn PJ, Greengard P, Bezard E, Cenci MA ve Surmeier DJ M4 Muskarinik Reseptör Sinyali, L-DOPA'nın Neden Olduğu Diskinezi Modellerinde Striatal Plastisite Açıklarını Artırıyor. Nöron 88, 762–73 (2015).doi:10.1016/j.neuron.2015.10.039 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
58 Nair AG, Gutierrez-Arenas O, Eriksson O, Vincent P ve Hellgren Kotaleski J Doğrudan ve Dolaylı Yol Striatal Orta Dikenli Nöronlarda Adenilil Siklaz Eşleşmiş GPCR'ler ile Olumsuz ve Olumsuz Ödül Sinyallerini Algılama. J Neurosci 35, 14017–30 (2015).doi:10.1523/JNEUROSCI.0730-15.2015 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
59 Stocco A Tepki seçiminde asetilkolin esaslı entropi: karar vermede striatal interneuronsların keşif, sömürü ve tepki değişkenliğini nasıl modüle ettiğini gösteren bir model. Sinirbilimde Sınırlar 6(2012). [PMC ücretsiz yazı] [PubMed] []
60 Franklin NT ve Frank MJ Striatal popülasyon belirsizliğini düzenleyen ve donatı öğrenmeyi optimize eden kolinerjik bir geri besleme devresi. elife 4, (2015) .doi: 10.7554 / eLife.12029 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
61 Nougaret S ve Ravel S Monkey Striatum'un Tonik Aktif Nöronlarının Farklı Güç ve Ödül Bilgilerini Taşıyan Olaylarla Modülasyonu. J Neurosci 35, 15214 – 26 (2015) .doi: 10.1523 / JNEUROSCI.0039-15.2015 [PubMed] [CrossRef] []
62 Schultz K Dopamin nöronlarının tahmin edici ödül sinyali. J Nörofizyol 80, 1 – 27 (1998). [PubMed] []
63 Lammel S, Hetzel A, Häckel O, Jones I, Liss B ve Roeper J İkili bir mezokortikolimbik dopamin sistemi içindeki mezoprefrontal nöronların benzersiz özellikleri. Nöron 57, 760 – 73 (2008) .doi: 10.1016 / j.neuron.2008.01.022 [PubMed] [CrossRef] []
64 Poulin JF, Zou J, Drouin-Ouellet J, Kim KY, Cicchetti F ve Awatramani RB Tek hücreli gen ekspresyon profili ile orta beyin dopaminerjik nöron çeşitliliğinin tanımlanması. Hücre Temsilcisi 9, 930–43 (2014).doi:10.1016/j.celrep.2014.10.008 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
65 Morales M ve Margolis EB Ventral tegmental alan: hücresel heterojenite, bağlantı ve davranış. Nat Rev Neurosci 18, 73 – 85 (2017) .doi: 10.1038 / nrn.2016.165 [PubMed] [CrossRef] []
66 Matsumoto M ve Hikosaka O İki tür dopamin nöronu açıkça pozitif ve negatif motivasyonel sinyalleri iletir. Tabiat 459, 837 – 41 (2009) .doi: nature08028 [pii] 10.1038 / nature08028 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
67 Pasquereau B ve Turner RS Dopamin nöronları hareket tetikleyici oluşumunu öngörmedeki hataları kodlar. Nörofizyoloji Dergisi 113, 1110–1123 (2014).doi:10.1152/jn.00401.2014 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
68 Redgrave P, Prescott TJ ve Gurney K Kısa gecikmeli dopamin tepkisi sinyal ödülü hatası vermeyecek kadar kısa mı? Trendler Neurosci 22, 146 – 51 (1999). [PubMed] []
69 Bromberg-Martin ES, Matsumoto M ve Hikosaka Ö Motivasyonel kontrolde dopamin: ödüllendirici, rahatsız edici ve uyarıcı. Nöron 68, 815–34 (2010).doi:10.1016/j.neuron.2010.11.022 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
70 Dodson PD, Dreyer JK, Jennings KA, Syed EC, Wade-Martins R., Cragg SJ, Bolam JP ve Magill PJ Dopaminerjik nöronlar tarafından spontan hareketlerin gösterilmesi, parkinsonizmde hücre tipi seçicidir ve bozulur. Proc Natl Acad Sci ABD 113, E2180–8 (2016).doi:10.1073/pnas.1515941113 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
71 Lerner TN, Shilyansky C, Davidson TJ, Evans KE, Beier KT, Zalocusky KA, Crow AK, Malenka RC, Luo L, Tomer R ve Deisseroth K Sağlam Beyin Analizleri, SNc Dopamine Alt Devrelerinin Taşındığı Farklı Bilgileri Açıkladı. Hücre 162, 635–47 (2015).doi:10.1016/j.cell.2015.07.014 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
72 Parker NF, Cameron CM, Taliaferro JP, Lee J, Choi JY, Davidson TJ, Daw ND ve Witten IB. Orta beyin dopamin nöronlarının terminallerinde ödül ve seçim kodlaması striatal hedefe bağlıdır. Nat Neurosci (2016) .doi: 10.1038 / nn.4287 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
73 Kim CK, Yang SJ, Pichamoorthy N, Genç NP, Kauvar I, Jennings JH, Lerner TN, Berndt A, Lee SY, Ramakrishnan C, Davidson TJ, Inoue M, Bito H ve Deisseroth K Memeli beyninde birden fazla bölgede aynı anda hızlı devre dinamiği ölçümü. Doğa yöntemleri 13, 325–328 (2016).doi:10.1038/nmeth.3770 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
74 Menegas K, Babayan BM, Uchida N ve Watabe-Uchida M Farelerde ventral ve posterior striatumda dopamin sinyallemesinde yeni ipuçlarına karşı başlatma. Elife 6, (2017) .doi: 10.7554 / eLife.21886 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
75 Kahverengi HD, McCutcheon JE, Koni JJ, Ragozzino ME ve Roitman MF Birincil besin ödülü ve ödül öngörücü uyaranlar, striatum boyunca farklı fazik dopamin işaretleme modellerini uyandırır.. European Journal of Neuroscience 34, 1997–2006 (2011).doi:10.1111/j.1460-9568.2011.07914.x [PMC ücretsiz yazı] [PubMed] [CrossRef] []
76 Knutson B ve Greer SM Beklenti etkisi: seçim için sinirsel korelasyonlar ve sonuçları. Philos Trans R Soc Lond B Biol Bilim 363, 3771–86 (2008).doi:10.1098/rstb.2008.0155 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
77 Bartra O, McGuire JT ve Kable JW Değerleme sistemi: öznel değerin nöral ilişkilerini inceleyen BOLD fMRI deneylerinin koordinat temelli bir meta-analizi. Neuroimage 76, 412–27 (2013).doi:10.1016/j.neuroimage.2013.02.063 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
78 Ferenczi EA, Zalocusky KA, Liston C, Grosenick L, Müdür MR, Amatya D, Katovich K, Mehta H, Patenaude B, Ramakrishnan C, Kalanithi P, Etkin A, Knutson B, Glover GH ve Deisseroth K Beyin çapında devre dinamikleri ve ödülle ilgili davranışların prefrontal kortikal düzenlenmesi. Bilim 351, aac9698 (2016) .doi: 10.1126 / science.aac9698 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
79 Bertran-Gonzalez J, Bosch C, Maroteaux M, Matamales M, Hervé D, Valjent E ve Girault JA Dopamin D1 ve D2 reseptörünü eksprese eden striatal nöronlarda kokain ve haloperidol'e yanıt olarak karşıt sinyal aktivasyon paternleri. J Neurosci 28, 5671 – 85 (2008) .doi: 10.1523 / JNEUROSCI.1039-08.2008 [PubMed] [CrossRef] []
80 Redgrave P, Prescott TJ ve Gurney K Bazal ganglionlar: seleksiyon problemine omurgalı bir çözüm? Neuroscience 89, 1009 – 23 (1999). [PubMed] []
81 Beeler JA, Frazier CR ve Zhuang X Bütçeye arzu koymak: dopamin ve enerji harcaması, ödül ve kaynakları uzlaştırmak. Ön İntegr Neurosci 6, 49 (2012) .doi: 10.3389 / fnint.2012.00049 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
82 Anderson BA, Kuwabara H., Wong DF, Gean EG, Rahmim A, Brašić JR, George N, Frolov B, Courtney SM ve Yantis S Değere Dayalı Dikkatli Yönlendirmede Dopaminin Rolü. Curr Biol 26, 550–5 (2016).doi:10.1016/j.cub.2015.12.062 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
83 Chatham CH, Frank MJ ve Badre D Çalışma hafızasından seçim sırasında kortikostrital çıkış kapısı. Nöron 81, 930–42 (2014).doi:10.1016/j.neuron.2014.01.002 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
84 Shenhav A, Botvinick MM ve Cohen JD Beklenen kontrol değeri: anterior cingulate cortex fonksiyonunun bütünleştirici bir teorisi. Nöron 79, 217–40 (2013).doi:10.1016/j.neuron.2013.07.007 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
85 Aarts E, Roelofs A, Franke B, Rijpkema M, Fernández G, Helmich RC ve Soğutucular R Striatal dopamin, insanlarda motivasyon ve bilişsel kontrol arasındaki arayüzü yönlendirir: genetik görüntüleme kanıtı. Nöropsikofarmakoloji 35, 1943–51 (2010).doi:10.1038/npp.2010.68 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
86 Westbrook A ve Braver TS Dopamin, Bilişsel Çabaları Motive Etmede Çifte Görev Yapıyor. Nöron 89, 695–710 (2016).doi:10.1016/j.neuron.2015.12.029 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
87 Manohar SG, Chong TT, Uygulamalar MA, Batla A, Stamelou M, Jarman Halkla İlişkileri, Bhatia KP ve Husain M Ödül, Motor ve Bilişsel Kontrolde Gürültü Azaltma Maliyetini Ödüyor. Curr Biol 25, 1707–16 (2015).doi:10.1016/j.cub.2015.05.038 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
88 Wunderlich K, Smittenaar P ve Dolan RJ Dopamin, Model Özgür Seçim Davranışı Üzerine Model Tabanlı Geliştirir. Nöron 75, 418–24 (2012).doi:10.1016/j.neuron.2012.03.042 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
89 Nicola SM Esnek yaklaşım hipotezi: Çekirdeğin rolü için çabanın birleştirilmesi ve işaret tepkisi hipotezleri, ödül arayışı davranışının aktivasyonunda dopamini akıtır.. J Neurosci 30, 16585–600 (2010).doi:10.1523/JNEUROSCI.3958-10.2010 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
90 Eban-Rothschild A, Rothschild G, Giardino WJ, Jones JR ve Lecea L. VTA dopaminerjik nöronlar, etolojik olarak ilgili uyku-uyanık davranışlarını düzenler. Nat Neurosci (2016) .doi: 10.1038 / nn.4377 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
91 Haber SN, Fudge JL ve McFarland NR Primatlardaki Striatonigrostriatal yollar kabuktan dorsolateral striatuma kadar yükselen bir spiral oluşturur. J Neurosci 20, 2369 – 82 (2000). [PubMed] []
92 Reddi BAJ ve Carpenter RHS Aciliyetin karar verme süresi üzerindeki etkisi. Doğa sinirbilimi 3, 827 (2000). [PubMed] []
93 Thura D ve Cisek P Bazal Ganglionlar Erişim Hedeflerini Seçmiyor, Taahhütün Aciliyetini Kontrol Ediyor. Nöron (2017) .doi: 10.1016 / j.neuron.2017.07.039 [PubMed] [CrossRef] []
94 Turner RS ​​ve Desmurget M Bazal ganglionların motor kontrolüne katkıları: güçlü bir öğretmen. Curr Opin Neurobiol 20, 704–16 (2010).doi:10.1016/j.conb.2010.08.022 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
95 Hikosaka O, Nakamura K ve Nakahara H Bazal ganglionlar ödüllendirmek için gözleri yönlendirmek. J Nörofizyol 95, 567 – 84 (2006) .doi: 10.1152 / jn.00458.2005 [PubMed] [CrossRef] []
96 Kelly PH ve Moore KE Nigrostriatal fonksiyonun dönme modelinde mesolimbic dopaminerjik nöronlar. Tabiat 263, 695 – 6 (1976). [PubMed] []
97 Kuzenler MS, Atherton A, Turner L ve Salamone JD Nucleus, dopamin tükenmelerinin bir T-labirent maliyet / fayda görevinde göreceli yanıt tahsisini değiştirdiğini kabul etti. Behav Beyin Res 74, 189 – 97. (1996). [PubMed] []
98 Redish AD Vicarious deneme ve yanılma. Nat Rev Neurosci 17, 147–59 (2016).doi:10.1038/nrn.2015.30 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
99 Rabinovich MI, Huerta R, Varona P ve Afraimovich VS Geçici bilişsel dinamikleri, kararlılık ve karar verme. PLoS Comput Biol 4, e1000072 (2008) .doi: 10.1371 / journal.pcbi.1000072 [PMC ücretsiz yazı] [PubMed] [CrossRef] []
100 Tüccar H, Harrington DL ve Meck WH Zaman algısının ve tahmininin sinirsel temeli. Annu Rev Neurosci 36, 313 – 36 (2013) .doi: 10.1146 / annurev-nöro-062012-170349 [PubMed] [CrossRef] []