ماذا يعني الدوبامين؟ (2018)

. مخطوطة المؤلف المتاحة في PMC 2019 فبراير 1.
نشر في الصيغة النهائية المعدلة على النحو التالي:

نُشر إلكترونيًا في 14 مايو 2018. doi: 10.1038/s41593-018-0152-y

PMCID: PMC6358212
NIHMSID: NIHMS987662
PMID: 29760524

الملخص

الدوبامين هو المغير الحاسم في كل من التعلم والتحفيز. هذا يمثل مشكلة: كيف يمكن للخلايا المستهدفة معرفة ما إذا كانت زيادة الدوبامين هي إشارة للتعلم ، أم للتحرك؟ غالبًا ما يُفترض أن الدافع ينطوي على تغيرات بطيئة ("منشط") الدوبامين ، في حين أن تقلبات الدوبامين السريعة ("الطورية") تنقل أخطاء التنبؤ بالمكافأة للتعلم. ومع ذلك ، فقد أظهرت الدراسات الحديثة أن الدوبامين ينقل قيمة تحفيزية ، ويعزز الحركة ، حتى على فترات زمنية دون الثانية. أصف هنا وصفًا بديلاً لكيفية تنظيم الدوبامين للسلوك المستمر. يتم نحت الإفراج عن الدوبامين المرتبط بالدوافع بسرعة وعلى المستوى المحلي بواسطة مستقبلات على أطراف الدوبامين ، بشكل مستقل عن إطلاق خلايا الدوبامين. تتحول الخلايا العصبية المستهدفة فجأة بين أوضاع التعلم والأداء ، مع توفير الأوعية الدموية الداخلية الكولينية القاتلة آلية تبديل مرشح واحد. يختلف التأثير السلوكي للدوبامين حسب المنطقة دون الإقليمية ، ولكن في كل حالة يوفر الدوبامين تقديرًا حيويًا لما إذا كان الأمر يستحق إنفاق مورد داخلي محدود ، مثل الطاقة أو الاهتمام أو الوقت.

هل الدوبامين إشارة للتعلم أو الدافع أم كليهما؟

لقد تغير فهمنا للدوبامين في الماضي، وهو يتغير مرة أخرى. أحد الفروق الجوهرية هو التمييز بين تأثيرات الدوبامين على السلوك الحالي (الأداء)، وتأثيراته على السلوك المستقبلي (التعلم). كلاهما حقيقي ومهم، ولكن في أوقات مختلفة، حظي أحدهما بالقبول بينما لم يحظَ الآخر.

عندما أصبح من الممكن (في سبعينيات القرن الماضي) إجراء عمليات قطع انتقائية وكاملة لمسارات الدوبامين، كانت النتيجة السلوكية الواضحة انخفاضًا حادًا في الحركة<sup> </sup>. يتوافق هذا مع تأثيرات فقدان الدوبامين على فقدان الحركة لدى البشر، والناتجة عن مرض باركنسون المتقدم، أو الأدوية السامة، أو التهاب الدماغ<sup> </sup>. ومع ذلك، لا تُظهر حالات الفئران ولا البشر عجزًا أساسيًا عن الحركة. تسبح الفئران التي خضعت لقطع الدوبامين في الماء البارد<sup> ، وقد ينهض المرضى المصابون بفقدان الحركة ويركضون إذا انطلق جرس إنذار الحريق ("الحركة المتناقضة"). كما لا يوجد قصور أساسي في تقدير المكافآت: ستتناول الفئران التي خضعت لقطع الدوبامين الطعام الموضوع في أفواهها، وتُظهر علامات الاستمتاع به<sup> </sup>. بل إنها لن تختار بذل جهد للحصول على المكافآت بنشاط. هذه النتائج، وغيرها الكثير، أرست صلة أساسية بين الدوبامين والدافعية<sup> . حتى تباطؤ الحركة الذي لوحظ في الحالات الأقل حدة من مرض باركنسون يمكن اعتباره عجزًا تحفيزيًا، مما يعكس قرارات ضمنية مفادها أنه لا يستحق بذل الطاقة اللازمة للحركات الأسرع .

ثم (في ثمانينيات القرن الماضي) ظهرت تسجيلات رائدة لخلايا الدوبامين العصبية في قرود أثناء سلوكها (في مناطق الدماغ المتوسط ​​التي تُسقط على الدماغ الأمامي: المنطقة السقيفية البطنية، VTA / المادة السوداء المدمجة، SNc). ومن بين أنماط إطلاق النبضات العصبية المرصودة، كانت هناك دفعات قصيرة من النشاط استجابةً للمحفزات التي أدت إلى حركات فورية. وقد فُسِّر إطلاق الدوبامين "المرحلي" هذا في البداية على أنه يدعم "التنشيط السلوكي" و"الإثارة التحفيزية" - بعبارة أخرى، على أنه يُنشِّط سلوك الحيوان الحالي.

حدث تحول جذري في التسعينيات، مع إعادة تفسير نبضات الدوبامين الطورية على أنها ترميز لأخطاء توقع المكافأة (RPEs ). استند هذا التفسير إلى ملاحظة أساسية: تستجيب خلايا الدوبامين للمحفزات غير المتوقعة المرتبطة بمكافأة مستقبلية، لكنها غالبًا ما تتوقف عن الاستجابة إذا أصبحت هذه المحفزات متوقعة نشأت فكرة أخطاء توقع المكافأة في نظريات التعلم السابقة، وخاصة في مجال التعلم المعزز في علوم الحاسوب الذي كان في طور التطور آنذاك تتمثل وظيفة إشارة أخطاء توقع المكافأة في تحديث القيم (تقديرات المكافآت المستقبلية). تُستخدم هذه القيم لاحقًا للمساعدة في اتخاذ خيارات تُعظم المكافأة. ولأن إطلاق خلايا الدوبامين يشبه أخطاء توقع المكافأة، ولأن هذه الأخطاء تُستخدم في التعلم، فقد أصبح من الطبيعي التأكيد على دور الدوبامين في التعلم. أكدت التجارب اللاحقة باستخدام علم البصريات الوراثية هوية خلايا ترميز أخطاء توقع المكافأة الدوبامينية ، ، وأظهرت أنها بالفعل تُعدل التعلم ، .

تتناغم فكرة أن الدوبامين يُوفّر إشارة تعلّم بشكلٍ رائع مع الدراسات التي تُشير إلى أن الدوبامين يُعدّل اللدونة المشبكية في الجسم المخطط، وهو الهدف الرئيسي للدوبامين في الدماغ الأمامي. على سبيل المثال، يؤدي التزامن الثلاثي لتحفيز الغلوتامات لشوكة تشعبية في الجسم المخطط، وإزالة استقطاب ما بعد المشبك، وإطلاق الدوبامين، إلى نمو هذه الشوكة<sup> . يُساعد تعديل الدوبامين لآليات التعلّم طويلة الأمد في تفسير التأثيرات السلوكية المستمرة للأدوية المُسببة للإدمان، والتي تشترك في خاصية تعزيز إطلاق الدوبامين في الجسم المخطط<sup> . حتى أن فقدان الحركة الشديد المصاحب لنقص الدوبامين يُمكن تفسيره جزئيًا بآليات التعلّم هذه<sup> </sup>. يُمكن اعتبار نقص الدوبامين بمثابة خطأ إدراكي سلبي مُستمر، يُحدّث قيم الأفعال تدريجيًا نحو الصفر. يُمكن أن تُحدث مضادات الدوبامين تأثيرات مُشابهة، تُشبه الانطفاء التدريجي، على السلوك<sup> ، </sup>.

ومع ذلك، لم تتلاشَ فكرةُ أن الدوبامين يلعب دورًا حاسمًا في التحفيز المستمر، بل على العكس، يعتبرها علماء الأعصاب السلوكيون أمرًا مفروغًا منه. وهذا أمرٌ منطقيٌّ بالنظر إلى الأدلة القوية التي تُشير إلى أن وظائف الدوبامين في التحفيز/الحركة/النشاط قابلةٌ للفصل عن التعلّم ، . أما التحدي الذي لا يحظى بالتقدير الكافي فهو التوفيق بين هذا الدور التحفيزي ونظرية أن الدوبامين يُوفّر إشارة تعلّم مُرتبطة بمعدل الجهد المُدرَك

الدافع "يتطلع إلى الأمام": يستخدم التنبؤات بالمكافأة المستقبلية (القيم) لتنشيط السلوك الحالي بشكل مناسب. على النقيض من ذلك ، فإن التعلم "ينظر إلى الوراء" في الحالات والإجراءات في الماضي القريب ، ويقوم بتحديث قيمها. هذه مراحل تكميلية للدورة: يمكن استخدام القيم المحدّثة في اتخاذ القرارات اللاحقة إذا تمت إعادة مواجهة تلك الحالات ، ثم تحديثها مرة أخرى ، وهكذا دواليك. ولكن ما هي المرحلة من الدورة التي يشارك فيها الدوبامين - استخدام القيم لاتخاذ القرارات (الأداء) ، أو تحديث القيم (التعلم)؟

في بعض الحالات، يسهل تصور أن الدوبامين يؤدي كلا الدورين في آن واحد. تُعدّ الإشارات غير المتوقعة التي تتنبأ بالمكافأة أحداثًا نموذجية لتحفيز إطلاق الدوبامين من الخلايا العصبية، وعادةً ما تُنشّط هذه الإشارات السلوك وتُحفّز التعلّم ( الشكل ١ ). في هذه الحالة تحديدًا، يزداد كلٌّ من التنبؤ بالمكافأة وأخطاء التنبؤ بها في الوقت نفسه، ولكن هذا ليس هو الحال دائمًا. على سبيل المثال، غالبًا ما يكون لدى البشر والحيوانات الأخرى دافعٌ للعمل من أجل المكافآت حتى عندما لا يحدث شيءٌ مفاجئ أو يحدث القليل منه. وقد يبذلون جهدًا أكبر كلما اقتربوا من المكافأة (تزداد القيمة مع اقتراب المكافآت). الفكرة هي أن التعلّم والتحفيز مختلفان من الناحية المفاهيمية والحسابية والسلوكية، ومع ذلك يبدو أن الدوبامين يؤدي كلا الدورين.

ملف خارجي يحمل صورة أو رسم توضيحي أو ما إلى ذلك. اسم الكائن هو nihms-987662-f0001.jpg

الدوبامين: تحديث الماضي ، تنشيط الحاضر.

في الأعلى ، تمثل الدوائر ذات الأسهم الحالات والإجراءات المحتملة المنبثقة عنها. يشير عرض السهم إلى القيم المكتسبة لأداء كل إجراء. مع تلاشي الحالات/الأفعال في الماضي، تقل احتمالية تعزيزها تدريجيًا. في المنتصف ، تحدث زيادة مفاجئة في مستوى الدوبامين، مما يؤدي إلى تنشيط الإجراءات المتاحة من الحالة الحالية (باللون الأحمر)، ومرونة تمثيلات القيمة للإجراءات التي تم تنفيذها مؤخرًا (باللون الأرجواني). في الأسفل ، نتيجةً لهذه المرونة، تزداد القيم المرتبطة بهذه الحالات عند مواجهتها مرة أخرى (عرض السهم). من خلال التجربة المتكررة، يمكن للتعلم المعزز أن "يرسم مسارًا" عبر فضاء الحالات، مما يجعل مسارات معينة أكثر احتمالًا. بالإضافة إلى دوره في التعلم، يبدو أن دور الدوبامين في تنشيط الأداء يُسرّع التدفق على طول المسارات التي تم تعلمها مسبقًا.

فيما يلي أقوم بتقييم الأفكار الحالية بشكل نقدي حول كيفية تمكن الدوبامين من تحقيق وظائف التعلم والتحفيز. أقترح نموذجًا محدثًا ، استنادًا إلى ثلاث حقائق رئيسية: 1) لا ينشأ إطلاق الدوبامين من المحطات الطرفية ببساطة عن إطلاق خلايا الدوبامين ، ولكن يمكن أيضًا التحكم فيه محليًا ؛ 2) يؤثر الدوبامين على كل من اللدونة المشبكية وإثارة الخلايا المستهدفة ، مع عواقب واضحة للتعلم والأداء على التوالي ؛ 3) تأثيرات الدوبامين على اللدونة يمكن تشغيلها أو إيقافها بواسطة عناصر الدائرة القريبة. معًا ، قد تتيح هذه الميزات لدارات الدماغ التبديل بين رسالتين متميزتين من الدوبامين ، للتعلم والتحفيز على التوالي.

هل هناك إشارات الدوبامين "الطورية" و "المنشطة" المنفصلة ، ذات معان مختلفة؟

كثيرًا ما يُجادل بأن أدوار الدوبامين في التعلم والتحفيز تحدث على نطاقات زمنية مختلفة<sup> . تُطلق خلايا الدوبامين إشاراتها باستمرار ("بشكل متواصل") بمعدل بضع نبضات في الثانية، مع فترات قصيرة متقطعة ("طورية") من النبضات أو التوقفات. تُحفز هذه النبضات، خاصةً إذا تمت مزامنتها اصطناعيًا بين خلايا الدوبامين، زيادات سريعة مقابلة في مستوى الدوبامين في الدماغ الأمامي<sup> ، وهي زيادات عابرة للغاية (مدة أقل من ثانية<sup> ). أما المساهمة المنفصلة لإطلاق إشارات خلايا الدوبامين بشكل متواصل في تركيزات الدوبامين في الدماغ الأمامي فهي أقل وضوحًا. تشير بعض الأدلة إلى أن هذه المساهمة ضئيلة جدًا<sup> </sup>. قد يكون كافيًا لإنتاج تحفيز شبه متواصل لمستقبلات D2 ذات الألفة العالية، مما يسمح للنظام بملاحظة التوقفات القصيرة في إطلاق إشارات خلايا الدوبامين<sup> واستخدام هذه التوقفات كأخطاء تنبؤ سلبية.

استُخدمت تقنية التحليل المجهري للغشاء على نطاق واسع لقياس مستويات الدوبامين في الدماغ الأمامي مباشرةً، وإن كان ذلك بدقة زمنية منخفضة (عادةً ما يتم حساب المتوسط ​​على مدى عدة دقائق). قد يكون من الصعب ربط هذه القياسات البطيئة للدوبامين بالسلوك بدقة. ومع ذلك، يُظهر التحليل المجهري للغشاء للدوبامين في النواة المتكئة (NAc؛ الجسم المخطط البطني/الإنسي) ارتباطات إيجابية بالنشاط الحركي ومؤشرات أخرى للتحفيز وقد فُسِّر هذا على نطاق واسع على أنه يعني وجود تغيرات بطيئة ("مستمرة") في تركيز الدوبامين، وأن هذه التغيرات البطيئة تحمل إشارة تحفيزية. وبشكل أكثر تحديدًا، اقترحت النماذج الحاسوبية أن مستويات الدوبامين المستمرة تتبع متوسط ​​معدل المكافأة على المدى الطويل - وهو متغير تحفيزي مفيد لتخصيص الوقت واتخاذ قرارات البحث عن الطعام. ومن الجدير بالذكر أن عددًا قليلًا جدًا من الأبحاث يُعرّف بوضوح مستويات الدوبامين "المستمرة" - فهي عادةً ما تفترض فقط أن تركيز الدوبامين يتغير ببطء على مدى عدة دقائق من النطاق الزمني للتحليل المجهري للغشاء.

ومع ذلك، فإن هذا التصور القائل بأن "الدوبامين الطوري = معدل الجهد المُدرَك/التعلم، والدوبامين المستمر = الدافع" يواجه العديد من المشكلات. أولًا، لا يوجد دليل مباشر على أن معدل إطلاق الدوبامين المستمر يتغير عادةً على مدى فترات زمنية طويلة. فمعدلات إطلاق الدوبامين المستمر لا تتغير بتغير الدافع ، وقد قيل إن مستويات الدوبامين المستمر تتغير نتيجة لتغير نسبة خلايا الدوبامين النشطة ، ولكن في العديد من الدراسات التي أُجريت على حيوانات غير مُعالجة دوائيًا وغير مصابة بأي آفات، لم يُرصد قط أن خلايا الدوبامين تنتقل بين حالتي السكون والنشاط.

علاوة على ذلك، فإن حقيقة أن قياس مستويات الدوبامين بتقنية الميكرودياليز بطيء لا تعني بالضرورة أن مستويات الدوبامين تتغير ببطء. وقد قمنا مؤخرًا بدراسة دوبامين النواة المتكئة (NAc) في الفئران ضمن مهمة مكافأة احتمالية، باستخدام كلٍ من الميكرودياليز والفولتامترية الدورية سريعة المسح. وأكدنا أن دوبامين الجهاز الحوفي المتوسط، كما تم قياسه بالميكرودياليز، يرتبط بمعدل المكافأة (مكافآت/دقيقة). ومع ذلك، حتى مع تحسين الدقة الزمنية للميكرودياليز (دقيقة واحدة)، ظل مستوى الدوبامين متذبذبًا بنفس سرعة قياسنا له: لم نرَ أي دليل على وجود إشارة دوبامين بطيئة بطبيعتها.

باستخدام الدقة الزمنية الدقيقة التي لا تزال من قياس الجهد ، لاحظنا وجود علاقة وثيقة بين تقلبات الدوبامين دون الثانية والدافع. مع قيام الفئران بتسلسل الإجراءات اللازمة لتحقيق المكافآت ، ارتفع الدوبامين لأعلى وأعلى ، ووصل إلى الذروة مثلما حصلوا على المكافأة (وانخفضوا بسرعة أثناء استهلاكهم لها). لقد أظهرنا أن الدوبامين يرتبط بقوة مع قيمة الحالة الآنية المحددة كمكافأة مستقبلية متوقعة ، مخصومة من الوقت المتوقع اللازم لاستلامها. يمكن لديناميات الدوبامين السريعة هذه أن تفسر أيضًا نتائج غسيل الكلى ، دون استخدام إشارات الدوبامين المنفصلة على نطاقات زمنية مختلفة. كما تواجه الحيوانات المزيد من المكافآت ، فإنها تزيد من توقعاتهم بشأن المكافآت المستقبلية في كل خطوة في التسلسل التجريبي. بدلاً من الإشارة إلى معدل معدل المكافأة ببطء ، فإن العلاقة بين الدوبامين ومعدل المكافأة تفسر بشكل أفضل كمتوسط ​​، على مدى فترة جمع عينة التحليل الجزئي المطول ، لقيم الحالة المتطورة بسرعة.

يتوافق هذا التفسير القيمي لإطلاق الدوبامين في الجهاز الحوفي المتوسط ​​مع نتائج قياس الفولتية من مجموعات بحثية أخرى، والتي وجدت مرارًا وتكرارًا أن إطلاق الدوبامين يزداد مع ازدياد القرب من المكافأة 36-38 الشكل 2 . هذه الإشارة التحفيزية ليست "بطيئة" بطبيعتها، بل يمكن ملاحظتها عبر نطاق زمني متصل. على الرغم من أن ازدياد إطلاق الدوبامين قد يستمر لعدة ثوانٍ عندما يستمر سلوك الاقتراب أيضًا لعدة ثوانٍ ، إلا أن هذا يعكس المسار الزمني للسلوك، وليس ديناميكيات الدوبامين الذاتية. تظهر العلاقة بين إطلاق الدوبامين في الجهاز الحوفي المتوسط ​​والقيمة المتقلبة بأسرع ما تسمح به تقنية التسجيل، أي على نطاق زمني يبلغ حوالي 100 مللي ثانية باستخدام أقطاب قياس الفولتية الحادة .

ملف خارجي يحمل صورة أو رسم توضيحي أو ما إلى ذلك. اسم الكائن هو nihms-987662-f0002.jpg

تقلبات الدوبامين السريعة تشير إلى توقعات المكافآت المتغيرة ديناميكيًا.

أ) يزداد إفراز الدوبامين في الجهاز الحوفي المتوسط ​​بسرعة كلما اقتربت الفئران من المكافآت المتوقعة. د) تزداد القيمة، المُعرَّفة بأنها تقديرات مُخفَّضة زمنيًا للمكافأة المستقبلية، كلما اقتربت المكافأة. تُسبب الإشارات التي تُشير إلى أن المكافأة أكبر أو أقرب أو أكثر يقينًا مما كان متوقعًا سابقًا قفزات في القيمة. تُعرف هذه القفزات من لحظة إلى أخرى باسم تقديرات المكافأة المتوقعة للفروق الزمنية. هـ) قد يؤدي طرح "الخطوط الأساسية" إلى تشويش إشارات القيمة وتقديرات المكافأة المتوقعة. على اليسار، يبدو أن الدوبامين المُحاذي للإشارة المُتنبئة بالمكافأة (عند الزمن صفر)، مع طرح الخط الأساسي التقليدي، يُظهر أن الدوبامين يقفز إلى مستويات أعلى عندما تكون المكافأة أقل توقعًا (باللون البني)، مما يُشبه إشارة تقدير المكافأة المتوقعة. على اليمين، يُظهر عرض بديل لنفس البيانات، مع مساواة مستويات الدوبامين بعد الإشارة، أن مستويات الدوبامين قبل الإشارة تعتمد على توقع المكافأة (القيمة). حددت تحليلات إضافية أن العرض على الجانب الأيمن أقرب إلى الحقيقة (انظر التفاصيل في المرجع ). اللوحة (أ) مُعاد إنتاجها، بإذن، من المرجع ، ماكميلان للنشر المحدودة...؛ اللوحة (ب) مُعاد إنتاجها، بإذن، من المرجع ، إلسيفير؛ اللوحات (ج، هـ) مُعاد إنتاجها، بإذن، من المرجع ، ماكميلان للنشر المحدودة

لا تعكس تقلبات الدوبامين السريعة الدافع فحسب، بل تحفز السلوك التحفيزي بشكل مباشر. تتنبأ الاستجابات الطورية الأكبر لخلايا الدوبامين لإشارات التحفيز بأوقات رد فعل أقصر في نفس التجربة<sup> . يزيد التحفيز البصري الوراثي لخلايا الدوبامين في منطقة السقيفية البطنية من احتمالية بدء الفئران العمل في مهمة المكافأة الاحتمالية<sup> ، كما لو كان لديها توقع أعلى للمكافأة. يزيد التحفيز البصري الوراثي لخلايا الدوبامين في المادة السوداء المدمجة، أو محاورها في الجسم المخطط الظهري، من احتمالية الحركة<sup> ، </sup>. والأهم من ذلك، أن هذه التأثيرات السلوكية تظهر في غضون بضع مئات من المللي ثانية من بدء التحفيز البصري الوراثي. يبدو أن قدرة إشارات التنبؤ بالمكافأة على تعزيز الدافع تتوسطها تعديلات دوبامينية سريعة جدًا لاستثارة الخلايا العصبية الشوكية في النواة المتكئة<sup> . بما أن الدوبامين يتغير بسرعة، وهذه التغيرات في الدوبامين تؤثر على الدافع بسرعة، فإن الوظائف التحفيزية للدوبامين توصف بشكل أفضل بأنها سريعة ("طورية")، وليست بطيئة ("مستمرة").

علاوة على ذلك ، فإن استدعاء مقاييس زمنية منفصلة سريعة وبطيئة لا يحل في حد ذاته مشكلة فك التشفير التي تواجهها الخلايا العصبية بمستقبلات الدوبامين. إذا كان الدوبامين يشير إلى التعلم ، فإن تعديل اللدونة المشبكية يبدو استجابة خلوية مناسبة. لكن التأثيرات الفورية على السلوك المحفز تتضمن تأثيرات فورية على الارتفاع المفاجئ - على سبيل المثال من خلال التغيرات السريعة في الاستثارة. يمكن أن يكون للدوبامين كل من هذه التأثيرات بعد المشبكي (وأكثر) ، فهل تركيز الدوبامين المعطى له معنى محدد؟ أم أن هذا المعنى يحتاج إلى البناء - على سبيل المثال عن طريق مقارنة مستويات الدوبامين عبر الزمن ، أو باستخدام إشارات متزامنة أخرى لتحديد الآلية الخلوية التي يجب إشراكها؟ تتم مناقشة هذا الاحتمال بمزيد من التفصيل أدناه.

هل ينقل إطلاق الدوبامين نفس المعلومات مثل إطلاق خلايا الدوبامين؟

تبدو العلاقة بين تقلبات الدوبامين السريعة والقيمة التحفيزية غريبة، نظرًا لأن إطلاق خلايا الدوبامين يشبه في الواقع معدل الخطأ المُدرَك (RPE). علاوة على ذلك، أشارت بعض الدراسات إلى وجود إشارات RPE في إطلاق الدوبامين في الجهاز الحوفي المتوسطي<sup> . من المهم ملاحظة وجود تحدٍّ في تفسير بعض أنواع البيانات العصبية. ترتبط إشارات القيمة ومعدلات الخطأ المُدرَكة (RPE) ببعضها البعض، وهذا ليس مفاجئًا لأن معدل الخطأ المُدرَك يُعرَّف عادةً بأنه التغير في القيمة من لحظة إلى أخرى (RPE "الفرق الزمني"). نظرًا لهذا الارتباط، من الضروري استخدام تصميمات تجريبية وتحليلات تميز بين القيمة ومعدلات الخطأ المُدرَكة. تتفاقم المشكلة عند استخدام مقياس عصبي يعتمد على التغيرات النسبية في الإشارة، بدلًا من التغيرات المطلقة. عادةً ما تقارن تحليلات الفولتامترية الدوبامين عند نقطة زمنية محددة مع فترة "أساسية" سابقة في كل تجربة (لإزالة مكونات الإشارة غير المعتمدة على الدوبامين، بما في ذلك شحن الأقطاب الكهربائية في كل مسح للجهد والانحراف على مدى دقائق). لكن طرح الفترة الأساسية قد يجعل إشارة القيمة تشبه إشارة معدل الخطأ المُدرَك. هذا ما لاحظناه في بيانات قياس الفولتية الخاصة بنا ( الشكل 2هـ ). انعكست التغيرات في توقع المكافأة في تغيرات تركيز الدوبامين في بداية كل تجربة، وهذه التغيرات لا تُلاحظ إذا افترضنا ثبات خط الأساس عبر التجارب<sup> </sup>. لذا، يجب التعامل بحذر مع الاستنتاجات المتعلقة بإطلاق الدوبامين وتشفير معدل التوقع للمكافأة. لا يقتصر خطر تفسير هذه البيانات على قياس الفولتية فحسب، بل يشمل أي تحليل يعتمد على التغيرات النسبية، بما في ذلك على الأرجح بعض تقنيات التصوير بالرنين المغناطيسي الوظيفي والقياس الضوئي<sup> .

مع ذلك، لا يزال يتعين علينا التوفيق بين إطلاق الدوبامين المرتبط بالقيمة في النواة المتكئة (NAc) وبين الغياب المستمر لإطلاق الدوبامين المرتبط بالقيمة من قِبَل الخلايا العصبية الدوبامينية<sup> ، حتى داخل منطقة السقيفية البطنية الجانبية (VTA) التي تُزوِّد النواة المتكئة بالدوبامين<sup> </sup>. أحد العوامل المحتملة هو أن خلايا الدوبامين تُسجَّل عادةً في حيوانات مُقيَّدة الرأس أثناء أداء مهام التكييف الكلاسيكي، بينما يُقاس إطلاق الدوبامين عادةً في حيوانات غير مُقيَّدة تتحرك بنشاط في بيئتها. لقد اقترحنا أن الدوبامين في الجهاز الحوفي المتوسط ​​قد يُشير تحديدًا إلى قيمة "العمل"<sup> - أي أنه يعكس ضرورة تكريس الوقت والجهد للحصول على المكافأة. وتماشيًا مع ذلك، يزداد الدوبامين مع الإشارات التي تُوجِّه الحركة، ولكن ليس مع الإشارات التي تُوجِّه السكون، حتى عندما تُشير إلى مكافأة مستقبلية مماثلة<sup> . إذا لم تكن هناك فائدة من "العمل" النشط - كما هو الحال في العديد من مهام التكييف الكلاسيكي - فقد تكون التغيرات الدوبامينية التي تُشير إلى قيمة العمل أقل وضوحًا.

الأهم من ذلك، أن إطلاق الدوبامين يمكن التحكم به محليًا في النهايات العصبية نفسها، وبالتالي يُظهر أنماطًا مكانية وزمانية مستقلة عن نشاط الخلايا العصبية. على سبيل المثال، يمكن للوزة القاعدية الجانبية (BLA) التأثير على إطلاق الدوبامين في النواة المتكئة (NAc) حتى عند تعطيل منطقة السقيفية البطنية (VTA)<sup> . في المقابل، يؤدي تعطيل اللوزة القاعدية الجانبية إلى تقليل إطلاق الدوبامين في النواة المتكئة والسلوك التحفيزي المصاحب، دون التأثير على ما يبدو على نشاط منطقة السقيفية البطنية<sup> </sup>. تحتوي نهايات الدوبامين على مستقبلات لمجموعة من النواقل العصبية، بما في ذلك الغلوتامات والأفيونيات والأستيل كولين. تسمح مستقبلات الأستيل كولين النيكوتينية للخلايا العصبية البينية الكولينية في الجسم المخطط بالتحكم السريع في إطلاق الدوبامين<sup> ، </sup> . على الرغم من أنه لوحظ منذ فترة طويلة أن التحكم المحلي في إطلاق الدوبامين ذو أهمية محتملة<sup> ، ، إلا أنه لم يُدرج في الحسابات الحاسوبية لوظيفة الدوبامين. أقترح أن ديناميكيات إطلاق الدوبامين المرتبطة بترميز القيمة تنشأ إلى حد كبير من خلال التحكم المحلي ، حتى مع توفير إطلاق خلايا الدوبامين لإشارات مهمة تشبه إشارات RPE للتعلم.

كيف يمكن أن يعني الدوبامين كلاً من التعلم والتحفيز دون لبس؟

من حيث المبدأ، تكفي إشارة القيمة لنقل RPE أيضًا، لأن RPEs الناتجة عن الفروق الزمنية هي ببساطة تغيرات سريعة في القيمة ( الشكل 2ب ). على سبيل المثال، قد تكون المسارات الخلوية المختلفة في الخلايا العصبية المستهدفة حساسة بشكل مختلف للتركيز المطلق للدوبامين (الذي يمثل القيمة) مقابل التغيرات النسبية السريعة في التركيز (التي تمثل RPE). يبدو هذا المخطط معقولًا، نظرًا لتعديل الدوبامين المعقد لوظائف الخلايا العصبية الشوكية وحساسيتها للأنماط الزمنية لتركيز الكالسيوم ومع ذلك، يبدو هذا أيضًا زائدًا عن الحاجة إلى حد ما. إذا كانت هناك إشارة شبيهة بـ RPE موجودة بالفعل في إطلاق الخلايا الدوبامينية، فينبغي أن يكون من الممكن استخدامها بدلًا من إعادة اشتقاق RPE من إشارة القيمة.

لاستخدام إشارات RPE وإشارات القيمة المتميزة بشكل مناسب، قد تُغير الدوائر المستقبلة للدوبامين طريقة تفسيرها للدوبامين بشكل فعال. وهناك أدلة مثيرة للاهتمام تشير إلى أن الأستيل كولين قد يؤدي هذا الدور التحويلي أيضًا. ففي الوقت الذي تُطلق فيه خلايا الدوبامين دفعات من النبضات استجابةً لإشارات غير متوقعة، تُظهر الخلايا العصبية الكولينية (CINs) توقفات قصيرة (حوالي 150 مللي ثانية) في إطلاق النبضات، والتي لا تتناسب مع قيم RPE ويمكن أن تُحفز هذه التوقفات بواسطة الخلايا العصبية GABAergic في منطقة VTA ، بالإضافة إلى الخلايا المرتبطة بـ "المفاجأة" في المهاد داخل الصفيحة، وقد اقتُرح أنها تعمل كإشارة ارتباط تُعزز التعلم واقترح موريس وبيرغمان أن التوقفات الكولينية تُحدد نوافذ زمنية لللدونة المخططية، والتي يمكن خلالها استخدام الدوبامين كإشارة تعلم. ويتم تثبيط اللدونة المعتمدة على الدوبامين باستمرار بواسطة آليات تشمل مستقبلات m4 المسكارينية على الخلايا العصبية المخططية ذات المسار المباشر . تشير نماذج الإشارات داخل الخلايا إلى أنه أثناء فترات توقف CIN، قد يعمل غياب ارتباط m4 بشكل تآزري مع دفعات الدوبامين الطورية لتعزيز تنشيط PKA ، وبالتالي تعزيز التغيير المشبكي.

وبالتالي، تتمتع الخلايا الكولينية في الجسم المخطط بموقع مثالي لتغيير معنى الرسالة الدوبامينية المتعددة بشكل ديناميكي. خلال فترات توقف الخلايا الكولينية غير المحفزة (CIN)، يسمح تخفيف الحصار المسكاريني على اللدونة المشبكية باستخدام الدوبامين للتعلم. وفي أوقات أخرى، يتم تعديل إطلاق الدوبامين من النهايات العصبية محليًا للتأثير على الأداء السلوكي الجاري. حاليًا، هذا الاقتراح نظري وغير مكتمل. وقد طُرحت فكرة أن الخلايا الكولينية غير المحفزة (CIN) تدمج المعلومات من العديد من الخلايا العصبية الشوكية المحيطة لاستخلاص إشارات مفيدة على مستوى الشبكة، مثل الإنتروبيا ، ولكن ليس من الواضح على الإطلاق ما إذا كان من الممكن استخدام ديناميكيات نشاط الخلايا الكولينية غير المحفزة (CIN) لتوليد إشارات قيمة الدوبامين ، وكذلك لتنظيم إشارات تعلم الدوبامين.

هل الدوبامين يعني نفس الشيء في جميع أجزاء الدماغ الأمامي؟

مع ترسيخ فكرة خطأ التنبؤ (RPE)، تم تصور أن الدوبامين إشارة شاملة، تنقل رسالة خطأ عبر الجسم المخطط والقشرة الأمامية. أكد شولتز أن خلايا الدوبامين في القرود في جميع أنحاء منطقة السقيفية البطنية (VTA) والمادة السوداء المدمجة (SNc) تُظهر استجابات متشابهة للغاية<sup> </sup>. كما وجدت دراسات أجريت على خلايا الدوبامين المحددة استجابات متجانسة إلى حد كبير تشبه استجابة خطأ التنبؤ في القوارض، على الأقل بالنسبة لخلايا VTA الجانبية في سياقات التكييف الكلاسيكي<sup > </sup>. ومع ذلك، فإن خلايا الدوبامين متنوعة جزيئيًا وفيزيولوجيًا<sup> ، وهناك الآن العديد من التقارير التي تشير إلى أنها تُظهر أنماط إطلاق متنوعة في الحيوانات أثناء سلوكها. وتشمل هذه الأنماط زيادات طورية في إطلاق الإشارات استجابةً للأحداث المنفرة<sup> وإشارات التحفيز<sup> التي لا تتناسب جيدًا مع تفسير خطأ التنبؤ القياسي. تُظهر العديد من خلايا الدوبامين استجابة أولية قصيرة الكمون للأحداث الحسية تعكس المفاجأة أو "التنبيه" أكثر من كونها ترميزًا محددًا لخطأ التنبؤ<sup> ، </sup> . يبرز هذا الجانب التنبيهي بشكل أكبر في المادة السوداء المدمجة (SNc) ، حيث تُسقط خلايا الدوبامين بشكل أكبر على الجسم المخطط الظهري/الجانبي "الحسي الحركي" (DLS ، ). كما أُفيد أن مجموعات فرعية من خلايا الدوبامين في المادة السوداء المدمجة (SNc) تزيد تنقص من إطلاقها بالتزامن مع الحركات التلقائية، حتى بدون مؤثرات خارجية.

استخدمت عدة مجموعات تقنية قياس الضوء الليفي ومؤشر الكالسيوم GCaMP لدراسة النشاط الكلي لمجموعات فرعية من خلايا الدوبامين العصبية ، أظهرت خلايا الدوبامين التي تُسقط على الجسم المخطط الظهري/الإنسي (DMS) انخفاضًا عابرًا في النشاط استجابةً للصدمات القصيرة غير المتوقعة، بينما أظهرت تلك التي تُسقط على الجسم المخطط الظهري الجانبي (DLS) زيادة في النشاط ، وهو ما يتوافق بشكل أكبر مع استجابة التنبيه. كما لوحظت استجابات دوبامينية متميزة في مناطق فرعية مختلفة من الدماغ الأمامي باستخدام GCaMP لدراسة نشاط محاور الدوبامين ونهاياتها ، ، باستخدام التصوير ثنائي الفوتون في الفئران المُقيدة الرأس، أبلغ هاو ودومبيك عن نشاط دوباميني طوري مرتبط بالحركات التلقائية. وقد لوحظ هذا بشكل أساسي في محاور الدوبامين الفردية من المادة السوداء المدمجة (SNc) التي تنتهي في الجسم المخطط الظهري، بينما استجابت محاور الدوبامين في منطقة السقيفية البطنية (VTA) في النواة المتكئة (NAc) بشكل أكبر لتقديم المكافأة. ووجد آخرون أيضًا نشاطًا دوبامينيًا مرتبطًا بالمكافأة في النواة المتكئة، بينما يرتبط DMS بشكل أكبر بالأفعال المقابلة والذيل الخلفي للمخطط الذي يستجيب للمحفزات المنفرة والجديدة .

تكشف القياسات المباشرة لإطلاق الدوبامين أيضًا عن تباين بين المناطق الفرعية ، وباستخدام تقنية التحليل المجهري، وجدنا أن الدوبامين يرتبط بالقيمة تحديدًا في النواة المتكئة (NAc) والقشرة الجبهية البطنية الإنسية، وليس في الأجزاء الإنسية الأخرى من الجسم المخطط (قشرة النواة المتكئة، DMS) أو القشرة الجبهية. وهذا مثير للاهتمام، إذ يبدو أنه يتوافق جيدًا مع منطقتين رئيسيتين لترميز القيمة، واللتين لوحظتا باستمرار في دراسات التصوير بالرنين المغناطيسي الوظيفي البشري ، وعلى وجه الخصوص، تزداد إشارة BOLD في النواة المتكئة، والتي ترتبط ارتباطًا وثيقًا بإشارات الدوبامين ، مع توقع المكافأة (القيمة) - أكثر من ارتباطها بتقدير المكافأة المُدرك .

سواءً نشأت هذه الأنماط المكانية لإطلاق الدوبامين من تنشيط مجموعات فرعية متميزة من خلايا الدوبامين، أو من التحكم الموضعي في إطلاق الدوبامين، أو كليهما، فإنها تُشكك في فكرة وجود رسالة دوبامين شاملة. قد يستنتج المرء أن للدوبامين وظائف متعددة، حيث يُشير الدوبامين في الجسم المخطط الظهري (على سبيل المثال) إلى "الحركة"، بينما يُشير الدوبامين في الجسم المخطط البطني (على سبيل المثال) إلى "المكافأة"<sup> </sup>. مع ذلك، أُفضّل منهجًا مفاهيميًا آخر. تتلقى المناطق الفرعية المختلفة للجسم المخطط مدخلات من مناطق قشرية مختلفة، وبالتالي تُعالج أنواعًا مختلفة من المعلومات. ومع ذلك، تشترك كل منطقة فرعية في بنية دارة دقيقة مشتركة، بما في ذلك الخلايا العصبية الشوكية التي تحمل مستقبلات D1 مقابل مستقبلات D2<sup> </sup>، والخلايا العصبية البينية المركزية (CINs)، وما إلى ذلك. على الرغم من شيوع الإشارة إلى المناطق الفرعية المختلفة للجسم المخطط (مثل DLS وDMS ونواة NAc) كما لو كانت مناطق منفصلة، ​​إلا أنه لا توجد حدود تشريحية واضحة بينها (قشرة NAc أكثر تميزًا من الناحية الكيميائية العصبية). بدلاً من ذلك، توجد تدرجات طفيفة في كثافة المستقبلات، ونسب الخلايا العصبية البينية، وما إلى ذلك، والتي تبدو أشبه بتعديلات طفيفة على معايير خوارزمية حسابية مشتركة. بالنظر إلى هذه البنية المشتركة، هل يمكننا وصف وظيفة مشتركة للدوبامين، بمعزل عن المعلومات المحددة التي تتعامل معها كل منطقة فرعية؟

الدوبامين Striatal وتخصيص موارد محدودة.

أقترح أن مجموعة متنوعة من تأثيرات الدوبامين المتباينة على السلوك الجاري يمكن فهمها على أنها تعديل لقرارات تخصيص الموارد . على وجه التحديد، يوفر الدوبامين تقديرات لمدى جدوى استهلاك مورد داخلي محدود، ويختلف هذا المورد باختلاف المناطق الفرعية للجسم المخطط. بالنسبة للجسم المخطط "الحركي" (الجانب الظهري الجانبي)، يتمثل المورد في الحركة، وهي محدودة لأن الحركة تتطلب طاقة، ولأن العديد من الأفعال غير متوافقة مع بعضها البعض يؤدي ارتفاع مستوى الدوبامين إلى زيادة احتمالية أن يقرر الحيوان أن الحركة تستحق استهلاك الطاقة، أو أن يتحرك بشكل أسرع تجدر الإشارة إلى أن إشارة الدوبامين التي تشفر "جدوى الحركة" ستنتج ارتباطات بين الدوبامين والحركة ، أن يشفر الدوبامين "الحركة" بحد ذاتها.

بالنسبة للمخطط "المعرفي" (المخطط DMS)، تتمثل الموارد في العمليات المعرفية، بما في ذلك الانتباه (ذي السعة المحدودة بحكم التعريف ) والذاكرة العاملة في غياب الدوبامين، تُهمل الإشارات الخارجية البارزة التي عادةً ما تحفز حركات التوجيه، كما لو كانت أقل أهمية علاوة على ذلك، فإن توجيه عمليات التحكم المعرفي بشكل متعمد أمرٌ شاق (مكلف ). يلعب الدوبامين - وخاصة في المخطط DMS - دورًا رئيسيًا في تحديد ما إذا كان الأمر يستحق بذل هذا الجهد ، قد يشمل ذلك ما إذا كان ينبغي استخدام استراتيجيات اتخاذ قرارات أكثر تطلبًا معرفيًا وتأملية ("قائمة على النموذج") .

بالنسبة للجسم المخطط "التحفيزي" (المجاور للنواة المتكئة)، قد يكون وقت الحيوان أحد الموارد المحدودة الرئيسية. لا يُشترط وجود الدوبامين في المسار الميزوليمبي عندما تؤدي الحيوانات فعلًا بسيطًا وثابتًا للحصول على مكافآت سريعة لكن العديد من أشكال المكافأة لا يمكن الحصول عليها إلا من خلال العمل المطوّل: سلاسل ممتدة من الأفعال غير المُكافأة، كما هو الحال في البحث عن الطعام. إن اختيار الانخراط في العمل يعني التخلي عن طرق أخرى مفيدة لقضاء الوقت. يشير ارتفاع مستوى الدوبامين في المسار الميزوليمبي إلى أن الانخراط في عمل شاق وممتد زمنيًا أمرٌ مُجدٍ، ولكن مع انخفاض مستوى الدوبامين، لا تُبالي الحيوانات، وقد تستعد للنوم بدلًا من ذلك .

ضمن كل دائرة من دوائر القشرة المخية والمخططية، يُعدّ دور الدوبامين في السلوك الجاري اقتصاديًا (يتعلق بتخصيص الموارد) وتحفيزيًا (يتعلق بجدوى إنفاق الموارد ). هذه الدوائر ليست مستقلة تمامًا، بل لها تنظيم هرمي حلزوني: تؤثر الأجزاء البطنية من المخطط على خلايا الدوبامين التي تُسقط على الأجزاء الظهرية ، وبهذه الطريقة، قد تُساعد قرارات الانخراط في العمل على تنشيط الحركات المحددة والقصيرة المطلوبة. ولكن بشكل عام، يُوفر الدوبامين إشارات "تنشيطية" - تزيد من احتمالية اتخاذ قرار ما - بدلاً من إشارات "توجيهية" تُحدد كيفية إنفاق الموارد .

ما هو الدور الحسابي للدوبامين عند اتخاذ القرارات؟

إحدى طرق فهم هذا الدور التنشيطي هي من خلال "عتبات" اتخاذ القرار. في بعض النماذج الرياضية، تتزايد عمليات اتخاذ القرار حتى تصل إلى مستوى عتبة معينة، وعندها يلتزم النظام بفعل ما ويُعادل ارتفاع مستوى الدوبامين انخفاض المسافة إلى العتبة، مما يُسرّع عملية اتخاذ القرارات. هذه الفكرة مبسطة، لكنها تُقدّم تنبؤات كمية تم تأكيدها. إن خفض عتبات الحركة يُحدث تغييرًا محددًا في شكل توزيع زمن رد الفعل، وهو ما يُلاحظ عند حقن الأمفيتامين في الجسم المخطط الحسي الحركي .

بدلاً من العتبات الثابتة، قد تكون البيانات السلوكية والعصبية أكثر ملاءمة إذا انخفضت العتبات بمرور الوقت، كما لو أن القرارات أصبحت أكثر إلحاحًا. وقد اقتُرح أن مخرجات العقد القاعدية توفر إشارة إلحاح متطورة ديناميكيًا، مما ينشط آليات الاختيار في القشرة الدماغية كما كان الإلحاح أكبر عندما كانت المكافآت المستقبلية أقرب زمنيًا، مما يجعل هذا المفهوم مشابهًا لدور الدوبامين في ترميز القيمة وتنشيطها.

هل يكفي هذا الدور التنشيطي لوصف تأثيرات الدوبامين في الجسم المخطط على تعديل الأداء؟ يرتبط هذا بالتساؤل القديم حول ما إذا كانت دوائر العقد القاعدية تنتقي مباشرةً بين الأفعال المُكتسبة<sup> أم أنها تُعزز فقط الخيارات المُتخذة في أماكن أخرى<sup ، . هناك طريقتان على الأقل يُمكن من خلالهما للدوبامين أن يُظهر تأثيرًا "اتجاهيًا" أكثر وضوحًا. الأولى هي عندما يعمل الدوبامين داخل منطقة فرعية من الدماغ تُعالج معلومات اتجاهية بطبيعتها. تلعب دوائر العقد القاعدية دورًا هامًا، وجزئيًا جانبيًا، في التوجيه نحو المكافآت المُحتملة والاقتراب منها. يُشارك النواة المذنبة في الرئيسيات (المنطقة الحركية الظهرية الإنسية) في توجيه حركات العين نحو الحقول المكانية المُقابلة<sup> . قد تُفسر إشارة الدوبامين التي تُشير إلى أن شيئًا ما في الفضاء المُقابل يستحق التوجيه نحوه الارتباط الملحوظ بين نشاط الدوبامين في المنطقة الحركية الظهرية الإنسية والحركات المُقابلة<sup> ، بالإضافة إلى السلوك الدوراني الناتج عن التلاعب بالدوبامين<sup> . يظهر تأثير "اتجاهي" ثانٍ للدوبامين عندما تؤدي آفات الدوبامين (الثنائية) إلى تحيز الفئران نحو الخيارات ذات الجهد المنخفض والمكافأة المنخفضة، بدلاً من البدائل ذات الجهد العالي والمكافأة العالية قد يعكس هذا حقيقة أن بعض القرارات تكون متسلسلة أكثر منها متوازية، حيث تُقيّم الفئران (والبشر) الخيارات واحدًا تلو الآخر في سياقات اتخاذ القرار هذه، قد يظل للدوبامين دور تنشيطي أساسي من خلال نقل قيمة الخيار قيد الدراسة حاليًا، والذي يمكن قبوله أو رفضه .

تتخذ الحيوانات النشطة قرارات على مستويات متعددة، وغالبًا بمعدلات عالية. وبالإضافة إلى التفكير في القرارات الفردية، قد يكون من المفيد النظر إلى المسار العام عبر سلسلة من الحالات ( الشكل 1 ). من خلال تسهيل الانتقالات من حالة إلى أخرى، قد يُسرّع الدوبامين التدفق على طول المسارات المُكتسبة<sup> . قد يرتبط هذا بالتأثير المهم للدوبامين على توقيت السلوك<sup> ، . يتمثل أحد أهم مجالات البحث المستقبلية في اكتساب فهم أعمق لكيفية نشوء تأثيرات الدوبامين هذه على السلوك الجاري من الناحية الآلية، وذلك عن طريق تغيير معالجة المعلومات داخل الخلايا المفردة، والدوائر الدقيقة، وحلقات القشرة الدماغية والعقد القاعدية واسعة النطاق. كما أنني ركزت على الأدوار الحسابية المشتركة للدوبامين عبر مجموعة من الأهداف في الجسم المخطط، لكنني أهملت إلى حد كبير الأهداف القشرية، ويبقى أن نرى ما إذا كان من الممكن وصف وظائف الدوبامين في كلا البنيتين ضمن الإطار نفسه.

باختصار ، من شأن وصف دقيق للدوبامين أن يفسر كيف يمكنه الإشارة إلى كل من التعلم والتحفيز على نفس النطاقات الزمنية السريعة، دون أي لبس. كما سيفسر سبب تزامن إطلاق الدوبامين في الأهداف الرئيسية مع توقع المكافأة، على الرغم من أن نشاط خلايا الدوبامين لا يتزامن معها. وسيقدم تفسيراً حسابياً موحداً لتأثيرات الدوبامين في جميع أنحاء الجسم المخطط وأجزاء أخرى من الدماغ، مما يفسر التأثيرات السلوكية المتباينة على الحركة والإدراك والتوقيت. بعض الأفكار المطروحة هنا هي أفكار نظرية، ولكنها تهدف إلى تنشيط النقاشات والنماذج والتجارب الجديدة الدقيقة.

شكر وتقدير.

أشكر الزملاء العديدين الذين قدموا تعليقات ثاقبة على المسودات النصية السابقة ، بما في ذلك Kent Berridge و Peter Dayan و Brian Knutson و Jeff Beeler و Peter Redgrave و John Lisman و Jesse Goldberg والحكام المجهولون. يؤسفني أن قيود المساحة حالت دون مناقشة العديد من الدراسات السابقة الهامة. تم توفير الدعم الأساسي من قبل المعهد الوطني للاضطرابات العصبية والسكتة الدماغية ، والمعهد الوطني للصحة العقلية ، والمعهد الوطني لتعاطي المخدرات.

المراجع:

1. Ungerstedt U الشحوم وانعدام الآلام بعد انحلال 6-hydroxydopamine الناجم عن نظام الدوبامين النيتروجيني. Acta Physiol Scand Suppl 367، 95 – 122 (1971). [مجلات] []
2. أكياس يا الاستيقاظ. الاستيقاظ (1973).
3. مارشال JF ، Levitan D و Stricker EM تنشيط بفعل تنشيط وظائف الحواس في الفئران مع آفات الدماغ المستنفدة الدوبامين. J Comp Physiol Psychol 90، 536 – 46 (1976). [مجلات] []
4. Berridge KC و Venier IL و Robinson TE تحليل تفاعل الذوق للفاشمية المستحثة لـ 6-hydroxydopamine: الآثار المترتبة على فرضيات الإثارة والاندهيدية لفرض وظيفة الدوبامين. Behav Neurosci 103، 36 – 45 (1989). [مجلات] []
5. سلامون جيه وكوريا م وظائف تحفيزية غامضة من الدوبامين ميزولبيك. الخلايا العصبية 76, 470–485 (2012).doi:10.1016/j.neuron.2012.10.021 [بك المادة الحرة] [مجلات] [CrossRef] []
6. Mazzoni P ، Hristova A و Krakauer JW لماذا لا نتحرك بشكل أسرع؟ مرض باركنسون ، نشاط الحركة ، والدوافع الضمنية. J Neurosci 27، 7105 – 16 (2007) .doi: 10.1523 / JNEUROSCI.0264-07.2007 [مجلات] [CrossRef] []
7. شولتز دبليو ردود الخلايا العصبية الدوبامين midbrain على محفزات الزناد السلوكي في القرد. مجلة الفيزيولوجيا العصبية 56، 1439 – 1461 (1986). [مجلات] []
8. شولتز دبليو ورومو آر الخلايا العصبية الدوبامين في الدماغ المتوسط ​​للقرد: حالات طارئة للاستجابات للمنبهات تثير ردود فعل سلوكية فورية. ي Neurophysiol 63، 607 – 24 (1990). [مجلات] []
9. Montague PR، Dayan P and Sejnowski TJ إطار عمل لأنظمة الدوبامين المتوسطة على أساس التعلم التنبئي الهبي. J Neurosci 16، 1936 – 47 (1996). [مجلات] []
10. Schultz W و Apicella P و Ljungberg T استجابات عصب الدوبامين القرد لمكافأة ومحفزات مشروطة أثناء خطوات متعاقبة لتعلم مهمة استجابة متأخرة. J Neurosci 13، 900 – 13 (1993). [مجلات] []
11. Sutton RS و Barto AG تعزيز التعلم: مقدمة. تعزيز التعلم: مقدمة (معهد ماساتشوستس للتكنولوجيا الصحافة: كامبريدج ، ماساتشوستس ، 1998). []
12. Cohen JY و Haesler S و Vong L و Lowell BB و Uchida N إشارات خاصة بالنوع العصبي من أجل المكافأة والعقاب في منطقة التجويف البطني. الطبيعة 482, 85–8 (2012).doi:10.1038/nature10754 [بك المادة الحرة] [مجلات] [CrossRef] []
13. Eshel N و Tian J و Bukwich M و Uchida N تشترك الخلايا العصبية الدوبامين في وظيفة الاستجابة الشائعة لخطأ التنبؤ بالمكافأة. نات نيوروسكي 19, 479–86 (2016).doi:10.1038/nn.4239 [بك المادة الحرة] [مجلات] [CrossRef] []
14. Steinberg EE و Keiflin R و Boivin JR و Witten IB و Deisseroth K and Janak PH علاقة سببية بين أخطاء التنبؤ والخلايا العصبية الدوبامين والتعلم. نات نيوروسكي (2013) .doi: 10.1038 / nn.3413 [بك المادة الحرة] [مجلات] [CrossRef] []
15. حميد AA ، Pettibone JR ، Mabrouk OS ، Hetrick VL ، Schmidt R ، Vander Weele CM ، Kennedy RT ، Aragona BJ and Berke JD الدوبامين Mesolimbic يشير إلى قيمة العمل. نات نيوروسكي 19, 117–26 (2016).doi:10.1038/nn.4173 [بك المادة الحرة] [مجلات] [CrossRef] []
16. Yagishita S و Hayashi-Takagi A و Ellis-Davies GC و Urakubo H و Ishii S و Kasai H نافذة زمنية حرجة لأعمال الدوبامين على اللدونة الهيكلية للعمود الفقري الشجيري. علوم 345, 1616–20 (2014).doi:10.1126/science.1255514 [بك المادة الحرة] [مجلات] [CrossRef] []
17. Berke JD و Hyman SE الإدمان ، الدوبامين ، والآليات الجزيئية للذاكرة. الخلايا العصبية 25، 515 – 32 (2000). [مجلات] []
18. Beeler JA، Frank MJ، McDaid J، Alexander E، Turkson S، Bernandez MS، McGehee DS and Zhuang X دور للتعلم بوساطة الدوبامين في الفيزيولوجيا المرضية وعلاج مرض الشلل الرعاش. ممثل الخلية 2, 1747–61 (2012).doi:10.1016/j.celrep.2012.11.014 [بك المادة الحرة] [مجلات] [CrossRef] []
19. الحكيمة RA الدوبامين والتعلم والتحفيز. نات ريف نيوروسكي 5، 483 – 94 (2004) .doi: 10.1038 / nrn1406 [مجلات] [CrossRef] []
20. Leventhal DK و Stoetzner C و Abraham R و Pettibone J و DeMarco K و Berke JD تأثيرات الدوبامين القابلة للفصل على التعلم والأداء داخل المخطط الحسي. النوى القاعدية 4, 43–54 (2014).doi:10.1016/j.baga.2013.11.001 [بك المادة الحرة] [مجلات] [CrossRef] []
21. Wyvell CL و Berridge KC يزيد داخل الأمفيتامين من حافز مشروط لمكافأة السكروز: تعزيز المكافأة "الرغبة" دون تعزيز "الإعجاب" أو تعزيز الاستجابة. J Neurosci 20، 8122 – 30. (2000). [مجلات] []
22. Cagniard B و Beeler JA و Britt JP و McGehee DS و Marinelli M و Zhuang X الدوبامين يقيس الأداء في غياب التعلم الجديد. الخلايا العصبية 51، 541 – 7 (2006) .doi: 10.1016 / j.neuron.2006.07.026 [مجلات] [CrossRef] []
23. Shiner T و Seymour B و Wunderlich K و Hill C و Bhatia KP و Dayan P and Dolan RJ الدوبامين والأداء في مهمة التعلم التعزيز: دليل من مرض باركنسون. دماغ 135، 1871 – 1883 (2012). [بك المادة الحرة] [مجلات] []
24. مكلور إس إم ، داو إن دي ومونتاج للعلاقات العامة الركيزة الحسابية ل salience الحافز. اتجاهات neurosci 26، 423 – 8 (2003). [مجلات] []
25. شولتز دبليو وظائف الدوبامين متعددة في دورات زمنية مختلفة. انو ريف نيوروسكي 30، 259 – 88 (2007) .doi: 10.1146 / annurev.neuro.28.061604.135722 [مجلات] [CrossRef] []
26. Gonon F، Burie JB، Jaber M، Benoit-Marand M، Dumartin B and Bloch B هندسة وحركية انتقال الدوبامين في مخطط الفئران وفي الفئران التي تفتقر إلى ناقل الدوبامين. بروغ الدماغ الدقة 125، 291 – 302 (2000). [مجلات] []
27. Aragona BJ و Cleaveland NA و Stuber GD و Day JJ و Carelli RM و Wightman RM يُعزى التعزيز التفضيلي لانتقال الدوبامين داخل النواة المتكاثفة بواسطة الكوكايين إلى زيادة مباشرة في أحداث إطلاق الدوبامين. J Neurosci 28, 8821–31 (2008).doi:10.1523/JNEUROSCI.2225-08.2008 [بك المادة الحرة] [مجلات] [CrossRef] []
28. Owesson-White CA و Roitman MF و Sombers LA و Belle AM ​​و Keithley RB و Peele JL و Carelli RM و Wightman RM المصادر التي تساهم في متوسط ​​تركيز الدوبامين خارج الخلية في النواة المتكئة. J نوروتشيم بمعدل 121, 252–62 (2012).doi:10.1111/j.1471-4159.2012.07677.x [بك المادة الحرة] [مجلات] [CrossRef] []
29. Yapo C، Nair AG، Clement L، Castro LR، Hellgren Kotaleski J and Vincent P الكشف عن الدوبامين الطوري بواسطة D1 و D2 الخلايا العصبية الشوكي المتوسطة الفتاكة. J Physiol (2017) .doi: 10.1113 / JP274475 [بك المادة الحرة] [مجلات] [CrossRef] []
30. فريد CR و Yamamoto BK استقلاب الدوبامين الإقليمي للمخ: علامة لسرعة واتجاه وموقف الحيوانات المتحركة. علوم 229، 62 – 65 (1985). [مجلات] []
31. Niv Y و Daw ND و Joel D و Dayan P منشط الدوبامين: تكاليف الفرصة والسيطرة على قوة الاستجابة. علم الادوية النفسية (بيرل) 191, 507–20 (2007).doi:10.1007/s00213-006-0502-4 [مجلات] [CrossRef] []
32. Strecker RE، Steinfels GF and Jacobs BL نشاط وحدة الدوبامين في تحريك القطط بحرية: عدم وجود علاقة بالتغذية والشبع وحقن الجلوكوز. الدماغ الدقة 260، 317 – 21 (1983). [مجلات] []
33. كوهين جي واي ، أموروزو إم دبليو وأوتشيدا ن تشير الخلايا العصبية السيروتونينية إلى الثواب والعقاب على فترات زمنية متعددة. Elife 4، (2015) .doi: 10.7554 / eLife.06346 [بك المادة الحرة] [مجلات] [CrossRef] []
34. Floresco SB، West AR، Ash B، Moore H and Grace AA التعديل الضعيف لإطلاق الدوبامين من العصبونات ينظم النقل التفاضلي والدوبامين الطوري. نات نيوروسكي 6، 968 – 73 (2003) .doi: 10.1038 / nn1103 [مجلات] [CrossRef] []
35. جريس AA عدم تنظيم نظام الدوبامين في الفسيولوجيا المرضية للفصام والاكتئاب. طبيعة علم الأعصاب تعليقات 17، 524 (2016) .doi: 10.1038 / nrn.2016.57 [بك المادة الحرة] [مجلات] [CrossRef] []
36. Phillips PE، Stuber GD، Heien ML، Wightman RM and Carelli RM يعزز إطلاق الدوبامين الجزئي البحث عن الكوكايين. الطبيعة 422، 614 – 8 (2003) .doi: 10.1038 / nature01476 [مجلات] [CrossRef] []
37. Wassum KM، Ostlund SB and Maidment NT تسبق إشارة الدوبامين المتوسطة الطورمية وتتوقع أداء مهمة تسلسل العمل الذاتي. بيول الطب النفسي 71, 846–54 (2012).doi:10.1016/j.biopsych.2011.12.019 [بك المادة الحرة] [مجلات] [CrossRef] []
38. Howe MW، Tierney PL، Sandberg SG، Phillips PE and Graybiel AM إشارات الدوبامين المطولة في القرب من الإشارات المخططية وقيمة المكافآت البعيدة. الطبيعة 500, 575–9 (2013).doi:10.1038/nature12475 [بك المادة الحرة] [مجلات] [CrossRef] []
39. Satoh T و Nakai S و Sato T و Kimura M الترميز المرتبط بالدوافع ونتائج القرار من قبل الخلايا العصبية الدوبامين. J Neurosci 23، 9913 – 23 (2003). [مجلات] []
40. Howe MW و Dombeck DA إشارات سريعة في محاور الدوبامين المميزة أثناء الحركة والمكافأة. الطبيعة 535, 505–10 (2016).doi:10.1038/nature18942 [بك المادة الحرة] [مجلات] [CrossRef] []
41. Silva JAD و Tecuapetla F و Paixão V و Costa RM نشاط الخلايا العصبية الدوبامين قبل بدء البوابات وينشط حركات المستقبل. الطبيعة 554، 244 (2018) .doi: 10.1038 / nature25457 [مجلات] [CrossRef] []
42. du Hoffmann J و Nicola SM الدوبامين ينشط السعي للحصول على المكافأة من خلال تشجيع الإثارة المثيرة للجدل في النواة المتكئة. J Neurosci 34, 14349–64 (2014).doi:10.1523/JNEUROSCI.3492-14.2014 [بك المادة الحرة] [مجلات] [CrossRef] []
43. Hart AS، Rutledge RB، Glimcher PW and Phillips PE إن إطلاق الدوبامين المرحلي في نواة الفئران يتراكم بترميز متماثل لمصطلح خطأ في التنبؤ بالمكافأة. J Neurosci 34, 698–704 (2014).doi:10.1523/JNEUROSCI.2489-13.2014 [بك المادة الحرة] [مجلات] [CrossRef] []
44. سواريس إس ، عطا الله بي عصب الدوبامين في الدماغ المتوسط ​​تتحكم في حكم الزمن. علوم 354، 1273 – 1277 (2016) .doi: 10.1126 / science.aah5234 [مجلات] [CrossRef] []
45. ايكيموتو س دارة الدوبامين المكافئة: نظامان إسقاطان من الدماغ المتوسط ​​البطني لمجمع درنة النواة المتكئة - نواة. دماغ ريف القس 56, 27–78 (2007).doi:10.1016/j.brainresrev.2007.05.004 [بك المادة الحرة] [مجلات] [CrossRef] []
46. Syed EC، Grima LL، Magill PJ، Bogacz R، Brown P and Walton ME بدء العمل الأشكال ترميز الدوبامين mesolimbic المكافآت في المستقبل. نات نيوروسكي (2015) .doi: 10.1038 / nn.4187 [بك المادة الحرة] [مجلات] [CrossRef] []
47. Floresco SB، Yang CR، Phillips AG and Blaha CD يثير تحفيز اللوزة الجانبية الوحشية تدفق الدوبامين المعتمد على مستقبلات الغلوتامات في النواة المتكئة في الفئران المخدرة. يورو J Neurosci 10، 1241 – 51 (1998). [مجلات] []
48. Jones JL، Day JJ، Aragona BJ، Wheeler RA، Wightman RM and Carelli RM اللوزة الجانبية السفلية تعدل إطلاق الدوبامين الطرفي في النواة المتكئة وتتكيف مع الاستجابة. بيول الطب النفسي 67, 737–44 (2010).doi:S0006–3223(09)01327–4 [pii] 10.1016/j.biopsych.2009.11.006 [بك المادة الحرة] [مجلات] [CrossRef] []
49. Cachope R، Mateo Y، Mathur BN، Irving J، Wang HL، Morales M، Lovinger DM and Cheer JF يعمل التنشيط الانتقائي للألمين الداخليين الكوليني على تحسين إطلاق الدوبامين الطوري المتراكم: تحديد نغمة معالجة المكافآت. ممثل الخلية 2, 33–41 (2012).doi:10.1016/j.celrep.2012.05.011 [بك المادة الحرة] [مجلات] [CrossRef] []
50. Threlfell S و Lalic T و Platt NJ و Jennings KA و Deisseroth K and Cragg SJ يتم إطلاق الإفراج الدوبامين عن طريق النشاط المتزامن في interneurons الكوليني. الخلايا العصبية 75، 58 – 64 (2012) .doi: 10.1016 / j.neuron.2012.04.038 [مجلات] [CrossRef] []
51. جريس AA طوري مقابل إطلاق الدوبامين منشط وتعديل استجابة نظام الدوبامين: فرضية المسببات لمرض انفصام الشخصية. علم الأعصاب 41، 1 – 24 (1991). [مجلات] []
52. Moyer JT و Wolf JA و Finkel LH آثار تعديل الدوبامين على الخصائص التكاملية للخلايا العصبية المتوسطة البطنية البطنية. ي Neurophysiol 98، 3731 – 48 (2007). [مجلات] []
53. Jędrzejewska-Szmek J و Damodaran S و Dorman DB و Blackwell KT ديناميات الكالسيوم تتنبأ باتجاه اللدونة التشابكية في الخلايا العصبية الإسقاط الشوكي. يورو J Neurosci 45, 1044–1056 (2017).doi:10.1111/ejn.13287 [بك المادة الحرة] [مجلات] [CrossRef] []
54. Morris G، Arkadir D، Nevet A، Vaadia E and Bergman H تتزامن ولكن رسائل متميزة من الدوبامين midbrain والخلايا العصبية النشطة لونية. الخلايا العصبية 43، 133 – 43 (2004). [مجلات] []
55. Brown MT، Tan KR، O'Connor EC، Nikonenko I، Muller D and Lüscher C توقّعات إسقاط GABA للمنطقة البطنية البطنية تتوقف عن العمل بالألمنيوم الداخلي الكولين لتعزيز التعلم الترابطي. الطبيعة (2012) .doi: 10.1038 / nature11657 [مجلات] [CrossRef] []
56. Yamanaka K و Hori Y و Minamimoto T و Yamada H و Matsumoto N و Enomoto K و Aosaki T و Graybiel AM و Kimura M أدوار نوى parafascicular centromedian من المهاد و interneurons الكوليني في المخطط الظهري في التعلم الترابطي للأحداث البيئية. J Neural Transm (فيينا) (2017).doi:10.1007/s00702-017-1713-z [بك المادة الحرة] [مجلات] [CrossRef] []
57. Shen W و Plotkin JL و Francardo V و Ko WK و Xie Z و Li Q و Fieblinger T و Wess J و Neubig RR و Lindsley CW و Conn PJ و Greengard P و Bezard E و Cenci MA و Surmeier DJ تعمل إشارة M4 Muscarinic Receptor Signaling على تخفيف عجز اللدنة Striatal في نماذج خلل الحركة الناجم عن L-DOPA. الخلايا العصبية 88, 762–73 (2015).doi:10.1016/j.neuron.2015.10.039 [بك المادة الحرة] [مجلات] [CrossRef] []
58. ناير إيه جي ، جوتيريز-أريناس أو ، إريكسون أو ، فنسنت بي وهيلغرين كوتاليسكي استشعار إشارات المكافأة الإيجابية مقابل السلبية من خلال GPCRs من Adenyyll Cyclase في الخلايا العصبية الشوكية المتوسطة المباشرة وغير المباشرة. J Neurosci 35, 14017–30 (2015).doi:10.1523/JNEUROSCI.0730-15.2015 [بك المادة الحرة] [مجلات] [CrossRef] []
59. Stocco A الإنتروبيا المستندة إلى الأسيتيل كولين في اختيار الاستجابة: نموذج لكيفية تعديل interneurons الاستكشافية والاستغلال وتغير الاستجابة في صنع القرار. حدود في علم الأعصاب 6(2012). [بك المادة الحرة] [مجلات] []
60. فرانكلين NT وفرانك MJ دائرة التغذية المرتدة كوليني لتنظيم عدم اليقين السكان في القتال وتحسين التعلم التعزيز. موبايلي elife 4، (2015) .doi: 10.7554 / eLife.12029 [بك المادة الحرة] [مجلات] [CrossRef] []
61. Nougaret S و Ravel S تحوير الخلايا العصبية النشيطة لقرية القرد بواسطة أحداث تحمل معلومات مختلفة عن القوة والمكافأة. J Neurosci 35، 15214 – 26 (2015) .doi: 10.1523 / JNEUROSCI.0039-15.2015 [مجلات] [CrossRef] []
62. شولتز دبليو إشارة مكافأة التنبؤية من الخلايا العصبية الدوبامين. ي Neurophysiol 80، 1 – 27 (1998). [مجلات] []
63. Lammel S، Hetzel A، Häckel O، Jones I، Liss B and Roeper J خصائص فريدة من الخلايا العصبية mesoprefrontal داخل نظام دوبامين mesocorticolimbic مزدوج. الخلايا العصبية 57، 760 – 73 (2008) .doi: 10.1016 / j.neuron.2008.01.022 [مجلات] [CrossRef] []
64. Poulin JF، Zou J، Drouin-Ouellet J، Kim KY، Cicchetti F and Awatramani RB تحديد تنوع الخلايا العصبية الدوبامينية في الدماغ المتوسط ​​عن طريق التنميط الجيني أحادي الخلية. ممثل الخلية 9, 930–43 (2014).doi:10.1016/j.celrep.2014.10.008 [بك المادة الحرة] [مجلات] [CrossRef] []
65. Morales M و Margolis EB المنطقة tegmental البطني: عدم تجانس الخلوية ، والاتصال والسلوك. نات ريف نيوروسكي 18، 73 – 85 (2017) .doi: 10.1038 / nrn.2016.165 [مجلات] [CrossRef] []
66. ماتسوموتو م و Hikosaka O نوعان من الخلايا العصبية الدوبامين ينقل بوضوح إشارات تحفيزية إيجابية وسلبية. الطبيعة 459، 837 – 41 (2009) .doi: nature08028 [pii] 10.1038 / nature08028 [بك المادة الحرة] [مجلات] [CrossRef] []
67. Pasquereau B و Turner RS تشفر الخلايا العصبية الدوبامين الأخطاء في التنبؤ بحدوث حركة الزناد. مجلة الفيزيولوجيا العصبية 113, 1110–1123 (2014).doi:10.1152/jn.00401.2014 [بك المادة الحرة] [مجلات] [CrossRef] []
68. Redgrave P، Prescott TJ and Gurney K هل استجابة الدوبامين قصيرة الكمون قصيرة للغاية للإشارة إلى خطأ المكافأة? اتجاهات neurosci 22، 146 – 51 (1999). [مجلات] []
69. Bromberg-Martin ES و Matsumoto M و Hikosaka O الدوبامين في السيطرة التحفيزية: مكافأة ، مكره ، والتنبيه. الخلايا العصبية 68, 815–34 (2010).doi:10.1016/j.neuron.2010.11.022 [بك المادة الحرة] [مجلات] [CrossRef] []
70. Dodson PD، Dreyer JK، Jennings KA، Syed EC، Wade-Martins R، Cragg SJ، Bolam JP and Magill PJ تمثيل الحركة التلقائية من قبل الخلايا العصبية الدوبامينية هو نوع من الخلايا انتقائية وتعطل في مرض باركنسون. بروك Natl أكاد العلوم الولايات المتحدة الأمريكية 113, E2180–8 (2016).doi:10.1073/pnas.1515941113 [بك المادة الحرة] [مجلات] [CrossRef] []
71. Lerner TN، Shilyansky C، Davidson TJ، Evans KE، Beier KT، Zalocusky KA، Crow AK، Malenka RC، Luo L، Tomer R and Deisseroth K تحليلات الدماغ الدقيقة تكشف عن معلومات مميزة تحملها دوائر SNC الدوبامين الفرعية. الموبايل 162, 635–47 (2015).doi:10.1016/j.cell.2015.07.014 [بك المادة الحرة] [مجلات] [CrossRef] []
72. Parker NF، Cameron CM، Taliaferro JP، Lee J، Choi JY، Davidson TJ، Daw ND and Witten IB يعتمد تشفير المكافآت والاختيار في أطراف الخلايا العصبية الدوبامين في الدماغ المتوسط ​​على الهدف المهاجم. نات نيوروسكي (2016) .doi: 10.1038 / nn.4287 [بك المادة الحرة] [مجلات] [CrossRef] []
73. Kim CK و Yang SJ و Pichamoorthy N و Young NP و Kauvar I و Jennings JH و Lerner TN و Berndt A و Lee SY و Ramakrishnan C و Davidson TJ و Inoue M و Bito H and Deisseroth K قياس سريع في وقت واحد لديناميات الدائرة في مواقع متعددة في جميع أنحاء الدماغ الثدييات. طرق الطبيعة 13, 325–328 (2016).doi:10.1038/nmeth.3770 [بك المادة الحرة] [مجلات] [CrossRef] []
74. Menegas W، Babayan BM، Uchida N and Watabe-Uchida M التهيئة المقابلة للإشارات الجديدة في إشارات الدوبامين في المخطط البطني والخلفي في الفئران. Elife 6، (2017) .doi: 10.7554 / eLife.21886 [بك المادة الحرة] [مجلات] [CrossRef] []
75. Brown HD و McCutcheon JE و Cone JJ و Ragozzino ME و Roitman MF تثير المكافآت الغذائية الأولية والمنبهات التنبؤية للمكافأة أنماطًا مختلفة من إشارات الدوبامين المرحلية في جميع أنحاء المخطط. المجلة الأوروبية للعلم الأعصاب 34, 1997–2006 (2011).doi:10.1111/j.1460-9568.2011.07914.x [بك المادة الحرة] [مجلات] [CrossRef] []
76. Knutson B و Greer SM التأثير التأثرى: الارتباطات العصبية والعواقب للاختيار. PHILOS ترانس R سوك وند B بيول العلوم 363, 3771–86 (2008).doi:10.1098/rstb.2008.0155 [بك المادة الحرة] [مجلات] [CrossRef] []
77. Bartra O، McGuire JT and Kable JW نظام التقييم: تحليل التلوي القائم على إحداثيات تجارب بولد الرنين المغناطيسي الوظيفي دراسة الارتباطات العصبية ذات القيمة الذاتية. Neuroimage 76, 412–27 (2013).doi:10.1016/j.neuroimage.2013.02.063 [بك المادة الحرة] [مجلات] [CrossRef] []
78. Ferenczi EA و Zalocusky KA و Liston C و Grosenick L و Warden MR و Amatya D و Katovich K و Mehta H و Patenaude B و Ramakrishnan C و Kalanithi P و Etkin A و Knutson B و Glover GH and Deisseroth K التنظيم القشري الجبهي لديناميكيات دماغ الدماغ والسلوك المتعلق بالمكافأة. علوم 351، aac9698 (2016) .doi: 10.1126 / science.aac9698 [بك المادة الحرة] [مجلات] [CrossRef] []
79. Bertran-Gonzalez J و Bosch C و Maroteaux M و Matamales M و Hervé D و Valjent E و Girault JA معارضة أنماط تنشيط الإشارة في الدوبامين D1 و D2 المعبرين عن مستقبلات الخلايا العصبية في استجابة للكوكايين والهالوبيريدول. J Neurosci 28، 5671 – 85 (2008) .doi: 10.1523 / JNEUROSCI.1039-08.2008 [مجلات] [CrossRef] []
80. Redgrave P، Prescott TJ and Gurney K العقد القاعدية: حل الفقاريات لمشكلة الاختيار؟ علم الأعصاب 89، 1009 – 23 (1999). [مجلات] []
81. Beeler JA و Frazier CR و Zhuang X وضع الرغبة في الميزانية: الدوبامين ونفقات الطاقة ، والتوفيق بين الثواب والموارد. الجبهة Integr Neurosci 6، 49 (2012) .doi: 10.3389 / fnint.2012.00049 [بك المادة الحرة] [مجلات] [CrossRef] []
82. Anderson BA، Kuwabara H، Wong DF، Gean EG، Rahmim A، Brašić JR، George N، Frolov B، Courtney SM and Yantis S دور الدوبامين في التوجيه التقليدي القائم على القيمة. كرول بيول 26, 550–5 (2016).doi:10.1016/j.cub.2015.12.062 [بك المادة الحرة] [مجلات] [CrossRef] []
83. Chatham CH، Frank MJ and Badre D إخراج القشرية المخاطية أثناء اختيار من الذاكرة العاملة. الخلايا العصبية 81, 930–42 (2014).doi:10.1016/j.neuron.2014.01.002 [بك المادة الحرة] [مجلات] [CrossRef] []
84. Shenhav A و Botvinick MM و Cohen JD القيمة المتوقعة للتحكم: نظرية تكاملية لوظيفة القشرة الحزامية الأمامية. الخلايا العصبية 79, 217–40 (2013).doi:10.1016/j.neuron.2013.07.007 [بك المادة الحرة] [مجلات] [CrossRef] []
85. Aarts E و Roelofs A و Franke B و Rijpkema M و Fernández G و Helmich RC and Cools R يتوسط الدوبامين Striatal التفاعل بين التحكم التحفيزي والمعرفي لدى البشر: دليل من التصوير الجيني. Neuropsychopharmacology 35, 1943–51 (2010).doi:10.1038/npp.2010.68 [بك المادة الحرة] [مجلات] [CrossRef] []
86. Westbrook A و Braver TS الدوبامين يقوم بعمل مزدوج في تحفيز الجهد المعرفي. الخلايا العصبية 89, 695–710 (2016).doi:10.1016/j.neuron.2015.12.029 [بك المادة الحرة] [مجلات] [CrossRef] []
87. Manohar SG، Chong TT، Apps MA، Batla A، Stamelou M، Jarman PR، Bhatia KP and Husain M مكافأة يدفع تكلفة الحد من الضوضاء في السيارات والتحكم المعرفي. كرول بيول 25, 1707–16 (2015).doi:10.1016/j.cub.2015.05.038 [بك المادة الحرة] [مجلات] [CrossRef] []
88. Wunderlich K و Smittenaar P و Dolan RJ يعزز الدوبامين القائم على النموذج أكثر من سلوك حرية اختيار الطراز. الخلايا العصبية 75, 418–24 (2012).doi:10.1016/j.neuron.2012.03.042 [بك المادة الحرة] [مجلات] [CrossRef] []
89. نيقولا سم فرضية النهج المرن: توحيد الجهد وافتراضات الاستجابة لدور النواة التي تكوّن الدوبامين في تنشيط سلوك التماس المكافأة. J Neurosci 30, 16585–600 (2010).doi:10.1523/JNEUROSCI.3958-10.2010 [بك المادة الحرة] [مجلات] [CrossRef] []
90. Eban-Rothschild A، Rothschild G، Giardino WJ، Jones JR and de Lecea L تنظم الخلايا العصبية الدوبامينية VTA سلوكيات النوم والاستيقاظ ذات الصلة من الناحية الأخلاقية. نات نيوروسكي (2016) .doi: 10.1038 / nn.4377 [بك المادة الحرة] [مجلات] [CrossRef] []
91. Haber SN، Fudge JL and McFarland NR تشكل مسارات Striatonigrostriatal في الرئيسيات دوامة تصاعدية من القشرة إلى المخطط الوحشي. J Neurosci 20، 2369 – 82 (2000). [مجلات] []
92. Reddi BAJ و Carpenter RHS تأثير الاستعجال على وقت القرار. علم الأعصاب الطبيعة 3، 827 (2000). [مجلات] []
93. Thura D و Cisek P العقد البصلية لا تحدد الأهداف بل تتحكم في إلحاح الالتزام. الخلايا العصبية (2017) .doi: 10.1016 / j.neuron.2017.07.039 [مجلات] [CrossRef] []
94. Turner RS ​​و Desmurget M مساهمات العقد القاعدية في التحكم في المحركات: مدرس قوي. Curr Opin Neurobiol 20, 704–16 (2010).doi:10.1016/j.conb.2010.08.022 [بك المادة الحرة] [مجلات] [CrossRef] []
95. هيكوساكا أو ، ناكامورا ك و ناكاهارا هـ عيون العقد القاعدية الشرقية للمكافأة. ي Neurophysiol 95، 567 – 84 (2006) .doi: 10.1152 / jn.00458.2005 [مجلات] [CrossRef] []
96. كيلي PH ومور KE الخلايا العصبية الدوبامينية Mesolimbic في نموذج التناوب وظيفة nigrostriatal. الطبيعة 263، 695 – 6 (1976). [مجلات] []
97. أبناء العم MS و Atherton A و Turner L و Salamone JD Nucleus تتراكم نفاد الدوبامين يغير تخصيص الاستجابة النسبية في مهمة التكلفة / الفائدة T-maze. Behav Brain Res 74، 189 – 97. (1996). [مجلات] []
98. إعادة م محاكمة غائبة والخطأ. نات ريف نيوروسكي 17, 147–59 (2016).doi:10.1038/nrn.2015.30 [بك المادة الحرة] [مجلات] [CrossRef] []
99. Rabinovich MI، Huerta R، Varona P and Afraimovich VS الديناميات المعرفية العابرة ، النقائل ، وصنع القرار. PLoS Comput Biol 4، e1000072 (2008) .doi: 10.1371 / journal.pcbi.1000072 [بك المادة الحرة] [مجلات] [CrossRef] []
100. Merchant H، Harrington DL and Meck WH الأساس العصبي لتصور وتقدير الوقت. انو ريف نيوروسكي 36، 313 – 36 (2013) .doi: 10.1146 / annurev-neuro-062012-170349 [مجلات] [CrossRef] []