نُشر إلكترونيًا في 14 مايو 2018. doi: 10.1038/s41593-018-0152-y
الملخص
الدوبامين هو المغير الحاسم في كل من التعلم والتحفيز. هذا يمثل مشكلة: كيف يمكن للخلايا المستهدفة معرفة ما إذا كانت زيادة الدوبامين هي إشارة للتعلم ، أم للتحرك؟ غالبًا ما يُفترض أن الدافع ينطوي على تغيرات بطيئة ("منشط") الدوبامين ، في حين أن تقلبات الدوبامين السريعة ("الطورية") تنقل أخطاء التنبؤ بالمكافأة للتعلم. ومع ذلك ، فقد أظهرت الدراسات الحديثة أن الدوبامين ينقل قيمة تحفيزية ، ويعزز الحركة ، حتى على فترات زمنية دون الثانية. أصف هنا وصفًا بديلاً لكيفية تنظيم الدوبامين للسلوك المستمر. يتم نحت الإفراج عن الدوبامين المرتبط بالدوافع بسرعة وعلى المستوى المحلي بواسطة مستقبلات على أطراف الدوبامين ، بشكل مستقل عن إطلاق خلايا الدوبامين. تتحول الخلايا العصبية المستهدفة فجأة بين أوضاع التعلم والأداء ، مع توفير الأوعية الدموية الداخلية الكولينية القاتلة آلية تبديل مرشح واحد. يختلف التأثير السلوكي للدوبامين حسب المنطقة دون الإقليمية ، ولكن في كل حالة يوفر الدوبامين تقديرًا حيويًا لما إذا كان الأمر يستحق إنفاق مورد داخلي محدود ، مثل الطاقة أو الاهتمام أو الوقت.
هل الدوبامين إشارة للتعلم أو الدافع أم كليهما؟
لقد تغير فهمنا للدوبامين في الماضي، وهو يتغير مرة أخرى. أحد الفروق الجوهرية هو التمييز بين تأثيرات الدوبامين على السلوك الحالي (الأداء)، وتأثيراته على السلوك المستقبلي (التعلم). كلاهما حقيقي ومهم، ولكن في أوقات مختلفة، حظي أحدهما بالقبول بينما لم يحظَ الآخر.
عندما أصبح من الممكن (في سبعينيات القرن الماضي) إجراء عمليات قطع انتقائية وكاملة لمسارات الدوبامين، كانت النتيجة السلوكية الواضحة انخفاضًا حادًا في الحركة<sup> 1 </sup>. يتوافق هذا مع تأثيرات فقدان الدوبامين على فقدان الحركة لدى البشر، والناتجة عن مرض باركنسون المتقدم، أو الأدوية السامة، أو التهاب الدماغ<sup> 2 </sup>. ومع ذلك، لا تُظهر حالات الفئران ولا البشر عجزًا أساسيًا عن الحركة. تسبح الفئران التي خضعت لقطع الدوبامين في الماء البارد<sup> 3</sup> ، وقد ينهض المرضى المصابون بفقدان الحركة ويركضون إذا انطلق جرس إنذار الحريق ("الحركة المتناقضة"). كما لا يوجد قصور أساسي في تقدير المكافآت: ستتناول الفئران التي خضعت لقطع الدوبامين الطعام الموضوع في أفواهها، وتُظهر علامات الاستمتاع به<sup> 4 </sup>. بل إنها لن تختار بذل جهد للحصول على المكافآت بنشاط. هذه النتائج، وغيرها الكثير، أرست صلة أساسية بين الدوبامين والدافعية<sup> 5</sup> . حتى تباطؤ الحركة الذي لوحظ في الحالات الأقل حدة من مرض باركنسون يمكن اعتباره عجزًا تحفيزيًا، مما يعكس قرارات ضمنية مفادها أنه لا يستحق بذل الطاقة اللازمة للحركات الأسرع 6.
ثم (في ثمانينيات القرن الماضي) ظهرت تسجيلات رائدة لخلايا الدوبامين العصبية في قرود أثناء سلوكها (في مناطق الدماغ المتوسط التي تُسقط على الدماغ الأمامي: المنطقة السقيفية البطنية، VTA / المادة السوداء المدمجة، SNc). ومن بين أنماط إطلاق النبضات العصبية المرصودة، كانت هناك دفعات قصيرة من النشاط استجابةً للمحفزات التي أدت إلى حركات فورية. وقد فُسِّر إطلاق الدوبامين "المرحلي" هذا في البداية على أنه يدعم "التنشيط السلوكي" 7 و"الإثارة التحفيزية" 8 - بعبارة أخرى، على أنه يُنشِّط سلوك الحيوان الحالي.
حدث تحول جذري في التسعينيات، مع إعادة تفسير نبضات الدوبامين الطورية على أنها ترميز لأخطاء توقع المكافأة (RPEs 9 ). استند هذا التفسير إلى ملاحظة أساسية: تستجيب خلايا الدوبامين للمحفزات غير المتوقعة المرتبطة بمكافأة مستقبلية، لكنها غالبًا ما تتوقف عن الاستجابة إذا أصبحت هذه المحفزات متوقعة 10. نشأت فكرة أخطاء توقع المكافأة في نظريات التعلم السابقة، وخاصة في مجال التعلم المعزز في علوم الحاسوب الذي كان في طور التطور آنذاك 11. تتمثل وظيفة إشارة أخطاء توقع المكافأة في تحديث القيم (تقديرات المكافآت المستقبلية). تُستخدم هذه القيم لاحقًا للمساعدة في اتخاذ خيارات تُعظم المكافأة. ولأن إطلاق خلايا الدوبامين يشبه أخطاء توقع المكافأة، ولأن هذه الأخطاء تُستخدم في التعلم، فقد أصبح من الطبيعي التأكيد على دور الدوبامين في التعلم. أكدت التجارب اللاحقة باستخدام علم البصريات الوراثية هوية خلايا ترميز أخطاء توقع المكافأة الدوبامينية 12 ، 13 ، وأظهرت أنها بالفعل تُعدل التعلم 14 ، 15.
تتناغم فكرة أن الدوبامين يُوفّر إشارة تعلّم بشكلٍ رائع مع الدراسات التي تُشير إلى أن الدوبامين يُعدّل اللدونة المشبكية في الجسم المخطط، وهو الهدف الرئيسي للدوبامين في الدماغ الأمامي. على سبيل المثال، يؤدي التزامن الثلاثي لتحفيز الغلوتامات لشوكة تشعبية في الجسم المخطط، وإزالة استقطاب ما بعد المشبك، وإطلاق الدوبامين، إلى نمو هذه الشوكة<sup> 16</sup> . يُساعد تعديل الدوبامين لآليات التعلّم طويلة الأمد في تفسير التأثيرات السلوكية المستمرة للأدوية المُسببة للإدمان، والتي تشترك في خاصية تعزيز إطلاق الدوبامين في الجسم المخطط<sup> 17</sup> . حتى أن فقدان الحركة الشديد المصاحب لنقص الدوبامين يُمكن تفسيره جزئيًا بآليات التعلّم هذه<sup> 18 </sup>. يُمكن اعتبار نقص الدوبامين بمثابة خطأ إدراكي سلبي مُستمر، يُحدّث قيم الأفعال تدريجيًا نحو الصفر. يُمكن أن تُحدث مضادات الدوبامين تأثيرات مُشابهة، تُشبه الانطفاء التدريجي، على السلوك<sup> 19 ، 20 </sup>.
ومع ذلك، لم تتلاشَ فكرةُ أن الدوبامين يلعب دورًا حاسمًا في التحفيز المستمر، بل على العكس، يعتبرها علماء الأعصاب السلوكيون أمرًا مفروغًا منه. وهذا أمرٌ منطقيٌّ بالنظر إلى الأدلة القوية التي تُشير إلى أن وظائف الدوبامين في التحفيز/الحركة/النشاط قابلةٌ للفصل عن التعلّم 15 ، 20-23 . أما التحدي الذي لا يحظى بالتقدير الكافي فهو التوفيق بين هذا الدور التحفيزي ونظرية أن الدوبامين يُوفّر إشارة تعلّم مُرتبطة بمعدل الجهد المُدرَك.
الدافع "يتطلع إلى الأمام": يستخدم التنبؤات بالمكافأة المستقبلية (القيم) لتنشيط السلوك الحالي بشكل مناسب. على النقيض من ذلك ، فإن التعلم "ينظر إلى الوراء" في الحالات والإجراءات في الماضي القريب ، ويقوم بتحديث قيمها. هذه مراحل تكميلية للدورة: يمكن استخدام القيم المحدّثة في اتخاذ القرارات اللاحقة إذا تمت إعادة مواجهة تلك الحالات ، ثم تحديثها مرة أخرى ، وهكذا دواليك. ولكن ما هي المرحلة من الدورة التي يشارك فيها الدوبامين - استخدام القيم لاتخاذ القرارات (الأداء) ، أو تحديث القيم (التعلم)؟
في بعض الحالات، يسهل تصور أن الدوبامين يؤدي كلا الدورين في آن واحد. ٢٤ تُعدّ الإشارات غير المتوقعة التي تتنبأ بالمكافأة أحداثًا نموذجية لتحفيز إطلاق الدوبامين من الخلايا العصبية، وعادةً ما تُنشّط هذه الإشارات السلوك وتُحفّز التعلّم ( الشكل ١ ). في هذه الحالة تحديدًا، يزداد كلٌّ من التنبؤ بالمكافأة وأخطاء التنبؤ بها في الوقت نفسه، ولكن هذا ليس هو الحال دائمًا. على سبيل المثال، غالبًا ما يكون لدى البشر والحيوانات الأخرى دافعٌ للعمل من أجل المكافآت حتى عندما لا يحدث شيءٌ مفاجئ أو يحدث القليل منه. وقد يبذلون جهدًا أكبر كلما اقتربوا من المكافأة (تزداد القيمة مع اقتراب المكافآت). الفكرة هي أن التعلّم والتحفيز مختلفان من الناحية المفاهيمية والحسابية والسلوكية، ومع ذلك يبدو أن الدوبامين يؤدي كلا الدورين.
الدوبامين: تحديث الماضي ، تنشيط الحاضر.
في الأعلى ، تمثل الدوائر ذات الأسهم الحالات والإجراءات المحتملة المنبثقة عنها. يشير عرض السهم إلى القيم المكتسبة لأداء كل إجراء. مع تلاشي الحالات/الأفعال في الماضي، تقل احتمالية تعزيزها تدريجيًا. في المنتصف ، تحدث زيادة مفاجئة في مستوى الدوبامين، مما يؤدي إلى تنشيط الإجراءات المتاحة من الحالة الحالية (باللون الأحمر)، ومرونة تمثيلات القيمة للإجراءات التي تم تنفيذها مؤخرًا (باللون الأرجواني). في الأسفل ، نتيجةً لهذه المرونة، تزداد القيم المرتبطة بهذه الحالات عند مواجهتها مرة أخرى (عرض السهم). من خلال التجربة المتكررة، يمكن للتعلم المعزز أن "يرسم مسارًا" عبر فضاء الحالات، مما يجعل مسارات معينة أكثر احتمالًا. بالإضافة إلى دوره في التعلم، يبدو أن دور الدوبامين في تنشيط الأداء يُسرّع التدفق على طول المسارات التي تم تعلمها مسبقًا.
فيما يلي أقوم بتقييم الأفكار الحالية بشكل نقدي حول كيفية تمكن الدوبامين من تحقيق وظائف التعلم والتحفيز. أقترح نموذجًا محدثًا ، استنادًا إلى ثلاث حقائق رئيسية: 1) لا ينشأ إطلاق الدوبامين من المحطات الطرفية ببساطة عن إطلاق خلايا الدوبامين ، ولكن يمكن أيضًا التحكم فيه محليًا ؛ 2) يؤثر الدوبامين على كل من اللدونة المشبكية وإثارة الخلايا المستهدفة ، مع عواقب واضحة للتعلم والأداء على التوالي ؛ 3) تأثيرات الدوبامين على اللدونة يمكن تشغيلها أو إيقافها بواسطة عناصر الدائرة القريبة. معًا ، قد تتيح هذه الميزات لدارات الدماغ التبديل بين رسالتين متميزتين من الدوبامين ، للتعلم والتحفيز على التوالي.
هل هناك إشارات الدوبامين "الطورية" و "المنشطة" المنفصلة ، ذات معان مختلفة؟
كثيرًا ما يُجادل بأن أدوار الدوبامين في التعلم والتحفيز تحدث على نطاقات زمنية مختلفة<sup> 25</sup> . تُطلق خلايا الدوبامين إشاراتها باستمرار ("بشكل متواصل") بمعدل بضع نبضات في الثانية، مع فترات قصيرة متقطعة ("طورية") من النبضات أو التوقفات. تُحفز هذه النبضات، خاصةً إذا تمت مزامنتها اصطناعيًا بين خلايا الدوبامين، زيادات سريعة مقابلة في مستوى الدوبامين في الدماغ الأمامي<sup> 26</sup> ، وهي زيادات عابرة للغاية (مدة أقل من ثانية<sup> 27</sup> ). أما المساهمة المنفصلة لإطلاق إشارات خلايا الدوبامين بشكل متواصل في تركيزات الدوبامين في الدماغ الأمامي فهي أقل وضوحًا. تشير بعض الأدلة إلى أن هذه المساهمة ضئيلة جدًا<sup> 28 </sup>. قد يكون كافيًا لإنتاج تحفيز شبه متواصل لمستقبلات D2 ذات الألفة العالية، مما يسمح للنظام بملاحظة التوقفات القصيرة في إطلاق إشارات خلايا الدوبامين<sup> 29</sup> واستخدام هذه التوقفات كأخطاء تنبؤ سلبية.
استُخدمت تقنية التحليل المجهري للغشاء على نطاق واسع لقياس مستويات الدوبامين في الدماغ الأمامي مباشرةً، وإن كان ذلك بدقة زمنية منخفضة (عادةً ما يتم حساب المتوسط على مدى عدة دقائق). قد يكون من الصعب ربط هذه القياسات البطيئة للدوبامين بالسلوك بدقة. ومع ذلك، يُظهر التحليل المجهري للغشاء للدوبامين في النواة المتكئة (NAc؛ الجسم المخطط البطني/الإنسي) ارتباطات إيجابية بالنشاط الحركي 30 ومؤشرات أخرى للتحفيز 5. وقد فُسِّر هذا على نطاق واسع على أنه يعني وجود تغيرات بطيئة ("مستمرة") في تركيز الدوبامين، وأن هذه التغيرات البطيئة تحمل إشارة تحفيزية. وبشكل أكثر تحديدًا، اقترحت النماذج الحاسوبية أن مستويات الدوبامين المستمرة تتبع متوسط معدل المكافأة على المدى الطويل 31 - وهو متغير تحفيزي مفيد لتخصيص الوقت واتخاذ قرارات البحث عن الطعام. ومن الجدير بالذكر أن عددًا قليلًا جدًا من الأبحاث يُعرّف بوضوح مستويات الدوبامين "المستمرة" - فهي عادةً ما تفترض فقط أن تركيز الدوبامين يتغير ببطء على مدى عدة دقائق من النطاق الزمني للتحليل المجهري للغشاء.
ومع ذلك، فإن هذا التصور القائل بأن "الدوبامين الطوري = معدل الجهد المُدرَك/التعلم، والدوبامين المستمر = الدافع" يواجه العديد من المشكلات. أولًا، لا يوجد دليل مباشر على أن معدل إطلاق الدوبامين المستمر يتغير عادةً على مدى فترات زمنية طويلة. فمعدلات إطلاق الدوبامين المستمر لا تتغير بتغير الدافع 32 ، 33. وقد قيل إن مستويات الدوبامين المستمر تتغير نتيجة لتغير نسبة خلايا الدوبامين النشطة 34 ، 35. ولكن في العديد من الدراسات التي أُجريت على حيوانات غير مُعالجة دوائيًا وغير مصابة بأي آفات، لم يُرصد قط أن خلايا الدوبامين تنتقل بين حالتي السكون والنشاط.
علاوة على ذلك، فإن حقيقة أن قياس مستويات الدوبامين بتقنية الميكرودياليز بطيء لا تعني بالضرورة أن مستويات الدوبامين تتغير ببطء. وقد قمنا مؤخرًا (15) بدراسة دوبامين النواة المتكئة (NAc) في الفئران ضمن مهمة مكافأة احتمالية، باستخدام كلٍ من الميكرودياليز والفولتامترية الدورية سريعة المسح. وأكدنا أن دوبامين الجهاز الحوفي المتوسط، كما تم قياسه بالميكرودياليز، يرتبط بمعدل المكافأة (مكافآت/دقيقة). ومع ذلك، حتى مع تحسين الدقة الزمنية للميكرودياليز (دقيقة واحدة)، ظل مستوى الدوبامين متذبذبًا بنفس سرعة قياسنا له: لم نرَ أي دليل على وجود إشارة دوبامين بطيئة بطبيعتها.
باستخدام الدقة الزمنية الدقيقة التي لا تزال من قياس الجهد ، لاحظنا وجود علاقة وثيقة بين تقلبات الدوبامين دون الثانية والدافع. مع قيام الفئران بتسلسل الإجراءات اللازمة لتحقيق المكافآت ، ارتفع الدوبامين لأعلى وأعلى ، ووصل إلى الذروة مثلما حصلوا على المكافأة (وانخفضوا بسرعة أثناء استهلاكهم لها). لقد أظهرنا أن الدوبامين يرتبط بقوة مع قيمة الحالة الآنية المحددة كمكافأة مستقبلية متوقعة ، مخصومة من الوقت المتوقع اللازم لاستلامها. يمكن لديناميات الدوبامين السريعة هذه أن تفسر أيضًا نتائج غسيل الكلى ، دون استخدام إشارات الدوبامين المنفصلة على نطاقات زمنية مختلفة. كما تواجه الحيوانات المزيد من المكافآت ، فإنها تزيد من توقعاتهم بشأن المكافآت المستقبلية في كل خطوة في التسلسل التجريبي. بدلاً من الإشارة إلى معدل معدل المكافأة ببطء ، فإن العلاقة بين الدوبامين ومعدل المكافأة تفسر بشكل أفضل كمتوسط ، على مدى فترة جمع عينة التحليل الجزئي المطول ، لقيم الحالة المتطورة بسرعة.
يتوافق هذا التفسير القيمي لإطلاق الدوبامين في الجهاز الحوفي المتوسط مع نتائج قياس الفولتية من مجموعات بحثية أخرى، والتي وجدت مرارًا وتكرارًا أن إطلاق الدوبامين يزداد مع ازدياد القرب من المكافأة 36-38 ( الشكل 2 ) . هذه الإشارة التحفيزية ليست "بطيئة" بطبيعتها، بل يمكن ملاحظتها عبر نطاق زمني متصل. على الرغم من أن ازدياد إطلاق الدوبامين قد يستمر لعدة ثوانٍ عندما يستمر سلوك الاقتراب أيضًا لعدة ثوانٍ 38 ، إلا أن هذا يعكس المسار الزمني للسلوك، وليس ديناميكيات الدوبامين الذاتية. تظهر العلاقة بين إطلاق الدوبامين في الجهاز الحوفي المتوسط والقيمة المتقلبة بأسرع ما تسمح به تقنية التسجيل، أي على نطاق زمني يبلغ حوالي 100 مللي ثانية باستخدام أقطاب قياس الفولتية الحادة 15.
تقلبات الدوبامين السريعة تشير إلى توقعات المكافآت المتغيرة ديناميكيًا.
أ) يزداد إفراز الدوبامين في الجهاز الحوفي المتوسط بسرعة كلما اقتربت الفئران من المكافآت المتوقعة. د) تزداد القيمة، المُعرَّفة بأنها تقديرات مُخفَّضة زمنيًا للمكافأة المستقبلية، كلما اقتربت المكافأة. تُسبب الإشارات التي تُشير إلى أن المكافأة أكبر أو أقرب أو أكثر يقينًا مما كان متوقعًا سابقًا قفزات في القيمة. تُعرف هذه القفزات من لحظة إلى أخرى باسم تقديرات المكافأة المتوقعة للفروق الزمنية. هـ) قد يؤدي طرح "الخطوط الأساسية" إلى تشويش إشارات القيمة وتقديرات المكافأة المتوقعة. على اليسار، يبدو أن الدوبامين المُحاذي للإشارة المُتنبئة بالمكافأة (عند الزمن صفر)، مع طرح الخط الأساسي التقليدي، يُظهر أن الدوبامين يقفز إلى مستويات أعلى عندما تكون المكافأة أقل توقعًا (باللون البني)، مما يُشبه إشارة تقدير المكافأة المتوقعة. على اليمين، يُظهر عرض بديل لنفس البيانات، مع مساواة مستويات الدوبامين بعد الإشارة، أن مستويات الدوبامين قبل الإشارة تعتمد على توقع المكافأة (القيمة). حددت تحليلات إضافية أن العرض على الجانب الأيمن أقرب إلى الحقيقة (انظر التفاصيل في المرجع 15 ). اللوحة (أ) مُعاد إنتاجها، بإذن، من المرجع 38 ، ماكميلان للنشر المحدودة...؛ اللوحة (ب) مُعاد إنتاجها، بإذن، من المرجع 37 ، إلسيفير؛ اللوحات (ج، هـ) مُعاد إنتاجها، بإذن، من المرجع 15 ، ماكميلان للنشر المحدودة
لا تعكس تقلبات الدوبامين السريعة الدافع فحسب، بل تحفز السلوك التحفيزي بشكل مباشر. تتنبأ الاستجابات الطورية الأكبر لخلايا الدوبامين لإشارات التحفيز بأوقات رد فعل أقصر في نفس التجربة<sup> 39</sup> . يزيد التحفيز البصري الوراثي لخلايا الدوبامين في منطقة السقيفية البطنية من احتمالية بدء الفئران العمل في مهمة المكافأة الاحتمالية<sup> 15</sup> ، كما لو كان لديها توقع أعلى للمكافأة. يزيد التحفيز البصري الوراثي لخلايا الدوبامين في المادة السوداء المدمجة، أو محاورها في الجسم المخطط الظهري، من احتمالية الحركة<sup> 40 ، 41 </sup>. والأهم من ذلك، أن هذه التأثيرات السلوكية تظهر في غضون بضع مئات من المللي ثانية من بدء التحفيز البصري الوراثي. يبدو أن قدرة إشارات التنبؤ بالمكافأة على تعزيز الدافع تتوسطها تعديلات دوبامينية سريعة جدًا لاستثارة الخلايا العصبية الشوكية في النواة المتكئة<sup> 42</sup> . بما أن الدوبامين يتغير بسرعة، وهذه التغيرات في الدوبامين تؤثر على الدافع بسرعة، فإن الوظائف التحفيزية للدوبامين توصف بشكل أفضل بأنها سريعة ("طورية")، وليست بطيئة ("مستمرة").
علاوة على ذلك ، فإن استدعاء مقاييس زمنية منفصلة سريعة وبطيئة لا يحل في حد ذاته مشكلة فك التشفير التي تواجهها الخلايا العصبية بمستقبلات الدوبامين. إذا كان الدوبامين يشير إلى التعلم ، فإن تعديل اللدونة المشبكية يبدو استجابة خلوية مناسبة. لكن التأثيرات الفورية على السلوك المحفز تتضمن تأثيرات فورية على الارتفاع المفاجئ - على سبيل المثال من خلال التغيرات السريعة في الاستثارة. يمكن أن يكون للدوبامين كل من هذه التأثيرات بعد المشبكي (وأكثر) ، فهل تركيز الدوبامين المعطى له معنى محدد؟ أم أن هذا المعنى يحتاج إلى البناء - على سبيل المثال عن طريق مقارنة مستويات الدوبامين عبر الزمن ، أو باستخدام إشارات متزامنة أخرى لتحديد الآلية الخلوية التي يجب إشراكها؟ تتم مناقشة هذا الاحتمال بمزيد من التفصيل أدناه.
هل ينقل إطلاق الدوبامين نفس المعلومات مثل إطلاق خلايا الدوبامين؟
تبدو العلاقة بين تقلبات الدوبامين السريعة والقيمة التحفيزية غريبة، نظرًا لأن إطلاق خلايا الدوبامين يشبه في الواقع معدل الخطأ المُدرَك (RPE). علاوة على ذلك، أشارت بعض الدراسات إلى وجود إشارات RPE في إطلاق الدوبامين في الجهاز الحوفي المتوسطي<sup> 43</sup> . من المهم ملاحظة وجود تحدٍّ في تفسير بعض أنواع البيانات العصبية. ترتبط إشارات القيمة ومعدلات الخطأ المُدرَكة (RPE) ببعضها البعض، وهذا ليس مفاجئًا لأن معدل الخطأ المُدرَك يُعرَّف عادةً بأنه التغير في القيمة من لحظة إلى أخرى (RPE "الفرق الزمني"). نظرًا لهذا الارتباط، من الضروري استخدام تصميمات تجريبية وتحليلات تميز بين القيمة ومعدلات الخطأ المُدرَكة. تتفاقم المشكلة عند استخدام مقياس عصبي يعتمد على التغيرات النسبية في الإشارة، بدلًا من التغيرات المطلقة. عادةً ما تقارن تحليلات الفولتامترية الدوبامين عند نقطة زمنية محددة مع فترة "أساسية" سابقة في كل تجربة (لإزالة مكونات الإشارة غير المعتمدة على الدوبامين، بما في ذلك شحن الأقطاب الكهربائية في كل مسح للجهد والانحراف على مدى دقائق). لكن طرح الفترة الأساسية قد يجعل إشارة القيمة تشبه إشارة معدل الخطأ المُدرَك. هذا ما لاحظناه في بيانات قياس الفولتية الخاصة بنا ( الشكل 2هـ ). انعكست التغيرات في توقع المكافأة في تغيرات تركيز الدوبامين في بداية كل تجربة، وهذه التغيرات لا تُلاحظ إذا افترضنا ثبات خط الأساس عبر التجارب<sup> 15 </sup>. لذا، يجب التعامل بحذر مع الاستنتاجات المتعلقة بإطلاق الدوبامين وتشفير معدل التوقع للمكافأة. لا يقتصر خطر تفسير هذه البيانات على قياس الفولتية فحسب، بل يشمل أي تحليل يعتمد على التغيرات النسبية، بما في ذلك على الأرجح بعض تقنيات التصوير بالرنين المغناطيسي الوظيفي والقياس الضوئي<sup> 44</sup>.
مع ذلك، لا يزال يتعين علينا التوفيق بين إطلاق الدوبامين المرتبط بالقيمة في النواة المتكئة (NAc) وبين الغياب المستمر لإطلاق الدوبامين المرتبط بالقيمة من قِبَل الخلايا العصبية الدوبامينية<sup> 13</sup> ، حتى داخل منطقة السقيفية البطنية الجانبية (VTA) التي تُزوِّد النواة المتكئة بالدوبامين<sup> 45 </sup>. أحد العوامل المحتملة هو أن خلايا الدوبامين تُسجَّل عادةً في حيوانات مُقيَّدة الرأس أثناء أداء مهام التكييف الكلاسيكي، بينما يُقاس إطلاق الدوبامين عادةً في حيوانات غير مُقيَّدة تتحرك بنشاط في بيئتها. لقد اقترحنا أن الدوبامين في الجهاز الحوفي المتوسط قد يُشير تحديدًا إلى قيمة "العمل"<sup> 15</sup> - أي أنه يعكس ضرورة تكريس الوقت والجهد للحصول على المكافأة. وتماشيًا مع ذلك، يزداد الدوبامين مع الإشارات التي تُوجِّه الحركة، ولكن ليس مع الإشارات التي تُوجِّه السكون، حتى عندما تُشير إلى مكافأة مستقبلية مماثلة<sup> 46</sup> . إذا لم تكن هناك فائدة من "العمل" النشط - كما هو الحال في العديد من مهام التكييف الكلاسيكي - فقد تكون التغيرات الدوبامينية التي تُشير إلى قيمة العمل أقل وضوحًا.
الأهم من ذلك، أن إطلاق الدوبامين يمكن التحكم به محليًا في النهايات العصبية نفسها، وبالتالي يُظهر أنماطًا مكانية وزمانية مستقلة عن نشاط الخلايا العصبية. على سبيل المثال، يمكن للوزة القاعدية الجانبية (BLA) التأثير على إطلاق الدوبامين في النواة المتكئة (NAc) حتى عند تعطيل منطقة السقيفية البطنية (VTA)<sup> 47</sup> . في المقابل، يؤدي تعطيل اللوزة القاعدية الجانبية إلى تقليل إطلاق الدوبامين في النواة المتكئة والسلوك التحفيزي المصاحب، دون التأثير على ما يبدو على نشاط منطقة السقيفية البطنية<sup> 48 </sup>. تحتوي نهايات الدوبامين على مستقبلات لمجموعة من النواقل العصبية، بما في ذلك الغلوتامات والأفيونيات والأستيل كولين. تسمح مستقبلات الأستيل كولين النيكوتينية للخلايا العصبية البينية الكولينية في الجسم المخطط بالتحكم السريع في إطلاق الدوبامين<sup> 49 ، 50 </sup> . على الرغم من أنه لوحظ منذ فترة طويلة أن التحكم المحلي في إطلاق الدوبامين ذو أهمية محتملة<sup> 7 ، 51</sup> ، إلا أنه لم يُدرج في الحسابات الحاسوبية لوظيفة الدوبامين. أقترح أن ديناميكيات إطلاق الدوبامين المرتبطة بترميز القيمة تنشأ إلى حد كبير من خلال التحكم المحلي ، حتى مع توفير إطلاق خلايا الدوبامين لإشارات مهمة تشبه إشارات RPE للتعلم.
كيف يمكن أن يعني الدوبامين كلاً من التعلم والتحفيز دون لبس؟
من حيث المبدأ، تكفي إشارة القيمة لنقل RPE أيضًا، لأن RPEs الناتجة عن الفروق الزمنية هي ببساطة تغيرات سريعة في القيمة ( الشكل 2ب ). على سبيل المثال، قد تكون المسارات الخلوية المختلفة في الخلايا العصبية المستهدفة حساسة بشكل مختلف للتركيز المطلق للدوبامين (الذي يمثل القيمة) مقابل التغيرات النسبية السريعة في التركيز (التي تمثل RPE). يبدو هذا المخطط معقولًا، نظرًا لتعديل الدوبامين المعقد لوظائف الخلايا العصبية الشوكية 52 وحساسيتها للأنماط الزمنية لتركيز الكالسيوم 53. ومع ذلك، يبدو هذا أيضًا زائدًا عن الحاجة إلى حد ما. إذا كانت هناك إشارة شبيهة بـ RPE موجودة بالفعل في إطلاق الخلايا الدوبامينية، فينبغي أن يكون من الممكن استخدامها بدلًا من إعادة اشتقاق RPE من إشارة القيمة.
لاستخدام إشارات RPE وإشارات القيمة المتميزة بشكل مناسب، قد تُغير الدوائر المستقبلة للدوبامين طريقة تفسيرها للدوبامين بشكل فعال. وهناك أدلة مثيرة للاهتمام تشير إلى أن الأستيل كولين قد يؤدي هذا الدور التحويلي أيضًا. ففي الوقت الذي تُطلق فيه خلايا الدوبامين دفعات من النبضات استجابةً لإشارات غير متوقعة، تُظهر الخلايا العصبية الكولينية (CINs) توقفات قصيرة (حوالي 150 مللي ثانية) في إطلاق النبضات، والتي لا تتناسب مع قيم RPE 54. ويمكن أن تُحفز هذه التوقفات بواسطة الخلايا العصبية GABAergic في منطقة VTA 55 ، بالإضافة إلى الخلايا المرتبطة بـ "المفاجأة" في المهاد داخل الصفيحة، وقد اقتُرح أنها تعمل كإشارة ارتباط تُعزز التعلم 56. واقترح موريس وبيرغمان 54 أن التوقفات الكولينية تُحدد نوافذ زمنية لللدونة المخططية، والتي يمكن خلالها استخدام الدوبامين كإشارة تعلم. ويتم تثبيط اللدونة المعتمدة على الدوبامين باستمرار بواسطة آليات تشمل مستقبلات m4 المسكارينية على الخلايا العصبية المخططية ذات المسار المباشر 57 . تشير نماذج الإشارات داخل الخلايا إلى أنه أثناء فترات توقف CIN، قد يعمل غياب ارتباط m4 بشكل تآزري مع دفعات الدوبامين الطورية لتعزيز تنشيط PKA 58 ، وبالتالي تعزيز التغيير المشبكي.
وبالتالي، تتمتع الخلايا الكولينية في الجسم المخطط بموقع مثالي لتغيير معنى الرسالة الدوبامينية المتعددة بشكل ديناميكي. خلال فترات توقف الخلايا الكولينية غير المحفزة (CIN)، يسمح تخفيف الحصار المسكاريني على اللدونة المشبكية باستخدام الدوبامين للتعلم. وفي أوقات أخرى، يتم تعديل إطلاق الدوبامين من النهايات العصبية محليًا للتأثير على الأداء السلوكي الجاري. حاليًا، هذا الاقتراح نظري وغير مكتمل. وقد طُرحت فكرة أن الخلايا الكولينية غير المحفزة (CIN) تدمج المعلومات من العديد من الخلايا العصبية الشوكية المحيطة لاستخلاص إشارات مفيدة على مستوى الشبكة، مثل الإنتروبيا 59 ، 60. ولكن ليس من الواضح على الإطلاق ما إذا كان من الممكن استخدام ديناميكيات نشاط الخلايا الكولينية غير المحفزة (CIN) لتوليد إشارات قيمة الدوبامين 61 ، وكذلك لتنظيم إشارات تعلم الدوبامين.
هل الدوبامين يعني نفس الشيء في جميع أجزاء الدماغ الأمامي؟
مع ترسيخ فكرة خطأ التنبؤ (RPE)، تم تصور أن الدوبامين إشارة شاملة، تنقل رسالة خطأ عبر الجسم المخطط والقشرة الأمامية. أكد شولتز أن خلايا الدوبامين في القرود في جميع أنحاء منطقة السقيفية البطنية (VTA) والمادة السوداء المدمجة (SNc) تُظهر استجابات متشابهة للغاية<sup> 62 </sup>. كما وجدت دراسات أجريت على خلايا الدوبامين المحددة استجابات متجانسة إلى حد كبير تشبه استجابة خطأ التنبؤ في القوارض، على الأقل بالنسبة لخلايا VTA الجانبية في سياقات التكييف الكلاسيكي<sup > 13 </sup>. ومع ذلك، فإن خلايا الدوبامين متنوعة جزيئيًا وفيزيولوجيًا<sup> 63-65 </sup> ، وهناك الآن العديد من التقارير التي تشير إلى أنها تُظهر أنماط إطلاق متنوعة في الحيوانات أثناء سلوكها. وتشمل هذه الأنماط زيادات طورية في إطلاق الإشارات استجابةً للأحداث المنفرة<sup> 66</sup> وإشارات التحفيز<sup> 67</sup> التي لا تتناسب جيدًا مع تفسير خطأ التنبؤ القياسي. تُظهر العديد من خلايا الدوبامين استجابة أولية قصيرة الكمون للأحداث الحسية تعكس المفاجأة أو "التنبيه" أكثر من كونها ترميزًا محددًا لخطأ التنبؤ<sup> 68 ، 69 </sup> . يبرز هذا الجانب التنبيهي بشكل أكبر في المادة السوداء المدمجة (SNc) 69 ، حيث تُسقط خلايا الدوبامين بشكل أكبر على الجسم المخطط الظهري/الجانبي "الحسي الحركي" (DLS 45 ، 63 ). كما أُفيد أن مجموعات فرعية من خلايا الدوبامين في المادة السوداء المدمجة (SNc) تزيد أو تنقص من معدل إطلاقها بالتزامن مع الحركات التلقائية، حتى بدون مؤثرات خارجية.
استخدمت عدة مجموعات تقنية قياس الضوء الليفي ومؤشر الكالسيوم GCaMP لدراسة النشاط الكلي لمجموعات فرعية من خلايا الدوبامين العصبية 71 ، 72. أظهرت خلايا الدوبامين التي تُسقط على الجسم المخطط الظهري/الإنسي (DMS) انخفاضًا عابرًا في النشاط استجابةً للصدمات القصيرة غير المتوقعة، بينما أظهرت تلك التي تُسقط على الجسم المخطط الظهري الجانبي (DLS) زيادة في النشاط 71 ، وهو ما يتوافق بشكل أكبر مع استجابة التنبيه. كما لوحظت استجابات دوبامينية متميزة في مناطق فرعية مختلفة من الدماغ الأمامي باستخدام GCaMP لدراسة نشاط محاور الدوبامين ونهاياتها 40 ، 72 ، 73. باستخدام التصوير ثنائي الفوتون في الفئران المُقيدة الرأس، أبلغ هاو ودومبيك 40 عن نشاط دوباميني طوري مرتبط بالحركات التلقائية. وقد لوحظ هذا بشكل أساسي في محاور الدوبامين الفردية من المادة السوداء المدمجة (SNc) التي تنتهي في الجسم المخطط الظهري، بينما استجابت محاور الدوبامين في منطقة السقيفية البطنية (VTA) في النواة المتكئة (NAc) بشكل أكبر لتقديم المكافأة. ووجد آخرون أيضًا نشاطًا دوبامينيًا مرتبطًا بالمكافأة في النواة المتكئة، بينما يرتبط DMS بشكل أكبر بالأفعال المقابلة 72 والذيل الخلفي للمخطط الذي يستجيب للمحفزات المنفرة والجديدة 74.
تكشف القياسات المباشرة لإطلاق الدوبامين أيضًا عن تباين بين المناطق الفرعية 30 ، 75. وباستخدام تقنية التحليل المجهري، وجدنا أن الدوبامين يرتبط بالقيمة تحديدًا في النواة المتكئة (NAc) والقشرة الجبهية البطنية الإنسية، وليس في الأجزاء الإنسية الأخرى من الجسم المخطط (قشرة النواة المتكئة، DMS) أو القشرة الجبهية. وهذا مثير للاهتمام، إذ يبدو أنه يتوافق جيدًا مع منطقتين رئيسيتين لترميز القيمة، واللتين لوحظتا باستمرار في دراسات التصوير بالرنين المغناطيسي الوظيفي البشري 76 ، 77. وعلى وجه الخصوص، تزداد إشارة BOLD في النواة المتكئة، والتي ترتبط ارتباطًا وثيقًا بإشارات الدوبامين 78 ، مع توقع المكافأة (القيمة) - أكثر من ارتباطها بتقدير المكافأة المُدرك 76.
سواءً نشأت هذه الأنماط المكانية لإطلاق الدوبامين من تنشيط مجموعات فرعية متميزة من خلايا الدوبامين، أو من التحكم الموضعي في إطلاق الدوبامين، أو كليهما، فإنها تُشكك في فكرة وجود رسالة دوبامين شاملة. قد يستنتج المرء أن للدوبامين وظائف متعددة، حيث يُشير الدوبامين في الجسم المخطط الظهري (على سبيل المثال) إلى "الحركة"، بينما يُشير الدوبامين في الجسم المخطط البطني (على سبيل المثال) إلى "المكافأة"<sup> 40 </sup>. مع ذلك، أُفضّل منهجًا مفاهيميًا آخر. تتلقى المناطق الفرعية المختلفة للجسم المخطط مدخلات من مناطق قشرية مختلفة، وبالتالي تُعالج أنواعًا مختلفة من المعلومات. ومع ذلك، تشترك كل منطقة فرعية في بنية دارة دقيقة مشتركة، بما في ذلك الخلايا العصبية الشوكية التي تحمل مستقبلات D1 مقابل مستقبلات D2<sup> 79 </sup>، والخلايا العصبية البينية المركزية (CINs)، وما إلى ذلك. على الرغم من شيوع الإشارة إلى المناطق الفرعية المختلفة للجسم المخطط (مثل DLS وDMS ونواة NAc) كما لو كانت مناطق منفصلة، إلا أنه لا توجد حدود تشريحية واضحة بينها (قشرة NAc أكثر تميزًا من الناحية الكيميائية العصبية). بدلاً من ذلك، توجد تدرجات طفيفة في كثافة المستقبلات، ونسب الخلايا العصبية البينية، وما إلى ذلك، والتي تبدو أشبه بتعديلات طفيفة على معايير خوارزمية حسابية مشتركة. بالنظر إلى هذه البنية المشتركة، هل يمكننا وصف وظيفة مشتركة للدوبامين، بمعزل عن المعلومات المحددة التي تتعامل معها كل منطقة فرعية؟
الدوبامين Striatal وتخصيص موارد محدودة.
أقترح أن مجموعة متنوعة من تأثيرات الدوبامين المتباينة على السلوك الجاري يمكن فهمها على أنها تعديل لقرارات تخصيص الموارد . على وجه التحديد، يوفر الدوبامين تقديرات لمدى جدوى استهلاك مورد داخلي محدود، ويختلف هذا المورد باختلاف المناطق الفرعية للجسم المخطط. بالنسبة للجسم المخطط "الحركي" (الجانب الظهري الجانبي)، يتمثل المورد في الحركة، وهي محدودة لأن الحركة تتطلب طاقة، ولأن العديد من الأفعال غير متوافقة مع بعضها البعض . يؤدي ارتفاع مستوى الدوبامين إلى زيادة احتمالية أن يقرر الحيوان أن الحركة تستحق استهلاك الطاقة، أو أن يتحرك بشكل أسرع . تجدر الإشارة إلى أن إشارة الدوبامين التي تشفر "جدوى الحركة" ستنتج ارتباطات بين الدوبامين والحركة ، حتى بدون أن يشفر الدوبامين "الحركة" بحد ذاتها.
بالنسبة للمخطط "المعرفي" (المخطط DMS)، تتمثل الموارد في العمليات المعرفية، بما في ذلك الانتباه (ذي السعة المحدودة بحكم التعريف 82 ) والذاكرة العاملة 83. في غياب الدوبامين، تُهمل الإشارات الخارجية البارزة التي عادةً ما تحفز حركات التوجيه، كما لو كانت أقل أهمية 3. علاوة على ذلك، فإن توجيه عمليات التحكم المعرفي بشكل متعمد أمرٌ شاق (مكلف 84 ). يلعب الدوبامين - وخاصة في المخطط DMS 85 - دورًا رئيسيًا في تحديد ما إذا كان الأمر يستحق بذل هذا الجهد 86 ، 87. قد يشمل ذلك ما إذا كان ينبغي استخدام استراتيجيات اتخاذ قرارات أكثر تطلبًا معرفيًا وتأملية ("قائمة على النموذج") 88.
بالنسبة للجسم المخطط "التحفيزي" (المجاور للنواة المتكئة)، قد يكون وقت الحيوان أحد الموارد المحدودة الرئيسية. لا يُشترط وجود الدوبامين في المسار الميزوليمبي عندما تؤدي الحيوانات فعلًا بسيطًا وثابتًا للحصول على مكافآت سريعة 89. لكن العديد من أشكال المكافأة لا يمكن الحصول عليها إلا من خلال العمل المطوّل: سلاسل ممتدة من الأفعال غير المُكافأة، كما هو الحال في البحث عن الطعام. إن اختيار الانخراط في العمل يعني التخلي عن طرق أخرى مفيدة لقضاء الوقت. يشير ارتفاع مستوى الدوبامين في المسار الميزوليمبي إلى أن الانخراط في عمل شاق وممتد زمنيًا أمرٌ مُجدٍ، ولكن مع انخفاض مستوى الدوبامين، لا تُبالي الحيوانات، وقد تستعد للنوم بدلًا من ذلك 90.
ضمن كل دائرة من دوائر القشرة المخية والمخططية، يُعدّ دور الدوبامين في السلوك الجاري اقتصاديًا (يتعلق بتخصيص الموارد) وتحفيزيًا (يتعلق بجدوى إنفاق الموارد 81 ). هذه الدوائر ليست مستقلة تمامًا، بل لها تنظيم هرمي حلزوني: تؤثر الأجزاء البطنية من المخطط على خلايا الدوبامين التي تُسقط على الأجزاء الظهرية 5 ، 91. وبهذه الطريقة، قد تُساعد قرارات الانخراط في العمل على تنشيط الحركات المحددة والقصيرة المطلوبة. ولكن بشكل عام، يُوفر الدوبامين إشارات "تنشيطية" - تزيد من احتمالية اتخاذ قرار ما - بدلاً من إشارات "توجيهية" تُحدد كيفية إنفاق الموارد 5.
ما هو الدور الحسابي للدوبامين عند اتخاذ القرارات؟
إحدى طرق فهم هذا الدور التنشيطي هي من خلال "عتبات" اتخاذ القرار. في بعض النماذج الرياضية، تتزايد عمليات اتخاذ القرار حتى تصل إلى مستوى عتبة معينة، وعندها يلتزم النظام بفعل ما 92. ويُعادل ارتفاع مستوى الدوبامين انخفاض المسافة إلى العتبة، مما يُسرّع عملية اتخاذ القرارات. هذه الفكرة مبسطة، لكنها تُقدّم تنبؤات كمية تم تأكيدها. إن خفض عتبات الحركة يُحدث تغييرًا محددًا في شكل توزيع زمن رد الفعل، وهو ما يُلاحظ عند حقن الأمفيتامين في الجسم المخطط الحسي الحركي 20.
بدلاً من العتبات الثابتة، قد تكون البيانات السلوكية والعصبية أكثر ملاءمة إذا انخفضت العتبات بمرور الوقت، كما لو أن القرارات أصبحت أكثر إلحاحًا. وقد اقتُرح أن مخرجات العقد القاعدية توفر إشارة إلحاح متطورة ديناميكيًا، مما ينشط آليات الاختيار في القشرة الدماغية . كما كان الإلحاح أكبر عندما كانت المكافآت المستقبلية أقرب زمنيًا، مما يجعل هذا المفهوم مشابهًا لدور الدوبامين في ترميز القيمة وتنشيطها.
هل يكفي هذا الدور التنشيطي لوصف تأثيرات الدوبامين في الجسم المخطط على تعديل الأداء؟ يرتبط هذا بالتساؤل القديم حول ما إذا كانت دوائر العقد القاعدية تنتقي مباشرةً بين الأفعال المُكتسبة<sup> 80</sup> أم أنها تُعزز فقط الخيارات المُتخذة في أماكن أخرى<sup >93 ، 94</sup> . هناك طريقتان على الأقل يُمكن من خلالهما للدوبامين أن يُظهر تأثيرًا "اتجاهيًا" أكثر وضوحًا. الأولى هي عندما يعمل الدوبامين داخل منطقة فرعية من الدماغ تُعالج معلومات اتجاهية بطبيعتها. تلعب دوائر العقد القاعدية دورًا هامًا، وجزئيًا جانبيًا، في التوجيه نحو المكافآت المُحتملة والاقتراب منها. يُشارك النواة المذنبة في الرئيسيات (المنطقة الحركية الظهرية الإنسية) في توجيه حركات العين نحو الحقول المكانية المُقابلة<sup> 95</sup> . قد تُفسر إشارة الدوبامين التي تُشير إلى أن شيئًا ما في الفضاء المُقابل يستحق التوجيه نحوه الارتباط الملحوظ بين نشاط الدوبامين في المنطقة الحركية الظهرية الإنسية والحركات المُقابلة<sup> 72</sup> ، بالإضافة إلى السلوك الدوراني الناتج عن التلاعب بالدوبامين<sup> 96</sup> . يظهر تأثير "اتجاهي" ثانٍ للدوبامين عندما تؤدي آفات الدوبامين (الثنائية) إلى تحيز الفئران نحو الخيارات ذات الجهد المنخفض والمكافأة المنخفضة، بدلاً من البدائل ذات الجهد العالي والمكافأة العالية 97. قد يعكس هذا حقيقة أن بعض القرارات تكون متسلسلة أكثر منها متوازية، حيث تُقيّم الفئران (والبشر) الخيارات واحدًا تلو الآخر 98. في سياقات اتخاذ القرار هذه، قد يظل للدوبامين دور تنشيطي أساسي من خلال نقل قيمة الخيار قيد الدراسة حاليًا، والذي يمكن قبوله أو رفضه 24.
تتخذ الحيوانات النشطة قرارات على مستويات متعددة، وغالبًا بمعدلات عالية. وبالإضافة إلى التفكير في القرارات الفردية، قد يكون من المفيد النظر إلى المسار العام عبر سلسلة من الحالات ( الشكل 1 ). من خلال تسهيل الانتقالات من حالة إلى أخرى، قد يُسرّع الدوبامين التدفق على طول المسارات المُكتسبة<sup> 99</sup> . قد يرتبط هذا بالتأثير المهم للدوبامين على توقيت السلوك<sup> 44 ، 100</sup> . يتمثل أحد أهم مجالات البحث المستقبلية في اكتساب فهم أعمق لكيفية نشوء تأثيرات الدوبامين هذه على السلوك الجاري من الناحية الآلية، وذلك عن طريق تغيير معالجة المعلومات داخل الخلايا المفردة، والدوائر الدقيقة، وحلقات القشرة الدماغية والعقد القاعدية واسعة النطاق. كما أنني ركزت على الأدوار الحسابية المشتركة للدوبامين عبر مجموعة من الأهداف في الجسم المخطط، لكنني أهملت إلى حد كبير الأهداف القشرية، ويبقى أن نرى ما إذا كان من الممكن وصف وظائف الدوبامين في كلا البنيتين ضمن الإطار نفسه.
باختصار ، من شأن وصف دقيق للدوبامين أن يفسر كيف يمكنه الإشارة إلى كل من التعلم والتحفيز على نفس النطاقات الزمنية السريعة، دون أي لبس. كما سيفسر سبب تزامن إطلاق الدوبامين في الأهداف الرئيسية مع توقع المكافأة، على الرغم من أن نشاط خلايا الدوبامين لا يتزامن معها. وسيقدم تفسيراً حسابياً موحداً لتأثيرات الدوبامين في جميع أنحاء الجسم المخطط وأجزاء أخرى من الدماغ، مما يفسر التأثيرات السلوكية المتباينة على الحركة والإدراك والتوقيت. بعض الأفكار المطروحة هنا هي أفكار نظرية، ولكنها تهدف إلى تنشيط النقاشات والنماذج والتجارب الجديدة الدقيقة.
شكر وتقدير.
أشكر الزملاء العديدين الذين قدموا تعليقات ثاقبة على المسودات النصية السابقة ، بما في ذلك Kent Berridge و Peter Dayan و Brian Knutson و Jeff Beeler و Peter Redgrave و John Lisman و Jesse Goldberg والحكام المجهولون. يؤسفني أن قيود المساحة حالت دون مناقشة العديد من الدراسات السابقة الهامة. تم توفير الدعم الأساسي من قبل المعهد الوطني للاضطرابات العصبية والسكتة الدماغية ، والمعهد الوطني للصحة العقلية ، والمعهد الوطني لتعاطي المخدرات.

