โดปามีนในการสร้างแรงบันดาลใจ: การให้รางวัล aversive และการแจ้งเตือน (2010)

เซลล์ประสาท ต้นฉบับผู้เขียน; พร้อมใช้งานใน PMC Dec 9, 2011

เผยแพร่ในแบบฟอร์มการแก้ไขขั้นสุดท้ายเป็น:

PMCID: PMC3032992

NIHMSID: NIHMS253484

ดูบทความอื่น ๆ ใน PMC ที่ กล่าวถึง บทความที่ตีพิมพ์

ไปที่:

สรุป

เซลล์ประสาทโดปามีนในสมองส่วนกลางเป็นที่รู้จักกันดีสำหรับการตอบสนองที่แข็งแกร่งต่อผลตอบแทนและบทบาทที่สำคัญของพวกเขาในการสร้างแรงจูงใจในเชิงบวก มันชัดเจนมากขึ้นเรื่อย ๆ ว่าโดปามีนเซลล์ประสาทยังส่งสัญญาณที่เกี่ยวข้องกับประสบการณ์ที่สำคัญ แต่ไม่ใช่รางวัลเช่นเหตุการณ์ aversive และการแจ้งเตือน ที่นี่เราตรวจสอบความก้าวหน้าล่าสุดในการทำความเข้าใจกับฟังก์ชั่นการให้รางวัลและที่ไม่ใช่ของโดปามีน จากข้อมูลนี้เราเสนอว่าเซลล์โดปามีนมีหลายประเภทที่เชื่อมต่อกับเครือข่ายสมองที่แตกต่างกันและมีบทบาทที่แตกต่างกันในการควบคุมแรงจูงใจ เซลล์ประสาทโดปามีนบางตัวเข้ารหัสค่าสร้างแรงบันดาลใจสนับสนุนเครือข่ายสมองในการค้นหาประเมินและเรียนรู้คุณค่า คนอื่นเข้ารหัสความคิดสร้างแรงบันดาลใจสนับสนุนเครือข่ายสมองสำหรับการปรับทิศทางความรู้ความเข้าใจและแรงจูงใจทั่วไป เซลล์โดปามีนทั้งสองประเภทนั้นถูกเติมโดยสัญญาณเตือนที่เกี่ยวข้องกับการตรวจจับสัญญาณประสาทสัมผัสที่สำคัญอย่างรวดเร็ว เราตั้งสมมติฐานว่าเส้นทางโดปามีนเหล่านี้มีคุณค่าความสดใหม่และการแจ้งเตือนให้ความร่วมมือเพื่อสนับสนุนพฤติกรรมการปรับตัว

บทนำ

สารสื่อประสาทโดปามีน (DA) มีบทบาทสำคัญในการควบคุมแรงจูงใจในการเรียนรู้ว่าสิ่งใดในโลกที่ดีและไม่ดีและในการเลือกการกระทำเพื่อให้ได้สิ่งที่ดีและหลีกเลี่ยงสิ่งเลวร้าย แหล่งสำคัญของ DA ในเปลือกสมองและในพื้นที่ subcortical ส่วนใหญ่เป็น DA - ปล่อยเซลล์ประสาทของสมองส่วนกลาง, ตั้งอยู่ใน substantia nigra pars compacta (SNc) และ ventegal tegmental (VTA) (Bjorklund และ Dunnett, 2007) เซลล์ประสาทเหล่านี้ส่ง DA ในสองโหมด 'ยาชูกำลัง' และ 'phasic' (เกรซ 1991; เกรซและคณะ 2007) ในโหมดโทนิกของพวกเขาเซลล์ประสาท DA รักษาระดับ DA พื้นฐานในระดับคงที่ในโครงสร้างประสาทแบบปลายน้ำซึ่งมีความสำคัญสำหรับการเปิดใช้งานการทำงานปกติของวงจรประสาท (ชูลท์ซ 2007) ในโหมด phasic เซลล์ประสาท DA เพิ่มขึ้นอย่างรวดเร็วหรือลดอัตราการยิงของพวกเขาสำหรับ 100 – 500 มิลลิวินาทีทำให้เกิดการเปลี่ยนแปลงขนาดใหญ่ของความเข้มข้น DA ในโครงสร้างปลายน้ำยาวนานเป็นเวลาหลายวินาที (ชูลท์ซ 1998; ชูลท์ซ 2007).

การตอบสนอง DA แบบ phasic เหล่านี้เกิดขึ้นจากการให้รางวัลหลายประเภทและการชี้นำทางประสาทสัมผัสเกี่ยวกับการให้รางวัล (ชูลท์ซ 1998) และอยู่ในตำแหน่งที่เหมาะสมที่จะบรรลุบทบาทของ DA ในการควบคุมแรงจูงใจรวมถึงบทบาทในฐานะสัญญาณการสอนที่สนับสนุนการเรียนรู้เสริม (Schultz et al., 1997; ปรีชาญาณ 2005) และเป็นสัญญาณจูงใจที่ส่งเสริมการค้นหารางวัลทันที (Berridge และ Robinson, 1998) เป็นผลให้สัญญาณการให้รางวัล DA แบบ phasic เหล่านี้มีบทบาทสำคัญในทฤษฎีเกี่ยวกับการทำงานของวงจรเยื่อหุ้มสมองและวงจรย่อยและได้กลายเป็นหัวข้อของการวิจัยด้านประสาทวิทยาศาสตร์ที่เข้มข้น ในส่วนแรกของการตรวจสอบนี้เราจะแนะนำทฤษฎีดั้งเดิมของสัญญาณรางวัล Phasic DA และจะทบทวนความก้าวหน้าล่าสุดในการทำความเข้าใจธรรมชาติของพวกเขาและการควบคุมการประมวลผลและพฤติกรรมของระบบประสาท

ตรงกันข้ามกับบทบาทที่ยอมรับได้ของ DA ในการประมวลผลรางวัลมีการถกเถียงกันอย่างมากเกี่ยวกับบทบาทของกิจกรรม DA phasic DA ในการประมวลผลเหตุการณ์ที่ไม่คุ้มค่า ทฤษฎีบางข้อเสนอแนะว่าการตอบสนองของเซลล์ประสาทของ DA ส่วนใหญ่เข้ารหัสเหตุการณ์ที่เกี่ยวข้องกับการให้รางวัล (ชูลท์ซ 1998; ยกเว้น 2004; ชูลท์ซ 2007) ในขณะที่คนอื่น ๆ แนะนำว่าเซลล์ประสาท DA ส่งสัญญาณที่ไม่ได้รับรางวัลเพิ่มเติมที่เกี่ยวข้องกับประสบการณ์แปลกใหม่ที่เด่นชัดและแม้กระทั่ง aversive (Redgrave et al., 1999; Horvitz, 2000; Di Chiara, 2002; โจเซฟและคณะ 2003; Pezze และ Feldon, 2004; Lisman and Grace, 2005; เรดเกรฟและเกอร์นีย์ 2006) ในส่วนที่สองของการทบทวนนี้เราจะหารือเกี่ยวกับชุดของการศึกษาที่ได้นำทฤษฎีเหล่านี้ไปทดสอบและได้เปิดเผยมากเกี่ยวกับลักษณะของสัญญาณที่ไม่ได้รับรางวัลในเซลล์ประสาท DA โดยเฉพาะอย่างยิ่งการศึกษาเหล่านี้แสดงหลักฐานว่าเซลล์ประสาท DA มีความหลากหลายมากกว่าที่คิดไว้ก่อนหน้านี้ แทนที่จะเข้ารหัสสัญญาณสร้างแรงบันดาลใจที่เป็นเนื้อเดียวกันเซลล์ประสาท DA มีหลายประเภทที่เข้ารหัสรางวัลและเหตุการณ์ที่ไม่ได้รับรางวัลในลักษณะที่แตกต่างกัน สิ่งนี้ก่อให้เกิดปัญหาสำหรับทฤษฎีทั่วไปที่พยายามระบุโดปามีนด้วยสัญญาณประสาทเดียวหรือกลไกสร้างแรงบันดาลใจ

ในการแก้ไขภาวะที่กลืนไม่เข้าคายไม่ออกนี้ในส่วนสุดท้ายของการทบทวนนี้เราเสนอสมมติฐานใหม่เพื่ออธิบายการมีอยู่ของเซลล์ประสาท DA หลายชนิดลักษณะของสัญญาณประสาทและการรวมเข้ากับเครือข่ายสมองที่แตกต่างกันสำหรับการควบคุมแรงจูงใจ ข้อเสนอพื้นฐานของเรามีดังนี้ เซลล์ประสาท DA ประเภทหนึ่งเข้ารหัส ค่าที่สร้างแรงบันดาลใจรู้สึกตื่นเต้นกับการให้รางวัลเหตุการณ์และถูกยับยั้งโดยเหตุการณ์ aversive เซลล์ประสาทเหล่านี้สนับสนุนระบบสมองเพื่อค้นหาเป้าหมายประเมินผลและเรียนรู้คุณค่า เซลล์ประสาท DA ประเภทที่สองเข้ารหัส สร้างแรงบันดาลใจรู้สึกตื่นเต้นกับทั้งกิจกรรมที่คุ้มค่าและ aversive เซลล์ประสาทเหล่านี้สนับสนุนระบบสมองสำหรับการปรับทิศทางการประมวลผลทางปัญญาและการขับเคลื่อนที่สร้างแรงบันดาลใจ นอกเหนือจากคุณค่าและกิจกรรมการเข้ารหัสที่น่าสนใจแล้วเซลล์ประสาท DA ทั้งสองประเภทก็ยังส่งผ่าน การแจ้งเตือนสัญญาณเกิดจากการชี้นำทางประสาทสัมผัสที่ไม่คาดคิดซึ่งมีความสำคัญที่มีศักยภาพสูง เราตั้งสมมติฐานร่วมกันว่าคุณค่าความดีและการแจ้งเตือนสัญญาณเหล่านี้ให้ความร่วมมือในการประสานงานโครงสร้างสมองล่องและควบคุมพฤติกรรมที่กระตุ้น

โดปามีนในรางวัล: ทฤษฎีทั่วไป

โดปามีนในแรงจูงใจของการกระทำที่แสวงหารางวัล

โดปามีนเป็นที่ทราบกันมานานแล้วว่ามีความสำคัญต่อการเสริมแรงและแรงจูงใจในการกระทำ ยาเสพติดที่ขัดขวางการถ่ายทอด DA รบกวนการเรียนรู้การเสริมแรงในขณะที่กิจวัตรที่ส่งเสริมการถ่ายทอด DA เช่นการกระตุ้นสมองและยาเสพติดมักจะทำหน้าที่เป็นผู้สนับสนุนปรีชาญาณ 2004) การส่งสัญญาณ DA เป็นสิ่งสำคัญสำหรับการสร้างสภาวะของแรงจูงใจในการหารางวัล (Berridge และ Robinson, 1998; ซาลาโมนและคณะ, 2007) และสำหรับการสร้างความทรงจำของสมาคมคิวรางวัล (Dalley และคณะ 2005) การเปิดตัว DA นั้นไม่จำเป็นสำหรับการเรียนรู้ทุกรูปแบบและอาจไม่ 'ชอบ' ในแง่ของการทำให้เกิดความสุข แต่มันเป็นสิ่งสำคัญสำหรับการทำให้เป้าหมายกลายเป็น 'ต้องการ' ในแง่ของแรงจูงใจในการกระทำเพื่อให้บรรลุBerridge และ Robinson, 1998; Palmiter, 2008).

สมมติฐานหนึ่งเกี่ยวกับวิธีที่โดพามีนสนับสนุนการเรียนรู้การเสริมแรงคือปรับความแข็งแรงของการเชื่อมต่อระหว่างเซลล์ประสาท synaptic ข้อสมมุติฐานที่ตรงไปตรงมาที่สุดคือโดปามีนจะควบคุมพลาสติกซินแนปติกตามกฎฮีบรูที่ได้รับการแก้ไขซึ่งสามารถกล่าวอย่างคร่าว ๆ ว่า "เซลล์ประสาทที่รวมตัวเป็นเส้นลวดเข้าด้วยกันตราบใดที่พวกมันระเบิด กล่าวอีกนัยหนึ่งถ้าเซลล์ A เปิดใช้งานเซลล์ B และเซลล์ B ทำให้เกิดพฤติกรรมที่ส่งผลให้ได้รับรางวัลโดปามีนก็จะถูกปล่อยออกมาและการเชื่อมต่อ A → B จะได้รับการเสริมแรง (Montague et al., 1996; ชูลท์ซ 1998) กลไกนี้จะช่วยให้สิ่งมีชีวิตเรียนรู้ทางเลือกที่ดีที่สุดของการกระทำเพื่อรับผลตอบแทนที่ได้รับจากประสบการณ์การทดลองและข้อผิดพลาดที่เพียงพอ สอดคล้องกับสมมติฐานนี้โดพามีนมีอิทธิพลอย่างมากต่อซินดิแคปพลาสติกในสมองส่วนต่าง ๆ (Surmeier และคณะ 2010; ไปที่อื่น 2010; Molina-Luna และคณะ, 2009; Marowsky et al., 2005; Lisman and Grace, 2005) ในบางกรณีโดปามีนช่วยให้ซินดิแคปพลาสติกตามแนวของกฎฮีบรูที่อธิบายไว้ข้างต้นในลักษณะที่มีความสัมพันธ์กับพฤติกรรมการแสวงหารางวัล (Reynolds และคณะ, 2001) นอกจากผลกระทบของมันที่มีต่อพลาสติกซินแนปท์ระยะยาวโดพามีนยังสามารถควบคุมวงจรประสาทได้ทันทีโดยการปรับกิจกรรมการกระตุ้นประสาทและการเชื่อมต่อระหว่างเซลล์ประสาท synaptic ระหว่างเซลล์ประสาท (Surmeier และคณะ 2007; Robbins และ Arnsten, 2009) ในบางกรณีการทำเช่นนั้นในลักษณะที่จะส่งเสริมการกระทำที่แสวงหารางวัลทันที (แฟรงค์ 2005).

สัญญาณรางวัลเซลล์ประสาทโดพามีน

เพื่อกระตุ้นให้เกิดการกระทำที่นำไปสู่การให้รางวัลโดปามีนควรได้รับการปล่อยตัวในระหว่างการให้รางวัล อันที่จริงเซลล์ประสาท DA ส่วนใหญ่จะถูกกระตุ้นอย่างมากจากผลตอบแทนขั้นต้นที่ไม่คาดคิดเช่นอาหารและน้ำซึ่งมักจะสร้างกิจกรรม 'phasic' bursts 'ของกิจกรรม (ชูลท์ซ 1998) (การกระตุ้น phasic รวมถึง spikes หลายอัน (เกรซและบันนีย์ 1983)) อย่างไรก็ตามการศึกษาบุกเบิกของ Wolfram Schultz แสดงให้เห็นว่าการตอบสนองของเซลล์ประสาท DA เหล่านี้ไม่ได้ถูกกระตุ้นจากการบริโภคของรางวัล ต่อ se. แต่พวกเขามีลักษณะคล้ายกับ 'ข้อผิดพลาดการทำนายผลตอบแทน' รายงานความแตกต่างระหว่างรางวัลที่ได้รับและรางวัลที่คาดการณ์ไว้ว่าจะเกิดขึ้น (Schultz et al., 1997) (รูปที่ 1A) ดังนั้นหากรางวัลมีขนาดใหญ่กว่าที่คาดการณ์ไว้เซลล์ประสาท DA จะตื่นเต้นอย่างยิ่ง (ข้อผิดพลาดการคาดการณ์ในเชิงบวก รูปที่ 1E, สีแดง); หากรางวัลมีขนาดเล็กกว่าที่คาดการณ์ไว้หรือล้มเหลวที่จะเกิดขึ้นตามเวลาที่กำหนดเซลล์ประสาท DA จะถูกยับยั้ง phasically (ข้อผิดพลาดในการทำนายเชิงลบ รูปที่ 1E, สีน้ำเงิน); และถ้ารางวัลได้รับการเลื่อนล่วงหน้าเพื่อให้ขนาดของมันสามารถคาดเดาได้อย่างสมบูรณ์เซลล์ประสาท DA มีการตอบสนองเพียงเล็กน้อยหรือไม่มีเลย (ข้อผิดพลาดการทำนายศูนย์ รูป 1Cสีดำ) หลักการเดียวกันนี้ใช้สำหรับการตอบสนอง DA ต่อการชี้นำทางประสาทสัมผัสที่ให้ข้อมูลใหม่เกี่ยวกับรางวัลในอนาคต เซลล์ประสาท DA รู้สึกตื่นเต้นเมื่อคิวบ่งบอกถึงการเพิ่มขึ้นของมูลค่ารางวัลในอนาคต (รูป 1C, สีแดง) ยับยั้งเมื่อคิวแสดงการลดลงของมูลค่ารางวัลในอนาคต (รูป 1Cสีฟ้า) และโดยทั่วไปจะมีการตอบสนองต่อสัญญาณที่บ่งบอกว่าไม่มีข้อมูลรางวัลใหม่ (รูปที่ 1Eสีดำ) คำตอบของ DA เหล่านี้มีลักษณะคล้ายกับข้อผิดพลาดในการทำนายผลตอบแทนที่เรียกว่าข้อผิดพลาดชั่วคราวหรือ "ข้อผิดพลาด TD" ซึ่งได้รับการเสนอให้ทำหน้าที่เป็นสัญญาณเสริมสำหรับการเรียนรู้คุณค่าของการกระทำและสภาวะแวดล้อมHouk และคณะ, 1995; Montague et al., 1996; Schultz et al., 1997) แบบจำลองการคำนวณโดยใช้สัญญาณการเสริมแรงคล้าย TD สามารถอธิบายได้หลายแง่มุมของการเรียนรู้การเสริมแรงในมนุษย์สัตว์และเซลล์ประสาท DA (ซัตตันและบาร์โต 1981; Waelti และคณะ, 2001; Montague และ Berns, 2002; Dayan และ Niv, 2008).

รูป 1 

การเข้ารหัสโดปามีนของข้อผิดพลาดการทำนายผลตอบแทนและการตั้งค่าสำหรับข้อมูลการทำนาย

การทดลองที่น่าประทับใจได้แสดงให้เห็นว่าสัญญาณ DA เป็นตัวแทนของการทำนายผลตอบแทนในลักษณะที่ตรงกับความต้องการของพฤติกรรมรวมถึงการตั้งค่าสำหรับรางวัลใหญ่มากกว่าสิ่งเล็ก ๆ (Tobler et al., 2005) รางวัลที่น่าจะเป็นไปได้มากกว่าสิ่งที่ไม่น่าจะเป็นไปได้ (Fiorillo et al., 2003; Satoh และคณะ, 2003; Morris และคณะ, 2004) และผลตอบแทนทันทีเหนือสิ่งที่ล่าช้า (Roesch et al., 2007; Fiorillo et al., 2008; โคบายาชิและชูลท์ซ 2008) ยังมีหลักฐานว่าเซลล์ประสาท DA ในมนุษย์เข้ารหัสค่าเงินรางวัล (Zaghloul และคณะ, 2009) นอกจากนี้สัญญาณ DA ยังปรากฏขึ้นในระหว่างการเรียนรู้ด้วยระยะเวลาที่คล้ายกันกับมาตรการเชิงพฤติกรรมของการทำนายรางวัล (Hollerman และ Schultz, 1998; Satoh และคณะ, 2003; Takikawa และคณะ, 2004; วันและเดือน 2007) และมีความสัมพันธ์กับการวัดความชอบส่วนตัวของรางวัล (Morris และคณะ, 2006) การค้นพบเหล่านี้ได้สร้างเซลล์ประสาท DA เป็นหนึ่งในตัวอย่างที่เข้าใจดีที่สุดและมีการจำลองแบบมากที่สุดของการให้รางวัลในสมอง เป็นผลให้การศึกษาเมื่อเร็ว ๆ นี้ส่งผลให้เซลล์ประสาท DA ทำการตรวจสอบอย่างละเอียดเพื่อค้นหาว่าพวกเขาสร้างการทำนายผลตอบแทนอย่างไรและสัญญาณของพวกเขาทำหน้าที่อย่างไรกับโครงสร้างปลายน้ำเพื่อควบคุมพฤติกรรม

โดปามีนในรางวัล: เงินทดรองล่าสุด

สัญญาณรางวัลเซลล์ประสาทโดพามีน

ความก้าวหน้าล่าสุดในการทำความเข้าใจสัญญาณรางวัล DA มาจากการพิจารณาคำถามกว้าง ๆ สามข้อ: เซลล์ประสาท DA เรียนรู้การทำนายผลตอบแทนอย่างไร การทำนายของพวกเขาแม่นยำแค่ไหน? และพวกเขาทำอะไรเป็นรางวัล?

เซลล์ประสาท DA เรียนรู้การทำนายผลตอบแทนอย่างไร ทฤษฎีคลาสสิกแนะนำว่าการทำนายผลตอบแทนจะได้รับการเรียนรู้ผ่านกระบวนการเสริมแรงแบบค่อยเป็นค่อยไปซึ่งต้องการการจับคู่สิ่งเร้าและรางวัลตอบแทนซ้ำ ๆ กันRescorla และ Wagner, 1972; Montague et al., 1996) ทุกครั้งที่มีสิ่งกระตุ้นตามมาด้วยรางวัลที่ไม่คาดคิดมูลค่าโดยประมาณของ A จะเพิ่มขึ้น อย่างไรก็ตามข้อมูลล่าสุดแสดงให้เห็นว่าเซลล์ประสาท DA ไปไกลกว่าการเรียนรู้ด้วยการกระตุ้นและให้รางวัลโดยใช้ความเชื่อที่ซับซ้อนเกี่ยวกับโครงสร้างของโลก เซลล์ประสาท DA สามารถทำนายผลตอบแทนได้อย่างถูกต้องแม้ในสภาพแวดล้อมที่แปลกใหม่ซึ่งรางวัลที่จับคู่กับสิ่งเร้าเป็นสาเหตุ ลดลง ตามมูลค่าของการกระตุ้นSatoh และคณะ, 2003; Nakahara และคณะ, 2004; Bromberg-Martin และคณะ, 2010c) หรือก่อให้เกิดการเปลี่ยนแปลงในมูลค่าของการกระตุ้นเศรษฐกิจที่แตกต่างกันโดยสิ้นเชิง (Bromberg-Martin และคณะ, 2010b) เซลล์ประสาท DA ยังสามารถปรับสัญญาณรางวัลของพวกเขาได้จากสถิติการเรียงลำดับที่สูงขึ้นของการแจกรางวัลเช่นการปรับสัญญาณผิดพลาดตามการคาดการณ์ที่แปรปรวน (Tobler et al., 2005) และ 'กู้คืนโดยธรรมชาติ' การตอบสนองของพวกเขาต่อการชี้นำรางวัลที่ดับไป (Pan et al., 2008) ปรากฏการณ์ทั้งหมดเหล่านี้ก่อให้เกิดขนานที่น่าทึ่งกับเอฟเฟกต์ที่คล้ายกันที่เห็นได้ในการปรับทางประสาทสัมผัสและมอเตอร์Braun และคณะ, 2010; Fairhall และคณะ, 2001; Shadmehr et al., 2010) แนะนำว่าพวกเขาอาจสะท้อนกลไกประสาททั่วไปสำหรับการเรียนรู้เชิงทำนาย

การทำนายรางวัล DA มีความแม่นยำเพียงใด การศึกษาล่าสุดแสดงให้เห็นว่าเซลล์ประสาท DA ปรับสัญญาณรางวัลของพวกเขาอย่างซื่อสัตย์เพื่อบัญชีสำหรับสามแหล่งที่มาของความไม่แน่นอนในการทำนาย ครั้งแรกมนุษย์และสัตว์ต้องทนทุกข์ทรมานจากเสียงรบกวนเวลาภายในซึ่งป้องกันไม่ให้พวกเขาทำการคาดคะเนที่เชื่อถือได้เกี่ยวกับช่วงเวลาของรางวัลคิวยาวGallistel และ Gibbon, 2000) ดังนั้นหากความล่าช้าของคิว - คิวสั้น (1 – 2 วินาที) การคาดการณ์เวลานั้นแม่นยำและการส่งมอบรางวัลจะกระตุ้นการตอบสนอง DA เล็กน้อย แต่สำหรับการรอคิวคิว - รางวัลอีกต่อไปการคาดการณ์เวลาล่าช้าจะเชื่อถือได้น้อยลงโคบายาชิและชูลท์ซ 2008; Fiorillo et al., 2008) ประการที่สองความหมายหลายอย่างในชีวิตประจำวันนั้นไม่แน่ชัดโดยระบุการกระจายเวลาการให้รางวัลเป็นวงกว้าง เซลล์ประสาท DA สะท้อนรูปแบบของความไม่แน่นอนเรื่องเวลาอีกครั้ง: พวกมันถูกยับยั้งอย่างต่อเนื่องในระหว่างความล่าช้าในการให้รางวัลตัวแปรเช่นเดียวกับการส่งสัญญาณเชิงลบมากขึ้นในการทำนายผลตอบแทนการทำนายผิดพลาดในแต่ละช่วงเวลาFiorillo et al., 2008; Bromberg-Martin และคณะ, 2010a; Nomoto และคณะ, 2010) ในที่สุดตัวชี้นำจำนวนมากก็ซับซ้อนและต้องมีการตรวจสอบอย่างละเอียดเพื่อให้ได้ข้อสรุปที่ชัดเจนเกี่ยวกับมูลค่าของรางวัล ในสถานการณ์เช่นนี้สัญญาณการให้รางวัลของ DA จะเกิดขึ้นในเวลาแฝงที่ยาวนานและในแบบค่อยเป็นค่อยไปดูเหมือนว่าจะสะท้อนการไหลของข้อมูลการรับรู้อย่างค่อยเป็นค่อยไปเมื่อค่าการกระตุ้นถูกถอดรหัส (Nomoto และคณะ, 2010).

เซลล์ประสาท DA เหตุการณ์ใดที่ถือว่าเป็นรางวัล? ทฤษฎีการเรียนรู้แบบดั้งเดิมแนะนำว่าเซลล์ประสาท DA กำหนดค่าตามจำนวนเงินที่คาดหวังของรางวัลหลักในอนาคต (Montague et al., 1996) แต่ถึงแม้เมื่ออัตราการให้รางวัลหลักคงที่มนุษย์และสัตว์มักจะแสดงความต้องการเพิ่มเติมสำหรับการคาดการณ์ - การค้นหาสภาพแวดล้อมที่แต่ละขนาดความน่าจะเป็นและระยะเวลาของรางวัลสามารถทราบล่วงหน้าได้ (เดลี 1992; ชิวและโฮ 1994; Ahlbrecht และ Weber, 1996) การศึกษาล่าสุดในลิงพบว่าเซลล์ประสาท DA ส่งสัญญาณการตั้งค่านี้ (Bromberg-Martin และ Hikosaka, 2009) ลิงแสดงความพึงพอใจอย่างมากในการดูตัวชี้นำภาพที่ให้ข้อมูลซึ่งจะช่วยให้พวกเขาสามารถคาดการณ์ขนาดของรางวัลในอนาคตได้มากกว่าตัวชี้นำที่ไม่เป็นทางการที่ไม่ได้ให้ข้อมูลใหม่ ในขณะเดียวกันเซลล์ประสาท DA ก็ตื่นเต้นกับโอกาสที่จะได้ดูข้อมูลที่บ่งบอกในลักษณะที่สัมพันธ์กับพฤติกรรมของสัตว์ (รูปที่ 1B, D) สิ่งนี้ชี้ให้เห็นว่าเซลล์ประสาท DA ไม่เพียง แต่กระตุ้นให้เกิดการกระทำเพื่อให้ได้รับรางวัลเท่านั้น แต่ยังกระตุ้นให้มีการคาดการณ์ที่แม่นยำเกี่ยวกับรางวัลเหล่านั้นเพื่อให้มั่นใจว่ารางวัลนั้นจะถูกคาดการณ์ไว้ล่วงหน้า

เมื่อนำมารวมกันการค้นพบเหล่านี้แสดงให้เห็นว่าสัญญาณผิดพลาดจากการทำนายรางวัล DA นั้นมีความอ่อนไหวต่อปัจจัยที่ซับซ้อนซึ่งแจ้งการทำนายผลตอบแทนจากมนุษย์และสัตว์รวมถึงการปรับตัวให้เข้ากับสถิติรางวัลสูงลำดับความไม่แน่นอนของรางวัล

ผลของสัญญาณรางวัลโดปามีน phasic ต่อโครงสร้างของปลายน้ำ

การตอบสนองของรางวัล DA เกิดขึ้นในการระเบิด phasic แบบซิงโครนัส (Joshua et al., 2009b) รูปแบบการตอบสนองที่มีรูปร่างปล่อย DA ในโครงสร้างเป้าหมาย (Gonon, 1988; จางและคณะ, 2009; ไจ่และคณะ 2009) มีการตั้งทฤษฎีมานานแล้วว่าการระเบิดแบบเฟสเซอร์ส่งผลต่อการเรียนรู้และแรงจูงใจในลักษณะที่แตกต่างจากกิจกรรมโทนิกดา (เกรซ 1991; เกรซและคณะ 2007; ชูลท์ซ 2007; Lapish และคณะ, 2007) เทคโนโลยีที่พัฒนาเมื่อเร็ว ๆ นี้ทำให้สามารถยืนยันสมมติฐานนี้ได้โดยควบคุมกิจกรรมของเซลล์ประสาท DA ด้วยความแม่นยำเชิงพื้นที่และเชิงเวลา การกระตุ้นด้วยแสงของเซลล์ประสาท VTA DA ก่อให้เกิดความพึงพอใจต่อสถานที่ที่มีเงื่อนไขซึ่งจะเกิดขึ้นเมื่อมีการใช้การกระตุ้นในรูปแบบการระเบิดเท่านั้น (ไจ่และคณะ 2009) ในทางกลับกันความผิดพลาดทางพันธุกรรมของตัวรับ NMDA จาก DA เซลล์ประสาทซึ่งบั่นทอนการระเบิดในขณะที่ออกจากกิจกรรมยาชูกำลังส่วนใหญ่ไม่บุบสลายทำให้เกิดการด้อยค่าในรูปแบบเฉพาะของการเรียนรู้รางวัล (Zweifel และคณะ, 2009; Parker et al., 2010) (แม้ว่าโปรดทราบว่าสิ่งที่น่าพิศวงนี้ยังบั่นทอนความสัมพันธ์ของ DA neuron synaptic plasticity (Zweifel และคณะ, 2008)) การระเบิดของ DA อาจช่วยเพิ่มการเรียนรู้ด้วยการให้รางวัลโดยกำหนดโครงข่ายประสาทในท้องถิ่นอีกครั้ง โดยเฉพาะอย่างยิ่งการระเบิดของ DA ที่คาดเดาได้จะถูกส่งไปยังพื้นที่เฉพาะของนิวเคลียส accumbens และภูมิภาคเหล่านี้มีกิจกรรมของระบบประสาทที่คาดเดาได้ในระดับสูงโดยเฉพาะ (เชียร์และคณะ 2007; Owesson-White และคณะ, 2009).

เมื่อเทียบกับ phasic bursts ไม่ค่อยมีใครรู้เกี่ยวกับความสำคัญของ phasic pauses ในกิจกรรม spiking สำหรับข้อผิดพลาดการทำนายผลตอบแทนเชิงลบ การหยุดชั่วคราวเหล่านี้ทำให้อัตราการเปลี่ยนแปลงเล็กน้อยลดลงและมีการมอดูเลตน้อยลงตามการคาดหวังของรางวัล (ไบเออร์และกลิมเชอร์ 2005; Joshua et al., 2009a; Nomoto และคณะ, 2010) และอาจมีผลกระทบเล็กน้อยต่อการเรียนรู้ (Rutledge และคณะ, 2009) อย่างไรก็ตามการเรียนรู้การคาดการณ์ข้อผิดพลาดเชิงลบบางประเภทจำเป็นต้องมี VTA (Takahashi และคณะ, 2009) การแนะนำว่า phasic pauses อาจยังคงถูกถอดรหัสโดยโครงสร้างดาวน์สตรีม

เนื่องจากการระเบิดและการหยุดชั่วคราวทำให้เกิดรูปแบบที่แตกต่างกันมากของการปล่อย DA พวกเขามีแนวโน้มที่จะมีอิทธิพลต่อโครงสร้างของปลายน้ำผ่านกลไกที่แตกต่างกัน มีหลักฐานเมื่อเร็ว ๆ นี้สำหรับสมมติฐานนี้ในเป้าหมายหลักหนึ่งของเซลล์ประสาท DA คือ dorsal striatum เซลล์ประสาทฉายหลัง Dorsal striatum มีสองแบบซึ่งแสดงตัวรับ DA ที่แตกต่างกัน ประเภทหนึ่งเป็นการแสดงออกถึงผู้รับ D1 และโครงการเพื่อ 'ทางเดินตรง' ฐานปมประสาทเพื่ออำนวยความสะดวกการเคลื่อนไหวของร่างกาย; ประเภทที่สองแสดงตัวรับ D2 และโครงการไปที่ 'ทางเดินอ้อม' เพื่อระงับการเคลื่อนไหวของร่างกาย (รูป 2) (Albin และคณะ, 1989; Gerfen et al., 1990; Kravitz et al., 2010; Hikida และคณะ, 2010) ขึ้นอยู่กับคุณสมบัติของเส้นทางและตัวรับเหล่านี้มันได้รับการทฤษฏีแล้วว่า DA ระเบิดสร้างเงื่อนไขของ DA สูงเปิดใช้งานตัวรับ D1 และทำให้เส้นทางเดินตรงเพื่อเลือกการเคลื่อนไหวที่มีมูลค่าสูง (รูปที่ 2A) ในขณะที่ DA หยุดชั่วคราวจะสร้างเงื่อนไขของ DA ต่ำ, ยับยั้งตัวรับ D2 และทำให้ทางเดินทางตรงเพื่อระงับการเคลื่อนไหวที่มีมูลค่าต่ำ (รูปที่ 2B) (แฟรงค์ 2005; Hikosaka, 2007) สอดคล้องกับสมมติฐานนี้การเปิดใช้งานตัวรับ DA สูงช่วยส่งเสริมความสามารถของ cortico-striatal synapses บนเส้นทางเดินตรง (Shen และคณะ, 2008) และการเรียนรู้จากผลลัพธ์เชิงบวก (Frank et al., 2004; Voon และคณะ, 2010) ในขณะที่ด่านด่านรับ D1 เลือกกีดขวางการเคลื่อนไหวเพื่อเป้าหมายที่ได้รับรางวัล (Nakamura และ Hikosaka, 2006) ในลักษณะที่คล้ายคลึงกันการเปิดใช้งานตัวรับ DA ต่ำช่วยส่งเสริมความสามารถของ cortico-striatal ในการสร้างทางเดินอ้อม (Shen และคณะ, 2008) และการเรียนรู้จากผลลัพธ์เชิงลบ (Frank et al., 2004; Voon และคณะ, 2010) ในขณะที่ด่านด่านรับ D2 เลือกยับยั้งการเคลื่อนไหวไปยังเป้าหมายที่ไม่ได้รับรางวัล (Nakamura และ Hikosaka, 2006) การแบ่งหน้าที่ของตัวรับ D1 และ D2 ในการควบคุมแรงจูงใจนี้อธิบายถึงผลกระทบมากมายของยีนที่เกี่ยวข้องกับ DA ต่อพฤติกรรมมนุษย์ (Ullsperger, 2010; Frank และ Fossella, 2010) และอาจขยายออกไปไกลกว่า striatum ที่ด้านหลังเนื่องจากมีหลักฐานการแบ่งงานที่คล้ายกันใน ventral striatum (เกรซและคณะ 2007; Lobo และคณะ, 2010).

รูป 2 

การควบคุมโดปามีนในการสร้างแรงจูงใจในเชิงบวกและเชิงลบใน dorsal striatum

ในขณะที่โครงการข้างต้นวาดภาพง่าย ๆ ของการควบคุมพฤติกรรมของ phasic DA ผ่านเอฟเฟกต์บน striatum ภาพเต็มมีความซับซ้อนมากขึ้น DA มีอิทธิพลต่อพฤติกรรมที่เกี่ยวข้องกับการให้รางวัลโดยทำหน้าที่ในบริเวณสมองหลายแห่งรวมถึงเยื่อหุ้มสมองส่วนหน้า (Hitchcott และคณะ, 2007) เปลือกนอก (Liu et al., 2004) ฮิบโปแคมปัส (Packard and White, 1991; Grecksch และ Matties, 1981) และ amygdala (Phillips และคณะ, 2010) ผลกระทบของ DA มีแนวโน้มที่จะแตกต่างกันอย่างกว้างขวางระหว่างภูมิภาคเหล่านี้เนื่องจากการเปลี่ยนแปลงในความหนาแน่นของ DA ปกคลุมด้วยเส้นประสาท, DA transporters, เอนไซม์การเผาผลาญ, autoreceptors, ผู้รับและการมีเพศสัมพันธ์กับเซลล์สัญญาณเส้นทางเซลล์ (Neve et al., 2004; Bentivoglio และ Morelli, 2005; Frank และ Fossella, 2010) นอกจากนี้อย่างน้อยใน VTA เซลล์ประสาท DA สามารถมีคุณสมบัติของเซลล์ที่แตกต่างกันขึ้นอยู่กับเป้าหมายการฉายของพวกเขา (Lammel et al., 2008; Margolis และคณะ, 2008) และบางคนมีความสามารถโดดเด่นในการส่งกลูตาเมตและโดปามีน (Descarries และคณะ 2008; Chuhma et al., 2009; Hnasko et al., 2010; Tecuapetla และคณะ, 2010; Stuber และคณะ, 2010; Birgner และคณะ, 2010) ดังนั้นขอบเขตทั้งหมดของ DA neuron ในการควบคุมการประมวลผลของระบบประสาทจึงเป็นเพียงการเริ่มต้นที่จะเปิดเผย

โดปามีน: Beyond Reward

จนถึงตอนนี้เราได้พูดคุยเกี่ยวกับบทบาทของเซลล์ประสาท DA ในพฤติกรรมที่เกี่ยวข้องกับการให้รางวัลก่อตั้งขึ้นจากการตอบสนองของโดปามีนที่คล้ายกับข้อผิดพลาดในการทำนายรางวัล มันชัดเจนมากขึ้นเรื่อย ๆ แต่เซลล์ประสาท DA ตอบสนองอย่างเป็นขั้นเป็นตอนต่อเหตุการณ์หลายประเภทที่ไม่ให้รางวัลโดยเนื้อแท้และไม่ได้หมายถึงรางวัลในอนาคตและสัญญาณที่ไม่ให้รางวัลเหล่านี้มีบทบาทสำคัญในกระบวนการสร้างแรงบันดาลใจ เหตุการณ์ที่ไม่ได้รับรางวัลเหล่านี้สามารถแบ่งออกเป็นสองประเภทกว้าง ๆ aversive และ การแจ้งเตือนซึ่งเราจะหารือในรายละเอียดด้านล่าง เหตุการณ์ Aversive รวมถึงสิ่งเร้าที่ไม่พึงประสงค์จากภายใน (เช่นพัฟแอร์, รสขม, ไฟฟ้าช็อต, และความรู้สึกไม่พึงประสงค์อื่น ๆ ) และตัวชี้นำทางประสาทสัมผัสที่ได้รับคุณสมบัติ aversive ผ่านการเชื่อมโยงกับเหตุการณ์เหล่านี้ การแจ้งเตือนเหตุการณ์เป็นการชี้นำทางประสาทสัมผัสที่ไม่คาดคิดซึ่งมีความสำคัญที่มีศักยภาพสูง

โดปามีนที่หลากหลายตอบสนองต่อเหตุการณ์ aversive

การตอบสนองของเซลล์ประสาทต่อเหตุการณ์ aversive ให้การทดสอบที่สำคัญของฟังก์ชันในการควบคุมแรงจูงใจ (ชูลท์ซ 1998; Berridge และ Robinson, 1998; Redgrave et al., 1999; Horvitz, 2000; โจเซฟและคณะ 2003) ในหลาย ๆ แง่มุมเราปฏิบัติต่อเหตุการณ์ที่ให้ผลตอบแทนและหลีกเลี่ยงในลักษณะตรงกันข้าม ค่าที่สร้างแรงบันดาลใจ. เราแสวงหารางวัลและมอบหมายให้พวกเขาเป็นค่าบวกในขณะที่เราหลีกเลี่ยงเหตุการณ์ aversive และกำหนดให้พวกเขาเป็นค่าลบ ในแง่อื่น ๆ เราปฏิบัติต่อเหตุการณ์ที่ให้ผลตอบแทนและหลีกเลี่ยงในลักษณะที่คล้ายคลึงกัน สร้างแรงบันดาลใจ [FOOTNOTE1] เหตุการณ์ที่ให้ผลตอบแทนและที่หลีกเลี่ยงไม่ได้ก่อให้เกิดการมุ่งความสนใจการประมวลผลทางปัญญาและการเพิ่มแรงจูงใจทั่วไป

ฟังก์ชันใดบ้างที่เซลล์ประสาท DA สนับสนุน เป็นที่ทราบกันมานานว่าประสบการณ์ที่เครียดและมีผลทำให้เกิดการเปลี่ยนแปลงขนาดใหญ่ของความเข้มข้นของ DA ในโครงสร้างของสมองล่องและการตอบสนองเชิงพฤติกรรมต่อประสบการณ์เหล่านี้ถูกเปลี่ยนแปลงอย่างมากโดย DA agonists, คู่อริและรอยโรค (ซาลาโมน 1994; Di Chiara, 2002; Pezze และ Feldon, 2004; Young และคณะ, 2005) การศึกษาเหล่านี้ทำให้เกิดผลลัพธ์ที่หลากหลายอย่างน่าทึ่งอย่างไรก็ตามLevita และคณะ, 2002; Di Chiara, 2002; Young และคณะ, 2005) การศึกษาจำนวนมากมีความสอดคล้องกับ DA neurons เข้ารหัส salience สร้างแรงบันดาลใจ พวกเขารายงานว่าเหตุการณ์ aversive เพิ่มระดับ DA และความเกลียดชังพฤติกรรมที่ได้รับการสนับสนุนโดยการส่ง DA ระดับสูง (ซาลาโมน 1994; โจเซฟและคณะ 2003; Ventura และคณะ, 2007; Barr et al., 2009; Fadok et al., 2009) รวมถึง phasic DA bursts (Zweifel และคณะ, 2009) แต่การศึกษาอื่น ๆ มีความสอดคล้องกับการสร้างแรงจูงใจในการสร้างแรงจูงใจให้กับเซลล์ประสาท พวกเขารายงานว่าเหตุการณ์ aversive ลดระดับ DA และการหลีกเลี่ยงพฤติกรรมนั้นได้รับการสนับสนุนโดยการส่ง DA ระดับต่ำ (ทำเครื่องหมาย et al., 1991; Shippenberg และคณะ, 1991; Liu et al., 2008; Roitman และคณะ, 2008) ในหลายกรณีพบว่าผลการผสมเหล่านี้ได้จากการศึกษาเพียงครั้งเดียวซึ่งบ่งชี้ว่าประสบการณ์ aversive ทำให้เกิดรูปแบบของ DA ที่แตกต่างกันในโครงสร้างสมองที่แตกต่างกัน (Thierry et al., 1976; Besson และ Louilot, 1995; Ventura และคณะ, 2001; Jeanblanc และคณะ, 2002; Bassareo และคณะ, 2002; Pascucci และคณะ, 2007) และยาเสพติดที่เกี่ยวข้องกับ DA สามารถผลิตส่วนผสมของผลกระทบทางประสาทและพฤติกรรมคล้ายกับที่เกิดจากทั้งประสบการณ์ที่คุ้มค่าและประสบการณ์ aversive (Ettenberg, 2004; Wheeler และคณะ, 2008).

ความหลากหลายของรูปแบบและฟังก์ชั่นการเปิดตัวของ DA นั้นยากที่จะกระทบยอดกับความคิดที่ว่าเซลล์ประสาท DA ส่งสัญญาณแรงบันดาลใจที่เหมือนกันไปยังโครงสร้างสมองทั้งหมด อย่างไรก็ตามคำตอบที่หลากหลายเหล่านี้สามารถอธิบายได้ถ้าเซลล์ประสาท DA มีความหลากหลาย - ประกอบด้วยประชากรหลายระบบประสาทที่สนับสนุนแง่มุมต่าง ๆ ของการประมวลผล aversive มุมมองนี้ได้รับการสนับสนุนโดยการศึกษาระบบประสาทในสัตว์ที่ได้รับยาสลบ การศึกษาเหล่านี้แสดงให้เห็นว่าสิ่งเร้าที่เป็นพิษทำให้เกิดการกระตุ้นในเซลล์ประสาท DA บางตัว แต่ยับยั้งในเซลล์ประสาท DA อื่น ๆ (Chiodo et al., 1980; Maeda และ Mogenson, 1982; ชูลท์ซและโรโม 1987; Mantz et al., 1989; Gao และคณะ, 1990; Coizet และคณะ, 2006) ที่สำคัญทั้งการตอบสนองต่อการกระตุ้นและการยับยั้งเกิดขึ้นในเซลล์ประสาทที่ยืนยันว่าเป็นโดปามีนโดยใช้การติดฉลาก juxtacellular (Brischoux และคณะ, 2009) (รูป 3) ความหลากหลายที่คล้ายกันของการตอบสนอง aversive เกิดขึ้นในระหว่างการใช้งานพฤติกรรม กลุ่มของ DA neurons ต่างตื่นเต้นหรือถูกยับยั้ง phasically โดยเหตุการณ์ aversive รวมถึงการกระตุ้นพิษของผิวหนัง (Kiyatkin, 1988a; Kiyatkin, 1988b) ตัวชี้นำทางประสาทสัมผัสทำนายแรงกระแทกเชิงซ้อน (Guarraci และ Kapp, 1999), airpuffs aversive (Matsumoto และ Hikosaka, 2009b) และตัวชี้นำทางประสาทสัมผัสทำนาย airpuffs aversive (Matsumoto และ Hikosaka, 2009b; Joshua et al., 2009a) ยิ่งกว่านั้นเมื่อมีการบันทึกเซลล์ประสาท DA สองตัวพร้อมกันโดยทั่วไปการตอบสนองแบบ aversive จะมีความสัมพันธ์ระหว่างการทดลองและทดลองเล็กน้อยJoshua et al., 2009b) แนะนำว่าการตอบสนองแบบเอเวอเรทีฟนั้นไม่ได้มีการประสานงานกับประชากร DA โดยรวม

รูป 3 

เซลล์ประสาทโดปามีนที่หลากหลายตอบสนองต่อเหตุการณ์ aversive

เพื่อให้เข้าใจถึงหน้าที่ของการตอบสนองที่หลากหลายเหล่านี้เราจำเป็นต้องรู้ว่าพวกเขาจะรวมกับการตอบสนองของรางวัลเพื่อสร้างสัญญาณแรงบันดาลใจที่มีความหมาย การศึกษาเมื่อเร็ว ๆ นี้ตรวจสอบหัวข้อนี้และเปิดเผยว่าเซลล์ประสาท DA ถูกแบ่งออกเป็นหลาย ๆ ประชากรพร้อมกับสัญญาณแรงจูงใจที่ชัดเจน (Matsumoto และ Hikosaka, 2009b) ประชากรหนึ่งตื่นเต้นกับการให้รางวัลเหตุการณ์และถูกยับยั้งโดยเหตุการณ์ aversive ราวกับว่าการเข้ารหัส ค่าที่สร้างแรงบันดาลใจ (รูปที่ 4A) ประชากรที่สองรู้สึกตื่นเต้นกับทั้งเหตุการณ์ที่คุ้มค่าและหลีกเลี่ยงในลักษณะที่คล้ายคลึงกันราวกับการเข้ารหัส สร้างแรงบันดาลใจ (รูปที่ 4B) ในประชากรทั้งสองนี้เซลล์ประสาทจำนวนมากมีความอ่อนไหวต่อการให้รางวัลและการคาดการณ์แบบ aversive: พวกเขาตอบสนองเมื่อเหตุการณ์การให้รางวัลนั้นให้ผลตอบแทนที่ดีกว่าที่คาดการณ์ไว้และเมื่อเหตุการณ์ aversive นั้นมีค่ามากกว่าที่คาดการณ์ไว้Matsumoto และ Hikosaka, 2009b) สิ่งนี้แสดงให้เห็นว่าการตอบสนองแบบ aversive นั้นเกิดขึ้นอย่างแท้จริงจากการคาดการณ์เกี่ยวกับเหตุการณ์ aversive พิจารณาความเป็นไปได้ว่าพวกเขาอาจเกิดจากปัจจัยที่ไม่เฉพาะเจาะจงเช่นการรับความรู้สึกทางประสาทสัมผัสดิบหรือความสัมพันธ์ทั่วไปที่มีรางวัลชูลท์ซ 2010) อย่างไรก็ตามประชากรสองคนนี้ต่างกันในลักษณะที่ละเอียดของรหัสทำนายของพวกเขา การเข้ารหัสค่าที่สร้างแรงบันดาลใจเซลล์ประสาท DA เข้ารหัสสัญญาณข้อผิดพลาดการทำนายที่แม่นยำรวมถึงการยับยั้งที่แข็งแกร่งโดยการละเว้นของรางวัลและการกระตุ้นที่ไม่รุนแรงโดยการละเว้นเหตุการณ์ aversive (รูปที่ 4Aขวา) ในทางตรงกันข้ามการสร้างความรู้สึกสร้างแรงบันดาลใจในการเขียนเซลล์ประสาท DA ตอบสนองเมื่อเหตุการณ์สำคัญเกิดขึ้น แต่ไม่ใช่เมื่อไม่อยู่ (รูปที่ 4Bขวา) สอดคล้องกับแนวคิดเชิงทฤษฎีของความเร้าอารมณ์ (หรั่งและเดวิส 2006) [FOOTNOTE2] หลักฐานของประชากรนิวรอนสองคนนี้ได้รับการสังเกตแม้ว่ากิจกรรมของระบบประสาทจะได้รับการตรวจสอบโดยเฉลี่ย ดังนั้นการศึกษาที่กำหนดเป้าหมายไปยังส่วนต่าง ๆ ของระบบ DA พบสัญญาณ phasic DA เข้ารหัสเหตุการณ์ aversive ด้วยการยับยั้ง (Roitman และคณะ, 2008) คล้ายกับการเข้ารหัสของค่าที่สร้างแรงบันดาลใจหรือมีการกระตุ้น (Joshua et al., 2008; แอนสตรอมและอัล 2009) คล้ายกับการเข้ารหัสของความคิดสร้างแรงบันดาลใจ

รูป 4 

เซลล์ประสาทโดปามีนที่แตกต่างที่โดดเด่นเข้ารหัสค่าแรงจูงใจและความโดดเด่น

สิ่งที่ค้นพบเมื่อไม่นานมานี้อาจดูเหมือนจะขัดแย้งกับรายงานในช่วงต้นว่าเซลล์ประสาท DA ตอบสนองเป็นพิเศษเพื่อให้รางวัลตัวชี้นำแทนที่จะเป็นตัวชี้นำ aversive (Mirenowicz และ Schultz, 1996). อย่างไรก็ตามเมื่อตรวจสอบอย่างใกล้ชิดแม้ว่าการศึกษานั้นจะสอดคล้องอย่างสมบูรณ์กับค่า DA และการเข้ารหัสที่ดี ในการศึกษานั้นนำไปสู่การให้รางวัลกับผลลัพธ์ที่มีความน่าจะเป็นสูง (> 90%) ในขณะที่การชี้นำในทางกลับกันนำไปสู่ผลลัพธ์ที่ตรงกันข้ามโดยมีความน่าจะเป็นต่ำ (<10%) ดังนั้นเซลล์ประสาท DA ที่ให้คุณค่าและการเข้ารหัสจึงมีการตอบสนองเพียงเล็กน้อยต่อตัวชี้นำที่ไม่เหมาะสมซึ่งเข้ารหัสความเกลียดชังในระดับต่ำได้อย่างแม่นยำ

บทบาทการทำงานของค่าแรงจูงใจและสัญญาณนูน

เมื่อนำมารวมกันการค้นพบข้างต้นบ่งชี้ว่าเซลล์ประสาท DA นั้นถูกแบ่งออกเป็นหลาย ๆ ประชากรที่เหมาะสมสำหรับบทบาทที่แตกต่างในการควบคุมแรงจูงใจ การสร้างรหัสค่าที่สร้างแรงบันดาลใจเซลล์ประสาท DA เหมาะสมกับทฤษฎีของโดปามีนในปัจจุบันและการประมวลผลรางวัล (Schultz et al., 1997; Berridge และ Robinson, 1998; ปรีชาญาณ 2004) เซลล์ประสาทเหล่านี้เข้ารหัสสัญญาณข้อผิดพลาดการคาดการณ์ที่สมบูรณ์และเข้ารหัสรางวัลและเหตุการณ์ aversive ในทิศทางตรงกันข้าม ดังนั้นเซลล์ประสาทเหล่านี้จึงให้สัญญาณแนะนำที่เหมาะสมสำหรับการค้นหาการประเมินและการเรียนรู้ที่มีค่า (รูป 5) หากการกระตุ้นทำให้เกิดการเข้ารหัสค่าเซลล์ประสาท DA ตื่นเต้นแล้วเราควรเข้าใกล้มันกำหนดค่าสูงและเรียนรู้การกระทำที่จะแสวงหามันอีกครั้งในอนาคต หากการกระตุ้นทำให้เกิดการเข้ารหัสค่าเซลล์ประสาท DA จะถูกยับยั้งจากนั้นเราควรหลีกเลี่ยงมันกำหนดค่าที่ต่ำและเรียนรู้การกระทำเพื่อหลีกเลี่ยงมันอีกครั้งในอนาคต

รูป 5 

ฟังก์ชั่นสมมุติฐานของค่าที่สร้างแรงบันดาลใจ, นูนและการแจ้งเตือนสัญญาณ

ในทางตรงกันข้ามเซลล์ประสาท DA ที่สร้างแรงบันดาลใจให้รหัสดีพอดีกับทฤษฎีของเซลล์ประสาทโดปามีนและการประมวลผลเหตุการณ์สำคัญRedgrave et al., 1999; Horvitz, 2000; โจเซฟและคณะ 2003; Kapur, 2003) เซลล์ประสาทเหล่านี้ตื่นเต้นทั้งเหตุการณ์ที่ให้ผลตอบแทนและ aversive และมีการตอบสนองต่อเหตุการณ์ที่เป็นกลางให้สัญญาณที่เหมาะสมสำหรับวงจรประสาทเพื่อเรียนรู้ที่จะตรวจจับทำนายและตอบสนองต่อสถานการณ์ที่มีความสำคัญสูง ที่นี่เราจะพิจารณาระบบสมองสามระบบดังกล่าว (รูป 5) ขั้นแรกให้วงจรประสาทสำหรับการปรับทิศทางด้วยสายตาและตั้งใจได้รับการปรับเทียบเพื่อค้นหาข้อมูลเกี่ยวกับเหตุการณ์ทุกประเภททั้งการให้รางวัลและการหลีกเลี่ยง ตัวอย่างเช่นทั้งรางวัลและตัวชี้นำ aversive ดึงดูดปฏิกิริยาการปรับทิศทางได้อย่างมีประสิทธิภาพมากกว่าตัวชี้นำที่เป็นกลาง (หรั่งและเดวิส 2006; Matsumoto และ Hikosaka, 2009b; Austin และ Duka, 2010). ประการที่สองทั้งการให้รางวัลและสถานการณ์ที่ไม่เหมาะสมมีส่วนร่วมกับระบบประสาทสำหรับการควบคุมความรู้ความเข้าใจและการเลือกการกระทำ - เราจำเป็นต้องมีส่วนร่วมในหน่วยความจำในการทำงานเพื่อเก็บข้อมูลไว้ในใจการแก้ปัญหาความขัดแย้งเพื่อตัดสินใจตามแนวทางปฏิบัติและความจำระยะยาวเพื่อจดจำผลลัพธ์ที่เกิดขึ้น (แบรดลีย์และคณะ 1992; Botvinick และคณะ, 2001; Savine et al., 2010) ประการที่สามทั้งสถานการณ์ที่ให้ผลตอบแทนและการหลีกเลี่ยงต้องเพิ่มแรงจูงใจทั่วไปเพื่อกระตุ้นการกระทำและเพื่อให้แน่ใจว่าพวกเขาได้รับการปฏิบัติอย่างถูกต้อง แท้จริงแล้วเซลล์ประสาท DA มีความสำคัญในการกระตุ้นความพยายามเพื่อให้บรรลุเป้าหมายที่มีมูลค่าสูงและในการแปลความรู้เกี่ยวกับความต้องการของงานเพื่อประสิทธิภาพของมอเตอร์ที่เชื่อถือได้ (Berridge และ Robinson, 1998; Mazzoni และคณะ, 2007; Niv et al., 2007; ซาลาโมนและคณะ, 2007).

กระตุ้นโดปามีนโดยการเตือนความรู้สึกทางประสาทสัมผัส

นอกเหนือจากการเข้ารหัสสัญญาณการสร้างแรงบันดาลใจและค่านิยมใหม่แล้วเซลล์ประสาท DA ส่วนใหญ่ก็มีการตอบสนองต่อเหตุการณ์ทางประสาทสัมผัสหลายประเภทที่ไม่เกี่ยวข้องโดยตรงกับประสบการณ์การให้รางวัลหรือการหลีกเลี่ยง การตอบสนองเหล่านี้ได้รับการตั้งทฤษฎีขึ้นอยู่กับปัจจัยทางประสาทและจิตใจจำนวนมากรวมถึงการรับความรู้สึกโดยตรง, ความประหลาดใจ, ความแปลกใหม่, ความเร้าอารมณ์, ความสนใจ, ความนูน, ลักษณะทั่วไปและการปรับสภาพหลอก (ชูลท์ซ 1998; Redgrave et al., 1999; Horvitz, 2000; Lisman and Grace, 2005; เรดเกรฟและเกอร์นีย์ 2006; Joshua et al., 2009a; ชูลท์ซ 2010).

ที่นี่เราจะพยายามสังเคราะห์ความคิดเหล่านี้และอธิบายการตอบสนอง DA เหล่านี้ในแง่ของสัญญาณพื้นฐานเดียว, การแจ้งเตือนสัญญาณ (รูป 5) คำว่า 'การแจ้งเตือน' ถูกใช้โดย Schultz (ชูลท์ซ 1998) เป็นคำทั่วไปสำหรับกิจกรรมที่ดึงดูดความสนใจ ที่นี่เราจะใช้มันในความหมายที่เฉพาะเจาะจงมากขึ้น โดยการแจ้งเตือนเหตุการณ์เราหมายถึงคิวประสาทสัมผัสที่ไม่คาดคิดที่ดึงดูดความสนใจตามการประเมินอย่างรวดเร็วของความสำคัญที่อาจเกิดขึ้นโดยใช้คุณสมบัติที่เรียบง่ายเช่นที่ตั้งขนาดและความสามารถทางประสาทสัมผัส การแจ้งเตือนเหตุการณ์ดังกล่าวมักจะทำให้เกิดปฏิกิริยาพฤติกรรมทันทีเพื่อตรวจสอบพวกเขาและกำหนดความหมายที่แม่นยำของพวกเขา ดังนั้นการแจ้งเตือน DA มักจะเกิดขึ้นในเวลาแฝงสั้น ๆ โดยขึ้นอยู่กับลักษณะคร่าวๆของสิ่งเร้าและมีความสัมพันธ์ที่ดีที่สุดกับปฏิกิริยาในทันทีเช่นปฏิกิริยาแบบทิศทาง (ชูลท์ซและโรโม 1990; Joshua et al., 2009a; ชูลท์ซ 2010) นี่คือตรงกันข้ามกับสัญญาณสร้างแรงบันดาลใจอื่น ๆ ในเซลล์ประสาท DA ซึ่งมักจะเกิดขึ้นในเวลาแฝงที่นานขึ้นคำนึงถึงตัวตนที่แม่นยำของการกระตุ้นและมีความสัมพันธ์ที่ดีที่สุดกับการกระทำพฤติกรรมเช่นการตัดสินใจที่จะเข้าใกล้หรือหลีกเลี่ยง (ชูลท์ซและโรโม 1990; Joshua et al., 2009a; ชูลท์ซ 2010).

การแจ้งเตือนการตอบสนอง DA สามารถถูกกระตุ้นได้จากเหตุการณ์ทางประสาทสัมผัสที่น่าประหลาดใจเช่นแสงแฟลชที่ไม่คาดคิดและการคลิกเพื่อฟังซึ่งทำให้เกิดการกระตุ้นการระเบิดอย่างเด่นชัดในเซลล์ประสาท DA จำนวน 60 – 90% ตลอด SNc และ VTAStrecker และ Jacobs, 1985; Horvitz et al., 1997; Horvitz, 2000) (รูปที่ 6A) การตอบสนองที่มีการเตือนเหล่านี้ดูเหมือนจะสะท้อนระดับที่สิ่งเร้านั้นน่าประหลาดใจและดึงดูดความสนใจ พวกเขาจะลดลงหากมีการกระตุ้นเกิดขึ้นในเวลาที่คาดการณ์ถ้าความสนใจมีส่วนร่วมที่อื่นหรือระหว่างการนอนหลับ (ชูลท์ซ 1998; Takikawa และคณะ, 2004; Strecker และ Jacobs, 1985; Steinfels et al., 1983) ตัวอย่างเช่นเสียงคลิกที่ไม่คาดคิดทำให้เกิดการระเบิดของ DA ที่เด่นชัดเมื่อแมวอยู่ในสภาวะที่ตื่นขึ้นมาอย่างเงียบ ๆ แต่ไม่มีผลใด ๆ เมื่อแมวอยู่ในกิจกรรมที่ต้องการความสนใจเช่นการล่าหนูการให้อาหารการกรูมมิ่ง โดยผู้ทดลองและอื่น ๆ (Strecker และ Jacobs, 1985) (รูปที่ 6A) ในทำนองเดียวกันการตอบสนอง DA Burst จะเกิดขึ้นจากเหตุการณ์ทางประสาทสัมผัสที่อ่อนแอทางร่างกาย แต่มีการแจ้งเตือนเนื่องจากความแปลกใหม่ของพวกเขา (Ljungberg และคณะ, 1992; ชูลท์ซ 1998) การตอบสนองเหล่านี้เคยชินกับการกระตุ้นแบบใหม่ที่คุ้นเคยควบคู่ไปกับการทำให้คุ้นเคยกับปฏิกิริยาการปรับทิศทาง (รูปที่ 6B) สอดคล้องกับสิ่งที่ค้นพบเหตุการณ์ที่น่าประหลาดใจและแปลกใหม่ทำให้เกิดการเปิดตัว DA ในโครงสร้างต่อเนื่อง (Lisman and Grace, 2005) และเปิดใช้งานวงจรสมองที่เกี่ยวข้องกับ DA ในลักษณะที่ทำให้เกิดการประมวลผลรางวัล (Zink และคณะ, 2003; Davidson และคณะ, 2004; Duzel et al., 2010).

รูป 6 

โดปามีนเซลล์ประสาทกระตุ้นการตอบสนองต่อการแจ้งเตือนเหตุการณ์

การตอบสนองการแจ้งเตือน DA ยังถูกกระตุ้นโดยสัญญาณชี้นำทางประสาทสัมผัสที่ไม่คาดคิดซึ่งมีศักยภาพในการให้ข้อมูลใหม่เกี่ยวกับเหตุการณ์สำคัญต่างๆ ตามที่คาดไว้สำหรับการแจ้งเตือนสัญญาณเวลาแฝงสั้น ๆ คำตอบเหล่านี้ค่อนข้างไม่เลือก: มันถูกกระตุ้นโดยสิ่งกระตุ้นใด ๆ คล้าย แรงกระตุ้นสำคัญแม้ว่าจะมีความคล้ายคลึงกันเล็กน้อย (ปรากฏการณ์ที่เรียกว่าลักษณะทั่วไป) (ชูลท์ซ 1998) เป็นผลให้เซลล์ประสาท DA มักตอบสนองต่อสิ่งเร้าด้วยสัญญาณสองอย่าง: สัญญาณเตือนที่เข้ารหัสอย่างรวดเร็วข้อเท็จจริงที่ว่าสิ่งเร้านั้น ที่อาจเกิดขึ้น สำคัญและการเข้ารหัสสัญญาณที่สอง ที่เกิดขึ้นจริง ความหมายที่คุ้มค่าหรือ aversive (ชูลท์ซและโรโม 1990; Waelti และคณะ, 2001; Tobler et al., 2003; วันและเดือน 2007; โคบายาชิและชูลท์ซ 2008; Fiorillo et al., 2008; Nomoto และคณะ, 2010) (ดู (Kakade และ Dayan, 2002; Joshua et al., 2009a; ชูลท์ซ 2010) เพื่อการตรวจสอบ) ตัวอย่างสามารถเห็นได้ในชุดของความคิดสร้างแรงบันดาลใจการเข้ารหัสเซลล์ประสาท DA แสดงใน รูป 6C (Bromberg-Martin และคณะ, 2010a) เซลล์ประสาทเหล่านี้ตื่นเต้นด้วยการให้รางวัลและตัวชี้นำ aversive แต่พวกเขาก็รู้สึกตื่นเต้นด้วยคิวที่เป็นกลาง คิวที่เป็นกลางไม่เคยถูกจับคู่กับผลลัพธ์ที่สร้างแรงบันดาลใจ แต่มีความคล้ายคลึงกันทางกายภาพ (เล็กน้อยมาก) กับรางวัลและตัวชี้นำ aversive

การตอบสนองต่อการแจ้งเตือนเหล่านี้ดูเหมือนจะเชื่อมโยงกับความสามารถของประสาทสัมผัสในการกระตุ้นปฏิกิริยาการปรับทิศทางเพื่อตรวจสอบมันต่อไปและค้นพบความหมายของมัน ดังจะเห็นได้จากคุณสมบัติเด่นสามประการ ขั้นแรกการแจ้งเตือนการตอบสนองจะเกิดขึ้นเฉพาะสำหรับการชี้นำทางประสาทสัมผัสที่ต้องได้รับการตรวจสอบเพื่อกำหนดความหมายของพวกเขาไม่ใช่สำหรับการให้รางวัลหรือเหตุการณ์ที่น่าสนใจเช่นการส่งน้ำหรือ airpuffs (ชูลท์ซ 2010) ประการที่สองการแจ้งเตือนการตอบสนองจะเกิดขึ้นก็ต่อเมื่อคิวนั้นมีความสำคัญและมีความสามารถในการกระตุ้นปฏิกิริยาการปรับทิศทางไม่ใช่เมื่อคิวนั้นไม่เกี่ยวข้องกับงานในมือและไม่สามารถกระตุ้นปฏิกิริยาการปรับทิศทาง (ชูลท์ซและโรโม 1990) ประการที่สามการแจ้งเตือนการตอบสนองจะได้รับการปรับปรุงในสถานการณ์ที่ตัวชี้นำจะทำให้เกิดความสนใจอย่างกะทันหัน - เมื่อมันปรากฏขึ้นในเวลาที่ไม่คาดคิดหรืออยู่ห่างจากศูนย์กลางของการจ้องมอง (Bromberg-Martin และคณะ, 2010a) ดังนั้นเมื่อตัวชี้นำที่สร้างแรงบันดาลใจถูกนำเสนอด้วยเวลาที่ไม่สามารถคาดเดาได้พวกเขาจะกระตุ้นปฏิกิริยาตอบสนองทันทีและการแจ้งเตือนแบบ DA ทั่วไป - กระตุ้นโดยตัวชี้นำทั้งหมดรวมถึงตัวชี้นำที่เป็นกลาง (รูป 6Cสีดำ) แต่หากกำหนดเวลาของพวกเขาสามารถคาดเดาได้ - ตัวอย่างเช่นโดยการเตือนผู้เข้าร่วมด้วย“ คิวเริ่มการทดลอง” ที่แสดงหนึ่งวินาทีก่อนที่สัญญาณจะปรากฏขึ้น - ตัวชี้นำจะไม่ทำให้เกิดการตอบรับการแจ้งเตือนอีกต่อไป (รูปที่ 6Dสีเทา) แต่การตอบสนองการแจ้งเตือนเปลี่ยนไปที่คิวเริ่มการทดลองซึ่งเป็นเหตุการณ์แรกของการทดลองที่มีช่วงเวลาที่คาดเดาไม่ได้และกระตุ้นให้เกิดปฏิกิริยาการปรับทิศทาง (รูปที่ 6Dสีดำ)

กลไกพื้นฐานที่สร้างเซลล์ประสาท DA แจ้งเตือนคืออะไร? สมมติฐานหนึ่งคือการแจ้งเตือนการตอบสนองเป็นเพียงสัญญาณเตือนความผิดพลาดในการทำนายผลตอบแทนแบบดั้งเดิมที่เกิดขึ้นในเวลาแฝงสั้น ๆ เข้ารหัสค่ารางวัลที่คาดหวังของสิ่งเร้าก่อนที่มันจะถูกแบ่งแยกอย่างสมบูรณ์ (Kakade และ Dayan, 2002) อย่างไรก็ตามหลักฐานล่าสุดแสดงให้เห็นว่าการแจ้งเตือนสัญญาณสามารถสร้างขึ้นโดยกลไกที่แตกต่างจากสัญญาณรางวัล DA แบบดั้งเดิม (Satoh และคณะ, 2003; ไบเออร์และกลิมเชอร์ 2005; Bromberg-Martin และคณะ, 2010a; Bromberg-Martin และคณะ, 2010c; Nomoto และคณะ, 2010) ที่โดดเด่นที่สุดการตอบสนองต่อการแจ้งเตือนการเริ่มต้นของการทดลองไม่ได้ จำกัด อยู่ที่การให้รางวัล มันสามารถมีความแข็งแกร่งเท่ากันในระหว่างภารกิจ aversive ที่ไม่มีการส่งรางวัล (รูปที่ 6C, Dด้านล่าง“ ภารกิจ aversive”) สิ่งนี้เกิดขึ้นแม้ว่าสัญญาณรางวัล DA แบบดั้งเดิมในเซลล์ประสาทเดียวกันส่งสัญญาณได้อย่างถูกต้องว่างานที่ให้รางวัลมีมูลค่าที่คาดหวังสูงกว่างาน aversive มาก (Bromberg-Martin และคณะ, 2010a) สัญญาณการแจ้งเตือนเหล่านี้ไม่ได้เป็นรูปแบบของการเข้ารหัสตามตัวอักษรล้วนๆหรือเป็นรูปแบบของการเข้ารหัสแบบ salience เพราะพวกมันเกิดขึ้นในส่วนของแรงจูงใจตามตัวอักษรและการเขียนรหัสเซลล์ประสาท DA (Bromberg-Martin และคณะ, 2010a) สามารถแยกความแตกต่างที่สองในลักษณะที่เซลล์ประสาท DA ทำนายผลตอบแทนในอนาคตตามความทรงจำของผลลัพธ์รางวัลที่ผ่านมา (Satoh และคณะ, 2003; ไบเออร์และกลิมเชอร์ 2005) ในขณะที่สัญญาณรางวัล DA แบบดั้งเดิมนั้นถูกควบคุมโดยหน่วยความจำแบบยาว timescale ที่ปรับให้เหมาะสมสำหรับการทำนายรางวัลที่แม่นยำการแจ้งเตือนการตอบสนองต่อการเริ่มต้นการทดลองจะถูกควบคุมโดยหน่วยความจำแยกที่คล้ายกับที่เห็นBromberg-Martin และคณะ, 2010c) การแยกตัวครั้งที่สามสามารถเห็นได้ในลักษณะที่สัญญาณเหล่านี้กระจายไปทั่วประชากรของเซลล์ประสาท DA ในขณะที่สัญญาณรางวัล DA แบบดั้งเดิมนั้นแข็งแกร่งที่สุดใน ventromedial SNc การแจ้งเตือนการตอบสนองต่อคิวเริ่มการทดลอง (และต่อสัญญาณอื่น ๆ ที่กำหนดเวลาโดยไม่คาดคิด) จะถูกถ่ายทอดไปทั่ว SNC (Nomoto และคณะ, 2010).

ตรงกันข้ามกับความแตกต่างเหล่านี้จากสัญญาณรางวัลแบบธรรมดาสัญญาณแจ้งเตือน DA มีความสัมพันธ์กับความเร็วของการปรับทิศทางและการตอบสนองต่อวิธีการในการแจ้งเตือนเหตุการณ์ (Satoh และคณะ, 2003; Bromberg-Martin และคณะ, 2010a; Bromberg-Martin และคณะ, 2010c) สิ่งนี้ชี้ให้เห็นว่าการแจ้งเตือนสัญญาณถูกสร้างขึ้นโดยกระบวนการทางประสาทที่กระตุ้นให้เกิดปฏิกิริยาที่รวดเร็วในการตรวจสอบเหตุการณ์สำคัญที่อาจเกิดขึ้น ในปัจจุบันโชคไม่ดีที่มีผู้รู้ค่อนข้างน้อยเกี่ยวกับเหตุการณ์ที่กระบวนการนี้ถือว่าเป็น 'สำคัญ' ตัวอย่างเช่นการเตือนการตอบสนองมีความอ่อนไหวต่อการให้รางวัลและเหตุการณ์ aversive อย่างเท่าเทียมกันหรือไม่? การแจ้งเตือนการตอบสนองเป็นที่รู้กันว่าเกิดขึ้นสำหรับสิ่งเร้าที่มีลักษณะคล้ายกับตัวชี้นำรางวัลหรือคล้ายกับทั้งตัวชี้นำรางวัลและตัวกำกับ (เช่นโดยการแบ่งปันวิธีการทางประสาทสัมผัสแบบเดียวกัน) แต่มันยังไม่ทราบว่าการแจ้งเตือนเกิดขึ้นสำหรับสิ่งเร้าที่คล้ายกับตัวชี้นำ aversive หรือไม่

บทบาทหน้าที่ของโดปามีนแจ้งเตือนสัญญาณ

ดังที่เราได้เห็นการแจ้งเตือนสัญญาณมีแนวโน้มที่จะถูกสร้างขึ้นโดยกลไกที่แตกต่างจากค่าของแรงจูงใจและสัญญาณเตือน อย่างไรก็ตามการแจ้งเตือนสัญญาณจะถูกส่งไปยังค่าที่สร้างแรงบันดาลใจและความนูนรหัส DA เซลล์ประสาทและดังนั้นจึงมีแนวโน้มที่จะควบคุมการประมวลผลของสมองและพฤติกรรมในลักษณะที่คล้ายกับสัญญาณมูลค่าและความทนทาน (รูป 5).

การแจ้งเตือนสัญญาณที่ส่งไปยังเซลล์ประสาท DA สร้างแรงบันดาลใจจะสนับสนุนการปรับทิศทางของความสนใจไปที่การแจ้งเตือนการกระตุ้นการมีส่วนร่วมของทรัพยากรทางปัญญาเพื่อค้นหาความหมายและตัดสินใจเกี่ยวกับแผนปฏิบัติการและเพิ่มระดับแรงจูงใจรูป 5) ผลกระทบเหล่านี้อาจเกิดขึ้นได้จากผลกระทบทันทีต่อการประมวลผลของระบบประสาทหรือโดยการเสริมแรงการกระทำซึ่งนำไปสู่การตรวจจับเหตุการณ์แจ้งเตือน บทบาทการทำงานนี้เหมาะสมกับความสัมพันธ์ระหว่าง DA ที่แจ้งเตือนการตอบสนองและการตอบสนองพฤติกรรมที่รวดเร็วต่อการกระตุ้นการแจ้งเตือนและด้วยทฤษฎีที่การตอบสนองของเซลล์ประสาท DA แฝงระยะสั้นนั้นมีส่วนเกี่ยวข้องในการปรับความสนใจ, เร้าอารมณ์Redgrave et al., 1999; Horvitz, 2000; โจเซฟและคณะ 2003; Lisman and Grace, 2005; เรดเกรฟและเกอร์นีย์ 2006; Joshua et al., 2009a).

การปรากฏตัวของการแจ้งเตือนสัญญาณในการสร้างรหัสแรงจูงใจค่าเซลล์ประสาท DA เป็นเรื่องยากที่จะอธิบาย เซลล์ประสาทเหล่านี้ส่งสัญญาณค่านิยมสร้างแรงบันดาลใจที่เหมาะสำหรับการค้นหาการประเมินผลและการเรียนรู้คุณค่า แต่พวกเขายังสามารถตื่นเต้นด้วยการแจ้งเตือนเหตุการณ์เช่นเสียงคลิกที่ไม่คาดคิดและการเริ่มต้นของการทดลอง aversive ตามเส้นทางที่ตั้งสมมติฐานของเรา (รูป 5) สิ่งนี้จะทำให้การแจ้งเตือนเหตุการณ์ได้รับการกำหนดค่าบวกและจะได้รับการแสวงหาในลักษณะที่คล้ายคลึงกับของรางวัล! แม้ว่าจะมีความประหลาดใจเมื่อเห็นแวบแรก แต่ก็มีเหตุผลที่น่าสงสัยว่าการแจ้งเตือนเหตุการณ์นั้นถือเป็นเป้าหมายเชิงบวก การแจ้งเตือนสัญญาณเตือนครั้งแรกว่าเหตุการณ์สำคัญที่กำลังจะเกิดขึ้นและเป็นโอกาสครั้งแรกที่จะดำเนินการเพื่อควบคุมเหตุการณ์นั้น หากมีตัวชี้นำการแจ้งเตือนสามารถตรวจจับทำนายและเตรียมพร้อมเหตุการณ์ล่วงหน้าได้ ถ้าตัวชี้นำการแจ้งเตือนขาดหายไปเหตุการณ์สำคัญที่เกิดขึ้นบ่อยครั้งจะทำให้เกิดความประหลาดใจที่ไม่คาดคิด แน่นอนว่ามนุษย์และสัตว์มักจะแสดงความพึงพอใจต่อสภาพแวดล้อมที่สามารถสังเกตและทำนายเหตุการณ์ทางประสาทสัมผัสที่เป็นกลางและมีแรงบันดาลใจที่เป็นกลางและมีแรงบันดาลใจ (Badia et al., 1979; Herry และคณะ, 2007; เดลี 1992; ชิวและโฮ 1994) และเซลล์ประสาท DA จำนวนมากส่งสัญญาณการตั้งค่าพฤติกรรมเพื่อดูข้อมูลที่คาดเดาได้Bromberg-Martin และ Hikosaka, 2009) การแจ้งเตือนสัญญาณ DA อาจสนับสนุนการตั้งค่าเหล่านี้โดยการกำหนดค่าบวกให้กับสภาพแวดล้อมที่อาจมีตัวชี้นำทางประสาทสัมผัสที่สำคัญที่สามารถคาดการณ์ล่วงหน้าได้

เส้นทางประสาทสำหรับค่าที่สร้างแรงบันดาลใจนูนและการแจ้งเตือน

ป่านนี้เราได้แบ่งเซลล์ประสาท DA ออกเป็นสองประเภทซึ่งเข้ารหัสค่าของการสร้างแรงบันดาลใจและการสร้างแรงบันดาลใจและมีความเหมาะสมสำหรับบทบาทที่แตกต่างในการควบคุมแรงจูงใจ (รูป 5) แผนผังโครงร่างความคิดนี้นำไปสู่เส้นทางประสาทในสมองได้อย่างไร ที่นี่เราเสนอสมมติฐานเกี่ยวกับสถานที่ตั้งทางกายวิภาคของเซลล์ประสาทเหล่านี้การคาดการณ์ของพวกเขาไปยังโครงสร้างปลายน้ำและแหล่งที่มาของสัญญาณแรงจูงใจของพวกเขา (ตัวเลข 6,, 77).

รูป 7 

ตำแหน่งทางกายวิภาคที่ถูกสมมุติฐานและการคาดการณ์ค่าโดปามีนที่สร้างแรงบันดาลใจและเซลล์ประสาทที่เข้ารหัสรหัส

ที่ตั้งทางกายวิภาคของเซลล์ประสาทการเข้ารหัสและค่านิยม

การศึกษาล่าสุดทำแผนที่ที่ตั้งของรางวัล DA และสัญญาณ aversive ในสมองส่วนกลางด้านข้างซึ่งรวมถึง SNc และส่วนท้ายสุดของ VTA (Matsumoto และ Hikosaka, 2009b) ค่าของแรงจูงใจและสัญญาณสร้างแรงบันดาลใจถูกกระจายไปทั่วภูมิภาคนี้ในการไล่ระดับสีทางกายวิภาค สัญญาณค่าแรงจูงใจพบมากขึ้นในเซลล์ประสาทใน ventromedial SNc และ VTA ด้านข้างในขณะที่สัญญาณ salience สร้างแรงบันดาลใจพบมากขึ้นในเซลล์ประสาทใน SNS dorsolateral (รูปที่ 7B) สิ่งนี้สอดคล้องกับรายงานที่การเข้ารหัสค่าตอบแทนของ DA นั้นแข็งแกร่งที่สุดใน SNV ventromedial (Nomoto และคณะ, 2010) ในขณะที่การกระตุ้น aversive มีแนวโน้มที่จะแข็งแกร่งที่สุดในแนวขวาง (Mirenowicz และ Schultz, 1996) การศึกษาอื่น ๆ ได้สำรวจสมองส่วนกลางที่อยู่ตรงกลางมากขึ้น การศึกษาเหล่านี้พบว่ามีส่วนผสมของการตอบสนองต่อสารกระตุ้นและยับยั้ง aversive โดยไม่มีความแตกต่างอย่างมีนัยสำคัญในสถานที่ของพวกเขาแม้ว่าจะมีแนวโน้มสำหรับการกระตุ้น aversive เพื่อตั้งอยู่หน้าท้องมากขึ้น (Guarraci และ Kapp, 1999; Brischoux และคณะ, 2009) (รูป 7C).

จุดหมายปลายทางของสัญญาณมูลค่าที่สร้างแรงบันดาลใจ

จากสมมุติฐานของเราว่าการสร้างแรงจูงใจในการกำหนดค่าเซลล์ประสาท DA ควรฉายไปยังบริเวณสมองที่เกี่ยวข้องกับวิธีการและการหลีกเลี่ยงการประเมินผลและการเรียนรู้คุณค่า (รูป 5) ที่จริงแล้วโครงการ SNC และ VTA ที่มี ventromedial ไปยังเยื่อหุ้มสมองส่วนหน้า ventromedial (วิลเลียมส์และโกลด์แมน - ราคิค 1998) รวมถึงเยื่อหุ้มสมอง orbitofrontal (OFC) (Porrino และ Goldman-Rakic, 1982) (รูปที่ 7A) OFC มีส่วนเกี่ยวข้องอย่างต่อเนื่องในการเข้ารหัสค่าในการศึกษาการถ่ายภาพการทำงาน (Anderson และคณะ, 2003; Small et al., 2003; Jensen et al., 2007; Litt et al., 2010) และการบันทึกเซลล์ประสาทเดียว (มอร์ริสันและซาลซ์แมน 2009; Roesch และ Olson, 2004) OFC เป็นความคิดที่จะประเมินตัวเลือกทางเลือก (Padoa-Schioppa, 2007; Kable และ Glimcher, 2009) เข้ารหัสการคาดการณ์ผลลัพธ์ (Schoenbaum และคณะ, 2009) และอัปเดตความคาดหวังเหล่านี้ในระหว่างการเรียนรู้ (Walton et al., 2010) นอกจากนี้ OFC ยังมีส่วนร่วมในการเรียนรู้จากข้อผิดพลาดในการทำนายผลตอบแทนเชิงลบ (Takahashi และคณะ, 2009) ซึ่งมีความแข็งแกร่งที่สุดในเซลล์ประสาท DA เข้ารหัส (รูป 4).

นอกจากนี้ส่วนที่อยู่ตรงกลางของโครงการ dopaminergic midbrain ไปที่ ventral striatum รวมถึงนิวเคลียส accumbens shell (NAc shell) (ฮาเบอร์และคณะ 2000) (รูปที่ 7A) การศึกษาล่าสุดแสดงให้เห็นว่าเปลือก NAc ได้รับสัญญาณ phasic DA ที่เข้ารหัสค่าแรงจูงใจของผลลัพธ์ด้านรสชาติ (Roitman และคณะ, 2008) สัญญาณเหล่านี้มีแนวโน้มที่จะทำให้เกิดการเรียนรู้ที่มีคุณค่าเพราะการฉีดยาโดยตรงของยา DA ลงในเปลือก NAc นั้นเป็นการเสริมแรงอย่างมาก (Ikemoto, 2010) ในขณะที่การรักษาที่ลดการป้อน DA ให้กับเปลือกสามารถทำให้เกิด aversions (Liu et al., 2008) ข้อแม้หนึ่งคือการศึกษาของ NAc shell DA ที่ปล่อยออกมานาน timescales (นาที) ได้สร้างผลลัพธ์ที่หลากหลายบางอย่างสอดคล้องกับการเข้ารหัสค่าและอื่น ๆ ที่มีการเข้ารหัส salience (เช่น (Bassareo และคณะ, 2002; Ventura และคณะ, 2007)) สิ่งนี้ชี้ให้เห็นว่าสัญญาณค่าอาจถูก จำกัด ไว้ที่ตำแหน่งเฉพาะภายในเชลล์ NAc โดยเฉพาะอย่างยิ่งภูมิภาคต่าง ๆ ของ NAc shell นั้นมีความเชี่ยวชาญในการควบคุมพฤติกรรมการทานอาหารและ aversive (Reynolds และ Berridge, 2002) ซึ่งทั้งคู่ต้องการอินพุตจากเซลล์ประสาท DA (Faure et al., 2008).

ในที่สุดเซลล์ประสาท DA ทั่วขอบเขตของ SNc ส่งการคาดการณ์อย่างหนักไปยัง striatum ด้านหลัง (ฮาเบอร์และคณะ 2000) การแนะนำว่า striatum ที่ด้านหลังอาจได้รับทั้งแรงจูงใจตามตัวอักษรและสัญญาณการเข้ารหัสสัญญาณ DA (รูปที่ 7A) การสร้างคุณค่าของแรงบันดาลใจการสร้างรหัสเซลล์ประสาท DA จะให้สัญญาณแนะนำที่เหมาะสำหรับวงจร striatal ที่เกี่ยวข้องกับการเรียนรู้คุณค่าเช่นการเรียนรู้พฤติกรรมการตอบสนองต่อสิ่งเร้าFaure et al., 2005; หยินและนอลตัน 2006; Balleine และ O'Doherty, 2010) เมื่อเซลล์ประสาท DA เหล่านี้เกิดการระเบิดพวกเขาจะเข้าร่วมเส้นทางเดินตรงเพื่อเรียนรู้ที่จะได้รับผลตอบแทน; เมื่อพวกเขาหยุดพวกเขาจะเข้าร่วมทางเดินอ้อมเพื่อเรียนรู้ที่จะหลีกเลี่ยงผลลัพธ์ที่แน่นอน (รูป 2) อันที่จริงมีหลักฐานเมื่อเร็ว ๆ นี้ว่าเส้นทางการเกิดของฝ่ายตรงข้ามเป็นไปตามการแบ่งงานอย่างชัดเจนเพื่อการให้รางวัลและการประมวลผลแบบ aversive (Hikida และคณะ, 2010) อย่างไรก็ตามยังไม่เป็นที่ทราบว่าเซลล์ประสาทในวิถีทางเหล่านี้ตอบสนองต่อการให้รางวัลและเหตุการณ์หลีกเลี่ยงในระหว่างพฤติกรรมได้อย่างไร อย่างน้อยที่สุดใน dorsal striatum โดยรวมเซลล์ประสาทส่วนหนึ่งจะตอบสนองต่อเหตุการณ์ที่ได้รับรางวัลและ aversive ในลักษณะที่แตกต่างกัน (Ravel et al., 2003; Yamada et al., 2004, 2007; Joshua et al., 2008).

จุดหมายปลายทางของสัญญาณการสร้างแรงบันดาลใจ

จากสมมติฐานของเรานั้นการสร้างรหัสเซลล์ประสาท DA ควรสร้างแรงบันดาลใจให้กับบริเวณสมองที่เกี่ยวข้องกับการปรับทิศทางการประมวลผลความรู้ความเข้าใจและแรงจูงใจทั่วไปรูป 5) อันที่จริงเซลล์ประสาท DA ในสมองส่วนกลาง dorsolateral ส่งการคาดการณ์ไปยังเยื่อหุ้มสมองด้านหน้าและด้านหลัง (วิลเลียมส์และโกลด์แมน - ราคิค 1998) (รูปที่ 7A) ภูมิภาคที่มีส่วนเกี่ยวข้องในการทำงานด้านความรู้ความเข้าใจเช่นการค้นหาโดยตั้งใจหน่วยความจำในการทำงานการควบคุมความรู้ความเข้าใจและการตัดสินใจระหว่างผลลัพธ์ที่สร้างแรงบันดาลใจ (วิลเลียมส์และคาสต์เนอร์ 2006; Lee และ Seo, 2007; ปรีชาญาณ 2008; Kable และ Glimcher, 2009; วอลลิสและเคนเนอร์ลีย์, 2010) ฟังก์ชั่นการรับรู้ล่วงหน้า Dorsolateral ถูกควบคุมอย่างเข้มงวดโดยระดับ DA (Robbins และ Arnsten, 2009) และตั้งทฤษฎีขึ้นอยู่กับการกระตุ้นเซลล์ประสาท DA ของ phasic (โคเฮนและคณะ, 2002; Lapish และคณะ, 2007) ยวดส่วนย่อยของเซลล์ประสาท prefrontal ด้านข้างตอบสนองต่อการชี้นำภาพที่คุ้มค่าและ aversive และส่วนใหญ่ที่ดีตอบสนองในทิศทางเดียวกันที่คล้ายกับการเข้ารหัสของความคิดสร้างแรงบันดาลใจ (โคบายาชิและคณะ 2006) นอกจากนี้กิจกรรมของเซลล์ประสาทเหล่านี้มีความสัมพันธ์กับความสำเร็จของพฤติกรรมในการปฏิบัติงานหน่วยความจำในการทำงาน (โคบายาชิและคณะ 2006) แม้ว่า dorsolateral DA → dorsolateral pathway cortex frontal นี้ดูเหมือนจะเฉพาะกับบิชอพ (วิลเลียมส์และโกลด์แมน - ราคิค 1998) ทางเดินที่มีหน้าที่คล้ายกันอาจมีอยู่ในสปีชีส์อื่น โดยเฉพาะอย่างยิ่งการทำงานของความรู้จำนวนมากของเยื่อหุ้มสมอง prefrontal dorsolateral เจ้าคณะจะดำเนินการโดยเยื่อหุ้มสมอง prefrontal medial หนู (Uylings et al., 2003) และมีหลักฐานว่าภูมิภาคนี้ได้รับสัญญาณสร้างแรงบันดาลใจ DA และควบคุมพฤติกรรมที่เกี่ยวข้องกับความสำคัญ (Mantz et al., 1989; Di Chiara, 2002; โจเซฟและคณะ 2003; Ventura และคณะ, 2007; Ventura และคณะ, 2008).

จากหลักฐานที่แสดงว่า VTA มีทั้งเซลล์ประสาทและเซลล์เข้ารหัสตามตัวอักษรและสัญญาณเข้ารหัสค่านั้นถูกส่งไปยังเชลล์ NAc, สัญญาณบ่งบอกความปลอดภัยอาจถูกส่งไปยังแกน NAc (รูปที่ 7A) แท้จริงแล้วแกนหลักของ NAc (แต่ไม่ใช่เปลือกหอย) เป็นสิ่งสำคัญสำหรับการกระตุ้นให้สามารถเอาชนะต้นทุนการเผชิญเหตุเช่นความพยายามทางกายภาพ สำหรับการปฏิบัติงานที่ต้องเปลี่ยนความยืดหยุ่นทางปัญญา และสำหรับการเปิดใช้งานตัวชี้นำรางวัลเพื่อทำให้เกิดการเพิ่มแรงจูงใจทั่วไป (Ghods-Sharifi และ Floresco, 2010; Floresco et al., 2006; Hall และคณะ, 2001; คาร์ดินัล 2006) สอดคล้องกับการเข้ารหัสของความคิดสร้างแรงบันดาลใจแกนหลักของ NAc จะได้รับการระเบิดอย่างบ้าคลั่งของ DA ในระหว่างประสบการณ์ที่คุ้มค่าทั้งสองอย่าง (วันและเดือน 2007) และประสบการณ์ aversive (แอนสตรอมและอัล 2009).

ในที่สุดตามที่กล่าวไว้ข้างต้น salience บางรหัส DA เซลล์ประสาทอาจโครงการเพื่อ striatum หลัง (รูปที่ 7A) ในขณะที่บางส่วนของพื้นที่ส่วนหลังมีส่วนร่วมในการทำงานที่เกี่ยวข้องกับการเรียนรู้คุณค่าการกระทำ striorsum หลังส่วนเกี่ยวข้องในการทำงานที่ควรจะมีส่วนร่วม striatum หลังเหตุการณ์สำคัญต่าง ๆ เช่นทิศทางความสนใจความทรงจำในการทำงานและแรงจูงใจทั่วไป (Hikosaka และคณะ, 2000; Klingberg, 2010; Palmiter, 2008) แท้จริงเซตย่อยของเซลล์ประสาทส่วนหลังที่มีการตอบสนองอย่างแรงกล้าต่อการให้รางวัลและกิจกรรม aversive มากกว่าเหตุการณ์ที่เป็นกลาง (Ravel et al., 1999; Blazquez et al., 2002; Yamada et al., 2004, 2007) แม้ว่าบทบาทเชิงสาเหตุของพวกเขาในพฤติกรรมที่กระตุ้นยังไม่เป็นที่รู้จัก

แหล่งที่มาของสัญญาณค่าแรงจูงใจ

ชุดการศึกษาล่าสุดแสดงให้เห็นว่าเซลล์ประสาท DA ได้รับสัญญาณค่าที่สร้างแรงบันดาลใจจากนิวเคลียสเล็ก ๆ ใน epithalamus, habenula ด้านข้าง (LHb) (Hikosaka, 2010) (รูป 8) LHb ออกแรงควบคุมเชิงลบที่มีศักยภาพเหนือเซลล์ประสาท DA: การกระตุ้น LHb ยับยั้งเซลล์ประสาท DA ที่เวลาแฝงสั้น (Christoph และคณะ, 1986) และสามารถควบคุมการเรียนรู้ในลักษณะตรงกันข้ามกับการกระตุ้น VTA (Shumake และคณะ 2010) สอดคล้องกับสัญญาณควบคุมเชิงลบเซลล์ประสาท LHb จำนวนมากมีการตอบสนอง phasic แบบ in-mirror กับเซลล์ประสาท DA: เซลล์ประสาท LHb เป็น ที่ขัดขวาง โดยข้อผิดพลาดในการทำนายผลตอบแทนเชิงบวกและ ตื่นเต้น จากข้อผิดพลาดการทำนายรางวัลเชิงลบ (Matsumoto และ Hikosaka, 2007, 2009a; Bromberg-Martin และคณะ, 2010a; Bromberg-Martin และคณะ, 2010c) ในหลายกรณีสัญญาณเหล่านี้เกิดขึ้นในเวลาแฝงที่สั้นลงใน LHb สอดคล้องกับการส่ง LHb → DA (Matsumoto และ Hikosaka, 2007; Bromberg-Martin และคณะ, 2010a).

รูป 8 

แหล่ง Hypothesized ของค่าที่สร้างแรงบันดาลใจ, salience และการแจ้งเตือนสัญญาณ

LHb มีความสามารถในการควบคุมเซลล์ประสาท DA ทั่วทั้งส่วนกลาง แต่หลักฐานหลายบรรทัดชี้ให้เห็นว่ามันออกแรงควบคุมแบบพิเศษเกี่ยวกับการสร้างแรงจูงใจค่ารหัสเซลล์ประสาท DA ครั้งแรกเซลล์ประสาท LHb เข้ารหัสค่าที่สร้างแรงบันดาลใจในลักษณะที่สะท้อนถึงการเข้ารหัสค่า DA เซลล์ประสาทอย่างใกล้ชิด - พวกเขาเข้ารหัสทั้งข้อผิดพลาดในการทำนายผลบวกและลบรางวัลและตอบสนองในทิศทางตรงข้ามกับรางวัลและเหตุการณ์ aversive (Matsumoto และ Hikosaka, 2009a; Bromberg-Martin และคณะ, 2010a) ประการที่สองการกระตุ้นของ LHb นั้นมีผลกระทบมากที่สุดต่อเซลล์ประสาท DA ซึ่งมีคุณสมบัติสอดคล้องกับการเข้ารหัสค่ารวมถึงการยับยั้งโดยไม่มีการชี้นำที่ไม่มีรางวัลและตำแหน่งทางกายวิภาคใน SNV ventromedial (Matsumoto และ Hikosaka, 2007, 2009b) ประการที่สามรอยโรคของ LHb ทำให้เซลล์ประสาท DA ยับยั้งการตอบสนองต่อเหตุการณ์ aversive แนะนำบทบาทเชิงสาเหตุสำหรับ LHb ในการสร้างสัญญาณค่า DA (Gao และคณะ, 1990).

LHb เป็นส่วนหนึ่งของเส้นทางประสาทที่กว้างขวางกว่าซึ่งเซลล์ประสาท DA สามารถควบคุมได้โดยฐานปมประสาท (รูป 8) LHb ได้รับสัญญาณที่คล้ายกับข้อผิดพลาดในการทำนายผลตอบแทนผ่านการฉายภาพจากประชากรของเซลล์ประสาทที่อยู่รอบ ๆ เส้นขอบลูกโลก pallidus (GPb) (Hong และ Hikosaka, 2008) เมื่อสัญญาณเหล่านี้ไปถึง LHb พวกเขามีแนวโน้มที่จะถูกส่งไปยังเซลล์ประสาท DA ผ่านทาง disynaptic ซึ่ง LHb กระตุ้นเซลล์ประสาท GABA ในสมองส่วนกลางซึ่งจะขัดขวางเซลล์ประสาท DAJi และ Shepard, 2007; Omelchenko et al., 2009; Brinschwitz และคณะ, 2010) สิ่งนี้สามารถเกิดขึ้นได้ผ่านการคาดการณ์ของ LHb ถึง interneurons ใน VTA และนิวเคลียส GABA-ergic ที่อยู่ติดกันซึ่งเรียกว่านิวเคลียส rostromedial tegmental (RMTg) (Jhou et al., 2009b) (เรียกอีกอย่างว่า 'หางหางของ VTA' (Kaufling et al., 2009)) สะดุดตาเซลล์ RMTg มีคุณสมบัติการตอบสนองคล้ายกับเซลล์ประสาท LHb เข้ารหัสค่าสร้างแรงบันดาลใจและมีการฉายภาพการยับยั้งอย่างหนักเพื่อ dopaminergic midbrain (Jhou et al., 2009a) ดังนั้นทางเดินปมประสาทฐานที่สมบูรณ์ในการส่งสัญญาณค่าที่สร้างแรงบันดาลใจให้กับเซลล์ประสาท DA อาจเป็น GPb → LHb → RMTg → RMTg → DA (Hikosaka, 2010).

คำถามสำคัญสำหรับการวิจัยในอนาคตไม่ว่าจะเป็นสัญญาณค่าที่สร้างแรงบันดาลใจจะถูกส่งผ่านทาง LHb เพียงอย่างเดียวหรือไม่หรือพวกมันถูกดำเนินการโดยเส้นทางป้อนข้อมูลหลายเส้นทาง ยวดการยับยั้ง DA โดย aversive footshocks ถูกควบคุมโดยกิจกรรมใน mesopontine parabrachial nucleus (PBN) (Coizet และคณะ, 2010) (รูป 8) นิวเคลียสนี้มีเซลล์ประสาทที่ได้รับข้อมูลโดยตรงจากการเข้ารหัสไขสันหลังประสาทสัมผัสความรู้สึกเป็นพิษและสามารถยับยั้งเซลล์ประสาท DA ผ่านการฉายแบบ excitatory to RMTg (Coizet และคณะ, 2010; Gauriau และ Bernard, 2002) สิ่งนี้ชี้ให้เห็นว่า LHb ส่งสัญญาณเซลล์ประสาท DA ที่สร้างแรงบันดาลใจให้กับทั้งตัวชี้นำที่คุ้มค่าและผลลัพธ์และผลลัพธ์ในขณะที่ PBN ให้ส่วนประกอบของสัญญาณค่าที่เกี่ยวข้องกับผลลัพธ์ aversive โดยเฉพาะ

แหล่งที่มาของสัญญาณนูนแรงจูงใจ

ไม่ค่อยมีใครรู้จักเกี่ยวกับแหล่งที่มาของสัญญาณนูนขึ้นแรงจูงใจในเซลล์ประสาท DA ผู้สมัครที่น่าสนใจคนหนึ่งคือนิวเคลียสกลางของ amygdala (CeA) ซึ่งมีส่วนเกี่ยวข้องอย่างต่อเนื่องในการปรับทิศทางความสนใจและการตอบสนองที่สร้างแรงบันดาลใจทั่วไประหว่างการให้รางวัลและเหตุการณ์ที่น่ารังเกียจ (ฮอลแลนด์และกัลลาเกอร์ 1999; Baxter และ Murray, 2002; Merali et al., 2003; บัลเล่และ Killcross, 2006) (รูป 8) CeA และนิวเคลียส amygdala อื่น ๆ มีเซลล์ประสาทจำนวนมากที่มีสัญญาณที่สอดคล้องกับการกระตุ้นแรงบันดาลใจ: พวกเขาส่งสัญญาณให้รางวัลและเหตุการณ์ aversive ในทิศทางเดียวกันจะเพิ่มขึ้นเมื่อเหตุการณ์เกิดขึ้นโดยไม่คาดคิดและมีความสัมพันธ์กับมาตรการพฤติกรรมของเร้าอารมณ์Nishijo และคณะ, 1988; Belova et al., 2007; Shabel และ Janak, 2009) สัญญาณเหล่านี้อาจถูกส่งไปยังเซลล์ประสาท DA เนื่องจาก CeA มีการฉายภาพลงในก้านสมองที่มีข้อมูลที่คุ้มค่าและมีค่ามาก (Lee และคณะ, 2005; Pascoe และ Kapp, 1985) และ CeA เป็นสิ่งจำเป็นสำหรับการเปิดตัว DA ในระหว่างเหตุการณ์ที่เกี่ยวข้องกับการให้รางวัล (Phillips และคณะ, 2003a) นอกจากนี้ CeA ยังมีส่วนร่วมกับเซลล์ประสาท DA ในเส้นทางที่สอดคล้องกับเครือข่ายทางกายวิภาคและการทำงานที่เรานำเสนอเพื่อสร้างแรงบันดาลใจ เส้นทางเดินรวมทั้ง CeA, SNc และ dorsal striatum เป็นสิ่งจำเป็นสำหรับการเรียนรู้การปรับทิศทางไปสู่การชี้นำอาหาร (ฮันและอัล 1997; Lee และคณะ, 2005; El-Amamy และ Holland, 2007) เพื่อให้สอดคล้องกับการแบ่งของเรากับสัญญาณความคุ้มค่าเส้นทางนี้เป็นสิ่งจำเป็นสำหรับการเรียนรู้ที่จะปรับทิศทางไปสู่การชี้นำอาหาร แต่ไม่ใช่สำหรับการเรียนรู้ที่จะเข้าใกล้ผลลัพธ์ของอาหาร (ฮันและอัล 1997) เส้นทางที่สองรวมถึงแกน CeA, SNc, VTA และ NAc เป็นสิ่งจำเป็นสำหรับรางวัลในการชี้นำเพื่อเพิ่มแรงจูงใจทั่วไปในการดำเนินการแสวงหารางวัล (Hall และคณะ, 2001; Corbit และ Balleine, 2005; El-Amamy และ Holland, 2007).

นอกเหนือจาก CeA แล้วเซลล์ประสาท DA ยังสามารถรับสัญญาณแรงบันดาลใจจากแหล่งอื่น ๆ เช่นเซลล์ประสาทที่เข้ารหัสด้วยรหัส salience ในรหัสพื้นฐาน (Lin และ Nicolelis, 2008; ริชาร์ดสันและ DeLong, 1991) และเซลล์ประสาทใน PBN (Coizet และคณะ, 2010) แม้ว่าเส้นทางเหล่านี้จะยังคงถูกตรวจสอบอยู่

แหล่งที่มาของการแจ้งเตือนสัญญาณ

มีผู้สมัครที่ดีหลายคนในการให้สัญญาณเซลล์ประสาท DA ด้วยการแจ้งเตือน บางทีผู้สมัครที่น่าสนใจที่สุดคือ superior colliculus (SC) นิวเคลียส midbrain ที่ได้รับการตอบสนองทางประสาทสัมผัสสั้น ๆ จากการรับรู้ทางประสาทสัมผัสและควบคุมปฏิกิริยาและความสนใจ (เรดเกรฟและเกอร์นีย์ 2006) (รูป 8) SC มีการฉายภาพโดยตรงไปยัง SNc และ VTA (อาจ et al, 2009; Comoli และคณะ, 2003) ในสัตว์ที่ถูกทำให้ดมยาสลบ SC นั้นเป็นท่อที่สำคัญสำหรับสัญญาณภาพที่มีความล่าช้าในการเข้าถึงเซลล์ประสาท DA และกระตุ้น DA ที่ปล่อยออกมาในโครงสร้างของปลายน้ำ (Comoli และคณะ, 2003; Dommett และคณะ, 2005) เส้นทาง SC-DA นั้นเหมาะสมที่สุดในการถ่ายทอดสัญญาณเตือนแทนที่จะให้รางวัลและสัญญาณความเกลียดชังเนื่องจากเซลล์ประสาท SC มีการตอบสนองเล็กน้อยต่อการให้รางวัลและมีอิทธิพลเพียงเล็กน้อยต่อการตอบสนอง DA aversive (Coizet และคณะ, 2006) สิ่งนี้ชี้ให้เห็นลำดับของเหตุการณ์ที่ SC neurons (1) ตรวจพบสิ่งเร้า (2) เลือกเป็นสิ่งสำคัญที่อาจเกิดขึ้น (3) กระตุ้นปฏิกิริยาปรับทิศทางเพื่อตรวจสอบสิ่งเร้าและ (4) กระตุ้นการตอบสนอง DA ซึ่งทำให้เกิดการตอบสนอง DA การระเบิดของ DA ในโครงสร้างดาวน์สตรีม (เรดเกรฟและเกอร์นีย์ 2006).

ตัวเลือกที่สองสำหรับส่งสัญญาณเตือนไปยังเซลล์ประสาท DA คือ LHb (รูป 8) ยวดการโจมตีที่ไม่คาดคิดของการเริ่มต้นการทดลองคิวยับยั้งเซลล์ประสาท LHb จำนวนมากในลักษณะที่ตรงกันข้ามกับ DA เซลล์ประสาทแจ้งเตือนสัญญาณและการตอบสนองนี้เกิดขึ้นในเวลาแฝงที่สั้นลงใน LHb สอดคล้องกับทิศทาง LHb → DA ของการส่งสัญญาณBromberg-Martin และคณะ, 2010a; Bromberg-Martin และคณะ, 2010c) นอกจากนี้เรายังตั้งข้อสังเกตโดยทั่วไปว่าเซลล์ประสาท LHb มักถูกยับยั้งโดยภาพและเสียงที่ไม่คาดคิดในลักษณะตรงกันข้ามกับการกระตุ้นของ DA (MM, ESB-M. และ OH, การสังเกตที่ไม่ได้เผยแพร่) แม้ว่าสิ่งนี้จะรอการสอบสวนอย่างเป็นระบบมากกว่า

ในที่สุดผู้สมัครที่สามสำหรับการส่งสัญญาณแจ้งเตือนไปยังเซลล์ประสาท DA คือนิวเคลียส pedunculopontine tegmental (PPTg) ซึ่งโครงการทั้ง SNC และ VTA และมีส่วนร่วมในการประมวลผลแรงจูงใจ (Winn, 2006) (รูป 8) PPTg เป็นสิ่งสำคัญสำหรับการเปิดใช้งานเซลล์ประสาท VTA DA (เกรซและคณะ 2007) รวมถึงการตอบสนองต่อเนื่องเพื่อให้รางวัลตัวชีแพนและไฮแลนด์ 2005) สอดคล้องกับสัญญาณการแจ้งเตือนเซลล์ประสาท PPTg มีการตอบสนองระยะเวลาสั้น ๆ ในการตอบสนองทางประสาทสัมผัสหลายรูปแบบและมีการใช้งานในระหว่างปฏิกิริยาการปรับทิศทาง (Winn, 2006) มีหลักฐานว่าการตอบสนองทางประสาทสัมผัสของ PPTg ได้รับอิทธิพลจากคุณค่าของรางวัลและตามข้อกำหนดสำหรับการดำเนินการในทันที (Dormont et al., 1998; Okada et al., 2009) (แต่เห็น (แพนและไฮแลนด์ 2005)) เซลล์ประสาท PPTg บางคนก็ตอบสนองต่อผลลัพธ์ที่ได้ผลหรือตอบแทนด้วยตัวเอง (Dormont et al., 1998; โคบายาชิและคณะ 2002; Ivlieva และ Timofeeva, 2003b, a) สิ่งสำคัญคือต้องทดสอบว่าสัญญาณที่ PPTg ส่งไปยังเซลล์ประสาท DA นั้นเกี่ยวข้องกับการแจ้งเตือนโดยเฉพาะหรือมีสัญญาณแรงจูงใจอื่น ๆ เช่นค่าและความทนทาน

คำแนะนำสำหรับการวิจัยในอนาคต

เราได้ตรวจสอบลักษณะของการให้รางวัลการหลีกเลี่ยงและการแจ้งเตือนสัญญาณในเซลล์ประสาท DA และได้เสนอสมมติฐานเกี่ยวกับเส้นทางประสาทและบทบาทของพวกเขาในพฤติกรรมที่กระตุ้น เราถือว่านี่เป็นสมมุติฐานการทำงานเป็นแนวทางสำหรับทฤษฎีและการวิจัยในอนาคตที่จะนำเราไปสู่ความเข้าใจที่สมบูรณ์ยิ่งขึ้น ที่นี่เราจะเน้นหลายพื้นที่ที่จำเป็นต้องมีการตรวจสอบเพิ่มเติมเพื่อเปิดเผยความซับซ้อนที่ลึกกว่า

ในปัจจุบันความเข้าใจของเราเกี่ยวกับเส้นทางประสาทที่อยู่ภายใต้สัญญาณ DA นั้นยังอยู่ในช่วงเริ่มต้น ดังนั้นเราจึงพยายามที่จะอนุมานแหล่งที่มาและปลายทางของค่าและความละเอียดของสัญญาณ DA สัญญาณส่วนใหญ่ขึ้นอยู่กับมาตรการทางอ้อมเช่นคุณสมบัติการตอบสนองประสาทและบทบาทการทำงานของพื้นที่สมองที่แตกต่างกัน มันจะเป็นสิ่งสำคัญที่จะนำเส้นทางสู่ผู้สมัครเหล่านี้ไปยังการทดสอบโดยตรงและค้นหาคุณสมบัติโดยละเอียดซึ่งได้รับความช่วยเหลือจากเครื่องมือที่พัฒนาขึ้นเมื่อไม่นานมานี้Robinson และคณะ, 2008) และควบคุม (ไจ่และคณะ 2009; Tecuapetla และคณะ, 2010; Stuber และคณะ, 2010) ที่มีความแม่นยำเชิงพื้นที่และอุณหภูมิสูง ดังที่ได้กล่าวไว้ข้างต้นโครงสร้างผู้สมัครหลายคนเหล่านี้มีองค์กรภูมิประเทศซึ่งแนะนำว่าการสื่อสารกับเซลล์ประสาท DA อาจเป็นภูมิประเทศเช่นกัน แหล่งสัญญาณทางประสาทของสัญญาณ Phasic DA อาจมีความซับซ้อนมากกว่าทางเดินที่เรียบง่ายที่เราได้นำเสนอเนื่องจากโครงสร้างของระบบประสาทที่สื่อสารกับเซลล์ประสาท DA นั้นเชื่อมโยงกันอย่างหนาแน่น (Geisler และ Zahm, 2005) และเซลล์ประสาท DA สามารถสื่อสารซึ่งกันและกันภายในสมองส่วนกลาง (ฟอร์ดและอัล 2010).

เราได้มุ่งเน้นไปที่ชุดของการเชื่อมต่อเซลล์ประสาท DA ที่เลือก แต่เซลล์ประสาท DA ได้รับการป้อนข้อมูลการทำงานจากโครงสร้างเพิ่มเติมจำนวนมากรวมทั้งนิวเคลียส subthalamic, นิวเคลียสต่อมา torsment tegmental, นิวเคลียสเตียงของ Stria terminalis, เยื่อหุ้มหัวใจหน้าท้อง, หน้าท้องเกรซและคณะ 2007; Shimo และ Wichmann, 2009; Jalabert และคณะ 2009) โดยเฉพาะอย่างยิ่ง hypothalamus orexin neurons โครงการด้านข้างของ DA neurons ถูกกระตุ้นด้วยการให้รางวัลมากกว่าเหตุการณ์ aversive และกระตุ้นพฤติกรรมการแสวงหายาเสพติด (แฮร์ริสและแอสตันโจนส์ 2006) แนะนำบทบาทที่เป็นไปได้ในฟังก์ชันที่เกี่ยวข้องกับค่า เซลล์ประสาท DA ส่งการคาดการณ์ไปยังสิ่งปลูกสร้างเพิ่มเติมมากมายรวมถึง hypothalamus, hippocampus, amygdala, habenula และบริเวณเยื่อหุ้มสมองมากมาย โดยเฉพาะอย่างยิ่งเยื่อหุ้มสมองส่วนหน้า (cingulate cortex (ACC)) ได้รับการเสนอเพื่อรับสัญญาณข้อผิดพลาดการทำนายผลตอบแทนจากเซลล์ประสาท DAHolroyd และ Coles, 2002) และมีเซลล์ประสาทที่มีกิจกรรมที่เกี่ยวข้องในเชิงบวกกับค่าสร้างแรงบันดาลใจ (Koyama และคณะ, 1998) การเปิดใช้งาน ACC ยังเชื่อมโยงกับการประมวลผลแบบ aversive ด้วยVogt, 2005; Johansen and Fields, 2004) ฟังก์ชั่น ACC เหล่านี้อาจได้รับการสนับสนุนโดยการผสมผสานของค่าสร้างแรงบันดาลใจ DA และสัญญาณความทนทานซึ่งจะเป็นสิ่งสำคัญในการทดสอบในการศึกษาในอนาคต อันที่จริงมีการรายงานสัญญาณประสาทที่เกี่ยวข้องกับการทำนายข้อผิดพลาดในหลายพื้นที่รวมถึงเยื่อหุ้มสมองส่วนหน้าตรงกลาง (Matsumoto และคณะ, 2007; Seo และ Lee, 2007), orbitofrontal cortex (Sul et al., 2010) (แต่เห็น (Takahashi และคณะ, 2009; Kennerley และ Wallis, 2009)) และ striatum ด้านหลัง (Kim et al., 2009; Oyama et al., 2010) และความสัมพันธ์เชิงสาเหตุของพวกเขากับกิจกรรมของเซลล์ประสาท DA ยังคงถูกค้นพบ

เราได้อธิบายเหตุการณ์ที่สร้างแรงบันดาลใจด้วยการแบ่งขั้วที่เรียบง่ายโดยแบ่งพวกมันออกเป็น 'รางวัล' หรือ 'aversive' แต่หมวดหมู่เหล่านี้มีความหลากหลายที่ดี ความเจ็บป่วยที่เกิดจาก aversive จะค่อยๆยืดเยื้อและเกิดจากเหตุการณ์ภายใน airpuff aversive นั้นรวดเร็วสั้นและเกิดจากโลกภายนอก สถานการณ์เหล่านี้ต้องการการตอบสนองเชิงพฤติกรรมที่แตกต่างกันซึ่งน่าจะได้รับการสนับสนุนจากระบบประสาทที่แตกต่างกัน นอกจากนี้แม้ว่าเราจะมุ่งเน้นการสนทนาของเราเกี่ยวกับเซลล์ประสาท DA สองประเภทโดยมีสัญญาณคล้ายกับค่านิยมสร้างแรงบันดาลใจและความโดดเด่น แต่จากการตรวจสอบอย่างใกล้ชิดแสดงให้เห็นว่าเซลล์ประสาท DA ไม่ได้ จำกัด อยู่ที่ขั้วคู่นี้ ตามที่ระบุไว้โดยความคิดของเราเกี่ยวกับการไล่ระดับสีทางกายวิภาคเซลล์ประสาท DA บางตัวส่งสัญญาณการผสมของสัญญาณที่เหมือนทั้งความคล้ายคลึงกันและความคุ้มค่า เซลล์ประสาท DA อื่น ๆ ยังตอบสนองต่อการให้รางวัล แต่ไม่ใช่เหตุการณ์ aversive (Matsumoto และ Hikosaka, 2009b; Bromberg-Martin และคณะ, 2010a) ข้อควรพิจารณาเหล่านี้ชี้ให้เห็นว่าเซลล์ประสาท DA บางชนิดอาจไม่เข้ารหัสเหตุการณ์สร้างแรงบันดาลใจตามแกนที่ใช้งานง่ายของเรา 'ดี' กับ 'ไม่ดี' และอาจมีความเชี่ยวชาญเฉพาะเพื่อสนับสนุนรูปแบบเฉพาะของพฤติกรรมการปรับตัว

แม้แต่ในขอบเขตของรางวัลก็มีหลักฐานว่าเซลล์ประสาท DA ส่งสัญญาณรางวัลที่แตกต่างกันไปยังส่วนต่างๆของสมอง (Bassareo และ Di Chiara, 1999; Ito et al., 2000; Stefani และ Moghaddam, 2006; Wightman และคณะ, 2007; Aragona และคณะ, 2009) คำตอบที่หลากหลายที่รายงานใน SNc และ VTA รวมถึงเซลล์ประสาทที่: ตอบสนองต่อการเริ่มต้นของการทดลองเท่านั้น (Roesch et al., 2007) อาจเข้ารหัสสัญญาณแจ้งเตือนที่บริสุทธิ์ ตอบสนองต่อการมองเห็นและการได้ยินต่างกัน (Strecker และ Jacobs, 1985) อาจได้รับข้อมูลจากเซลล์ประสาท SC และ PPTg ที่แตกต่างกัน ตอบสนองต่อเหตุการณ์แรกหรือครั้งสุดท้ายในลำดับ (ราเวลและริชมอนด์, 2006; จินกับคอสตา 2010); มีการเปิดใช้งานอย่างต่อเนื่องโดยรางวัลที่มีความเสี่ยง (Fiorillo et al., 2003); หรือถูกเปิดใช้งานในระหว่างการเคลื่อนไหวร่างกาย (ชูลท์ซ 1986; Kiyatkin, 1988a; Puryear et al., 2010; จินกับคอสตา 2010) (ดูสิ่งนี้ด้วย (ฟิลลิปและคณะ 2003b; Stuber และคณะ, 2005)) ในขณะที่แต่ละรูปแบบการตอบสนองเหล่านี้ได้รับการรายงานในการศึกษาน้อยหรือเซลล์ประสาทข้อมูลนี้ชี้ให้เห็นว่าเซลล์ประสาท DA สามารถแบ่งออกเป็นจำนวนประชากรที่แตกต่างกันตามหน้าที่

การพิจารณาขั้นสุดท้ายและที่สำคัญคือการศึกษาการบันทึกในสัตว์ที่มีพฤติกรรมยังไม่ได้ทำการตรวจวัดกิจกรรมของเซลล์ประสาท DA อย่างเต็มที่เนื่องจากการศึกษาเหล่านี้สามารถแยกแยะความแตกต่างระหว่างเซลล์ประสาท DA และ non-DA ได้โดยใช้วิธีทางอ้อม เช่นอัตราการยิง, รูปคลื่นขัดขวาง, และความไวต่อตัวรับ D2 agonists (เกรซและบันนีย์ 1983; ชูลท์ซ 1986) เทคนิคเหล่านี้ดูเหมือนจะระบุเซลล์ประสาท DA ได้อย่างน่าเชื่อถือภายใน SNc ซึ่งระบุโดยหลักฐานหลายบรรทัดรวมถึงการเปรียบเทียบวิธีการภายในเซลล์และนอกเซลล์, การบันทึก juxtacellular และผลกระทบของรอยโรคเฉพาะ DA (เกรซและบันนีย์ 1983; เกรซและคณะ 2007; Brown และคณะ, 2009) อย่างไรก็ตามการศึกษาล่าสุดระบุว่าเทคนิคนี้อาจมีความน่าเชื่อถือน้อยกว่าใน VTA ที่เซลล์ประสาท DA และ non-DA มีคุณสมบัติของเซลล์ที่หลากหลาย (Margolis และคณะ, 2006; Margolis และคณะ, 2008; Lammel et al., 2008; Brischoux และคณะ, 2009) แม้แต่การวัดโดยตรงของความเข้มข้นของ DA ในโครงสร้างแบบดาวน์สตรีมก็ไม่ได้แสดงหลักฐานแน่ชัดของกิจกรรมของ DA neuron spiking เนื่องจากความเข้มข้นของ DA อาจถูกควบคุมโดยปัจจัยเพิ่มเติมเช่นการกระตุ้น glutamatergic ของเทอร์มินัล DA axonCheramy และคณะ, 1991) และการเปลี่ยนแปลงอย่างรวดเร็วในกิจกรรมของผู้ขนส่ง DA (Zahniser และ Sorkin, 2004) ในการตรวจวัดกิจกรรมของเซลล์ประสาท DA อย่างเด็ดขาดในระหว่างการทำงานที่มีความจำเป็นจะต้องใช้เทคนิคการบันทึกใหม่เช่นการรวมการบันทึกเซลล์นอกที่มีการกระตุ้นด้วยแสง (จินกับคอสตา 2010).

สรุป

แนวคิดที่มีอิทธิพลของเซลล์ประสาท DA midbrain คือการส่งสัญญาณแรงบันดาลใจที่เป็นรูปแบบเดียวกันไปยังโครงสร้างของน้ำทั้งหมด ที่นี่เราได้ตรวจสอบหลักฐานว่าสัญญาณ DA มีความหลากหลายมากกว่าความคิดทั่วไป แทนที่จะเข้ารหัสสัญญาณที่เหมือนกันเซลล์ประสาท DA มีหลายประเภทที่ส่งข้อความสร้างแรงบันดาลใจที่ชัดเจนเกี่ยวกับกิจกรรมที่ให้รางวัลและไม่ให้รางวัล แม้แต่เซลล์ DA เดียวก็ไม่สามารถส่งสัญญาณแรงจูงใจเดี่ยวได้ แต่เซลล์ประสาท DA ส่งสัญญาณการผสมผสานของสัญญาณหลายสัญญาณที่สร้างขึ้นโดยกระบวนการทางประสาทที่แตกต่างกัน บางคนสะท้อนการคาดการณ์อย่างละเอียดเกี่ยวกับการให้รางวัลและประสบการณ์ที่มีคุณค่าในขณะที่คนอื่นสะท้อนการตอบสนองอย่างรวดเร็วต่อเหตุการณ์ที่มีความสำคัญที่มีศักยภาพสูง

นอกจากนี้เราได้เสนอสมมติฐานเกี่ยวกับธรรมชาติของสัญญาณ DA ที่หลากหลายเหล่านี้เครือข่ายประสาทที่สร้างพวกเขาและอิทธิพลของพวกเขาที่มีต่อโครงสร้างสมองล่องและพฤติกรรมที่กระตุ้น ข้อเสนอของเราสามารถมองได้ว่าเป็นการสังเคราะห์ทฤษฎีก่อนหน้า หลายทฤษฎีก่อนหน้านี้ได้พยายามระบุเซลล์ประสาท DA ด้วยกระบวนการสร้างแรงบันดาลใจเช่นการค้นหาเป้าหมายที่มีคุณค่าการมีส่วนร่วมในสถานการณ์ที่มีแรงจูงใจหรือมีปฏิกิริยาตอบสนองต่อการเปลี่ยนแปลงของสภาพแวดล้อม ในมุมมองของเราเซลล์ประสาท DA รับสัญญาณที่เกี่ยวข้องกับกระบวนการทั้งสามนี้ แต่แทนที่จะกลั่นสัญญาณเหล่านี้เป็นข้อความที่เหมือนกันเราได้เสนอให้เซลล์ประสาท DA ส่งสัญญาณเหล่านี้ไปยังโครงสร้างสมองที่แตกต่างเพื่อสนับสนุนระบบประสาทที่แตกต่างกันสำหรับการรับรู้และพฤติกรรมที่กระตุ้น เซลล์ประสาท DA บางตัวสนับสนุนระบบสมองที่กำหนดค่าที่สร้างแรงบันดาลใจส่งเสริมการดำเนินการเพื่อค้นหาเหตุการณ์ที่มีรางวัลหลีกเลี่ยงเหตุการณ์ aversive และมั่นใจว่าการแจ้งเตือนเหตุการณ์สามารถทำนายและเตรียมพร้อมล่วงหน้า เซลล์ประสาท DA อื่น ๆ สนับสนุนระบบสมองที่มีส่วนร่วมโดยการสร้างแรงบันดาลใจรวมถึงการปรับทิศทางเพื่อตรวจจับเหตุการณ์สำคัญที่อาจเกิดขึ้นการประมวลผลทางปัญญาเพื่อเลือกการตอบสนองและจดจำผลที่ตามมาและแรงจูงใจในการติดตามผลลัพธ์ที่ดีที่สุด เราหวังว่าข้อเสนอนี้จะช่วยให้เราเข้าใจการทำงานของ DA ในสมองได้ดียิ่งขึ้นซึ่ง DA เซลล์ประสาทปรับแต่งสัญญาณของพวกเขาเพื่อสนับสนุนโครงข่ายประสาทหลาย ๆ อันที่มีบทบาทที่แตกต่างกันในการควบคุมแรงจูงใจ

กิตติกรรมประกาศ

งานนี้ได้รับการสนับสนุนโดยโครงการวิจัยภายในที่สถาบันจักษุแห่งชาติ เราขอขอบคุณ Amy Arnsten สำหรับการสนทนาที่มีค่า

เชิงอรรถ

ข้อจำกัดความรับผิดชอบของผู้จัดพิมพ์: นี่เป็นไฟล์ PDF ของต้นฉบับที่ไม่มีการแก้ไขซึ่งได้รับการยอมรับให้ตีพิมพ์ เพื่อเป็นการบริการลูกค้าของเราเรากำลังจัดทำต้นฉบับฉบับแรกนี้ ต้นฉบับจะได้รับการคัดลอกเรียงพิมพ์และตรวจสอบหลักฐานที่เป็นผลลัพธ์ก่อนที่จะเผยแพร่ในรูปแบบที่อ้างอิงได้สุดท้าย โปรดทราบว่าในระหว่างกระบวนการผลิตข้อผิดพลาดอาจถูกค้นพบซึ่งอาจส่งผลกระทบต่อเนื้อหาและการปฏิเสธความรับผิดชอบทางกฎหมายทั้งหมดที่ใช้กับวารสารที่เกี่ยวข้อง

FOOTNOTE1By สร้างแรงบันดาลใจ เราหมายถึงปริมาณที่สูงสำหรับทั้งกิจกรรมที่ให้รางวัลและ aversive และต่ำสำหรับกิจกรรมที่เป็นกลาง (ไม่ใช่ของรางวัลและไม่ใช่ aversive) ที่มีแรงจูงใจ นี่คล้ายกับคำนิยามที่กำหนดโดย (Berridge และ Robinson, 1998) โปรดทราบว่าการสร้างแรงบันดาลใจนั้นแตกต่างจากแนวคิดอื่น ๆ ของความคิดที่ใช้ในระบบประสาทเช่นแรงกระตุ้นทางความคิด (ซึ่งใช้เฉพาะกับเหตุการณ์ที่พึงประสงค์เท่านั้น) (Berridge และ Robinson, 1998)) และการรับรู้แบบรับรู้ (ซึ่งนำไปใช้กับเหตุการณ์ที่เป็นกลางอย่างมีแรงจูงใจเช่นวัตถุที่เคลื่อนไหวและไฟสี ()Bisley และ Goldberg, 2010)).]

FOOTNOTE2โปรดทราบว่าการสร้างแรงจูงใจในการเขียนรหัสสัญญาณเซลล์ประสาท DA แตกต่างจากแนวคิดดั้งเดิมของ "ความเชื่อมโยง" และ "การเปลี่ยนแปลงความเชื่อมโยง" ที่ได้รับการเสนอเพื่อควบคุมอัตราการเรียนรู้การเสริมแรง (เช่น (Pearce and Hall, 1980)) ทฤษฎีดังกล่าวระบุว่าสัตว์เรียนรู้ (และปรับอัตราการเรียนรู้) จากข้อผิดพลาดทั้งในเชิงบวกและเชิงลบ แม้ว่าเซลล์ประสาท DA เหล่านี้อาจนำไปสู่การเรียนรู้จากข้อผิดพลาดในการทำนายเชิงบวกในระหว่างที่พวกเขาสามารถมีการตอบสนองที่ดี (เช่นการส่งมอบรางวัลที่ไม่คาดคิด) พวกเขาอาจไม่สนับสนุนการเรียนรู้จากข้อผิดพลาดการทำนายเชิงลบ เช่นการละเลยการให้รางวัลที่ไม่คาดคิด) (รูปที่ 4B).

ข้อมูลอ้างอิง

  1. Ahlbrecht M, Weber M. การแก้ปัญหาความไม่แน่นอน: การศึกษาทดลอง วารสารเศรษฐศาสตร์สถาบันและทฤษฎี 1996; 152: 593 607-
  2. Albin RL, Young AB, Penney JB กายวิภาคศาสตร์การทำงานของความผิดปกติของปมประสาท แนวโน้มทางประสาทวิทยาศาสตร์ 1989; 12: 366 375- [PubMed]
  3. แอนเดอร์สัน AK, Christoff K, Stappen I, Panitz D, Ghahremani DG, Glover G, Gabrieli JD, Sobel N. แยกการแสดงออกของความเข้มและความจุในการรับกลิ่นของมนุษย์ Nat Neurosci 2003; 6: 196 202- [PubMed]
  4. Anstrom KK, Miczek KA, Budygin EA เพิ่มการส่งสัญญาณโดปามีน phasic ในทางเดิน mesolimbic ระหว่างความพ่ายแพ้ทางสังคมในหนู ประสาท 2009; 161: 3 12- [PubMed]
  5. Aragona BJ, วัน JJ, Roitman MF, Cleaveland NA, Wightman RM, Carelli RM ความจำเพาะในระดับภูมิภาคในการพัฒนารูปแบบการส่งผ่านโดปามีนแบบ phasic แบบเรียลไทม์ในระหว่างการเข้าร่วมสมาคมคิว - โคเคนในหนู วารสารประสาทวิทยาศาสตร์ยุโรป 2009; 30: 1889 1899- [บทความฟรี PMC] [PubMed]
  6. Austin AJ, Duka T. กลไกแห่งความสนใจสำหรับผลลัพธ์ที่น่ารับประทาน การวิจัยสมองพฤติกรรม 2010; 213: 19 26- [PubMed]
  7. Badia P, Harsh J, Abbott B. การเลือกระหว่างเงื่อนไขช็อตที่คาดเดาได้และคาดเดาไม่ได้: ข้อมูลและทฤษฎี ประกาศทางจิตวิทยา 1979; 86: 1107 1131-
  8. Balleine BW, Killcross S. การประมวลผลแรงจูงใจแบบขนาน: มุมมองแบบบูรณาการของฟังก์ชั่น amygdala แนวโน้มทางประสาทวิทยาศาสตร์ 2006; 29: 272 279- [PubMed]
  9. Balleine BW, O'Doherty JP. ลักษณะคล้ายคลึงกันของมนุษย์และสัตว์ฟันแทะในการควบคุมการกระทำ: ปัจจัยที่กำหนดคอร์ติโคสเตรียทัลของการกระทำที่มุ่งเป้าหมายและเป็นนิสัย Neuropsychopharmacology. 2010; 35: 48–69. [บทความฟรี PMC] [PubMed]
  10. Barr GA, Moriceau S, Shionoya K, Muzny K, Gao P, Wang S, Sullivan RM ช่วงการเปลี่ยนภาพในการเรียนรู้ของทารกจะถูกปรับโดยโดปามีนใน amygdala Nat Neurosci 2009; 12: 1364 1366- [บทความฟรี PMC] [PubMed]
  11. Bassareo V, De Luca MA, Di Chiara G. การแสดงออกที่แตกต่างกันของคุณสมบัติกระตุ้นการสร้างแรงจูงใจโดยโดปามีนในนิวเคลียส Accumbens เชลล์กับแกนและคอร์เทกซ์ Prefrontal J Neurosci 2002; 22: 4709 4719- [PubMed]
  12. Bassareo V, Di Chiara G. การตอบสนองที่ต่างกันของการส่งโดปามีนไปยังสิ่งเร้าอาหารในนิวเคลียส accumbens ช่อง / ช่องหลัก ประสาท 1999; 89: 637 641- [PubMed]
  13. Baxter MG, Murray EA amygdala และรางวัล Nat Rev Neurosci 2002; 3: 563 573- [PubMed]
  14. ไบเออร์ HM, Glimcher PW เซลล์ประสาทโดปามีน Midbrain เข้ารหัสสัญญาณข้อผิดพลาดการทำนายผลตอบแทนเชิงปริมาณ เซลล์ประสาท 2005; 47: 129 141- [บทความฟรี PMC] [PubMed]
  15. Belova MA, Paton JJ, Morrison SE, ซีดี Salzman ความคาดหวังปรับการตอบสนองของระบบประสาทต่อสิ่งเร้าที่น่าพึงพอใจและหลีกเลี่ยงได้ในสัตว์จำพวกลิง เซลล์ประสาท 2007; 55: 970 984- [บทความฟรี PMC] [PubMed]
  16. Bentivoglio M, Morelli M. การจัดระเบียบและวงจรของเซลล์ประสาทโดปามีน mesencephalic และการกระจายตัวรับโดปามีนในสมอง คู่มือประสาทเคมี 2005: 1 107-
  17. Berridge KC, Robinson TE อะไรคือบทบาทของโดปามีนในการให้รางวัล: ผลกระทบทางความชอบ, การเรียนรู้ที่ได้ผลตอบแทนหรือการกระตุ้นสิ่งจูงใจ การวิจัยสมอง 1998; 28: 309 369- [PubMed]
  18. Besson C, Louilot A. การมีส่วนร่วมแบบไม่สมดุลของเซลล์ประสาทโดปามีนใน mesolimbic ในการรับรู้ทางอารมณ์ ประสาท 1995; 68: 963 968- [PubMed]
  19. Birgner C, Nordenankar K, Lundblad M, Mendez JA, Smith C, Le Greves M, Galter D, Olson L, Fredriksson A, Trudeau LE, et al. VGLUT2 ในเซลล์ประสาทต้องมีการกระตุ้นการกระตุ้นพฤติกรรม การดำเนินการของ National Academy of Sciences ของสหรัฐอเมริกา 2010; 107: 389 394- [บทความฟรี PMC] [PubMed]
  20. Bisley JW, Goldberg ME ความสนใจความตั้งใจและความสำคัญในกลีบข้างขม่อม ทบทวนประสาทวิทยาศาสตร์ประจำปี 2010; 33: 1 21- [บทความฟรี PMC] [PubMed]
  21. Bjorklund A, Dunnett SB ระบบประสาทของ Dopamine ในสมอง: การปรับปรุง แนวโน้มทางประสาทวิทยาศาสตร์ 2007; 30: 194 202- [PubMed]
  22. Blazquez PM, Fujii N, Kojima J, Graybiel AM การแสดงเครือข่ายของความน่าจะเป็นในการตอบสนองใน striatum เซลล์ประสาท 2002; 33: 973 982- [PubMed]
  23. Botvinick MM, Braver TS, Barch DM, Carter CS, Cohen JD การตรวจสอบความขัดแย้งและการควบคุมความรู้ความเข้าใจ Psychol Rev. 2001; 108: 624 – 652 [PubMed]
  24. แบรดลีย์ MM, Greenwald MK, Petry MC, Lang PJ ความทรงจำภาพ: ความสุขและความเร้าอารมณ์ในหน่วยความจำ J Exp Psychol เรียนรู้ Mem Cogn 1992; 18: 379 390- [PubMed]
  25. Braun DA, Mehring C, Wolpert DM การเรียนรู้โครงสร้างในการปฏิบัติ การวิจัยสมองพฤติกรรม 2010; 206: 157 165- [บทความฟรี PMC] [PubMed]
  26. Brinschwitz K, Dittgen A, Madai VI, Lommel R, Geisler S, Veh RW Axut กลูตามาเทอจิคจาก habenula ด้านข้างส่วนใหญ่ยุติในเซลล์ประสาท GABAergic ของหน้าท้องส่วนกลาง ประสาท 2010; 168: 463 476- [PubMed]
  27. Brischoux F, Chakraborty S, Brierley DI, Ungless MA การกระตุ้นทางเซลล์ของโดปามีนในเซลล์ VTA ที่หน้าท้องโดยการกระตุ้นพิษ การดำเนินการของ National Academy of Sciences ของสหรัฐอเมริกา 2009; 106: 4894 4899- [บทความฟรี PMC] [PubMed]
  28. Bromberg-Martin ES, Hikosaka O. Midbrain dopamine neurons เป็นสัญญาณการตั้งค่าสำหรับข้อมูลล่วงหน้าเกี่ยวกับรางวัลที่จะเกิดขึ้น เซลล์ประสาท 2009; 63: 119 126- [บทความฟรี PMC] [PubMed]
  29. Bromberg-Martin ES, Matsumoto M, Hikosaka O. กิจกรรมที่คาดหวังเกี่ยวกับยาชูกำลังและยา phasic ใน habenula ด้านข้างและเซลล์ประสาทโดปามีน เซลล์ประสาท 2010a; 67: 144 155- [บทความฟรี PMC] [PubMed]
  30. Bromberg-Martin ES, Matsumoto M, Hong S, Hikosaka O. เส้นทางเดินของ pallidus-habenula-dopamine ส่งสัญญาณค่าการกระตุ้นที่อนุมาน J Neurophysiol 2010b; 104: 1068 1076- [บทความฟรี PMC] [PubMed]
  31. Bromberg-Martin ES, Matsumoto M, Nakahara H, Hikosaka O. หน่วยความจำหลายต่อหลายครั้งใน habenula ด้านข้างและเซลล์ประสาทโดปามีน เซลล์ประสาท 2010c; 67: 499 510- [บทความฟรี PMC] [PubMed]
  32. MTC สีน้ำตาล, Henny P, Bolam JP, Magill PJ กิจกรรมของเซลล์ประสาทโดปามีนที่ต่างกันในระบบประสาทใน substantia nigra ระหว่างการเปลี่ยนแปลงที่เกิดขึ้นเองและขับเคลื่อนในสภาวะสมอง J Neurosci 2009; 29: 2915 2925- [PubMed]
  33. พระคาร์ดินัล RN ระบบประสาทที่เกี่ยวข้องในการเสริมความล่าช้าและความน่าจะเป็น Neural Netw 2006; 19: 1277 1301- [PubMed]
  34. เชียร์ JF, Aragona BJ, Heien ML, Seipel AT, Carelli RM, Wightman RM การประสานการปลดปล่อยโดปามีนแบบ accumbal และพฤติกรรมการขับเคลื่อนตามเป้าหมายของระบบประสาท เซลล์ประสาท 2007; 54: 237 244- [PubMed]
  35. Cheramy A, Kemel ML, Gauchy C, Desce JM, Galli T, Barbeito L, Glowinski J. บทบาทของกรดอะมิโน excitatory ในกฎระเบียบ presynaptic โดยตรงและโดยอ้อมของการปลดปล่อยโดปามีนจากขั้วประสาทของเซลล์ประสาทโดปามีน nigrostriatal กรดอะมิโน. 1991; 1: 351 363- [PubMed]
  36. ชิว SH, โฮ JL ความหวัง: การศึกษาเชิงประจักษ์ของทัศนคติที่มีต่อช่วงเวลาของการแก้ไขความไม่แน่นอน วารสารความเสี่ยงและความไม่แน่นอน 1994; 8: 267 288-
  37. Chiodo LA, Antelman SM, Caggiula AR, Lineberry CG การกระตุ้นประสาทสัมผัสเปลี่ยนอัตราการปลดปล่อยของเซลล์ประสาทโดปามีน (DA): หลักฐานของเซลล์ DA สองชนิดที่ทำงานได้ใน substantia nigra ความต้านทานของสมอง 1980; 189: 544 549- [PubMed]
  38. Christoph GR, Leonzio RJ, Wilcox KS การกระตุ้นของ habenula ด้านข้างช่วยยับยั้งเซลล์ประสาทที่มีสาร dopamine ใน substantia nigra และบริเวณหน้าท้องส่วนล่างของหนู J Neurosci 1986; 6: 613 619- [PubMed]
  39. Chuhma N, Choi WY, Mingote S, Rayport S. Dopamine neuron glutamate cotransmission: การมอดูเลตขึ้นอยู่กับความถี่ในการประมาณการ mesoventromedial ประสาท 2009; 164: 1068 1083- [บทความฟรี PMC] [PubMed]
  40. Cohen JD, Braver TS, Brown JW มุมมองการคำนวณเกี่ยวกับฟังก์ชั่นโดปามีนในเยื่อหุ้มสมองส่วนหน้า ความคิดเห็นปัจจุบันทางระบบประสาท 2002; 12: 223 229- [PubMed]
  41. Coizet V, Dommett EJ, Klop EM, Redgrave P, Overton PG นิวเคลียส parabrachial เป็นลิงค์ที่สำคัญในการส่งข้อมูล nociceptive แฝงสั้นไปยังเซลล์ประสาท dopaminergic midbrain ประสาท 2010; 168: 263 272- [บทความฟรี PMC] [PubMed]
  42. Coizet V, Dommett EJ, Redgrave P, Overton PG การตอบสนองแบบ Nociceptive ของเซลล์ประสาทโดปามิเนจิกระดับกลางได้รับการมอดูเลตโดยคอลิคิวลัสที่เหนือกว่าในหนู ประสาท 2006; 139: 1479 1493- [PubMed]
  43. Comoli E, Coizet V, Boyes J, Bolam JP, Canteras NS, Quirk RH, Overton PG, Redgrave P. การฉายโดยตรงจาก colliculus ที่เหนือกว่าถึง substantia nigra สำหรับการตรวจสอบเหตุการณ์ที่เห็นเด่นชัด Nat Neurosci 2003; 6: 974 980- [PubMed]
  44. Corbit LH, Balleine BW รอยแยกสองชั้นของรอยโรค amygdala basolateral และส่วนกลางในรูปแบบทั่วไปและผลลัพธ์เฉพาะของการถ่ายโอน pavlovian- เครื่องมือ J Neurosci 2005; 25: 962 970- [PubMed]
  45. Dalley JW, Laane K, Theobald DE, Armstrong HC, Corlett PR, Chudasama Y, Robbins TW การปรับความจำ Pavlovian ที่ จำกัด เวลาโดยผู้รับ D1 และ NMDA ในนิวเคลียส accumbens การดำเนินการของ National Academy of Sciences ของสหรัฐอเมริกา 2005; 102: 6189 6194- [บทความฟรี PMC] [PubMed]
  46. เดลี HB การตั้งค่าสำหรับการคาดเดาไม่ได้จะถูกย้อนกลับเมื่อการคาดการณ์ที่ไม่สามารถคาดการณ์ได้นั้นเป็นสิ่งที่หลีกเลี่ยงไม่ได้: ขั้นตอนข้อมูลและทฤษฎีเกี่ยวกับการสังเกตการตอบสนอง ใน: Gormezano I, Wasserman EA, บรรณาธิการ การเรียนรู้และความทรงจำ: พื้นผิวพฤติกรรมและชีวภาพ LE Associates; 1992 pp. 81 – 104
  47. MC Davidson, Horvitz JC, ท็อตแนม N, Fossella JA, Watts R, Ulug AM, Casey BJ caudate ที่แตกต่างกันและการเปิดใช้งาน cingulate หลังจากสิ่งเร้าที่ไม่คาดคิด NeuroImage 2004; 23: 1039 1045- [PubMed]
  48. วันที่ JJ, Roitman MF, Wightman RM, Carelli RM การเรียนรู้แบบเชื่อมโยงเป็นสื่อกลางการเปลี่ยนแปลงแบบไดนามิกในการส่งสัญญาณโดปามีนในนิวเคลียส accumbens Nat Neurosci 2007; 10: 1020 1028- [PubMed]
  49. Dayan P, Niv Y. การเรียนรู้การเสริมแรง: ดี, เลวและน่าเกลียด ความคิดเห็นปัจจุบันทางระบบประสาท 2008; 18: 185 196- [PubMed]
  50. Descarries L, Berube-Carriere N, Riad M, Bo GD, Mendez JA, Trudeau LE กลูตาเมตในเซลล์โดปามีน: การส่งผ่าน synaptic กับการแพร่กระจาย ความคิดเห็นการวิจัยสมอง 2008; 58: 290 302- [PubMed]
  51. Di Chiara G. นิวเคลียส accumbens เปลือกและโดปามีนหลัก: บทบาทที่แตกต่างในพฤติกรรมและการติดยาเสพติด การวิจัยสมองพฤติกรรม 2002; 137: 75 114- [PubMed]
  52. Dommett E, Coizet V, Blaha CD, Martindale J, Lefebvre V, Walton N, Mayhew JE, Overton PG, Redgrave P. วิธีกระตุ้นการมองเห็นที่กระตุ้นเซลล์ประสาทโดปามีนในระยะเวลาสั้น ๆ วิทยาศาสตร์. 2005; 307: 1476 1479- [PubMed]
  53. Dormont JF, Conde H, Farin D. บทบาทของนิวเคลียส pedunculopontine tegmental ที่สัมพันธ์กับประสิทธิภาพการทำงานของมอเตอร์ในแมว I. กิจกรรมหน่วยเดียวที่สัมพันธ์กับบริบทและการเสริมแรง การวิจัยสมองทดลอง Experimentelle Hirnforschung 1998; 121: 401 410- [PubMed]
  54. Duzel E, Bunzeck N, Guitart-Masip M, Duzel S. แรงจูงใจที่เกี่ยวข้องกับความคาดหวังและการสำรวจโดยโดปามีน (NOMAD): ความหมายสำหรับการมีสุขภาพดี ประสาทวิทยาศาสตร์และชีวจิตรีวิว 2010; 34: 660 669- [PubMed]
  55. El-Amamy H, Holland PC ผลกระทบที่แยกไม่ออกจากการตัดการเชื่อมต่อของนิวเคลียสของอะไมก์ดาลาจากบริเวณหน้าท้องหรือส่วนเทรเชียเรียนิโกรต่อการเรียนรู้การปรับตัวและแรงจูงใจ วารสารประสาทวิทยาศาสตร์ยุโรป 2007; 25: 1557 1567- [บทความฟรี PMC] [PubMed]
  56. Ettenberg A. คุณสมบัติกระบวนการของฝ่ายตรงข้ามของโคเคนที่จัดการด้วยตนเอง ประสาทวิทยาศาสตร์และชีวจิตรีวิว 2004; 27: 721 728- [PubMed]
  57. Fadok JP, Dickerson TM, Palmiter RD โดปามีนเป็นสิ่งจำเป็นสำหรับการกำหนดความกลัวขึ้นอยู่กับคิว J Neurosci 2009; 29: 11089 11097- [บทความฟรี PMC] [PubMed]
  58. Fairhall AL, Lewen GD, Bialek W, de Ruyter Van Steveninck RR ประสิทธิภาพและความคลุมเครือในรหัสประสาทแบบปรับตัว ธรรมชาติ. 2001; 412: 787 792- [PubMed]
  59. Faure A, Haberland U, Conde F, El Massioui N. Lesion ต่อระบบโดปามีน nigrostriatal ขัดขวางการสร้างนิสัยตอบสนองต่อสิ่งเร้า J Neurosci 2005; 25: 2771 2780- [PubMed]
  60. Faure A, Reynolds SM, Richard JM, Berridge KC โดปามีนที่มีรูปร่างเหมือน Mesolimbic ในความปรารถนาและความหวาดกลัว: การสร้างแรงจูงใจที่จะสร้างขึ้นโดยการหยุดชะงักของกลูตาเมตที่ถูกแปลในนิวเคลียส accumbens J Neurosci 2008; 28: 7184 7192- [บทความฟรี PMC] [PubMed]
  61. Fiorillo CD, Newsome WT, Schultz W. ความแม่นยำชั่วขณะของการทำนายผลรางวัลในเซลล์ประสาทโดปามีน Nat Neurosci 2008; 11: 966 973- [PubMed]
  62. Fiorillo CD, Tobler PN, Schultz W. การเข้ารหัสแบบไม่ต่อเนื่องของรางวัลความน่าจะเป็นและความไม่แน่นอนโดยเซลล์ประสาทโดปามีน วิทยาศาสตร์. 2003; 299: 1898 1902- [PubMed]
  63. Floresco SB, Ghods-Sharifi S, Vexelman C, Magyar O. บทบาทที่แยกไม่ออกสำหรับนิวเคลียส accumbens แกนกลางและเปลือกในการควบคุมการเปลี่ยนชุด J Neurosci 2006; 26: 2449 2457- [PubMed]
  64. Ford CP, Gantz SC, Phillips PE, Williams JT การควบคุมโดปามีนนอกเซลล์ที่ขั้ว dendrite และ axon J Neurosci 2010; 30: 6975 6983- [บทความฟรี PMC] [PubMed]
  65. แฟรงค์ MJ การปรับโดปามีนแบบไดนามิกในฐานปมประสาท: บัญชี neurocomputational ของการขาดดุลทางปัญญาในการรักษาและไม่พาร์กินสันพาร์กินสัน วารสารประสาทวิทยาศาสตร์เกี่ยวกับความรู้ความเข้าใจ 2005; 17: 51 72- [PubMed]
  66. Frank MJ, Fossella JA ประสาทและเภสัชวิทยาของการเรียนรู้แรงจูงใจและความรู้ความเข้าใจ Neuropsychopharmacology 2010 [บทความฟรี PMC] [PubMed]
  67. Frank MJ, Seeberger LC, O'Reilly RC โดยแครอทหรือติด: การเรียนรู้การเสริมแรงองค์ความรู้ในพาร์กินสัน วิทยาศาสตร์. 2004; 306: 1940 1943- [PubMed]
  68. Gallistel CR, Gibbon J. เวลา, อัตราและเงื่อนไข Psychol Rev. 2000; 107: 289 – 344 [PubMed]
  69. Gao DM, Jeaugey L, Pollak P, Benabid AL การตอบสนองแบบ nociceptive ขึ้นอยู่กับความเข้มของเซลล์ประสาทโดปามิเนจสันนิษฐานของ substantia nigra, pars compacta ในหนูและการดัดแปลงโดยอินพุต habenula ด้านข้าง ความต้านทานของสมอง 1990; 529: 315 319- [PubMed]
  70. Gauriau C, Bernard JF เส้นทางความเจ็บปวดและวงจร parabrachial ในหนู สรีรวิทยาการทดลอง 2002; 87: 251 258- [PubMed]
  71. Geisler S, Zahm DS ผู้ช่วยของพื้นที่หน้าท้องในพื้นที่ส่วนล่างของกายวิภาค - หนูสำหรับฟังก์ชั่นการบูรณาการ วารสารประสาทวิทยาเปรียบเทียบ 2005; 490: 270 294- [PubMed]
  72. Gerfen CR, Engber TM, Mahan LC, Susel Z, Chase TN, Monsma FJ, Jr, DR Sibley การแสดงออกของยีนที่ควบคุมโดยตัวรับ dopamine D1 และ D2 ของเซลล์ประสาทสโตรโทนิกรัลและ striatopallidal วิทยาศาสตร์. 1990; 250: 1429 1432- [PubMed]
  73. Ghods-Sharifi S, Floresco SB. ผลกระทบที่แตกต่างกันในการลดความพยายามที่เกิดจากการไม่ใช้งานของนิวเคลียส accumbens แกนหรือเปลือก ประสาทวิทยาศาสตร์เชิงพฤติกรรม 2010; 124: 179 191- [PubMed]
  74. FG Gonon ความสัมพันธ์แบบไม่เป็นเชิงเส้นระหว่างการไหลของแรงกระตุ้นและโดปามีนที่ปล่อยออกมาจากเซลล์ประสาทโดปามีนของโดปามีนซึ่งเป็นหนูกลางที่ได้รับการศึกษาโดยทางเคมีไฟฟ้าวิฟ ประสาท 1988; 24: 19 28- [PubMed]
  75. Goto Y, Yang CR, Otani S. ความสามารถในการทำหน้าที่และความผิดปกติของ synaptic plasticity ในเยื่อหุ้มสมองส่วนหน้า: บทบาทของโรคทางจิตเวช จิตเวชชีวภาพ 2010; 67: 199 207- [PubMed]
  76. เกรซ AA Phasic เทียบกับการปลดปล่อยโดปามีนแบบโทนิกและการปรับการตอบสนองของระบบโดปามีน: สมมติฐานสำหรับสาเหตุของโรคจิตเภท ประสาท 1991; 41: 1 24- [PubMed]
  77. เกรซ AA, Bunney BS. Electrophysiology ภายในเซลล์และนอกเซลล์ของเซลล์ประสาท nigral dopaminergic – 1 การระบุและลักษณะ ประสาทวิทยา. 1983; 10: 301–315 [PubMed]
  78. Grace AA, Floresco SB, Goto Y, Lodge ดีเจ กฎระเบียบของการยิงของเซลล์ประสาทโดปามีนและการควบคุมพฤติกรรมเป้าหมาย แนวโน้มทางประสาทวิทยาศาสตร์ 2007; 30: 220 227- [PubMed]
  79. Grecksch G, Matties H. บทบาทของกลไก dopaminergic ในฮิบโปหนูสำหรับการรวมในการแยกแยะความสว่าง Psychopharmacology (Berl) 1981; 75: 165 – 168 [PubMed]
  80. Guarraci FA, Kapp BS การศึกษาลักษณะทางอิเล็กโทรโซไซน์ของเซลล์ประสาทส่วนปลายของหน้าท้อง dopaminergic บริเวณหน้าท้องในช่วงการปรับสภาพความกลัวแบบพาเวียเวียนในกระต่ายตื่นตัว การวิจัยสมองพฤติกรรม 1999; 99: 169 179- [PubMed]
  81. ฮาเบอร์ SN, ฟัดจ์ JL, McFarland NR วิถีทาง Striatonigrostriatal ในบิชอพก่อตัวเป็นเกลียวขึ้นจากเปลือกไปยัง striatum dorsolateral J Neurosci 2000; 20: 2369 2382- [PubMed]
  82. Hall J, Parkinson JA, Connor TM, Dickinson A, Everitt BJ การมีส่วนร่วมของนิวเคลียสกลางของ amygdala และนิวเคลียส accumbens แกนกลางในการไกล่เกลี่ย Pavlovian มีอิทธิพลต่อพฤติกรรมเครื่องมือ วารสารประสาทวิทยาศาสตร์ยุโรป 2001; 13: 1984 1992- [PubMed]
  83. Han JS, McMahan RW, Holland P, Gallagher M. บทบาทของทางเดิน amygdalo-nigrostriatal ในการเรียนรู้แบบเชื่อมโยง J Neurosci 1997; 17: 3913 3919- [PubMed]
  84. Harris GC, Aston-Jones G. Arousal และรางวัล: การแบ่งขั้วในฟังก์ชันของ orexin แนวโน้มทางประสาทวิทยาศาสตร์ 2006; 29: 571 577- [PubMed]
  85. Herry C, Bach DR, Esposito F, Di Salle F, Perrig WJ, Scheffler K, Luthi A, Seifritz E. การประมวลผลของความไม่แน่นอนในมนุษย์และสัตว์ amygdala J Neurosci 2007; 27: 5958 5966- [PubMed]
  86. Hikida T, Kimura K, Wada N, Funabiki K, Nakanishi S. บทบาทที่แตกต่างของการส่งสัญญาณ synaptic ในทางเดินทางตรงและทางอ้อมเพื่อให้รางวัลและพฤติกรรม aversive เซลล์ประสาท 2010; 66: 896 907- [PubMed]
  87. Hikosaka O. Basal ganglia กลไกการเคลื่อนไหวของดวงตาที่เน้นการให้รางวัล พงศาวดารของ New York Academy of Sciences 2007; 1104: 229 249- [PubMed]
  88. Hikosaka O. The habenula: จากการหลีกเลี่ยงความเครียดไปสู่การตัดสินใจบนพื้นฐานของมูลค่า Nat Rev Neurosci 2010; 11: 503 513- [บทความฟรี PMC] [PubMed]
  89. Hikosaka O, Takikawa Y, Kawagoe R. บทบาทของปมประสาทพื้นฐานในการควบคุมการเคลื่อนไหวของตา saccadic แบบเจาะจง ความคิดเห็นทางสรีรวิทยา 2000; 80: 953 978- [PubMed]
  90. Hitchcott PK, Quinn JJ, Taylor JR การปรับแบบสองทิศทางของการกระทำตามเป้าหมายโดยโดปามีนเยื่อหุ้มสมองด้านหน้า Cereb Cortex 2007; 17: 2820 2827- [PubMed]
  91. Hnasko TS, Chuhma N, Zhang H, Goh GY, Sulzer D, Palmiter RD, Rayport S, Edwards RH การขนส่งกลูตาเมตแบบตุ่มส่งเสริมการจัดเก็บโดปามีนและกลูตาเมตคอร์เรสในร่างกาย เซลล์ประสาท 2010; 65: 643 656- [บทความฟรี PMC] [PubMed]
  92. Holland PC, Gallagher M. Amygdala circuitry ในกระบวนการที่ตั้งใจและเป็นตัวแทน แนวโน้มของวิทยาศาสตร์พุทธิปัญญา 1999; 3: 65 73- [PubMed]
  93. Hollerman JR, Schultz W. Dopamine neurons รายงานข้อผิดพลาดในการทำนายผลทางชั่วขณะของการเรียนรู้ Nat Neurosci 1998; 1: 304 309- [PubMed]
  94. Holroyd CB, Coles MG พื้นฐานทางประสาทของการประมวลผลข้อผิดพลาดของมนุษย์: การเรียนรู้การเสริมแรง, โดปามีนและการปฏิเสธเชิงลบที่เกี่ยวข้องกับข้อผิดพลาด Psychol Rev. 2002; 109: 679 – 709 [PubMed]
  95. Hong S, Hikosaka O. ลูกโลก pallidus ส่งสัญญาณที่เกี่ยวข้องกับรางวัลไปยัง habenula ด้านข้าง เซลล์ประสาท 2008; 60: 720 729- [บทความฟรี PMC] [PubMed]
  96. Horvitz JC การตอบสนองของโดปามีน Mesolimbocortical และ nigrostriatal ต่อเหตุการณ์ที่ไม่ใช่รางวัลสำคัญ ประสาท 2000; 96: 651 656- [PubMed]
  97. Horvitz JC, Stewart T, Jacobs BL กิจกรรมการระเบิดของเซลล์โดปามีนหน้าท้องส่วนล่างถูกกระตุ้นโดยการกระตุ้นประสาทสัมผัสในแมวที่ตื่นอยู่ ความต้านทานของสมอง 1997; 759: 251 258- [PubMed]
  98. Houk JC, Adams JL, Barto AG แบบจำลองของวิธีที่ปมประสาทฐานสร้างและใช้สัญญาณประสาทที่ทำนายการเสริมแรง ใน: Houk JC, Davis JL, Beiser DG, บรรณาธิการ รูปแบบของการประมวลผลข้อมูลในฐานปม Cambridge, MA: MIT Press; 1995 pp. 249 – 274
  99. Ikemoto S. สมองได้รับรางวัลวงจรนอกเหนือจากระบบโดปามีน mesolimbic: ทฤษฎี neurobiological ประสาทวิทยาศาสตร์และชีวจิตรีวิว 2010 [บทความฟรี PMC] [PubMed]
  100. Ito R, Dalley JW, Howes SR, Robbins TW, Everitt BJ ความร้าวฉานในการปลดปล่อยโดปามีนแบบมีเงื่อนไขในนิวเคลียสแอคคิวเบนส์คอร์และเชลล์เพื่อตอบสนองต่อการชี้นำโคเคนและพฤติกรรมการค้นหาโคเคนในหนู J Neurosci 2000; 20: 7489 7495- [PubMed]
  101. Ivlieva NY, Timofeeva NO. กิจกรรมของเซลล์ประสาทในนิวเคลียส pedunculopontine ในระหว่างการสะท้อนปรับอากาศผ่าตัดที่เกี่ยวข้องกับอาหาร ประสาทและสรีรวิทยาพฤติกรรม 2003a; 33: 919 928- [PubMed]
  102. Ivlieva NY, Timofeeva NO. กิจกรรมของเซลล์ประสาทในนิวเคลียส pedunculopontine ในระหว่างการสะท้อนปรับอากาศผ่าตัด ประสาทและสรีรวิทยาพฤติกรรม 2003b; 33: 499 506- [PubMed]
  103. Jalabert M, Aston-Jones G, Herzog E, Manzoni O, Georges F. บทบาทของนิวเคลียสเตียงของ stria terminalis ในการควบคุมเซลล์ประสาทโดปามีนบริเวณหน้าท้อง ความก้าวหน้าในระบบประสาท - จิตเภสัชวิทยาและจิตเวชศาสตร์ทางชีววิทยา 2009; 33: 1336–1346 [บทความฟรี PMC] [PubMed]
  104. Jeanblanc J, Hoeltzel A, Louilot A. Dissociation ในการมีส่วนร่วมของ dopaminergic neurons ทำให้เกิดแกนกลางและ subregions หลักของเปลือกและเปลือกของนิวเคลียส accumbens ในการยับยั้งแฝงและการรับรู้ทางอารมณ์ ประสาท 2002; 111: 315 323- [PubMed]
  105. เซ่น J, สมิ ธ AJ, Willeit M, Crawley AP, Mikulis DJ, Vitcu I, Kapur S. แยกรหัสพื้นที่สมองเพื่อความชัดเจนและความจุในระหว่างการทำนายรางวัลในมนุษย์ การทำแผนที่สมองของมนุษย์ 2007; 28: 294 302- [PubMed]
  106. Jhou TC, Field HL, Baxter MG, Saper CB, Holland PC The rostromedial tegmental nucleus (RMTg), GABAergic afferent ไปยังเซลล์ประสาทโดพามีนในสมองส่วนกลาง, เข้ารหัสสิ่งเร้า aversive และยับยั้งการตอบสนองของมอเตอร์ เซลล์ประสาท 2009a; 61: 786 800- [บทความฟรี PMC] [PubMed]
  107. Jhou TC, Geisler S, Marinelli M, Degarmo BA, Zahm DS mesopontine rostromedial tegmental nucleus: โครงสร้างที่ถูกกำหนดโดย habenula ด้านข้างซึ่งทำหน้าที่ไปยังพื้นที่หน้าท้องของหน้าท้องของ Tsai และ substantia nigra compacta วารสารประสาทวิทยาเปรียบเทียบ 2009b; 513: 566 596- [บทความฟรี PMC] [PubMed]
  108. Ji H, Shepard PD การกระตุ้น habenula ด้านข้างจะยับยั้งเซลล์ประสาทโดปามีนหนูกลางสมองส่วนล่างผ่านกลไกการรับสาร GABA (A) J Neurosci 2007; 27: 6923 6930- [PubMed]
  109. Jin X, Costa RM สัญญาณเริ่ม / หยุดเกิดขึ้นในวงจร nigrostriatal ระหว่างการเรียนรู้ตามลำดับ ธรรมชาติ. 2010; 466: 457 462- [บทความฟรี PMC] [PubMed]
  110. Johansen JP, เขตข้อมูล HL การเปิดใช้งานกลูตามาเทอจิคของเยื่อหุ้มสมอง cingulate ด้านหน้าสร้างสัญญาณการสอนแบบ aversive Nat Neurosci 2004; 7: 398 403- [PubMed]
  111. Joseph MH, Datla K, Young AM การแปลความหมายของการวัดนิวเคลียส accumbens โดปามีนโดยในการล้างไตร่างกาย: เตะความอยากหรือความรู้ความเข้าใจ? ประสาทวิทยาศาสตร์และชีวจิตรีวิว 2003; 27: 527 541- [PubMed]
  112. Joshua M, Adler A, Bergman H. พลวัตของโดปามีนในการควบคุมพฤติกรรมมอเตอร์ ความคิดเห็นปัจจุบันทางระบบประสาท 2009a; 19: 615 620- [PubMed]
  113. Joshua M, Adler A, Mitelman R, Vaadia E, Bergman H. Midbrain dopaminergic neurons และเซลล์ cholinergic striatal ที่โดดเด่นเข้ารหัสความแตกต่างระหว่างรางวัลและเหตุการณ์ aversive ในยุคที่แตกต่างกันของการทดลองปรับอากาศแบบน่าจะเป็นแบบดั้งเดิม J Neurosci 2008; 28: 11673 11684- [PubMed]
  114. Joshua M, Adler A, Prut Y, Vaadia E, Wickens JR, Bergman H. การซิงโครไนซ์ของเซลล์ประสาทโดปามีนในสมองส่วนกลางได้รับการปรับปรุงโดยการให้รางวัลเหตุการณ์ เซลล์ประสาท 2009b; 62: 695 704- [PubMed]
  115. Kable JW, Glimcher PW ชีววิทยาของการตัดสินใจ: ฉันทามติและความขัดแย้ง เซลล์ประสาท 2009; 63: 733 745- [บทความฟรี PMC] [PubMed]
  116. Kakade S, Dayan P. Dopamine: ลักษณะทั่วไปและโบนัส โครงข่ายประสาทเทียม 2002; 15: 549 559- [PubMed]
  117. Kapur S. Psychosis เป็นสภาวะของความผิดปรกติ: กรอบการเชื่อมโยงชีววิทยาปรากฏการณ์วิทยาและเภสัชวิทยาในผู้ป่วยโรคจิตเภท วารสารจิตเวชอเมริกัน 2003; 160: 13 23- [PubMed]
  118. Kaufling J, Veinante P, Pawlowski SA, Freund-Mercier MJ, Barrot M. Afferents ไปที่หาง GABAergic ของพื้นที่หน้าท้องหน้าท้องในหนู วารสารประสาทวิทยาเปรียบเทียบ 2009; 513: 597 621- [PubMed]
  119. Kennerley SW, Wallis JD การประเมินทางเลือกโดยเซลล์ประสาทเดี่ยวในกลีบสมองส่วนหน้า: ค่าผลลัพธ์ถูกเข้ารหัสในตัวแปรการตัดสินใจหลายตัว วารสารประสาทวิทยาศาสตร์ยุโรป 2009; 29: 2061 2073- [บทความฟรี PMC] [PubMed]
  120. Kim H, Sul JH, Huh N, Lee D, Jung MW บทบาทของ striatum ในการอัพเดทค่าของการกระทำที่เลือก J Neurosci 2009; 29: 14701 14712- [PubMed]
  121. Kiyatkin EA คุณสมบัติเชิงหน้าที่ของเซลล์ประสาทที่ประกอบด้วยโดปามีนและสันนิษฐานว่ามีพื้นที่หน้าท้องส่วนล่างในหนูที่มีสติ Int J Neurosci 1988a; 42: 21 43- [PubMed]
  122. Kiyatkin EA การดัดแปรที่เกิดจากมอร์ฟีนของคุณสมบัติการทำงานของเซลล์ประสาทในพื้นที่หน้าท้องในพื้นที่ของหนูในจิตสำนึก ประสาทวิทยาศาสตร์ J 1988b; 41: 57 70- [PubMed]
  123. Klingberg T. การฝึกอบรมและพลาสติกของหน่วยความจำในการทำงาน แนวโน้มของวิทยาศาสตร์พุทธิปัญญา 2010; 14: 317 324- [PubMed]
  124. Kobayashi S, Nomoto K, Watanabe M, Hikosaka O, Schultz W, Sakagami M. อิทธิพลของการให้รางวัลและผลลัพธ์ที่น่าพึงพอใจต่อกิจกรรมในเยื่อหุ้มสมองส่วนหน้าด้านข้าง Macaque เซลล์ประสาท 2006; 51: 861 870- [PubMed]
  125. Kobayashi S, Schultz W. อิทธิพลของรางวัลล่าช้าต่อการตอบสนองของเซลล์ประสาทโดปามีน J Neurosci 2008; 28: 7837 7846- [บทความฟรี PMC] [PubMed]
  126. Kobayashi Y, Inoue Y, Yamamoto M, Isa T, Aizawa H. การมีส่วนร่วมของเซลล์ประสาทนิวเคลียส pedunculopontine tegmental tegmental ต่อการทำงานของ saccade นำทางด้วยสายตาในลิง J Neurophysiol 2002; 88: 715 731- [PubMed]
  127. Koyama T, Tanaka YZ, Mikami A. เซลล์ประสาทแบบ Nociceptive ใน macing anterior cingulate ล่วงหน้าจะทำงานในระหว่างการรอคอยความเจ็บปวด Neuroreport 1998; 9: 2663 2667- [PubMed]
  128. Kravitz AV, ตรึง BS, Parker PR, Kay K, Thwin MT, Deisseroth K, Kreitzer AC การควบคุมพฤติกรรมยนต์พาร์กินสันโดยการควบคุมทัศนวิสัยของวงจรปมประสาท ธรรมชาติ. 2010 [บทความฟรี PMC] [PubMed]
  129. Lammel S, Hetzel A, Hackel O, Jones I, Liss B, Roeper J. คุณสมบัติที่เป็นเอกลักษณ์ของเซลล์ประสาท mesoprefrontal ภายในระบบโดปามีน mesocorticolimbic สองระบบ เซลล์ประสาท 2008; 57: 760 773- [PubMed]
  130. Lang PJ, Davis M. Emotion, แรงจูงใจและสมอง: พื้นฐานการสะท้อนกลับในการวิจัยสัตว์และมนุษย์ ความก้าวหน้าในการวิจัยสมอง 2006; 156: 3 29- [PubMed]
  131. Lapish CC, Kroener S, Durstewitz D, Lavin A, Seamans JK ความสามารถของระบบโดปามีน mesocortical ในการทำงานในโหมดชั่วคราว Psychopharmacology (Berl) 2007; 191: 609 – 625 [PubMed]
  132. Lee D, Seo H. กลไกของการเรียนรู้การเสริมแรงและการตัดสินใจในเยื่อหุ้มสมองส่วนหน้า dorsolateral prefrontal cortex พงศาวดารของ New York Academy of Sciences 2007; 1104: 108 122- [PubMed]
  133. Lee HJ, Groshek F, Petrovich GD, Cantalini JP, Gallagher M, Holland PC บทบาทของวงจร amygdalo-nigral ในการปรับสภาพของสิ่งเร้าที่จับคู่กับอาหาร J Neurosci 2005; 25: 3881 3888- [บทความฟรี PMC] [PubMed]
  134. Levita L, Dalley JW, Robbins TW นิวเคลียส accumbens โดปามีนและเรียนรู้ความกลัวมาเยือน: การทบทวนและการค้นพบใหม่ การวิจัยสมองพฤติกรรม 2002; 137: 115 127- [PubMed]
  135. Lin SC, Nicolelis MA เส้นประสาทที่ระเบิดออกมาในชุดประสาทฐานแปลความนูนโดยไม่คำนึงถึงความจุ เซลล์ประสาท 2008; 59: 138 149- [บทความฟรี PMC] [PubMed]
  136. Lisman JE, Grace AA ห่วง hippocampal-VTA: ควบคุมการป้อนข้อมูลลงในหน่วยความจำระยะยาว เซลล์ประสาท 2005; 46: 703 713- [PubMed]
  137. Litt A, Plassmann H, Shiv B, Rangel A. การแยกสัญญาณการประเมินราคาและสัญญาณเตือนระหว่างการตัดสินใจ Cereb Cortex 2010 ในการกด. [PubMed]
  138. Liu Z, Richmond BJ, Murray EA, Saunders RC, Steenrod S, Stubblefield BK, Montague DM, Ginns EI การกำหนดเป้าหมายดีเอ็นเอของโปรตีนจากเครื่องรับไรน์คอร์เทกซ์แบบ D2 ย้อนกลับบล็อกการเรียนรู้ของตัวชี้นำที่ทำนายรางวัล การดำเนินการของ National Academy of Sciences ของสหรัฐอเมริกา 2004; 101: 12336 12341- [บทความฟรี PMC] [PubMed]
  139. Liu ZH, Shin R, Ikemoto S. บทบาทคู่ของเซลล์ประสาทโดปามีน A10 อยู่ตรงกลางในการเข้ารหัสอารมณ์ Neuropsychopharmacology 2008; 33: 3010 3020- [บทความฟรี PMC] [PubMed]
  140. Ljungberg T, Apicella P, Schultz W. การตอบสนองของเซลล์ประสาทโดปามีนลิงในระหว่างการเรียนรู้ปฏิกิริยาของพฤติกรรม J Neurophysiol 1992; 67: 145 163- [PubMed]
  141. Lobo MK, Covington HE, 3rd, Chaudhury D, Friedman AK, Sun H, Damez-Werno D, Dietz DM, Zaman S, Koo JW, Kennedy PJ, et al. การสูญเสียเฉพาะประเภทเซลล์ของ BDNF การส่งสัญญาณเลียนแบบการควบคุม optogenetic ของรางวัลโคเคน วิทยาศาสตร์. 2010; 330: 385 390- [บทความฟรี PMC] [PubMed]
  142. Maeda H, Mogenson GJ ผลของการกระตุ้นต่อพ่วงที่มีต่อกิจกรรมของเซลล์ประสาทในบริเวณหน้าท้องส่วนล่าง, substantia nigra และการก่อตัวของไขว้ไขว้ของสมอง กระดานข่าวการวิจัยสมอง 1982; 8: 7 14- [PubMed]
  143. Mantz J, Thierry AM, Glowinski J. ผลกระทบของการเหน็บแนมหางพิษต่ออัตราการปลดปล่อยของเซลล์ประสาทโดปามีน mesocortical และ mesolimbic mesolimbic: การกระตุ้นการทำงานของระบบ mesocortical ความต้านทานของสมอง 1989; 476: 377 381- [PubMed]
  144. Margolis EB, Lock H, Hjelmstad GO, ฟิลด์ HL บริเวณหน้าท้อง tegmental มาเยือน: มีเครื่องหมาย electrophysiological สำหรับเซลล์ประสาท dopaminergic หรือไม่? วารสารสรีรวิทยา 2006; 577: 907 924- [บทความฟรี PMC] [PubMed]
  145. Margolis EB, Mitchell JM, Ishikawa J, Hjelmstad GO, ทุ่ง HL เซลล์ประสาทโดปามีนในสมองส่วนกลาง: เป้าหมายการฉายกำหนดระยะเวลาการกระทำและการยับยั้งตัวรับโดปามีน D (2) J Neurosci 2008; 28: 8908 8913- [PubMed]
  146. ทำเครื่องหมาย GP, Blander DS, Hoebel BG การกระตุ้นแบบปรับสภาพจะลดระดับโดปามีนนอกเซลล์ในนิวเคลียส accumbens หลังจากการพัฒนาความไม่ชอบรสชาติที่เรียนรู้ ความต้านทานของสมอง 1991; 551: 308 310- [PubMed]
  147. Marowsky A, Yanagawa Y, Obata K, Vogt KE subclass พิเศษของ interneurons ไกล่เกลี่ย dopaminergic การอำนวยความสะดวกของฟังก์ชั่น amygdala เซลล์ประสาท 2005; 48: 1025 1037- [PubMed]
  148. Matsumoto M, Hikosaka O. habenula ด้านข้างเป็นแหล่งกำเนิดสัญญาณเชิงลบในเซลล์ประสาทโดปามีน ธรรมชาติ. 2007; 447: 1111 1115- [PubMed]
  149. Matsumoto M, Hikosaka O. เป็นตัวแทนของค่าแรงจูงใจเชิงลบใน habenula ด้านข้างเจ้าคณะ Nat Neurosci 2009a; 12: 77 84- [บทความฟรี PMC] [PubMed]
  150. Matsumoto M, Hikosaka O. โดปามีนเซลล์ประสาทสองชนิดถ่ายทอดสัญญาณแรงบันดาลใจในเชิงบวกและเชิงลบอย่างชัดเจน ธรรมชาติ. 2009b; 459: 837 841- [บทความฟรี PMC] [PubMed]
  151. Matsumoto M, Matsumoto K, Abe H, Tanaka K. กิจกรรมเซลล์ล่วงหน้าตรงกลางส่งสัญญาณข้อผิดพลาดการทำนายค่าการกระทำ Nat Neurosci 2007; 10: 647 656- [PubMed]
  152. อาจ PJ, McHaffie JG, Stanford TR, Jiang H, คอสเตลโล MG, Coizet V, Hayes LM, ฮาเบอร์ SN, Redgrave P. ประมาณการ Tectonigral ในไพรเมต: ทางเดินสำหรับการรับความรู้ล่วงหน้าจากเซลล์ประสาทโดปามีน วารสารประสาทวิทยาศาสตร์ยุโรป 2009; 29: 575 587- [บทความฟรี PMC] [PubMed]
  153. Mazzoni P, Hristova A, Krakauer JW. ทำไมเราไม่เคลื่อนที่ให้เร็วขึ้น? โรคพาร์กินสันความแข็งแรงในการเคลื่อนไหวและแรงจูงใจโดยปริยาย เจ Neurosci 2007; 27: 7105–7116 [PubMed]
  154. Merali Z, Michaud D, McIntosh J, Kent P, Anisman H. ความก้าวหน้าในระบบประสาท - จิตเภสัชวิทยาและจิตเวชศาสตร์ทางชีววิทยา 2003; 27: 1201–1212 [PubMed]
  155. Mirenowicz J, Schultz W. การกระตุ้นการทำงานของเซลล์โดปามีนในสมองส่วนกลางด้วยการกระตุ้นมากกว่าการกระตุ้น aversive ธรรมชาติ. 1996; 379: 449 451- [PubMed]
  156. Molina-Luna K, Pekanovic A, Rohrich S, Hertler B, Schubring-Giese M, Rioult-Pedotti MS, Luft AR โดปามีนในเยื่อหุ้มสมองเป็นสิ่งจำเป็นสำหรับการเรียนรู้ทักษะและความยืดหยุ่น กรุณาหนึ่ง 2009; 4: e7082 [บทความฟรี PMC] [PubMed]
  157. Montague PR, Berns GS เศรษฐศาสตร์ประสาทและสารตั้งต้นทางชีวภาพ เซลล์ประสาท 2002; 36: 265 284- [PubMed]
  158. Montague PR, Dayan P, Sejnowski TJ กรอบการทำงานสำหรับระบบโดปามีน mesencephalic บนพื้นฐานของการเรียนรู้แบบ Hebbian ที่สามารถคาดการณ์ได้ J Neurosci 1996; 16: 1936 1947- [PubMed]
  159. Morris G, Arkadir D, Nevet A, Vaadia E, Bergman H. บังเอิญ แต่ข้อความที่แตกต่างกันของโดปามีนในสมองส่วนกลางและเซลล์ประสาทที่ใช้งานได้ดี เซลล์ประสาท 2004; 43: 133 143- [PubMed]
  160. Morris G, Nevet A, Arkadir D, Vaadia E, Bergman H. Midbrain เซลล์โดปามีนเป็นตัวเข้ารหัสการตัดสินใจสำหรับการดำเนินการในอนาคต Nat Neurosci 2006; 9: 1057 1063- [PubMed]
  161. Morrison SE, ซีดี Salzman การบรรจบกันของข้อมูลเกี่ยวกับสิ่งเร้าที่ให้ผลตอบแทนและการหลีกเลี่ยงในเซลล์ประสาทเดี่ยว J Neurosci 2009; 29: 11471 11483- [บทความฟรี PMC] [PubMed]
  162. Nakahara H, Itoh H, Kawagoe R, Takikawa Y, Hikosaka O. เซลล์โดปามีนสามารถแสดงถึงข้อผิดพลาดในการทำนายตามบริบท เซลล์ประสาท 2004; 41: 269 280- [PubMed]
  163. Nakamura K, Hikosaka O. บทบาทของโดปามีนในนิวเคลียสเจ้าคณะ caudate ในการปรับรางวัล saccades J Neurosci 2006; 26: 5360 5369- [PubMed]
  164. Neve KA, Seamans JK, การส่งสัญญาณ Trantham-Davidson H. Dopamine วารสารงานวิจัยการรับและการส่งสัญญาณ 2004; 24: 165 205- [PubMed]
  165. Nishijo H, Ono T, Nishino H. การตอบสนองของเซลล์ประสาทเดี่ยวใน amygdala ของลิงแจ้งเตือนในระหว่างการกระตุ้นประสาทสัมผัสที่ซับซ้อนด้วยความสำคัญทางอารมณ์ J Neurosci 1988; 8: 3570 3583- [PubMed]
  166. Niv Y, Daw ND, Joel D, dayan P. Tonic dopamine: ต้นทุนค่าเสียโอกาสและการควบคุมการตอบสนองของร่างกาย เภสัช 2007; 191: 507 520- [PubMed]
  167. Nomoto K, Schultz W, Watanabe T, Sakagami M. ขยายการตอบสนองของโดปามีนชั่วคราวเพื่อกระตุ้นสิ่งเร้าที่คาดเดาได้ J Neurosci 2010; 30: 10692 10702- [บทความฟรี PMC] [PubMed]
  168. Okada K, Toyama K, Inoue Y, Isa T, Kobayashi Y. เซลล์ประสาท pedunculopontine tegmental tegmental ที่แตกต่างกันเป็นสัญญาณทำนายและรางวัลงานจริง J Neurosci 2009; 29: 4858 4870- [PubMed]
  169. Omelchenko N, Bell R, Sesack SR การคาดคะเนแบบ habenula ด้านข้างไปยังโดปามีนและเซลล์ประสาทกาบาในบริเวณพื้นที่หน้าท้องของหนู วารสารประสาทวิทยาศาสตร์ยุโรป 2009; 30: 1239 1250- [บทความฟรี PMC] [PubMed]
  170. Owesson-White CA, Ariansen J, Stuber GD, Cleaveland NA, Cheer JF, Wightman RM, Carelli RM การเข้ารหัสระบบประสาทของพฤติกรรมการค้นหาโคเคนนั้นเกิดขึ้นพร้อมกันกับการปล่อยสาร dopamine ในระบบประสาทในแกนกลางและเปลือก วารสารประสาทวิทยาศาสตร์ยุโรป 2009; 30: 1117 1127- [บทความฟรี PMC] [PubMed]
  171. Oyama K, Hernadi I, Iijima T, Tsutsui K. Reward ข้อผิดพลาดในการทำนายรหัสในเซลล์ประสาทส่วนหลังส่วนปลาย J Neurosci 2010; 30: 11447 11457- [PubMed]
  172. Packard MG, White NM การแยกความสัมพันธ์ระหว่างฮิปโปแคมปัสและระบบความจำนิวเคลียสของหางกระรอกโดยการฉีด intracerebral ฉีดของโดปามีน agonists ประสาทวิทยาศาสตร์เชิงพฤติกรรม 1991; 105: 295 306- [PubMed]
  173. Padoa-Schioppa C. Orbitofrontal cortex และการคำนวณมูลค่าทางเศรษฐกิจ พงศาวดารของ New York Academy of Sciences 2007; 1121: 232 253- [PubMed]
  174. Palmiter RD การส่งสัญญาณโดปามีนในแถบหลังเป็นสิ่งจำเป็นสำหรับพฤติกรรมที่มีแรงจูงใจ: บทเรียนจากหนูที่ขาดโดพามีน พงศาวดารของ New York Academy of Sciences 2008; 1129: 35 46- [บทความฟรี PMC] [PubMed]
  175. Pan WX, Hyland BI นิวเคลียส pedunculopontine tegmental ควบคุมการตอบสนองปรับอากาศของเซลล์ประสาทโดปามีน midbrain ในหนูทดลอง J Neurosci 2005; 25: 4725 4732- [PubMed]
  176. Pan WX, Schmidt R, Wickens JR, Hyland BI กลไกการสูญพันธุ์ของไตรภาคีที่เสนอโดยกิจกรรมโดปามีนเซลล์ประสาทและแบบจำลองความแตกต่างชั่วคราว J Neurosci 2008; 28: 9619 9631- [PubMed]
  177. ปาร์กเกอร์ JG, Zweifel LS, คลาร์กเจเจอีแวนส์ SB, ฟิลลิปส์ PE, Palmiter RD การขาดตัวรับ NMDA ในเซลล์ประสาทโดพามีนลดการปล่อยโดปามีน แต่ไม่เข้าใกล้ในระหว่างการปรับอากาศแบบพาฟโลเวียน การดำเนินการของ National Academy of Sciences ของสหรัฐอเมริกา 2010 [บทความฟรี PMC] [PubMed]
  178. Pascoe JP, Kapp BS ลักษณะทางอิเล็กโทรวิทยาของเซลล์ประสาทส่วนกลางนิวเคลียส amygdaloid ระหว่างการปรับความกลัวแบบพาฟโลเวียนในกระต่าย การวิจัยสมองพฤติกรรม 1985; 16: 117 133- [PubMed]
  179. Pascucci T, Ventura R, Latagliata EC, Cabib S, Puglisi-Allegra S. เยื่อหุ้มสมองส่วนหน้า prefrontal อยู่ตรงกลางกำหนดการตอบสนองโดปามีน accumbens กับความเครียดผ่านอิทธิพลของศัตรูของ norepinephrine และโดปามีน Cereb Cortex 2007; 17: 2796 2804- [PubMed]
  180. Pearce JM, Hall G. แบบจำลองสำหรับการเรียนรู้แบบ Pavlovian: การเปลี่ยนแปลงในประสิทธิภาพของการปรับอากาศ แต่ไม่ใช่สิ่งเร้าที่ไม่มีเงื่อนไข Psychol Rev. 1980; 87: 532 – 552 [PubMed]
  181. Pezze MA, Feldon J. Mesolimbic สูตรโดปามีนในเส้นทางแห่งความหวาดกลัว ความก้าวหน้าทางประสาทวิทยา 2004; 74: 301 320- [PubMed]
  182. Phillips AG, Ahn S, Howland JG. การควบคุม Amygdalar ของระบบโดปามีน mesocorticolimbic: ทางเดินขนานกับพฤติกรรมกระตุ้น ประสาทวิทยาศาสตร์และชีวจิตรีวิว 2003a; 27: 543 554- [PubMed]
  183. Phillips GD, Salussolia E, Hitchcott PK บทบาทของการฉายโดปามีน mesoamygdaloid ในการเรียนรู้ทางอารมณ์ เภสัช 2010 [PubMed]
  184. Phillips PE, Stuber GD, Heien ML, Wightman RM, Carelli RM การปลดปล่อยโดปามีน Subsecond ส่งเสริมการแสวงหาโคเคน ธรรมชาติ. 2003b; 422: 614 618- [PubMed]
  185. Porrino LJ, Goldman-Rakic ​​PS การปกคลุมด้วยก้านสมองของเยื่อหุ้มสมองด้านหน้าและด้านหน้า cingulate ในลิงจำพวกเปิดเผยโดยการขนส่งถอยหลังเข้าคลอง HRP วารสารประสาทวิทยาเปรียบเทียบ 1982; 205: 63 76- [PubMed]
  186. Puryear CB, Kim MJ, Mizumori SJ การเข้ารหัสการเคลื่อนที่และผลตอบแทนร่วมกันโดยเซลล์ประสาทพื้นที่หน้าท้องส่วนล่างในหนูนำทางอย่างอิสระ ประสาทวิทยาศาสตร์เชิงพฤติกรรม 2010; 124: 234 247- [บทความฟรี PMC] [PubMed]
  187. Ravel S, Legallet E, Apicella P. เซลล์ประสาทที่ใช้งานได้ตามปกติใน striatum ของลิงไม่ตอบสนองต่อสิ่งกระตุ้นที่น่ารับประทาน การวิจัยสมองทดลอง Experimentelle Hirnforschung 1999; 128: 531 534- [PubMed]
  188. Ravel S, Legallet E, Apicella P. การตอบสนองของเซลล์ประสาทที่กระฉับกระเฉงในลิง striatum แยกแยะระหว่างสิ่งเร้าที่เป็นปฏิปักษ์กับแรงจูงใจ J Neurosci 2003; 23: 8489 8497- [PubMed]
  189. Ravel S, Richmond BJ การตอบสนองของโดปามีนเซลล์ประสาทในลิงแสดงตารางการให้รางวัลแก่สายตา วารสารประสาทวิทยาศาสตร์ยุโรป 2006; 24: 277 290- [PubMed]
  190. Redgrave P, Gurney K. สัญญาณโดปามีนระยะเวลาแฝงสั้น: บทบาทในการค้นพบการกระทำที่แปลกใหม่หรือไม่? Nat Rev Neurosci 2006; 7: 967 975- [PubMed]
  191. Redgrave P, Prescott TJ, Gurney K. การตอบสนองของโดปามีนในระยะเวลาสั้น ๆ สั้นเกินไปที่จะส่งสัญญาณข้อผิดพลาดของรางวัลหรือไม่? แนวโน้มทางประสาทวิทยาศาสตร์ 1999; 12: 146 151- [PubMed]
  192. Rescorla RA, Wagner AR ทฤษฎีของการปรับอากาศแบบพาฟโลเวียน: การแปรผันของประสิทธิผลของการเสริมแรงและการไม่เสริมกำลัง ใน: AH ดำ, Prokasy WF, บรรณาธิการ การปรับสภาพแบบคลาสสิก II: การวิจัยและทฤษฎีปัจจุบัน New York, New York: Appleton Century Crofts; 1972 pp. 64 – 99
  193. Reynolds JNJ, Hyland BI, Wickens JR กลไกเซลลูลาร์ของการเรียนรู้ที่เกี่ยวข้องกับผลตอบแทน ธรรมชาติ. 2001; 413: 67 70- [PubMed]
  194. Reynolds SM, Berridge KC. แรงจูงใจเชิงบวกและเชิงลบในเปลือกนิวเคลียส accumbens: การไล่ระดับสี rostrocaudal แบบ bivalent สำหรับการรับประทานอาหารที่กระตุ้นให้เกิด GABA ลิ้มรสปฏิกิริยา "ความชอบ" / "ไม่ชอบ" การตั้งค่าสถานที่ / การหลีกเลี่ยงและความกลัว เจ Neurosci 2002; 22: 7308–7320 [PubMed]
  195. ริชาร์ดสัน RT, DeLong MR การศึกษา electrophysiological ของการทำงานของนิวเคลียส basalis ในบิชอพ ความก้าวหน้าในการทดลองด้านยาและชีววิทยา 1991; 295: 233 252- [PubMed]
  196. Robbins TW, Arnsten AF neuropsychopharmacology ของ fronto-executive function: การปรับ monoaminergic ทบทวนประสาทวิทยาศาสตร์ประจำปี 2009; 32: 267 287- [บทความฟรี PMC] [PubMed]
  197. Robinson DL, Hermans A, Seipel AT, Wightman RM ตรวจสอบการสื่อสารทางเคมีอย่างรวดเร็วในสมอง รีวิวเคมี 2008; 108: 2554 2584- [บทความฟรี PMC] [PubMed]
  198. Roesch MR, Calu DJ, Schoenbaum G. Dopamine neurons เข้ารหัสทางเลือกที่ดีกว่าในหนูตัดสินใจระหว่างรางวัลล่าช้าหรือขนาดที่แตกต่างกัน Nat Neurosci 2007; 10: 1615 1624- [บทความฟรี PMC] [PubMed]
  199. Roesch MR, Olson CR กิจกรรมของเซลล์ประสาทที่เกี่ยวข้องกับการให้รางวัลและแรงจูงใจในเยื่อหุ้มสมองส่วนหน้าเจ้าคณะ วิทยาศาสตร์. 2004; 304: 307 310- [PubMed]
  200. Roitman MF, Wheeler RA, Wightman RM, Carelli RM การตอบสนองทางเคมีแบบเรียลไทม์ในนิวเคลียสทำให้เกิดความแตกต่างในการได้รับผลตอบแทนและสิ่งเร้าที่น่าตื่นเต้น Nat Neurosci 2008; 11: 1376 1377- [บทความฟรี PMC] [PubMed]
  201. Rutledge RB, Lazzaro SC, Lau B, Myers CE, Gluck MA, Glimcher PW. ยาโดปามินเนอร์จิกปรับอัตราการเรียนรู้และความเพียรพยายามในผู้ป่วยพาร์กินสันในการหาอาหารแบบไดนามิก เจ Neurosci 2009; 29: 15104–15114 [บทความฟรี PMC] [PubMed]
  202. ซาลาโมน JD การมีส่วนร่วมของนิวเคลียส accumbens โดปามีนในแรงจูงใจที่น่ารับประทานและ aversive การวิจัยสมองพฤติกรรม 1994; 61: 117 133- [PubMed]
  203. Salamone JD, Correa M, Farrar A, Mingote SM ฟังก์ชั่นที่เกี่ยวข้องกับความพยายามของนิวเคลียส accumbens โดพามีนและวงจร forebrain ที่เกี่ยวข้อง Psychopharmacology (Berl) 2007; 191: 461 – 482 [PubMed]
  204. Satoh T, Nakai S, Sato T, Kimura M. การเข้ารหัสที่เกี่ยวข้องกับแรงจูงใจและผลลัพธ์ของการตัดสินใจโดยเซลล์ประสาทโดปามีน J Neurosci 2003; 23: 9913 9923- [PubMed]
  205. Savine AC, Beck SM, Edwards BG, Chiew KS, Braver TS. การเพิ่มประสิทธิภาพของการควบคุมความรู้ความเข้าใจโดยวิธีการและหลีกเลี่ยงสภาวะที่สร้างแรงบันดาลใจ ความรู้ความเข้าใจและอารมณ์ 2010; 24: 338–356 [บทความฟรี PMC] [PubMed]
  206. Schoenbaum G, Roesch MR, Stalnaker TA, Takahashi YK มุมมองใหม่เกี่ยวกับบทบาทของ orbitofrontal cortex ในพฤติกรรมการปรับตัว Nat Rev Neurosci 2009; 10: 885 892- [บทความฟรี PMC] [PubMed]
  207. Schultz W. การตอบสนองของเซลล์ประสาทโดปามีนในสมองส่วนกลางต่อสิ่งเร้ากระตุ้นพฤติกรรมในลิง J Neurophysiol 1986; 56: 1439 1461- [PubMed]
  208. Schultz W. สัญญาณรางวัล Predictive ของเซลล์ประสาทโดปามีน J Neurophysiol 1998; 80: 1 27- [PubMed]
  209. Schultz W. ฟังก์ชั่นโดปามีนหลายตัวในแต่ละช่วงเวลา ทบทวนประสาทวิทยาศาสตร์ประจำปี 2007; 30: 259 288- [PubMed]
  210. Schultz W. Dopamine ส่งสัญญาณถึงมูลค่าและความเสี่ยงของรางวัล: ข้อมูลพื้นฐานและข้อมูลล่าสุด Behav สมองฟังก์ชั่น 2010; 6: 24 [บทความฟรี PMC] [PubMed]
  211. Schultz W, Dayan P, Montague PR สารตั้งต้นของการทำนายและการให้รางวัล วิทยาศาสตร์. 1997; 275: 1593 1599- [PubMed]
  212. Schultz W, Romo R. การตอบสนองของเซลล์ประสาทโดปามีน nigrostriatal ต่อการกระตุ้น somatosensory ที่มีความเข้มสูงในลิงที่ได้รับยาสลบ J Neurophysiol 1987; 57: 201 217- [PubMed]
  213. Schultz W, Romo R. Dopamine เซลล์ประสาทของลิงกลาง: ภาระผูกพันของการตอบสนองต่อสิ่งเร้าที่แสดงปฏิกิริยาพฤติกรรมทันที J Neurophysiol 1990; 63: 607 624- [PubMed]
  214. Seo H, Lee D. Temporal กรองสัญญาณรางวัลในคอร์เทกซ์ด้านหน้าด้านหลังระหว่างเกมกลยุทธ์ผสม J Neurosci 2007; 27: 8366 8377- [บทความฟรี PMC] [PubMed]
  215. Shabel SJ, Janak PH ความคล้ายคลึงกันอย่างมีนัยสำคัญในกิจกรรมของเซลล์ประสาท amygdala ระหว่างเร้าอารมณ์ทางอารมณ์อาหารเรียกน้ำย่อยและ aversive การดำเนินการของ National Academy of Sciences ของสหรัฐอเมริกา 2009; 106: 15031 15036- [บทความฟรี PMC] [PubMed]
  216. Shadmehr R, Smith MA, Krakauer JW. การแก้ไขข้อผิดพลาดการทำนายประสาทสัมผัสและการปรับตัวในการควบคุมมอเตอร์ ทบทวนประสาทวิทยาศาสตร์ประจำปี 2010 [PubMed]
  217. Shen W, Flajolet M, Greengard P, Surmeier DJ การควบคุมโดปามีนแบบแยกขั้วของพลาสติกซินแทพติคแบบเกิดใหม่ วิทยาศาสตร์. 2008; 321: 848 851- [บทความฟรี PMC] [PubMed]
  218. Shimo Y, Wichmann T. กิจกรรมของเซลล์ประสาทในนิวเคลียส subthalamic ปรับการปล่อยโดปามีนใน striatum ของลิง วารสารประสาทวิทยาศาสตร์ยุโรป 2009; 29: 104 113- [บทความฟรี PMC] [PubMed]
  219. Shippenberg TS, Bals-Kubik R, Huber A, Herz A. พื้นผิวด้านประสาทวิทยาเป็นสื่อกลางในการไกล่เกลี่ยผลกระทบที่เลวร้ายของ D-1 ตัวรับโดปามีน Psychopharmacology (Berl) 1991; 103: 209 – 214 [PubMed]
  220. Shumake J, Ilango A, Scheich H, Wetzel W, Ohl FW neuromodulation ที่แตกต่างกันของการได้มาและการดึงของการเรียนรู้การหลีกเลี่ยงโดย habenula ด้านข้างและพื้นที่ tegmental หน้าท้อง J Neurosci 2010; 30: 5876 5883- [PubMed]
  221. DM ขนาดเล็ก, เกรกอรี่ MD, หมาก YE, Gitelman D, Mesulam MM, พาร์ริชทีแยกตัวจากการเป็นตัวแทนของระบบประสาทของความเข้มและการประเมินมูลค่าทางอารมณ์ในการลุกลามของมนุษย์ เซลล์ประสาท 2003; 39: 701 711- [PubMed]
  222. MR Stefani, Moghaddam B. กฎการเรียนรู้และผลตอบแทนที่อาจเกิดขึ้นนั้นเกี่ยวข้องกับรูปแบบของการกระตุ้นโดปามีนที่ไม่สามารถแยกออกได้ในเยื่อหุ้มสมอง prefrontal หนูนิวเคลียส accumbens และ striatum หลัง J Neurosci 2006; 26: 8810 8818- [บทความฟรี PMC] [PubMed]
  223. Steinfels GF, Heym J, Strecker RE, Jacobs BL การตอบสนองของ dopaminergic neurons ในแมวต่อสิ่งเร้าที่นำเสนอผ่านวงจรตื่น ความต้านทานของสมอง 1983; 277: 150 154- [PubMed]
  224. Strecker RE, Jacobs BL Substantia nigra dopaminergic unit activity ในพฤติกรรมของแมว: ผลของการกระตุ้นต่อการปลดปล่อยตามธรรมชาติและกิจกรรมที่เกิดขึ้นทางประสาทสัมผัส ความต้านทานของสมอง 1985; 361: 339 350- [PubMed]
  225. Stuber GD, Hnasko TS, Britt JP, RH Edwards, Bonci A. ขั้ว Dopaminergic ในนิวเคลียสมีอาการแพ้ แต่ไม่หลัง striatum corelease glutamate วารสารประสาทวิทยา 2010; 30: 8229 8233- [บทความฟรี PMC] [PubMed]
  226. Stuber GD, Wightman RM, Carelli RM การสูญเสียการจัดการโคเคนด้วยตนเองเผยให้เห็นสัญญาณของโดปามินเนอร์จิคที่ชัดเจนทั้งในเชิงหน้าที่และเชิงเวลาในนิวเคลียส accumbens เซลล์ประสาท 2005; 46: 661 669- [PubMed]
  227. Sul JH, Kim H, Huh N, Lee D, Jung MW บทบาทที่แตกต่างของเยื่อหุ้มสมองส่วนหน้า prebital orbitof วงโคจรและอยู่ตรงกลางในการตัดสินใจ เซลล์ประสาท 2010; 66: 449 460- [บทความฟรี PMC] [PubMed]
  228. Surmeier DJ, Ding J, M วัน, Wang Z, Shen W. D1 และ D2 การปรับ dopamine-receptor ของการส่งสัญญาณกลูตามาเทอรีกลิตาในเซลล์ประสาทกลางกระดูกสันหลังส่วนปลาย แนวโน้มทางประสาทวิทยาศาสตร์ 2007; 30: 228 235- [PubMed]
  229. Surmeier DJ, Shen W, Day M, Gertler T, Chan S, Tian X, Plotkin JL บทบาทของโดปามีนในการปรับโครงสร้างและหน้าที่ของวงจรเปลื้องผ้า ความก้าวหน้าในการวิจัยสมอง 2010; 183C: 148 167- [PubMed]
  230. Sutton RS, Barto AG สู่ทฤษฎีสมัยใหม่ของเครือข่ายการปรับตัว: ความคาดหวังและการทำนาย Psychol Rev. 1981; 88: 135 – 170 [PubMed]
  231. Takahashi YK, Roesch MR, Stalnaker TA, Haney RZ, Calu DJ, Taylor AR, Burke KA, Schoenbaum G. เยื่อหุ้มสมอง orbitofrontal และพื้นที่ tegmental ventral เป็นสิ่งจำเป็นสำหรับการเรียนรู้จากผลลัพธ์ที่ไม่คาดคิด เซลล์ประสาท 2009; 62: 269 280- [บทความฟรี PMC] [PubMed]
  232. Takikawa Y, Kawagoe R, Hikosaka O. บทบาทที่เป็นไปได้ของเซลล์ประสาทโดปามีนในสมองส่วนกลางในการปรับ saccades ในระยะสั้นและระยะยาวเพื่อทำแผนที่ตำแหน่งรางวัล J Neurophysiol 2004; 92: 2520 2529- [PubMed]
  233. Tecuapetla F, Patel JC, Xenias H, อังกฤษ D, Tadros I, Shah F, Berlin J, Deisseroth K, Rice ME, Tepper JM, Koos T. Glutamatergic ส่งสัญญาณโดยเซลล์ประสาทโดปามีน mesolimbic ในนิวเคลียส J Neurosci 2010; 30: 7105 7110- [บทความฟรี PMC] [PubMed]
  234. Thierry AM, Tassin JP, Blanc G, Glowinski J. การกระตุ้นการทำงานของระบบ mesocortical DA แบบเลือกสรรโดยความเครียด ธรรมชาติ. 1976; 263: 242 244- [PubMed]
  235. Tobler PN, Dickinson A, Schultz W. การเข้ารหัสของการได้รับรางวัลที่คาดการณ์ไว้โดยโดปามีนเซลล์ประสาทในกระบวนทัศน์การยับยั้งแบบมีเงื่อนไข J Neurosci 2003; 23: 10402 10410- [PubMed]
  236. Tobler PN, Fiorillo CD, Schultz W. Adaptive การเข้ารหัสของค่าตอบแทนโดย dopamine neurons วิทยาศาสตร์. 2005; 307: 1642 1645- [PubMed]
  237. Tsai HC, Zhang F, Adamantidis A, Stuber GD, Bonci A, de Lecea L, Deisseroth K. Phasic การยิงในเซลล์ประสาท Dopaminergic เพียงพอสำหรับการปรับพฤติกรรม วิทยาศาสตร์. 2009 [PubMed]
  238. Ullsperger M. การศึกษาความสัมพันธ์ทางพันธุกรรมของการตรวจสอบประสิทธิภาพและการเรียนรู้จากข้อเสนอแนะ: บทบาทของโดปามีนและเซโรโทนิน ประสาทวิทยาศาสตร์และชีวจิตรีวิว 2010; 34: 649 659- [PubMed]
  239. MA นอกรีต โดปามีน: ปัญหาสำคัญ แนวโน้มทางประสาทวิทยาศาสตร์ 2004; 27: 702 706- [PubMed]
  240. Uylings HB, Groenewegen HJ, Kolb B. หนูมีเยื่อหุ้มสมองส่วนหน้าหรือไม่? การวิจัยสมองพฤติกรรม 2003; 146: 3 17- [PubMed]
  241. Ventura R, Cabib S, Puglisi-Allegra S. การตอบสนองโดพามีนที่ขึ้นกับพันธุกรรม ประสาท 2001; 104: 627 631- [PubMed]
  242. Ventura R, Latagliata EC, Morrone C, La Mela I, Puglisi-Allegra S. Prefrontal norepinephrine เป็นตัวกำหนดแหล่งที่มาของความสามารถในการสร้างแรงบันดาลใจ "สูง" กรุณาหนึ่ง 2008; 3: e3044 [บทความฟรี PMC] [PubMed]
  243. Ventura R, Morrone C, Puglisi-Allegra S. ระบบ catecholamine แบบด้านหน้า / ด้านในกำหนดการกำหนดลักษณะที่สร้างแรงบันดาลใจให้กับการกระตุ้นที่เกี่ยวข้องกับการให้รางวัลและความเกลียดชัง การดำเนินการของ National Academy of Sciences ของสหรัฐอเมริกา 2007; 104: 5181 5186- [บทความฟรี PMC] [PubMed]
  244. Vogt BA ความเจ็บปวดและปฏิสัมพันธ์ทางอารมณ์ในอนุภูมิภาคของครัสเทล Nat Rev Neurosci 2005; 6: 533 544- [บทความฟรี PMC] [PubMed]
  245. Voon V, Pessiglione M, Brezing C, Gallea C, Fernandez HH, Dolan RJ, Hallett M. กลไกการทำงานพื้นฐานของสารโดปามีนซึ่งเป็นสื่อกลางในพฤติกรรมบังคับ เซลล์ประสาท 2010; 65: 135 142- [บทความฟรี PMC] [PubMed]
  246. Waelti P, Dickinson A, Schultz W. Dopamine การตอบสนองสอดคล้องกับสมมติฐานพื้นฐานของทฤษฎีการเรียนรู้อย่างเป็นทางการ ธรรมชาติ. 2001; 412: 43 48- [PubMed]
  247. วาลลิส JD, Kennerley SW สัญญาณรางวัลที่แตกต่างกันในเยื่อหุ้มสมองส่วนหน้า ความคิดเห็นปัจจุบันทางระบบประสาท 2010; 20: 191 198- [บทความฟรี PMC] [PubMed]
  248. Walton ME, Behrens TE, Buckley MJ, Rudebeck PH, Rushworth MF ระบบการเรียนรู้ที่แยกกันไม่ออกในสมองลิงกังและบทบาทของ orbitofrontal cortex ในการเรียนรู้โดยบังเอิญ เซลล์ประสาท 2010; 65: 927 939- [บทความฟรี PMC] [PubMed]
  249. Wheeler RA, Twining RC, Jones JL, Slater JM, Grigson PS, Carelli RM ดัชนีพฤติกรรมและ electrophysiological ของผลกระทบเชิงลบส่งผลกระทบต่อการทำนายการจัดการโคเคนด้วยตนเอง เซลล์ประสาท 2008; 57: 774 785- [PubMed]
  250. Wightman RM, Heien MLAV, Wassum KM, Sombers LA, Aragona BJ, Khan AS, Ariansen JL, Cheer JF, Phillips PE, Carelli RM การปลดปล่อยโดปามีนนั้นมีความหลากหลายในสภาพแวดล้อมแบบไมโครของนิวเคลียสของหนู วารสารประสาทวิทยาศาสตร์ยุโรป 2007; 26: 2046 2054- [PubMed]
  251. วิลเลียมส์ GV, Castner SA ภายใต้ส่วนโค้ง: ปัญหาสำคัญสำหรับการอธิบายฟังก์ชั่นตัวรับ D1 ในหน่วยความจำใช้งาน ประสาท 2006; 139: 263 276- [PubMed]
  252. Williams SM, Goldman-Rakic ​​PS ต้นกำเนิดอย่างกว้างขวางของระบบโดปามีนเจ้าคณะ mesofrontal Cereb Cortex 1998; 8: 321 345- [PubMed]
  253. Winn P. วิธีที่ดีที่สุดในการพิจารณาโครงสร้างและหน้าที่ของนิวเคลียส pedunculopontine tegmental: หลักฐานจากการศึกษาสัตว์ วารสารวิทยาศาสตร์ประสาท 2006; 248: 234 250- [PubMed]
  254. ปรีชาญาณ RA โดปามีนการเรียนรู้และแรงจูงใจ Nat Rev Neurosci 2004; 5: 483 494- [PubMed]
  255. ปรีชาญาณ RA พื้นผิวหน้าของรางวัลและแรงบันดาลใจ วารสารประสาทวิทยาเปรียบเทียบ 2005; 493: 115 121- [บทความฟรี PMC] [PubMed]
  256. Wise SP ไปข้างหน้าช่อง: phylogeny และฟังก์ชั่นพื้นฐาน แนวโน้มทางประสาทวิทยาศาสตร์ 2008; 31: 599 608- [บทความฟรี PMC] [PubMed]
  257. ยามาดะเอชมัตสึโมโต้เอ็นคิมูระเอ็มเซลล์ประสาทที่ใช้งานอยู่ในนิวเคลียสของลิงเจ้าคณะและพูเมนมีการเข้ารหัสที่แตกต่างกันตามคำสั่งของแรงจูงใจในการกระทำ J Neurosci 2004; 24: 3500 3510- [PubMed]
  258. ยามาดะเอชมัตสึโมโต้เอ็นคิมูระเอ็มประวัติศาสตร์และการเข้ารหัสตามคำสั่งปัจจุบันของผลลัพธ์เชิงพฤติกรรมที่กำลังจะเกิดขึ้นในสไตรตัม J Neurophysiol 2007; 98: 3557 3567- [PubMed]
  259. Yin HH, Knowlton BJ บทบาทของปมประสาทฐานในการสร้างนิสัย Nat Rev Neurosci 2006; 7: 464 476- [PubMed]
  260. Young AM, Moran PM, Joseph MH. บทบาทของโดปามีนในการปรับสภาพและการยับยั้งแฝง: อะไรเมื่อไหร่ที่ไหนและอย่างไร ประสาทวิทยาศาสตร์และชีวจิตรีวิว 2005; 29: 963 976- [PubMed]
  261. Zaghloul KA, Blanco JA, Weidemann CT, McGill K, Jaggi JL, Baltuch GH, Kahana MJ นิวรอน substantia นิโกรมนุษย์เข้ารหัสรางวัลทางการเงินที่ไม่คาดคิด วิทยาศาสตร์. 2009; 323: 1496 1499- [บทความฟรี PMC] [PubMed]
  262. Zahniser NR, Sorkin A. การควบคุมอย่างรวดเร็วของผู้ขนส่งโดพามีน: บทบาทในการติดสารกระตุ้น Neuropharmacology 2004; 47 Suppl 1: 80 – 91 [PubMed]
  263. จาง L, Doyon WM, คลาร์กเจเจ, ฟิลลิปส์, ดานีเจ. การควบคุมการส่งโดปามีนแบบโทนิกและฟาซินิกในส่วนหลังและหน้าท้อง เภสัชวิทยาระดับโมเลกุล 2009; 76: 396 404- [บทความฟรี PMC] [PubMed]
  264. Zink CF, Pagnoni G, Martin ME, Dhamala M, Berns GS การตอบสนองของมนุษย์เกี่ยวกับสิ่งเร้าที่ไม่หยุดยั้ง วารสารประสาทวิทยา 2003; 23: 8092 8097- [PubMed]
  265. Zweifel LS, Argilli E, Bonci A, Palmiter RD บทบาทของตัวรับ NMDA ในเซลล์ประสาทโดปามีนเพื่อความเป็นพลาสติกและพฤติกรรมการเสพติด เซลล์ประสาท 2008; 59: 486 496- [บทความฟรี PMC] [PubMed]
  266. Zweifel LS, Parker JG, Lobb CJ, Rainwater A, Wall VZ, Fadok JP, Darvas M, Kim MJ, Mizumori SJ, Paladini CA และอื่น ๆ การหยุดชะงักของการยิงระเบิดขึ้นอยู่กับ NMDAR โดยเซลล์ประสาทโดปามีนให้การประเมินแบบเลือกพฤติกรรมการพึ่งพาโดพามีน phasic การดำเนินการของ National Academy of Sciences ของสหรัฐอเมริกา 2009; 106: 7281 7288- [บทความฟรี PMC] [PubMed]