La dopamine dans le contrôle de la motivation: enrichissante, aversive et alerte (2010)

Neurone. Manuscrit de l'auteur; disponible en PMC Dec 9, 2011.

Publié sous forme finale modifiée en tant que:

PMCID: PMC3032992

NIHMSID: NIHMS253484

Voir d'autres articles dans PMC qui citer l'article publié.

Allez à:

RÉSUMÉ

Les neurones dopaminergiques du cerveau moyen sont bien connus pour leurs fortes réactions aux récompenses et leur rôle critique dans la motivation positive. Cependant, il est devenu de plus en plus clair que les neurones dopaminergiques transmettent également des signaux liés à des expériences saillantes mais non gratifiantes telles que des événements aversifs et d'alerte. Nous passons ici en revue les progrès récents dans la compréhension des fonctions de récompense et de non-récompense de la dopamine. Sur la base de ces données, nous proposons que les neurones dopaminergiques se présentent sous plusieurs types qui sont connectés à des réseaux cérébraux distincts et jouent des rôles distincts dans le contrôle de la motivation. Certains neurones dopaminergiques codent une valeur de motivation, supportant des réseaux cérébraux pour la recherche, l'évaluation et l'apprentissage de valeurs. D'autres codent la saillance motivationnelle, soutenant les réseaux cérébraux pour l'orientation, la cognition et la motivation générale. Les deux types de neurones dopaminergiques sont complétés par un signal d'alerte impliqué dans la détection rapide d'indices sensoriels potentiellement importants. Nous émettons l'hypothèse que ces voies dopaminergiques pour la valeur, la saillance et l'alerte coopèrent pour soutenir un comportement adaptatif.

Introduction

Le neurotransmetteur dopamine (DA) joue un rôle crucial dans le contrôle de la motivation - en apprenant quelles choses sont bonnes ou mauvaises dans le monde et en choisissant des actions pour obtenir les bonnes choses et éviter les mauvaises. Les principales sources de DA dans le cortex cérébral et dans la plupart des régions sous-corticales sont les neurones du noyau du cerveau central libérant de DA, situés dans la substantia nigra pars compacta (SNc) et la région tegmentale ventrale (VTA) (Bjorklund et Dunnett, 2007). Ces neurones transmettent le DA dans deux modes, «tonique» et «phasique» (Grace, 1991; Grace et al., 2007). Dans leur mode tonique, les neurones DA maintiennent un niveau constant de DA dans les structures neurales en aval, ce qui est essentiel pour permettre aux fonctions normales des circuits neuronaux de fonctionner (Schultz, 2007). Dans leur mode phasique, les neurones DA augmentent ou diminuent brusquement leur cadence d'allumage de 100 – 500 millisecondes, ce qui entraîne des modifications importantes des concentrations en DA dans les structures en aval durant plusieurs secondes (Schultz, 1998; Schultz, 2007).

Ces réponses aux DA phasiques sont déclenchées par de nombreux types de récompenses et d'indices sensoriels liés aux récompenses (Schultz, 1998) et sont idéalement placés pour remplir les rôles de DA en matière de contrôle de la motivation, y compris en tant que signal d’enseignement qui sous-tend l’apprentissage par renforcement (Schultz et al., 1997; Sage, 2005) et comme un signal d’incitation qui favorise la recherche immédiate de récompenses (Berridge et Robinson, 1998). En conséquence, ces signaux de récompense de phase DA ont pris une place prépondérante dans les théories sur les fonctions des circuits corticaux et sous-corticaux et ont fait l’objet de recherches intensives en neurosciences. Dans la première partie de cette revue, nous présenterons la théorie conventionnelle des signaux de récompense de la DA phasique et passerons en revue les récents progrès réalisés dans la compréhension de leur nature et de leur contrôle sur le traitement et le comportement des neurones.

Contrairement au rôle accepté de DA dans le traitement des récompenses, le rôle de l'activité des DA phasiques dans le traitement des événements non enrichissants a suscité de nombreuses discussions. Certaines théories suggèrent que les réponses phasiques neuronales DA encodent principalement des événements liés à la récompense (Schultz, 1998; Ungless, 2004; Schultz, 2007), tandis que d’autres suggèrent que les neurones DA transmettent des signaux de non-récompense supplémentaires liés à des expériences surprenantes, nouvelles, saillantes et même aversives (Redgrave et al., 1999; Horvitz, 2000; Di Chiara, 2002; Joseph et al., 2003; Pezze et Feldon, 2004; Lisman et Grace, 2005; Redgrave et Gurney, 2006). Dans la deuxième partie de cette revue, nous aborderons une série d’études qui ont mis ces théories à l’épreuve et ont révélé beaucoup de choses sur la nature des signaux de non-récompense dans les neurones DA. En particulier, ces études fournissent des preuves que les neurones DA sont plus diversifiés qu'on ne le pensait auparavant. Plutôt que de coder un seul signal de motivation homogène, les neurones DA se présentent sous plusieurs types qui codent des événements récompensés ou non, de différentes manières. Cela pose un problème aux théories générales qui cherchent à identifier la dopamine avec un seul signal neuronal ou un mécanisme de motivation.

Pour remédier à ce dilemme, nous proposons dans la dernière partie de cette revue une nouvelle hypothèse pour expliquer la présence de plusieurs types de neurones DA, la nature de leurs signaux neuronaux et leur intégration dans des réseaux cérébraux distincts pour le contrôle de la motivation. Notre proposition de base est la suivante. Un type de neurones DA encode valeur de motivation, excité par des événements enrichissants et inhibé par des événements aversifs. Ces neurones aident les systèmes cérébraux à rechercher des objectifs, à évaluer les résultats et à valoriser l'apprentissage. Un deuxième type de neurones DA encode saillance motivationnelle, excité à la fois par des événements enrichissants et aversifs. Ces neurones soutiennent les systèmes cérébraux pour l'orientation, le traitement cognitif et la motivation. En plus de leur valeur et de leur activité de codage de saillance, les deux types de neurones DA transmettent également une signal d'alerte, déclenché par des signaux sensoriels inattendus de grande importance potentielle. Ensemble, nous émettons l'hypothèse que ces signaux de valeur, de saillance et d'alerte coopèrent pour coordonner les structures cérébrales en aval et contrôler les comportements motivés.

La dopamine dans la récompense: théorie conventionnelle

La dopamine dans la motivation des actions de recherche de récompense

On sait depuis longtemps que la dopamine est importante pour renforcer et motiver les actions. Les médicaments qui interfèrent avec la transmission du DA interfèrent avec l'apprentissage du renforcement, tandis que les manipulations qui améliorent la transmission du DA, telles que la stimulation du cerveau et les drogues provoquant une dépendance, agissent souvent comme des renforçateurs (Sage, 2004). La transmission par DA est cruciale pour créer un état de motivation à rechercher des récompenses (Berridge et Robinson, 1998; Salamone et al., 2007) et d’établir des mémoires d’associations cue-récompense (Dalley et al., 2005). La publication de la DA n’est pas nécessaire pour toutes les formes d’apprentissage de la récompense et ne peut pas toujours être «appréciée» dans le sens de susciter du plaisir, mais elle est essentielle pour que les objectifs soient «voulus» dans le sens d’actions motivantes pour les atteindre (Berridge et Robinson, 1998; Palmiter, 2008).

Une hypothèse sur la manière dont la dopamine soutient l'apprentissage par renforcement est qu'elle ajuste la force des connexions synaptiques entre les neurones. La version la plus simple de cette hypothèse est que la dopamine contrôle la plasticité synaptique conformément à une règle de Hebbian modifiée qui peut être définie grossièrement comme «des neurones qui se déclenchent ensemble, tant qu'ils ont un éclat de dopamine». En d'autres termes, si la cellule A active la cellule B et que la cellule B provoque une action comportementale qui entraîne une récompense, la dopamine sera alors libérée et la connexion A → B sera renforcée (Montague et al., 1996; Schultz, 1998). Ce mécanisme permettrait à un organisme d’apprendre le choix optimal d’actions pour obtenir des récompenses, à condition de disposer d’une expérience suffisante en essais et erreurs. Conformément à cette hypothèse, la dopamine exerce une influence puissante sur la plasticité synaptique dans de nombreuses régions du cerveau (Surmeier et al., 2010; Goto et al., 2010; Molina-Luna et al., 2009; Marowsky et al., 2005; Lisman et Grace, 2005). Dans certains cas, la dopamine permet la plasticité synaptique dans le sens de la règle de Hebbian décrite ci-dessus, de manière corrélée au comportement de recherche de récompense (Reynolds et al., 2001). En plus de ses effets sur la plasticité synaptique à long terme, la dopamine peut également exercer un contrôle immédiat sur les circuits neuronaux en modulant l'activité de dopage neural et les connexions synaptiques entre neurones (Surmeier et al., 2007; Robbins et Arnsten, 2009), dans certains cas, de manière à promouvoir des actions immédiates de recherche de récompense (Frank, 2005).

Signaux de récompense des neurones dopaminergiques

Afin de motiver les actions qui mènent à des récompenses, la dopamine devrait être libérée lors d'expériences enrichissantes. En effet, la plupart des neurones DA sont fortement activés par des récompenses primaires inattendues telles que la nourriture et l’eau, produisant souvent des «rafales» d’activités phasiques (Schultz, 1998) (excitations phasiques incluant plusieurs pointes (Grace et Bunney, 1983)). Cependant, les études pionnières de Wolfram Schultz ont montré que ces réponses neuronales DA ne sont pas déclenchées par la consommation de récompense. per se. Au lieu de cela, ils ressemblent à une «erreur de prédiction de récompense», indiquant la différence entre la récompense reçue et la récompense qui devait se produire (Schultz et al., 1997) (Figure 1A). Ainsi, si une récompense est plus grande que prévu, les neurones DA sont fortement excités (erreur de prédiction positive, Figure 1E, rouge); si une récompense est plus petite que prévue ou ne se produit pas à l'heure convenue, les neurones DA sont inhibés de manière phasique (erreur de prédiction négative, Figure 1E, bleu); et si une récompense est attribuée à l'avance pour que sa taille soit totalement prévisible, les neurones DA ont une réponse faible ou nulle (erreur de prédiction nulle, Figure 1C, noir). Le même principe s’applique aux réponses sensorielles des signaux sensoriels qui fournissent de nouvelles informations sur les récompenses futures. Les neurones DA sont excités lorsqu'un signal indique une augmentation de la valeur de la récompense future (Figure 1C, rouge), inhibé lorsqu'un signal indique une diminution de la valeur de la récompense future (Figure 1C, bleu), et ont généralement peu de réponses aux signaux qui ne communiquent aucune nouvelle information de récompense (Figure 1E, noir). Ces réponses aux DA ressemblent à un type spécifique d'erreur de prédiction de récompense appelé erreur de différence temporelle ou «erreur TD», qui a été proposé pour servir de signal de renforcement pour l'apprentissage de la valeur des actions et des états environnementaux (Houk et al., 1995; Montague et al., 1996; Schultz et al., 1997). Les modèles informatiques utilisant un signal de renforcement de type TD peuvent expliquer de nombreux aspects de l'apprentissage du renforcement chez l'homme, les animaux et les neurones DA eux-mêmes (Sutton et Barto, 1981; Waelti et al., 2001; Montague et Berns, 2002; Dayan et Niv, 2008).

Figure 1 

Codage par la dopamine des erreurs de prédiction de récompense et préférence pour les informations prédictives

Un nombre impressionnant d'expériences a montré que les signaux DA représentent les prédictions de récompense d'une manière qui correspond étroitement aux préférences comportementales, y compris la préférence pour les grandes récompenses par rapport aux petites (Tobler et al., 2005) des récompenses probables sur des improbables (Fiorillo et al., 2003; Satoh et al., 2003; Morris et al., 2004) et des récompenses immédiates par rapport à celles différées (Roesch et al., 2007; Fiorillo et al., 2008; Kobayashi et Schultz, 2008). Il existe même des preuves que les neurones DA chez l’homme encodent la valeur de récompense de l’argent (Zaghloul et al., 2009). En outre, les signaux de la DA émergent pendant l’apprentissage avec un calendrier similaire à celui des mesures comportementales de la prédiction de la récompense (Hollerman et Schultz, 1998; Satoh et al., 2003; Takikawa et al., 2004; Day et al., 2007) et sont corrélés à des mesures subjectives de préférence de récompense (Morris et al., 2006). Ces résultats ont établi les neurones DA comme l’un des exemples les mieux compris et les plus reproduits du codage de récompense dans le cerveau. En conséquence, des études récentes ont soumis les neurones DA à un examen minutieux afin de découvrir comment ils généraient des prévisions de récompense et comment leurs signaux agissaient sur les structures en aval pour contrôler le comportement.

La dopamine en récompense: les récents progrès

Signaux de récompense des neurones dopaminergiques

Les progrès récents dans la compréhension des signaux de récompense DA proviennent de la prise en compte de trois grandes questions: Comment les neurones DA apprennent-ils les prévisions de récompense? Quelle est la précision de leurs prédictions? Et qu'est-ce qu'ils considèrent comme une récompense?

Comment les neurones DA apprennent-ils les prédictions de récompense? Les théories classiques suggèrent que les prédictions de récompense sont apprises par le biais d'un processus de renforcement progressif nécessitant des couples répétés stimulation / récompense (Rescorla et Wagner, 1972; Montague et al., 1996). Chaque fois que le stimulus A est suivi d'une récompense inattendue, la valeur estimée de A est augmentée. Des données récentes, cependant, montrent que les neurones DA vont au-delà du simple apprentissage par stimulation-récompense et font des prédictions basées sur des croyances sophistiquées concernant la structure du monde. Les neurones DA peuvent prédire correctement les récompenses, même dans des environnements non conventionnels où les récompenses associées à un stimulus provoquent diminuer dans la valeur de ce stimulus (Satoh et al., 2003; Nakahara et al., 2004; Bromberg-Martin et al., 2010c) ou provoquer une modification de la valeur d'un stimulus totalement différent (Bromberg-Martin et al., 2010b). Les neurones DA peuvent également adapter leurs signaux de récompense en fonction de statistiques d'ordre supérieur de la distribution de récompense, telles que des signaux d'erreur de prédiction d'échelle fondés sur leur variance attendue (Tobler et al., 2005) et «récupérant spontanément» leurs réponses aux signaux de récompense éteints (Pan et al., 2008). Tous ces phénomènes forment un parallèle remarquable avec des effets similaires observés dans l’adaptation sensorielle et motrice (Braun et al., 2010; Fairhall et al., 2001; Shadmehr et al., 2010), suggérant qu'ils peuvent refléter un mécanisme neuronal général pour l'apprentissage prédictif.

Quelle est la précision des prévisions de récompense de DA? Des études récentes ont montré que les neurones DA ajustent fidèlement leurs signaux de récompense pour prendre en compte trois sources d'incertitude de prédiction. Premièrement, les humains et les animaux souffrent de bruits de synchronisation internes qui les empêchent de faire des prévisions fiables quant aux longs intervalles de temps de récompense entre gueules et récompenses (Gallistel et Gibbon, 2000). Ainsi, si les délais de récompense de repère sont courts (secondes 1 - 2), les prévisions de minutage sont exactes et la remise de récompense déclenche une faible réponse de la part du DA, mais pour des délais plus longs, la prévision devient moins fiable et les récompenses évoquent des sursauts DA nets (Kobayashi et Schultz, 2008; Fiorillo et al., 2008). Deuxièmement, de nombreux indices de la vie quotidienne sont imprécis, spécifiant une large distribution des délais de livraison des récompenses. Les neurones DA reflètent à nouveau cette forme d’incertitude temporelle: ils sont progressivement inhibés lors de retards de récompense variables, comme si l’on signalait des erreurs de prédiction de récompense de plus en plus négatives à chaque instant où la récompense n’apparaissait pas (Fiorillo et al., 2008; Bromberg-Martin et al., 2010a; Nomoto et al., 2010). Enfin, de nombreux signaux sont complexes sur le plan de la perception et nécessitent une inspection minutieuse pour tirer une conclusion définitive quant à leur valeur de récompense. Dans de telles situations, les signaux de récompense DA se produisent à des latences longues et de manière progressive, semblant refléter le flux graduel d'informations de perception lorsque la valeur de stimulation est décodée (Nomoto et al., 2010).

Quels événements les neurones DA considèrent-ils comme enrichissants? Les théories conventionnelles de l’apprentissage par récompense suggèrent que les neurones DA attribuent une valeur en fonction du montant attendu de la récompense primaire future (Montague et al., 1996). Cependant, même lorsque le taux de récompense primaire est maintenu constant, les humains et les animaux expriment souvent une préférence supplémentaire pour la prévisibilité - des environnements de recherche dans lesquels la taille, la probabilité et le timing de chaque récompense peuvent être connus à l'avance (Daly, 1992; Chew and Ho, 1994; Ahlbrecht et Weber, 1996). Une étude récente chez le singe a révélé que les neurones DA signalaient cette préférence (Bromberg-Martin et Hikosaka, 2009). Les singes ont exprimé une nette préférence pour l'affichage d'indices visuels informatifs leur permettant de prédire la taille d'une récompense future, plutôt que des indices non informatifs ne fournissant aucune nouvelle information. En parallèle, les neurones DA ont été enthousiasmés par l’opportunité de visualiser les indices informatifs d’une manière corrélée avec les préférences comportementales de l’animal (Figure 1B, D). Cela suggère que les neurones DA motivent non seulement les actions pour obtenir des récompenses mais également les actions permettant de faire des prédictions précises sur ces récompenses, afin de garantir que les récompenses peuvent être correctement anticipées et préparées.

Pris ensemble, ces résultats montrent que les signaux d'erreur de prédiction de récompense DA sont sensibles aux facteurs sophistiqués qui influencent les prédictions de récompense humaines et animales, notamment l'adaptation aux statistiques de récompense de rang élevé, l'incertitude de récompense et les préférences en matière d'informations prédictives.

Effets des signaux de récompense dopaminergiques phasiques sur les structures en aval

Les réponses de récompense DA se produisent dans des rafales phasiques synchrones (Joshua et al., 2009b), un motif de réponse qui forme la version de DA dans les structures cibles (Gonon, 1988; Zhang et al., 2009; Tsai et al., 2009). Il a longtemps été théorisé que ces sursauts phasiques avaient une influence distincte sur l’apprentissage et la motivation de l’activité de DA tonique (Grace, 1991; Grace et al., 2007; Schultz, 2007; Lapish et al., 2007). Une technologie récemment mise au point a permis de confirmer cette hypothèse en contrôlant l'activité des neurones DA avec une précision fine, dans le temps et dans l'espace. La stimulation optogénétique des neurones VTA DA induit une forte préférence de lieu conditionné qui ne se produit que lorsque la stimulation est appliquée de manière éclatée (Tsai et al., 2009). Inversement, l'inactivation génétique des récepteurs NMDA des neurones DA, qui empêche l'éclatement tout en laissant l'activité tonique en grande partie intacte, provoque une altération sélective de formes spécifiques d'apprentissage par récompense (Zweifel et al., 2009; Parker et al., 2010) (bien noter que cette désactivation altère également la plasticité synaptique des neurones DA (Zweifel et al., 2008)). Les rafales DA peuvent améliorer l'apprentissage par récompense en reconfigurant les circuits neuronaux locaux. Notamment, des rafales DA prédictives de récompense sont envoyées à des régions spécifiques du noyau accumbens, et ces régions présentent des niveaux particulièrement élevés d’activité neuronale prédictive de récompense (Cheer et al., 2007; Owesson-White et al., 2009).

Comparativement aux sursauts phasiques, on en sait moins sur l’importance des pauses phasiques dans l’activité de dopage pour les erreurs de prédiction de récompense négative. Ces pauses causent de plus petits changements dans le taux de pointe, sont moins modulées par les attentes de récompense (Bayer et Glimcher, 2005; Joshua et al., 2009a; Nomoto et al., 2010) et peuvent avoir des effets moins importants sur l'apprentissage (Rutledge et al., 2009). Cependant, certains types d’apprentissage des erreurs de prédiction négative requièrent la VTA (Takahashi et al., 2009), suggérant que les pauses phasiques peuvent toujours être décodées par les structures en aval.

Étant donné que les sursauts et les pauses entraînent des modèles très différents de libération de DA, ils sont susceptibles d'influencer les structures en aval par le biais de mécanismes distincts. Il existe des preuves récentes de cette hypothèse chez une cible majeure des neurones DA, le striatum dorsal. Les neurones de projection du striatum dorsal sont de deux types qui expriment différents récepteurs de DA. Un type exprime les récepteurs D1 et se projette sur la «voie directe» des ganglions de la base pour faciliter les mouvements du corps; le second type exprime les récepteurs D2 et envisage la «voie indirecte» pour supprimer les mouvements du corps (Figure 2) (Albin et al., 1989; Gerfen et al., 1990; Kravitz et al., 2010; Hikida et al., 2010). Sur la base des propriétés de ces voies et récepteurs, il a été théorisé que les rafales de DA produisaient des conditions de DA élevées, activaient les récepteurs D1 et faisaient en sorte que la voie directe sélectionne des mouvements de grande valeur (Figure 2A), alors que les pauses DA produisent des conditions de DA faible, inhibent les récepteurs D2 et amènent la voie indirecte à supprimer les mouvements de faible valeur (Figure 2B) (Frank, 2005; Hikosaka, 2007). Conformément à cette hypothèse, une forte activation du récepteur DA favorise la potentialisation des synapses cortico-striatales sur la voie directe (Shen et al., 2008) et apprendre des résultats positifs (Frank et al., 2004; Voon et al., 2010), alors que le blocage du récepteur D1 striatal entrave sélectivement les mouvements des cibles récompensées (Nakamura et Hikosaka, 2006). De manière analogue, une faible activation des récepteurs DA favorise la potentialisation des synapses cortico-striatales sur la voie indirecte (Shen et al., 2008) et tirer des enseignements des résultats négatifs (Frank et al., 2004; Voon et al., 2010), alors que le blocage du récepteur D2 striatal supprime sélectivement les mouvements dirigés vers des cibles non récompensées (Nakamura et Hikosaka, 2006). Cette division des fonctions des récepteurs D1 et D2 dans le contrôle de la motivation explique de nombreux effets des gènes liés à la DA sur le comportement humain (Ullsperger, 2010; Frank et Fossella, 2010) et peut s’étendre au-delà du striatum dorsal, car il existe des preuves d’une division similaire du travail dans le striatum ventral (Grace et al., 2007; Lobo et al., 2010).

Figure 2 

Contrôle par la dopamine de la motivation positive et négative dans le striatum dorsal

Alors que le schéma ci-dessus brosse un tableau simple du contrôle du comportement du DA par le biais de ses effets sur le striatum, le tableau complet est beaucoup plus complexe. La DA influence le comportement lié aux récompenses en agissant sur de nombreuses régions du cerveau, y compris le cortex préfrontal (Hitchcott et al., 2007), cortex rhinal (Liu et al., 2004), hippocampe (Packard et Blanc, 1991; Grecksch et Matties, 1981) et amygdala (Phillips et al., 2010). Les effets de la DA différeront probablement beaucoup entre ces régions en raison des variations de la densité de son innervation, de ses transporteurs, de ses enzymes métaboliques, de ses autorécepteurs, de ses récepteurs et de son couplage avec les voies de signalisation intracellulaires (Neve et al., 2004; Bentivoglio et Morelli, 2005; Frank et Fossella, 2010). En outre, au moins dans la VTA, les neurones DA peuvent avoir différentes propriétés cellulaires en fonction de leurs cibles de projection (Lammel et al., 2008; Margolis et al., 2008) et certains ont la capacité remarquable de transmettre le glutamate ainsi que la dopamine (Descarries et al., 2008; Chuhma et al., 2009; Hnasko et al., 2010; Tecuapetla et al., 2010; Stuber et al., 2010; Birgner et al., 2010). Ainsi, l’ampleur du contrôle des neurones DA sur le traitement des neurones commence seulement à être révélée.

La dopamine: au-delà de la récompense

Jusqu'ici, nous avons discuté du rôle des neurones DA dans le comportement lié aux récompenses, fondé sur des réponses dopaminergiques ressemblant à des erreurs de prédiction de récompense. Cependant, il est devenu de plus en plus clair que les neurones DA réagissent de manière phasique à plusieurs types d’événements qui ne sont pas intrinsèquement gratifiants et ne sont pas un indice des récompenses futures, et que ces signaux de non-récompense jouent un rôle important dans le traitement de la motivation. Ces événements non récompenses peuvent être regroupés en deux grandes catégories: aversif ainsi que alerte, que nous discuterons en détail ci-dessous. Les événements aversifs incluent des stimuli intrinsèquement indésirables (tels que des bouffées d'air, des goûts amers, des décharges électriques et d'autres sensations désagréables) et des signaux sensoriels qui ont acquis des propriétés aversives grâce à leur association à ces événements. Les événements d'alerte sont des signaux sensoriels inattendus d'une grande importance potentielle, qui déclenchent généralement des réactions immédiates pour déterminer leur signification.

Diverses réactions de la dopamine à des événements aversifs

La réponse d’un neurone à des événements aversifs constitue un test crucial de ses fonctions en matière de contrôle de la motivation (Schultz, 1998; Berridge et Robinson, 1998; Redgrave et al., 1999; Horvitz, 2000; Joseph et al., 2003). À bien des égards, nous traitons les événements enrichissants et aversifs de manières opposées, reflétant leur opposition. valeur de motivation. Nous recherchons des récompenses et leur attribuons une valeur positive, tout en évitant les événements aversifs et en leur attribuant une valeur négative. À d’autres égards, nous traitons les événements enrichissants et aversifs de la même manière, reflétant leur saillance motivationnelle [FOOTNOTE1]. Les événements valorisants et aversifs déclenchent une orientation de l’attention, un traitement cognitif et une augmentation de la motivation générale.

Lesquelles de ces fonctions sont supportées par les neurones DA? On sait depuis longtemps que les expériences stressantes et aversives entraînent de grandes modifications des concentrations de DA dans les structures cérébrales en aval, et que les réactions comportementales à ces expériences sont radicalement modifiées par les agonistes, antagonistes et lésions de DA (Salamone, 1994; Di Chiara, 2002; Pezze et Feldon, 2004; Young et al., 2005). Ces études ont cependant produit une diversité frappante de résultats (Levita et al., 2002; Di Chiara, 2002; Young et al., 2005). De nombreuses études sont compatibles avec les neurones DA codant la saillance motivationnelle. Ils signalent que les événements aversifs augmentent les niveaux de DA et que l'aversion comportementale est corroborée par des niveaux élevés de transmission de DA (Salamone, 1994; Joseph et al., 2003; Ventura et al., 2007; Barr et al., 2009; Fadok et al., 2009) y compris les sursauts DA phasiques (Zweifel et al., 2009). Mais d'autres études sont plus compatibles avec les neurones DA codant la valeur motivationnelle. Ils signalent que les événements aversifs réduisent les niveaux de DA et que l'aversion comportementale est supportée par de faibles niveaux de transmission de DA (Mark et al., 1991; Shippenberg et al., 1991; Liu et al., 2008; Roitman et al., 2008). Dans de nombreux cas, ces résultats mitigés ont été trouvés dans des études uniques, indiquant que les expériences aversives provoquent différents modèles de libération de DA dans différentes structures cérébrales (Thierry et al., 1976; Besson et Louilot, 1995; Ventura et al., 2001; Jeanblanc et al., 2002; Bassareo et al., 2002; Pascucci et al., 2007), et que les drogues associées aux DA peuvent produire une combinaison d'effets neuronaux et comportementaux similaires à ceux causés par des expériences enrichissantes et aversives (Ettenberg, 2004; Wheeler et al., 2008).

Cette diversité de modèles et de fonctions de libération de DA est difficile à concilier avec l’idée que les neurones de DA transmettent un signal de motivation uniforme à toutes les structures du cerveau. Ces diverses réponses pourraient toutefois être expliquées si les neurones DA sont eux-mêmes diversifiés - composés de multiples populations neuronales prenant en charge différents aspects du traitement aversif. Cette vue est appuyée par des études d'enregistrement neuronal chez des animaux anesthésiés. Ces études ont montré que les stimuli nocifs provoquent une excitation dans certains neurones DA mais une inhibition dans d'autres neurones DA (Chiodo et al., 1980; Maeda et Mogenson, 1982; Schultz et Romo, 1987; Mantz et al., 1989; Gao et al., 1990; Coizet et al., 2006). Il est important de noter que les réponses excitatrices et inhibitrices apparaissent dans les neurones dopaminergiques confirmés à l’aide d’un marquage juxtacellulaire (Brischoux et al., 2009) (Figure 3). Une diversité similaire de réponses aversives se produit pendant le comportement actif. Différents groupes de neurones DA sont excités ou inhibés de manière phasique par des événements aversifs, notamment une stimulation nocive de la peau (Kiyatkin, 1988a; Kiyatkin, 1988b), signaux sensoriels prédictifs de chocs aversifs (Guarraci et Kapp, 1999), airpuffs aversifs (Matsumoto et Hikosaka, 2009b), et des signaux sensoriels prédictifs de bouffées d’air aversives (Matsumoto et Hikosaka, 2009b; Joshua et al., 2009a). De plus, lorsque deux neurones DA sont enregistrés simultanément, leurs réponses aversives ont généralement peu de corrélation entre essais (Joshua et al., 2009b), suggérant que les réponses aversives ne sont pas coordonnées dans l’ensemble de la population des AD.

Figure 3 

Diverses réactions neuronales dopaminergiques à des événements aversifs

Pour comprendre les fonctions de ces diverses réponses aversives, nous devons savoir comment elles sont combinées avec des réponses de récompense afin de générer un signal de motivation significatif. Une étude récente a étudié ce sujet et a révélé que les neurones DA sont divisés en plusieurs populations avec des signaux de motivation distincts (Matsumoto et Hikosaka, 2009b). Une population est enthousiasmée par les événements enrichissants et inhibée par les événements aversifs, comme si le codage valeur de motivation (Figure 4A). Une deuxième population est excitée à la fois par des événements enrichissants et aversifs de manières similaires, comme si l’encodage saillance motivationnelle (Figure 4B). Dans ces deux populations, de nombreux neurones sont sensibles aux prédictions de récompense et aversives: ils réagissent lorsque les événements enrichissants sont plus gratifiants que prévu et lorsque les événements aversifs sont plus aversifs que prévu (Matsumoto et Hikosaka, 2009b). Cela montre que leurs réponses aversives sont réellement causées par des prédictions concernant des événements aversifs, excluant la possibilité qu'elles soient causées par des facteurs non spécifiques tels que des entrées sensorielles brutes ou des associations généralisées avec récompense (Schultz, 2010). Ces deux populations diffèrent toutefois par la nature détaillée de leur code prédictif. Les neurones DA codant des valeurs de motivation codent un signal d'erreur de prédiction précis, y compris une forte inhibition par omission de récompenses et une légère excitation par omission d'événements aversifs (Figure 4A, droite). En revanche, les neurones DA codant pour la saillance motivationnelle répondent lorsque les événements marquants sont présents mais pas quand ils sont absents (Figure 4B, à droite), en accord avec les notions théoriques d’excitation (Lang et Davis, 2006) [FOOTNOTE2]. Des preuves concernant ces deux populations de neurones DA ont été observées même lorsque l'activité neuronale a été examinée de manière moyenne. Ainsi, des études ciblant différentes parties du système DA ont montré que les signaux DA phasiques codaient pour des événements aversifs avec inhibition (Roitman et al., 2008), similaire au codage de la valeur motivationnelle, ou avec excitation (Joshua et al., 2008; Anstrom et al., 2009), similaire au codage de la saillance motivationnelle.

Figure 4 

Populations distinctes de neurones dopaminergiques codant pour la valeur motivationnelle et la saillance

Ces découvertes récentes peuvent sembler contredire un rapport précédent indiquant que les neurones DA réagissent de manière préférentielle pour récompenser les signaux plutôt que les signaux aversifs (Mirenowicz et Schultz, 1996). Lorsqu'elle est examinée de près, cependant, même cette étude est entièrement compatible avec la valeur DA et le codage de saillance. Dans cette étude, les signaux de récompense ont conduit à des résultats de récompense avec une probabilité élevée (> 90%), tandis que les signaux aversifs ont conduit à des résultats aversifs avec une faible probabilité (<10%). Par conséquent, les neurones DA codant la valeur et la saillance auraient peu de réponse aux signaux aversifs, codant avec précision leur faible niveau d'aversivité.

Rôle fonctionnel de la valeur motivationnelle et des signaux de saillance

Pris ensemble, les résultats ci-dessus indiquent que les neurones DA sont divisés en plusieurs populations appropriées pour des rôles distincts dans le contrôle de la motivation. Les neurones DA codant des valeurs de motivation correspondent bien aux théories actuelles sur les neurones dopaminergiques et au traitement des récompenses (Schultz et al., 1997; Berridge et Robinson, 1998; Sage, 2004). Ces neurones encodent un signal d'erreur de prédiction complet et encodent des événements valorisants et aversifs dans des directions opposées. Ainsi, ces neurones fournissent un signal instructif approprié pour la recherche, l’évaluation et l’apprentissage de la valeur (Figure 5). Si un stimulus excite les neurones DA codant des valeurs, nous devons l’approcher, lui attribuer une valeur élevée et apprendre des actions pour le rechercher à nouveau dans le futur. Si un stimulus provoque l'inhibition des neurones DA codant pour les valeurs, nous devons l'éviter, lui attribuer une valeur faible et apprendre des actions pour l'éviter à nouveau.

Figure 5 

Fonctions hypothétiques de valeur motivationnelle, de saillance et de signaux d'alerte

En revanche, les neurones DA codant pour la saillance motivationnelle correspondent bien aux théories des neurones dopaminergiques et au traitement des événements saillants (Redgrave et al., 1999; Horvitz, 2000; Joseph et al., 2003; Kapur, 2003). Ces neurones sont excités à la fois par des événements enrichissants et aversifs et ont des réponses plus faibles aux événements neutres, fournissant un signal instructif approprié permettant aux circuits neuronaux d’apprendre à détecter, prédire et répondre à des situations de grande importance. Ici, nous allons considérer trois tels systèmes cérébraux (Figure 5). Premièrement, les circuits neuronaux pour l'orientation visuelle et l'attention sont calibrés pour découvrir des informations sur tous les types d'événements, à la fois enrichissants et aversifs. Par exemple, les indices de récompense et aversifs attirent les réactions d’orientation plus efficacement que les indices neutres (Lang et Davis, 2006; Matsumoto et Hikosaka, 2009b; Austin et Duka, 2010). Deuxièmement, les situations à la fois gratifiantes et aversives engagent les systèmes neuronaux pour le contrôle cognitif et la sélection des actions - nous devons engager la mémoire de travail pour garder les informations à l'esprit, la résolution des conflits pour décider d'un plan d'action et la mémoire à long terme pour se souvenir du résultat résultant (Bradley et al., 1992; Botvinick et al., 2001; Savine et al., 2010). Troisièmement, les situations valorisantes et aversives requièrent une motivation générale accrue pour dynamiser les actions et assurer leur exécution correcte. En effet, les neurones DA sont essentiels pour motiver les efforts visant à atteindre des objectifs de grande valeur et pour traduire la connaissance des exigences de la tâche en performances motrices fiables (Berridge et Robinson, 1998; Mazzoni et al., 2007; Niv et al., 2007; Salamone et al., 2007).

Excitation de la dopamine en alertant les signaux sensoriels

En plus de leurs signaux codant la valeur motivationnelle et la saillance, la majorité des neurones DA ont également des réponses éclatées à plusieurs types d’événements sensoriels qui ne sont pas directement associés à des expériences enrichissantes ou aversives. Ces réponses ont été théorisées pour dépendre d'un certain nombre de facteurs neuronaux et psychologiques, notamment les entrées sensorielles directes, la surprise, la nouveauté, l'éveil, l'attention, la saillance, la généralisation et le pseudo-conditionnement (Schultz, 1998; Redgrave et al., 1999; Horvitz, 2000; Lisman et Grace, 2005; Redgrave et Gurney, 2006; Joshua et al., 2009a; Schultz, 2010).

Nous tenterons ici de synthétiser ces idées et de rendre compte de ces réponses du DA en termes d’un seul signal sous-jacent, un signal d'alerte (Figure 5). Le terme "alerting" a été utilisé par Schultz (Schultz, 1998) comme un terme général pour les événements qui attirent l'attention. Ici, nous allons l'utiliser dans un sens plus spécifique. Par événement d'alerte, nous entendons un signal sensoriel inattendu qui capte l'attention sur la base d'une évaluation rapide de son importance potentielle, à l'aide de caractéristiques simples telles que son emplacement, sa taille et ses modalités sensorielles. De tels événements d'alerte déclenchent souvent des réactions comportementales immédiates pour les étudier et déterminer leur signification précise. Ainsi, les signaux d’alerte DA se produisent généralement à des latences courtes, reposent sur les caractéristiques brutes d’un stimulus et sont mieux corrélés à des réactions immédiates telles que des réactions d’orientation (Schultz et Romo, 1990; Joshua et al., 2009a; Schultz, 2010). Cela contraste avec les autres signaux de motivation dans les neurones DA qui se produisent généralement à des latences plus longues, prennent en compte l'identité précise du stimulus et sont mieux corrélés à des actions comportementales considérées telles que des décisions d'approcher ou d'éviter (Schultz et Romo, 1990; Joshua et al., 2009a; Schultz, 2010).

Les réponses aux alertes DA peuvent être déclenchées par des événements sensoriels surprenants tels que des éclairs de lumière inattendus et des clics auditifs, qui évoquent des excitations importantes en rafale dans 60 – 90% des neurones DA de la SNc et de la VTA (Strecker et Jacobs, 1985; Horvitz et al., 1997; Horvitz, 2000) (Figure 6A). Ces réponses d’alerte semblent indiquer à quel point le stimulus est surprenant et attire l’attention; elles sont réduites si un stimulus se produit à des moments prévisibles, si l’attention est attirée ailleurs ou pendant le sommeil (Schultz, 1998; Takikawa et al., 2004; Strecker et Jacobs, 1985; Steinfels et al., 1983). Par exemple, un déclic inattendu évoque un éclatement important du DA lorsqu'un chat est dans un état de réveil passif et passif, mais n'a aucun effet lorsqu'il est engagé dans des activités exigeantes telles que la chasse au rat, l'alimentation, le toilettage, les caresses. par l'expérimentateur, et ainsi de suite (Strecker et Jacobs, 1985) (Figure 6A). De même, les réponses en rafale DA sont déclenchées par des événements sensoriels physiquement faibles mais alertants en raison de leur nouveauté (Ljungberg et al., 1992; Schultz, 1998). Ces réponses s’habituent à la familiarisation du nouveau stimulus, parallèlement à l’habituation des réactions d’orientation (Figure 6B). Conformément à ces résultats, des événements surprenants et nouveaux évoquent la libération de DA dans les structures en aval (Lisman et Grace, 2005) et activer les circuits cérébraux associés aux DA de manière à façonner le traitement des récompenses (Zink et al., 2003; Davidson et al., 2004; Duzel et al., 2010).

Figure 6 

Réponses excitatrices des neurones dopaminergiques à des événements d'alerte

Les réponses aux alertes DA sont également déclenchées par des signaux sensoriels inattendus susceptibles de fournir de nouvelles informations sur les événements déterminants sur le plan de la motivation. Comme prévu pour un signal d'alerte à latence courte, ces réponses sont plutôt non sélectives: elles sont déclenchées par tout stimulus qui se contente de Ressemble signal de motivation, même si la ressemblance est très faible (phénomène appelé généralisation) (Schultz, 1998). En conséquence, les neurones DA répondent souvent à un stimulus avec un mélange de deux signaux: un signal d'alerte rapide codant le fait que le stimulus est l'éventualité important, et un deuxième signal codant son présenter signification valorisante ou aversive (Schultz et Romo, 1990; Waelti et al., 2001; Tobler et al., 2003; Day et al., 2007; Kobayashi et Schultz, 2008; Fiorillo et al., 2008; Nomoto et al., 2010) (voir (Kakade et Dayan, 2002; Joshua et al., 2009a; Schultz, 2010) pour évaluation). Un exemple peut être vu dans un ensemble de neurones DA de code de saillance de motivation montré dans Figure 6C (Bromberg-Martin et al., 2010a). Ces neurones étaient excités par des signaux de récompense et aversifs, mais ils étaient également excités par un signal neutre. Le signal neutre n'avait jamais été associé à des résultats de motivation, mais présentait une (très légère) ressemblance physique avec la récompense et des signaux aversifs.

Ces réponses d'alerte semblent étroitement liées à la capacité d'un signal sensoriel à déclencher des réactions d'orientation afin de l'examiner davantage et de découvrir sa signification. Cela peut être vu dans trois propriétés notables. Premièrement, les réponses d’alerte ne se produisent que pour les signaux sensoriels qui doivent être examinés pour déterminer leur signification, et non pour des événements intrinsèquement enrichissants ou aversifs tels que la distribution de jus ou de bouffées d’airpuffs (Schultz, 2010). Deuxièmement, les réponses d’alerte ne se produisent que lorsque le signal est potentiellement important et a la capacité de déclencher des réactions d’orientation, et non lorsque le signal n’a pas de rapport avec la tâche à accomplir et ne déclenche pas les réactions d’orientation (Schultz et Romo, 1990). Troisièmement, les réponses d’alerte sont améliorées dans les situations où les signaux déclenchent un changement brusque d’attention - quand ils apparaissent à un moment inattendu ou à l’écart du centre du regard (Bromberg-Martin et al., 2010a). Ainsi, lorsque les signaux de motivation sont présentés avec un timing imprévisible, ils déclenchent des réactions d'orientation immédiates et une réponse d'alerte DA généralisée - excitation par tous les signaux, y compris les signaux neutres (Figure 6C, noir). Mais si leur minutage est rendu prévisible - par exemple, en prévenant les sujets avec un «signal de début d'essai» présenté une seconde avant que les signaux ne s'affichent, ceux-ci n'engendrent plus une réponse alertante (Figure 6D, gris). Au lieu de cela, la réponse d’alerte passe au signal de début d’essai - le premier événement de l’essai dont le calendrier est imprévisible et qui suscite des réactions d’orientation (Figure 6D, noir).

Quel est le mécanisme sous-jacent qui génère des signaux d’alerte de neurones DA? Une hypothèse est que les réponses aux alertes sont simplement des signaux d’erreur classiques de prédiction de récompense qui se produisent à des latences courtes, codant la valeur de récompense attendue d’un stimulus avant qu’il n’ait été complètement discriminé (Kakade et Dayan, 2002). Des preuves plus récentes, cependant, suggèrent que les signaux d’alerte peuvent être générés par un mécanisme distinct des signaux de récompense DA classiques (Satoh et al., 2003; Bayer et Glimcher, 2005; Bromberg-Martin et al., 2010a; Bromberg-Martin et al., 2010c; Nomoto et al., 2010). Le plus frappant est que la réponse d’alerte au signal de début d’essai ne se limite pas à des tâches enrichissantes; il peut avoir la même force lors d’une tâche aversive dans laquelle aucune récompense n’est offerte (Figure 6C, D, en bas, "tâche aversive"). Cela se produit même si les signaux de récompense DA classiques dans les mêmes neurones signalent correctement que la tâche récompensante a une valeur attendue beaucoup plus élevée que la tâche aversive (Bromberg-Martin et al., 2010a). Ces signaux d’alerte ne sont pas simplement une forme de codage de valeur ou de pureté, car ils se produisent dans la majorité des neurones DA codant pour la valeur de motivation et la saillance (Bromberg-Martin et al., 2010a). Une deuxième dissociation peut être vue dans la façon dont les neurones DA prédisent les récompenses futures en se basant sur la mémoire des résultats de récompenses passés (Satoh et al., 2003; Bayer et Glimcher, 2005). Alors que les signaux de récompense DA classiques sont contrôlés par une trace mémoire longue durée optimisée pour une prédiction de récompense précise, les réponses d'alerte au signal de début d'essai sont contrôlées par une trace mémoire distincte ressemblant à celle observée dans les réactions d'orientation immédiate (Bromberg-Martin et al., 2010c). Une troisième dissociation peut être observée dans la manière dont ces signaux sont répartis dans la population de neurones DA. Alors que les signaux de récompense DA classiques sont les plus puissants dans la SNc ventromédiale, les réponses d’alerte au signal de début d’essai (et à d’autres signaux programmés de manière inattendue) sont diffusées dans l’ensemble de la SNc (Nomoto et al., 2010).

Contrairement à ces dissociations des signaux de récompense conventionnels, les signaux d’alerte DA sont corrélés à la vitesse d’orientation et aux réponses d’approche de l’événement d’alerte (Satoh et al., 2003; Bromberg-Martin et al., 2010a; Bromberg-Martin et al., 2010c). Cela suggère que les signaux d'alerte sont générés par un processus neuronal qui motive des réactions rapides pour enquêter sur des événements potentiellement importants. À l'heure actuelle, malheureusement, on sait relativement peu de choses sur les événements que ce processus considère comme «importants». Par exemple, les réponses aux alertes sont-elles également sensibles aux événements enrichissants et aversifs? On sait que les réponses aux alertes se produisent pour des stimuli ressemblant à des signaux de récompense ou ressemblant à des signaux de récompense et aversifs (par exemple, en partageant la même modalité sensorielle). Mais on ne sait pas encore si des réponses d'alerte se produisent pour des stimuli ressemblant uniquement à des signaux aversifs.

Rôle fonctionnel des signaux d'alerte à la dopamine

Comme nous l'avons vu, les signaux d'alerte sont susceptibles d'être générés par un mécanisme distinct des signaux de valeur motivationnelle et de saillance. Cependant, les signaux d’alerte sont envoyés aux neurones DA de codage valeur / motivation et à la saillance, et sont donc susceptibles de réguler le traitement et le comportement du cerveau de manière similaire aux signaux de valeur et de saillance (Figure 5).

Les signaux d’alarme envoyés aux neurones DA de code de saillance de motivation contribueraient à orienter l’attention sur le stimulus d’alerte, à engager des ressources cognitives pour en découvrir le sens et à décider d’un plan d’action, et à accroître la motivation pour mettre en œuvre ce plan de manière efficace (Figure 5). Ces effets pourraient survenir par des effets immédiats sur le traitement neuronal ou par des actions de renforcement ayant conduit à la détection de l'événement d'alerte. Ce rôle fonctionnel correspond bien à la corrélation entre les réponses d’alerte DA et les réactions comportementales rapides au stimulus d’alerte, et aux théories selon lesquelles les réponses neuronales DA à latence courte sont impliquées dans l’orientation de l’attention, l’excitation, l’amélioration du traitement cognitif et les réactions comportementales immédiates (Redgrave et al., 1999; Horvitz, 2000; Joseph et al., 2003; Lisman et Grace, 2005; Redgrave et Gurney, 2006; Joshua et al., 2009a).

La présence de signaux d'alerte dans les neurones DA codant des valeurs de motivation est plus difficile à expliquer. Ces neurones transmettent des signaux de valeur de motivation idéaux pour la recherche, l'évaluation des résultats et l'apprentissage de la valeur; mais ils peuvent aussi être excités en alertant des événements tels que des cliquetis inattendus et le début d'essais aversifs. Selon notre voie hypothétique (Figure 5), cela donnerait aux événements d’alerte une valeur positive et qu’ils seraient recherchés de la même manière que des récompenses! Bien que surprenant à première vue, il y a de bonnes raisons de penser que les événements d'alerte peuvent être traités comme des objectifs positifs. Les signaux d'alerte fournissent le premier avertissement qu'un événement potentiellement important est sur le point de se produire et constituent donc la première occasion d'agir pour contrôler cet événement. Si des signaux d'alerte sont disponibles, les événements déterminants sur le plan de la motivation peuvent être détectés, prédits et préparés à l'avance; si les signaux d’alarme sont absents, les événements ayant une forte motivation sont toujours une surprise inattendue. En effet, les humains et les animaux expriment souvent une préférence pour les environnements dans lesquels des événements sensoriels enrichissants, aversifs, voire neutres du point de vue de la motivation, peuvent être observés et prédits à l'avance (Badia et al., 1979; Herry et al., 2007; Daly, 1992; Chew and Ho, 1994) et de nombreux neurones DA indiquent la préférence comportementale pour afficher des informations prédictives de récompense (Bromberg-Martin et Hikosaka, 2009). Les signaux d'alerte DA peuvent prendre en charge ces préférences en attribuant une valeur positive à des environnements dans lesquels des indices sensoriels potentiellement importants peuvent être anticipés à l'avance.

Voies neuronales pour la valeur motivationnelle, la saillance et l'alerte

Jusqu'ici, nous avons divisé les neurones DA en deux types qui codent la valeur motivationnelle et la saillance motivationnelle et conviennent à des rôles distincts dans le contrôle de la motivation (Figure 5). Comment ce schéma conceptuel cartographie-t-il les voies neuronales dans le cerveau? Nous proposons ici une hypothèse sur les emplacements anatomiques de ces neurones, leurs projections sur les structures en aval et les sources de leurs signaux de motivation (Chiffres 6,, 77).

Figure 7 

Localisation anatomique hypothétique et projections de la valeur motivationnelle de la dopamine et des neurones codants de la saillance

Emplacements anatomiques des neurones codants valeur et saillance

Une étude récente a cartographié les emplacements de la récompense de DA et de signaux aversifs dans le cerveau moyen latéral, y compris la SNc et la partie la plus latérale de la VTA (Matsumoto et Hikosaka, 2009b). Les signaux de valeur motivationnelle et de saillance motivationnelle étaient répartis dans cette région selon un gradient anatomique. Les signaux de valeur de motivation étaient plus fréquents dans les neurones de la SNc ventromédiale et de la VTA latérale, tandis que les signaux de saillance de motivation étaient plus fréquents dans les neurones de la SNc dorsolatérale (Figure 7B). Ceci est cohérent avec les rapports selon lesquels le codage de la valeur de récompense DA est le plus fort dans la SNc ventromédiale (Nomoto et al., 2010) alors que les excitations aversives ont tendance à être plus fortes latéralement (Mirenowicz et Schultz, 1996). D'autres études ont exploré le cerveau moyen plus médian. Ces études ont révélé un mélange de réponses aversives excitatrices et inhibitrices sans différence significative dans leur localisation, bien que les excitations aversives aient tendance à se localiser plus ventralement (Guarraci et Kapp, 1999; Brischoux et al., 2009) (Figure 7C).

Destinations de signaux de valeur de motivation

Selon notre hypothèse, les neurones DA de codage de la valeur motivationnelle devraient projeter vers les régions du cerveau impliquées dans les actions d’approche et d’évitement, l’évaluation des résultats et la valorisation de l’apprentissage (Figure 5). En effet, le projet ventromedial SNc et VTA sur le cortex préfrontal ventromédial (Williams et Goldman-Rakic, 1998), y compris le cortex orbitofrontal (OFC) (Porrino et Goldman-Rakic, 1982) (Figure 7A). L’OFC a toujours été impliqué dans le codage de valeur dans les études d’imagerie fonctionnelle (Anderson et al., 2003; Small et al., 2003; Jensen et al., 2007; Litt et al., 2010) et des enregistrements de neurones uniques (Morrison et Salzman, 2009; Roesch et Olson, 2004). On pense que l’OFC évalue les options de choix (Padoa-Schioppa, 2007; Kable et Glimcher, 2009), coder les attentes de résultat (Schoenbaum et al., 2009) et mettre à jour ces attentes pendant l’apprentissage (Walton et al., 2010). De plus, l’OFC participe à l’apprentissage des erreurs de prédiction de la récompense négative (Takahashi et al., 2009) qui sont les plus forts en neurones DA codant pour les valeurs (Figure 4).

En outre, les parties médianes du projet de cerveau moyen dopaminergique se dirigent vers le striatum ventral, y compris la coquille du noyau accumbens (coquille NAc) (Haber et al., 2000) (Figure 7A). Une étude récente a montré que la coque de l’ANac recevait des signaux DA phasiques codant la valeur motivationnelle des résultats gustatifs (Roitman et al., 2008). Ces signaux sont susceptibles d’entraîner un apprentissage de la valeur, car l’injection directe de médicaments antidépresseurs dans la coquille d’acide NAc se renforce fortement (Ikemoto, 2010) tandis que les traitements réduisant l’entrée de DA dans la coque peuvent induire des aversions (Liu et al., 2008). Une mise en garde est que les études sur la libération de DA dans un shell NAc sur de longues échelles de temps (minutes) ont donné des résultats mitigés, certains concordant avec le codage de valeur et d'autres avec le codage de saillance (par exemple (Bassareo et al., 2002; Ventura et al., 2007)). Cela suggère que les signaux de valeur peuvent être limités à des emplacements spécifiques dans le shell NAc. Notamment, différentes régions du shell NAc sont spécialisées dans le contrôle du comportement appétitif et aversif (Reynolds et Berridge, 2002), qui nécessitent tous deux l’apport de neurones DA (Faure et al., 2008).

Enfin, les neurones DA dans l’ensemble de la SNc envoient d’importantes projections au striatum dorsal (Haber et al., 2000), suggérant que le striatum dorsal puisse recevoir à la fois une valeur de motivation et un signal de codage en saillie DA (Figure 7A). Les neurones DA de codage de la valeur motivationnelle fourniraient un signal instructif idéal pour les circuits striatals impliqués dans l’apprentissage de la valeur, tels que l’apprentissage des habitudes de réponse au stimulus (Faure et al., 2005; Yin et Knowlton, 2006; Balleine et O'Doherty, 2010). Lorsque ces neurones DA éclatent, ils s'engagent dans la voie directe pour apprendre à obtenir des résultats de récompense; lorsqu'ils font une pause, ils s'engagent dans la voie indirecte pour apprendre à éviter les conséquences aversives (Figure 2). En effet, il existe des preuves récentes selon lesquelles les filières striatales suivent exactement cette division du travail pour un traitement de récompense et un traitement aversif (Hikida et al., 2010). Cependant, on ignore encore comment les neurones de ces voies répondent à des événements valorisants et aversifs au cours du comportement. Au moins dans le striatum dorsal dans son ensemble, un sous-ensemble de neurones réagit de manière distincte à certains événements enrichissants et aversifs (Ravel et al., 2003; Yamada et al., 2004, 2007; Joshua et al., 2008).

Destinations des signaux de motivation saillants

Selon notre hypothèse, les neurones DA codant à la saillance motivationnelle devraient projeter vers les régions du cerveau impliquées dans l'orientation, le traitement cognitif et la motivation générale (Figure 5). En effet, les neurones DA du cerveau moyen dorsolatéral envoient des projections au cortex frontal dorsal et latéral (Williams et Goldman-Rakic, 1998) (Figure 7A), une région impliquée dans des fonctions cognitives telles que la recherche de l'attention, la mémoire de travail, le contrôle cognitif et la prise de décision entre résultats de motivation (Williams et Castner, 2006; Lee et Seo, 2007; Sage, 2008; Kable et Glimcher, 2009; Wallis et Kennerley, 2010). Les fonctions cognitives préfrontales dorsolatérales sont étroitement régulées par les niveaux de DA (Robbins et Arnsten, 2009) et sont théorisés pour dépendre de l'activation des neurones DA phasiques (Cohen et al., 2002; Lapish et al., 2007). Notamment, un sous-ensemble de neurones préfrontaux latéraux réagit à la fois aux signaux visuels gratifiants et aversifs, et la grande majorité réagit dans la même direction, ressemblant ainsi à un codage de la saillance motivationnelle (Kobayashi et al., 2006). En outre, l’activité de ces neurones est corrélée au succès comportemental lors de l’exécution de tâches de mémoire de travail (Kobayashi et al., 2006). Bien que cette voie DA → du cortex frontal dorsolatéral semble être spécifique aux primates (Williams et Goldman-Rakic, 1998), une voie fonctionnellement similaire peut exister chez d’autres espèces. En particulier, bon nombre des fonctions cognitives du cortex préfrontal dorsolatéral des primates sont réalisées par le cortex préfrontal médial des rongeurs (Uylings et al., 2003), et il est prouvé que cette région reçoit les signaux de saillance de motivation de la DA et contrôle le comportement lié à la saillance (Mantz et al., 1989; Di Chiara, 2002; Joseph et al., 2003; Ventura et al., 2007; Ventura et al., 2008).

Étant donné que le VTA contient des neurones à la fois saillants et de valeur et que des signaux de codage de valeurs sont envoyés au shell NAc, des signaux de saillance pourraient être envoyés au noyau NAc (Figure 7A). En effet, le noyau NAc (mais pas la coquille) est essentiel pour permettre à la motivation de surmonter les coûts de réponse tels que l’effort physique; pour l'exécution de tâches nécessitant une flexibilité cognitive; et pour permettre aux signaux de récompense de renforcer la motivation générale (Ghods-Sharifi et Floresco, 2010; Floresco et al., 2006; Hall et al., 2001; Cardinal, 2006). Conformément au codage de la saillance motivationnelle, le noyau de l’ANc reçoit des rafales phasiques de DA lors de ces deux expériences enrichissantes (Day et al., 2007) et des expériences aversives (Anstrom et al., 2009).

Enfin, comme indiqué ci-dessus, certains neurones DA codant pour la saillance peuvent se projeter vers le striatum dorsal (Figure 7A). Alors que certaines régions du striatum dorsal sont impliquées dans des fonctions liées à l’apprentissage des valeurs d’action, le striatum dorsal est également impliqué dans des fonctions qui devraient être engagées pour tous les événements saillants, tels que l’orientation, l’attention, la mémoire de travail et la motivation générale (Hikosaka et al., 2000; Klingberg, 2010; Palmiter, 2008). En effet, un sous-ensemble de neurones striataux dorsaux réagit plus fortement aux événements enrichissants et aversifs qu'aux événements neutres (Ravel et al., 1999; Blazquez et al., 2002; Yamada et al., 2004, 2007), bien que leur rôle causal dans le comportement motivé ne soit pas encore connu.

Sources de signaux de valeur de motivation

Une récente série d'études suggère que les neurones DA reçoivent des signaux de valeur motivationnelle provenant d'un petit noyau de l'épithalamus, l'habenula latérale (LHb) (Hikosaka, 2010) (Figure 8). Le LHb exerce un puissant contrôle négatif sur les neurones DA: la stimulation du LHb inhibe les neurones DA à des latences courtes (Christoph et al., 1986) et peut réguler l'apprentissage d'une manière opposée à la stimulation par l'ATV (Shumake et al., 2010). Conformément à un signal de contrôle négatif, de nombreux neurones LHb ont des réponses phasiques inversées des neurones DA: les neurones LHb sont inhibé par des erreurs de prédiction de récompense positive et excité par des erreurs de prédiction de récompense négative (Matsumoto et Hikosaka, 2007, 2009; Bromberg-Martin et al., 2010a; Bromberg-Martin et al., 2010c). Dans plusieurs cas, ces signaux apparaissent à des latences plus courtes dans la bande LHb, ce qui correspond à la transmission LHb → DA (Matsumoto et Hikosaka, 2007; Bromberg-Martin et al., 2010a).

Figure 8 

Sources hypothétiques de valeur motivationnelle, de saillance et de signaux d'alerte

La LHb est capable de contrôler les neurones DA dans tout le cerveau moyen, mais plusieurs sources de données suggèrent qu’elle exerce un contrôle préférentiel sur les neurones DA codant pour les valeurs de motivation. Premièrement, les neurones LHb codent la valeur motivationnelle d’une manière qui reflète bien les neurones DA codant pour une valeur. Ils codent des erreurs de prédiction de récompense positive et négative et réagissent dans des directions opposées à des événements valorisants et aversifs (Matsumoto et Hikosaka, 2009a; Bromberg-Martin et al., 2010a). Deuxièmement, la stimulation de LHb a ses effets les plus puissants sur les neurones DA dont les propriétés sont compatibles avec le codage des valeurs, y compris l'inhibition par des signaux sans récompense et la localisation anatomique dans la SNc ventromédiale (Matsumoto et Hikosaka, 2007, 2009b). Troisièmement, les lésions de LHb altèrent les réponses inhibitrices des neurones DA aux événements aversifs, suggérant un rôle causal pour LHb dans la génération de signaux de valeur DA (Gao et al., 1990).

La LHb fait partie d’une voie neurale plus étendue par laquelle les neurones DA peuvent être contrôlés par les noyaux gris centraux (Figure 8). La LHb reçoit des signaux ressemblant à des erreurs de prédiction de récompense par le biais d’une projection d’une population de neurones située autour de la frontière du globus pallidus (GPb) (Hong et Hikosaka, 2008). Une fois que ces signaux atteignent la LHb, ils sont susceptibles d'être envoyés aux neurones DA par le biais d'une voie désynaptique dans laquelle la LHb excite les neurones GABA du cerveau moyen qui à leur tour inhibent les neurones DA (Ji et Shepard, 2007; Omelchenko et al., 2009; Brinschwitz et al., 2010). Cela pourrait se produire par le biais de projections de LHb sur les interneurones de la VTA et sur un noyau GABA-ergique adjacent appelé le noyau tégmental rostromédial (RMTg) (Jhou et al., 2009b) (également appelée «queue caudale de la VTA» (Kaufling et al., 2009)). Notamment, les neurones RMTg ont des propriétés de réponse similaires à celles des LHb, codent une valeur motivationnelle et ont une forte projection inhibitrice sur le cerveau moyen dopaminergique (Jhou et al., 2009a). Ainsi, la voie complète des ganglions de la base pour envoyer des signaux de valeur de motivation aux neurones DA peut être GPb → LHb → RMTg → DA (Hikosaka, 2010).

Une question importante pour les recherches futures est de savoir si les signaux de valeur de motivation sont acheminés uniquement par la LHb ou s'ils sont acheminés par plusieurs voies d'entrée. Notamment, les inhibitions de la DA par les chocs aversifs sont contrôlées par l’activité dans le noyau mésopontine parabrachial (PBN) (Coizet et al., 2010) (Figure 8). Ce noyau contient des neurones qui reçoivent une entrée directe de la moelle épinière codant des sensations nocives et qui pourraient inhiber les neurones DA par le biais de projections excitatrices du RMTg (Coizet et al., 2010; Gauriau et Bernard, 2002). Cela suggère que la LHb envoie des signaux de valeur motivationnelle aux neurones DA pour des signaux et des résultats à la fois valorisants et aversifs, tandis que la PBN fournit une composante du signal de valeur spécifiquement liée aux résultats aversifs.

Sources de signaux saillants de motivation

On en sait moins sur la source des signaux de saillance de motivation dans les neurones DA. Un candidat intrigant est le noyau central de l’amygdale (CeA) qui a toujours été impliqué dans l’orientation, l’attention et les réponses motivationnelles générales lors d’événements enrichissants ou aversifs (Holland et Gallagher, 1999; Baxter et Murray, 2002; Merali et al., 2003; Balleine et Killcross, 2006) (Figure 8). CeA et d’autres noyaux d’amygdala contiennent de nombreux neurones dont les signaux sont compatibles avec la saillance motivationnelle: ils signalent des événements enrichissants et aversifs dans la même direction, sont renforcés lorsque des événements se produisent de manière inattendue et sont corrélés à des mesures comportementales de l’excitation (Nishijo et al., 1988; Belova et al., 2007; Shabel et Janak, 2009). Ces signaux peuvent être envoyés aux neurones DA parce que la CeA a des projections descendantes vers le tronc cérébral qui contiennent des informations valorisantes et aversives (Lee et al., 2005; Pascoe et Kapp, 1985) et le CeA est nécessaire pour la libération de la DA lors d’événements liés à la récompense (Phillips et al., 2003a). De plus, le CeA participe avec les neurones DA à des voies compatibles avec les réseaux anatomiques et fonctionnels proposés pour la saillance motivationnelle. Une voie comprenant le CeA, la SNc et le striatum dorsal est nécessaire pour apprendre à s’orienter vers les signaux alimentaires (Han et al., 1997; Lee et al., 2005; El-Amamy et la Hollande, 2007). Conformément à notre distinction entre la saillance et les signaux de valeur, cette voie est nécessaire pour apprendre à s'orienter sur les signaux alimentaires, mais pas pour aborder les résultats concernant les aliments (Han et al., 1997). Une deuxième voie, comprenant le noyau CeA, SNc, VTA et NAc, est nécessaire pour que les signaux de récompense entraînent une augmentation de la motivation générale à exécuter des actions de recherche de récompense (Hall et al., 2001; Corbit et Balleine, 2005; El-Amamy et la Hollande, 2007).

En plus de la CeA, les neurones DA pourraient recevoir des signaux de saillance de motivation provenant d’autres sources, telles que des neurones codant la saillance dans le cerveau antérieur basal (Lin et Nicolelis, 2008; Richardson et DeLong, 1991) et des neurones dans la PBN (Coizet et al., 2010), bien que ces voies restent à étudier.

Sources de signaux d'alerte

Il existe plusieurs bons candidats pour fournir des signaux d'alerte aux neurones DA. Le candidat le plus attrayant est peut-être le colliculus supérieur (SC), noyau du cerveau moyen qui reçoit des entrées sensorielles à courte latence provenant de multiples modalités sensorielles et contrôle les réactions d’orientation et l’attention (0).Redgrave et Gurney, 2006) (Figure 8). Le SC a une projection directe sur la SNc et la VTA (May et al., 2009; Comoli et al., 2003). Chez les animaux anesthésiés, le SC est un canal essentiel pour que les signaux visuels à courte latence atteignent les neurones DA et déclenchent la libération de DA dans les structures en aval (Comoli et al., 2003; Dommett et al., 2005). La voie SC-DA est la mieux adaptée pour transmettre des signaux d'alerte plutôt que des signaux de récompense et d'aversion, car les neurones SC ont une faible réponse à la délivrance de récompense et n'ont qu'une influence minime sur les réponses aversives de l'AD (Coizet et al., 2006). Ceci suggère une séquence d'événements dans lesquels les neurones SC (1) détectent un stimulus, (2) le sélectionent comme potentiellement important, (3) déclenchent une réaction d'orientation pour examiner le stimulus et (4) déclenchent simultanément une réponse d'alerte DA qui provoque une rafale de DA dans les structures en aval (Redgrave et Gurney, 2006).

Le deuxième candidat pour l'envoi de signaux d'alerte aux neurones DA est le LHb (Figure 8). Notamment, le début inattendu d’un signal de début d’essai inhibe de nombreux neurones de LHb de manière inverse du signal d’alarme de neurones DA, et cette réponse se produit à une latence plus courte dans la LHb compatible avec une direction de transmission LHb → DA (Bromberg-Martin et al., 2010a; Bromberg-Martin et al., 2010c). Nous avons également observé de manière anecdotique que les neurones de LHb sont généralement inhibés par des images et des sons inattendus, de manière inverse des excitations de la DA (MM, ESB-M. Et OH, observations non publiées) bien qu’attend une enquête plus systématique.

Enfin, un troisième candidat pour l'envoi de signaux d'alerte aux neurones DA est le noyau tegmental pédonculopontine (PPTg), projeté à la fois par la SNc et la VTA et impliqué dans le traitement de la motivation (Winn, 2006) (Figure 8). Le PPTg est important pour permettre des sursauts de neurones VTA DA (Grace et al., 2007) comprenant des réponses en rafale pour récompenser les signaux (Pan et Hyland, 2005). Conformément à un signal d'alerte, les neurones PPTg ont une réponse à latence courte pour de multiples modalités sensorielles et sont actifs pendant les réactions d'orientation (Winn, 2006). Il est prouvé que les réponses sensorielles des PPTg sont influencées par la valeur de la récompense et par les exigences d'action immédiate (Dormont et al., 1998; Okada et al., 2009) (mais voir (Pan et Hyland, 2005)). Certains neurones PPTg réagissent également à des résultats valorisants ou aversifs (Dormont et al., 1998; Kobayashi et al., 2002; Ivlieva et Timofeeva, 2003b, a). Il sera important de vérifier si les signaux que la PPTg envoie aux neurones DA sont spécifiquement liés à l'alerte ou s'ils contiennent d'autres signaux de motivation tels que la valeur et la saillance.

Orientations pour les recherches futures

Nous avons examiné la nature des signaux de récompense, aversifs et d'alerte dans les neurones DA, et avons proposé une hypothèse sur les voies neuronales sous-jacentes et leurs rôles dans le comportement motivé. Nous considérons qu’il s’agit d’une hypothèse de travail, d’un guide pour les théories et recherches futures qui nous mènera à une compréhension plus complète. Nous mettrons ici en évidence plusieurs domaines dans lesquels des investigations supplémentaires sont nécessaires pour révéler des complexités plus profondes.

À l’heure actuelle, notre compréhension des voies neuronales sous-jacentes aux signaux DA est à un stade précoce. Par conséquent, nous avons tenté de déduire les sources et les destinations des signaux DA de codage de valeur et de saillance largement basés sur des mesures indirectes telles que les propriétés de réponse neuronale et les rôles fonctionnels de différentes zones du cerveau. Il sera important de soumettre directement ces voies candidates à un test et de découvrir leurs propriétés détaillées, à l'aide d'outils récemment développés, qui permettent de surveiller la transmission des DA (Robinson et al., 2008) et contrôlé (Tsai et al., 2009; Tecuapetla et al., 2010; Stuber et al., 2010) avec une grande précision spatiale et temporelle. Comme indiqué ci-dessus, plusieurs de ces structures candidates ont une organisation topographique, ce qui suggère que leur communication avec les neurones DA pourrait également être topographique. Les sources neurales de signaux DA phasiques peuvent également être plus complexes que les simples voies de prédiction que nous avons proposées, car les structures neuronales qui communiquent avec les neurones DA sont fortement interconnectées (Geisler et Zahm, 2005) et les neurones DA peuvent communiquer entre eux dans le mésencéphale (Ford et al., 2010).

Nous nous sommes concentrés sur un ensemble sélectionné de connexions de neurones DA, mais les neurones DA reçoivent une entrée fonctionnelle de nombreuses structures supplémentaires, notamment le noyau sous-thalamique, le noyau tégmental latérodorsal, le noyau de la strie terminale, le cortex préfrontal, le pallidum ventral et l'hypothalamus latéral (Grace et al., 2007; Shimo et Wichmann, 2009; Jalabert et al., 2009). Notamment, les neurones d’hypothalamus ou d’exexine latéraux se projettent sur des neurones DA, sont activés par des événements enrichissants plutôt que par aversion, et déclenchent un comportement deHarris et Aston-Jones, 2006), suggérant un rôle possible dans les fonctions liées à la valeur. Les neurones DA envoient également des projections à de nombreuses autres structures, notamment l’hypothalamus, l’hippocampe, l’amygdale, l’habenula et un grand nombre de zones corticales. Le cortex cingulaire antérieur (ACC) a notamment été proposé pour recevoir des signaux d’erreur de prédiction de récompense provenant de neurones DA (Holroyd et Coles, 2002) et contient des neurones dont l'activité est positivement liée à la valeur motivationnelle (Koyama et al., 1998). L’activation de l’ACC est également liée à un traitement aversif (Vogt, 2005; Johansen et Fields, 2004). Ces fonctions de l'ACC pourraient être supportées par un mélange de valeur de motivation DA et de signaux de saillance, qu'il sera important de tester dans une étude ultérieure. En effet, des signaux neuronaux liés à des erreurs de prédiction de récompense ont été rapportés dans plusieurs régions, y compris le cortex préfrontal médial (Matsumoto et al., 2007; Seo et Lee, 2007), cortex orbitofrontal (Sul et al., 2010) (mais voir (Takahashi et al., 2009; Kennerley et Wallis, 2009)), et striatum dorsal (Kim et al., 2009; Oyama et al., 2010), et leur relation causale avec l'activité des neurones DA reste à découvrir.

Nous avons décrit les événements de motivation avec une simple dichotomie, en les classant comme "enrichissants" ou "aversifs". Pourtant, ces catégories contiennent une grande variété. Une maladie aversive est progressive, prolongée et causée par des événements internes; une bouffée d'air aversive est rapide, brève et causée par le monde extérieur. Ces situations exigent des réponses comportementales très différentes, susceptibles d'être supportées par différents systèmes neuronaux. En outre, bien que nous ayons centré notre discussion sur deux types de neurones DA dont les signaux s'apparentent à la valeur motivationnelle et à la saillance, un examen attentif montre que les neurones DA ne se limitent pas à cette dichotomie stricte. Comme indiqué par notre notion de gradient anatomique, certains neurones DA transmettent des mélanges de signaux de type saillance et de valeur; d’autres neurones de la DA réagissent à des événements enrichissants mais non aversifs (Matsumoto et Hikosaka, 2009b; Bromberg-Martin et al., 2010a). Ces considérations suggèrent que certains neurones DA peuvent ne pas coder les événements de motivation le long de notre axe intuitif «bon» ou «mauvais» et peuvent plutôt être spécialisés pour prendre en charge des formes spécifiques de comportement adaptatif.

Même dans le domaine des récompenses, il est prouvé que les neurones DA transmettent différents signaux de récompense à différentes régions du cerveau (Bassareo et Di Chiara, 1999; Ito et al., 2000; Stefani et Moghaddam, 2006; Wightman et al., 2007; Aragona et al., 2009). Les diverses réponses rapportées dans la SNc et la VTA incluent des neurones qui: répondent uniquement au début d’un essai (Roesch et al., 2007), peut-être coder un signal d'alerte pur; réagir différemment aux modalités visuelles et auditives (Strecker et Jacobs, 1985), recevant peut-être des informations de différents neurones SC et PPTg; répondre au premier ou au dernier événement d'une séquence (Ravel et Richmond, 2006; Jin et Costa, 2010) l'activation soutenue par des récompenses risquées (Fiorillo et al., 2003) ou sont activés lors des mouvements du corps (Schultz, 1986; Kiyatkin, 1988a; Puryear et al., 2010; Jin et Costa, 2010) (voir également (Phillips et al., 2003b; Stuber et al., 2005)). Bien que chacun de ces modèles de réponse n'ait été rapporté que par une minorité d'études ou de neurones, ces données suggèrent que les neurones DA pourraient potentiellement être divisés en un nombre beaucoup plus grand de populations fonctionnellement distinctes.

Un dernier point important à prendre en considération est que les études d’enregistrement actuelles chez les animaux qui se comportent ne fournissent pas encore de mesures totalement concluantes de l’activité des neurones DA, car elles n’ont permis de distinguer que les neurones DA des non-DA en utilisant des méthodes indirectes, basées sur des propriétés neurales telles que comme la fréquence de déclenchement, la forme d'onde de pointe et la sensibilité aux agonistes du récepteur D2 (Grace et Bunney, 1983; Schultz, 1986). Ces techniques semblent identifier de manière fiable les neurones DA dans la SNc, comme l'indiquent plusieurs sources de données, notamment la comparaison de méthodes intracellulaires et extracellulaires, les enregistrements juxtacellulaires et les effets de lésions spécifiques de DA (Grace et Bunney, 1983; Grace et al., 2007; Brown et al., 2009). Cependant, des études récentes indiquent que cette technique pourrait être moins fiable dans la VTA, où les neurones DA et non DA possèdent une plus grande variété de propriétés cellulaires (Margolis et al., 2006; Margolis et al., 2008; Lammel et al., 2008; Brischoux et al., 2009). Même les mesures directes des concentrations de DA dans les structures en aval ne fournissent pas de preuve concluante de l'activité de dopage de neurones de DA, car les concentrations de DA peuvent être contrôlées par d'autres facteurs tels que l'activation glutamatergique des terminaisons axonales de DA (Cheramy et al., 1991) et l’évolution rapide de l’activité des transporteurs DA (Zahniser et Sorkin, 2004). Pour effectuer des mesures totalement concluantes de l'activité des neurones DA pendant un comportement actif, il sera nécessaire d'utiliser de nouvelles techniques d'enregistrement, telles que la combinaison d'un enregistrement extracellulaire avec une stimulation optogénétique (Jin et Costa, 2010).

Conclusion

Un concept influent des neurones DA du cerveau moyen est qu’ils transmettent un signal de motivation uniforme à toutes les structures en aval. Nous avons examiné ici les preuves que les signaux des DA sont plus diversifiés qu’on ne le pense généralement. Plutôt que d’encoder un signal uniforme, les neurones DA se présentent sous plusieurs types qui envoient des messages de motivation distincts sur les événements enrichissants et non enrichissants. Même les neurones DA simples ne semblent pas transmettre de signaux de motivation simples. Au lieu de cela, les neurones DA transmettent des mélanges de signaux multiples générés par des processus neuronaux distincts. Certaines reflètent des prédictions détaillées sur des expériences enrichissantes et aversives, tandis que d’autres reflètent des réactions rapides à des événements de grande importance.

En outre, nous avons proposé une hypothèse sur la nature de ces divers signaux d'AD, les réseaux de neurones qui les génèrent et leur influence sur les structures cérébrales en aval et sur le comportement motivé. Notre proposition peut être vue comme une synthèse des théories précédentes. De nombreuses théories antérieures ont tenté d'identifier les neurones DA avec un seul processus motivationnel, comme la recherche d'objectifs valorisés, la mise en place de situations déterminantes sur le plan de la motivation ou la réaction aux changements d'alerte de l'environnement. À notre avis, les neurones DA reçoivent des signaux liés à ces trois processus. Pourtant, plutôt que de les distiller en un message uniforme, nous avons proposé que les neurones DA transmettent ces signaux à des structures cérébrales distinctes afin de soutenir des systèmes neuronaux distincts pour la cognition et le comportement motivés. Certains neurones DA soutiennent des systèmes cérébraux qui attribuent une valeur motivationnelle, encouragent les actions visant à rechercher des événements enrichissants, évitant les événements aversifs et garantissant que les événements d'alerte peuvent être prédits et préparés à l'avance. D'autres neurones de la DA soutiennent des systèmes cérébraux impliqués dans la saillie motivationnelle, notamment l'orientation pour détecter des événements potentiellement importants, le traitement cognitif pour choisir une réponse et se souvenir de ses conséquences, et sa motivation pour persister dans la recherche d'un résultat optimal. Nous espérons que cette proposition nous aidera à mieux comprendre les fonctions de l'AD dans le cerveau, dans lesquelles les neurones de l'AD adaptent leurs signaux de manière à prendre en charge plusieurs réseaux de neurones dotés de rôles distincts dans le contrôle de la motivation.

REMERCIEMENTS

Ce travail a été soutenu par le programme de recherche intra-muros du National Eye Institute. Nous remercions également Amy Arnsten pour de précieuses discussions.

Notes

Avis de non-responsabilité de l'éditeur: Ceci est un fichier PDF d’un manuscrit non édité qui a été accepté pour publication. En tant que service à nos clients, nous fournissons cette première version du manuscrit. Le manuscrit subira une révision, une composition et une révision de la preuve résultante avant sa publication dans sa forme définitive. Veuillez noter que des erreurs pouvant affecter le contenu peuvent être découvertes au cours du processus de production, de même que tous les dénis de responsabilité qui s'appliquent à la revue.

FOOTNOTE1By saillance motivationnelle nous entendons une quantité élevée à la fois pour les événements enrichissants et aversifs et faible pour les événements neutres sur le plan de la motivation (non enrichissants et non aversifs). Ceci est similaire à la définition donnée par (Berridge et Robinson, 1998). Notez que la saillance de motivation est distincte des autres notions de saillance utilisées en neuroscience, telles que la saillance d'incitation (qui s'applique uniquement aux événements souhaitables (Berridge et Robinson, 1998)) et saillance perceptuelle (qui s’applique aux événements neutres du point de vue de la motivation, tels que les objets en mouvement et les lumières colorées; (Bisley et Goldberg, 2010)).]

FOOTNOTE2Notez que les signaux de neurone DA codant la saillance motivationnelle sont distincts des notions classiques d’associabilité et de «changement d’associabilité» qui ont été proposées pour réguler le taux d’apprentissage par renforcement (par exemple (Pearce et Hall, 1980)). De telles théories affirment que les animaux apprennent (et ajustent les vitesses d'apprentissage) à partir d'erreurs de prédiction positives et négatives. Bien que ces neurones DA puissent contribuer à l’apprentissage à partir d’erreurs de prédiction positives, au cours desquelles ils peuvent avoir une réponse forte (par exemple, en cas de remise inattendue de récompenses), ils peuvent ne pas contribuer à l’apprentissage à partir d’erreurs de prédiction négatifs, au cours desquels ils ne peuvent avoir que peu ou pas de réponse ( par exemple, à une omission de récompense inattendue) (Fig. 4B).

Références

  1. Ahlbrecht M, Weber M. La résolution de l'incertitude: une étude expérimentale. Journal d'économie institutionnelle et théorique. 1996; 152: 593 – 607.
  2. Albin RL, Young AB, Penney JB. L'anatomie fonctionnelle des troubles des ganglions de la base. Tendances en neurosciences. 1989; 12: 366 – 375. [PubMed]
  3. Anderson AK, Christoff K, Stappen I, D Panitz, DG Ghahremani, G Glover, JD Gabrieli, Sobel N. Représentations neurales dissociées d'intensité et de valence dans l'olfaction humaine. Nat Neurosci. 2003; 6: 196 – 202. [PubMed]
  4. Anstrom KK, Miczek KA, Budygin EA. Augmentation de la signalisation de dopamine phasique dans la voie mésolimbique lors de la défaite sociale chez le rat. Neuroscience. 2009; 161: 3 – 12. [PubMed]
  5. Aragona BJ, JJ Day, MF Roitman, NA de Cleaveland, RM Wightman, RM Carelli. Spécificité régionale dans le développement en temps réel des schémas de transmission phasique de la dopamine lors de l’acquisition d’une association cue-cocaïne chez le rat. Le journal européen des neurosciences. 2009; 30: 1889 – 1899. [Article gratuit PMC] [PubMed]
  6. Austin AJ, Duka T. Mécanismes d'attention pour les résultats d'appétit et d'aversion dans le conditionnement pavlovien. Recherche comportementale sur le cerveau. 2010; 213: 19 – 26. [PubMed]
  7. Badia P, Harsh J, Abbott B. Choisir entre des conditions de choc prévisibles et non prévisibles: données et théorie. Bulletin psychologique. 1979; 86: 1107 – 1131.
  8. Balleine BW, Killcross S. Traitement parallèle par incitation: vue intégrée de la fonction de l'amygdale. Tendances en neurosciences. 2006; 29: 272 – 279. [PubMed]
  9. Balleine BW, O'Doherty JP. Homologies humaines et rongeurs dans le contrôle de l'action: déterminants corticostriataux de l'action dirigée vers un objectif et habituelle. Neuropsychopharmacologie. 2010; 35: 48-69. [Article gratuit PMC] [PubMed]
  10. Barr GA, Moriceau S, Shionoya K, Muzny K, Gao P, Wang S, Sullivan RM. Les transitions dans l'apprentissage du nourrisson sont modulées par la dopamine dans l'amygdale. Nat Neurosci. 2009; 12: 1364 – 1366. [Article gratuit PMC] [PubMed]
  11. Bassareo V, MA De Luca, Di Chiara G. Expression Différentielle Des Propriétés De Stimulus De Motivation De La Dopamine Dans Le Noyau Accumbens Shell Contre Le Core Et Le Cortex Préfrontal. J Neurosci. 2002; 22: 4709 – 4719. [PubMed]
  12. Bassareo V, Di Chiara G. Réactivité différentielle de la transmission de la dopamine à des stimuli alimentaires dans les compartiments coque / noyau du noyau accumbens. Neuroscience. 1999; 89: 637 – 641. [PubMed]
  13. Baxter MG, Murray EA. L'amygdale et la récompense. Nat Rev Neurosci. 2002; 3: 563 – 573. [PubMed]
  14. Bayer HM, Glimcher PW. Les neurones dopaminergiques du cerveau moyen encodent un signal d'erreur de prédiction quantitative de la récompense. Neurone. 2005; 47: 129 – 141. [Article gratuit PMC] [PubMed]
  15. Belova MA, Juge Paton, Morrison SE, CD Salzman. L'espérance module les réponses neuronales à des stimuli agréables et aversifs chez les amygdales de primates. Neurone. 2007; 55: 970 – 984. [Article gratuit PMC] [PubMed]
  16. Bentivoglio M, Morelli M. Organisation et circuits des neurones dopaminergiques mésencéphaliques et distribution des récepteurs de la dopamine dans le cerveau. Manuel de neuroanatomie chimique. 2005: 1 – 107.
  17. Berridge KC, Robinson TE. Quel est le rôle de la dopamine dans la récompense: impact hédonique, apprentissage de la récompense ou saillance incitative? Recherche sur le cerveau. 1998; 28: 309 – 369. [PubMed]
  18. Besson C, Louilot A. Implication asymétrique de neurones dopaminergiques mésolimbiques dans la perception affective. Neuroscience. 1995; 68: 963 – 968. [PubMed]
  19. Birgner C, Nordenankar K, M Lundblad, Juge Mendez, C Smith, Greves M, Galter D, Olson L, Fredriksson A, Trudeau LE et autres. VGLUT2 dans les neurones dopaminergiques est nécessaire à l'activation comportementale induite par les psychostimulants. Actes de l'Académie nationale des sciences des États-Unis d'Amérique. 2010; 107: 389 – 394. [Article gratuit PMC] [PubMed]
  20. Bisley JW, Goldberg ME. Attention, intention et priorité dans le lobe pariétal. Revue annuelle des neurosciences. 2010; 33: 1 – 21. [Article gratuit PMC] [PubMed]
  21. Bjorklund A, Dunnett SB. Systèmes neuronaux dopaminergiques dans le cerveau: mise à jour. Tendances en neurosciences. 2007; 30: 194 – 202. [PubMed]
  22. PM Blazquez, N Fujii, J Kojima, Graybiel AM. Une représentation en réseau de la probabilité de réponse dans le striatum. Neurone. 2002; 33: 973 – 982. [PubMed]
  23. Botvinick MM, Braver TS, Barch DM, Carter CS, Cohen JD. suivi des conflits et le contrôle cognitif. Psychol Rev. 2001; 108: 624 – 652. [PubMed]
  24. Bradley MM, MK Greenwald, Petry MC, Lang PJ. Souvenirs d'images: plaisir et éveil en mémoire. J Exp Psychol Apprendre Mem Cogn. 1992; 18: 379 – 390. [PubMed]
  25. Braun DA, C Mehring, DM Wolpert. Structurer l'apprentissage en action. Recherche comportementale sur le cerveau. 2010; 206: 157 – 165. [Article gratuit PMC] [PubMed]
  26. Brinschwitz K, Dittgen A, Madai VI, Lommel R, Geisler S, Veh RW. Les axones glutamatergiques de l'habenula latérale se terminent principalement sur les neurones GABAergiques du mésencéphale ventral. Neuroscience. 2010; 168: 463 – 476. [PubMed]
  27. Brischoux F, S Chakraborty, Brierley DI, MA sans gloire. Excitation phasique des neurones dopaminergiques dans la VTA ventrale par des stimuli nocifs. Actes de l'Académie nationale des sciences des États-Unis d'Amérique. 2009; 106: 4894 – 4899. [Article gratuit PMC] [PubMed]
  28. Bromberg-Martin ES, Hikosaka O. Les neurones dopaminergiques du cerveau moyen indiquent une préférence pour des informations préalables sur les récompenses à venir. Neurone. 2009; 63: 119 – 126. [Article gratuit PMC] [PubMed]
  29. ES Bromberg-Martin, Matsumoto M, Hikosaka O. Activité anticipée tonique et phasique distincte dans les neurones à habénule latérale et à la dopamine. Neurone. 2010a; 67: 144 – 155. [Article gratuit PMC] [PubMed]
  30. ES Bromberg-Martin, M Matsumoto, Hong S, Hikosaka O. Une voie pallidus-habénule-dopamine indique les valeurs de stimulus inférées. J Neurophysiol. 2010b; 104: 1068 – 1076. [Article gratuit PMC] [PubMed]
  31. ES Bromberg-Martin, M Matsumoto, H Nakahara, Hikosaka O. Plusieurs échelles de temps de la mémoire dans les neurones à habénule latérale et à la dopamine. Neurone. 2010c; 67: 499 – 510. [Article gratuit PMC] [PubMed]
  32. Brown MTC, Henny P, JP Bolam, Magill PJ. Activité des neurones dopaminergiques neurochimiquement hétérogènes dans la substance noire au cours de modifications spontanées et provoquées de l’état du cerveau. J Neurosci. 2009; 29: 2915 – 2925. [PubMed]
  33. Cardinal RN. Les systèmes neuronaux impliqués dans le renforcement retardé et probabiliste. Neural Netw. 2006; 19: 1277 – 1301. [PubMed]
  34. Cheer JF, BJ Aragona, ML Heien, AT Seipel, RM Carelli, RM Wightman. La libération coordonnée de dopamine accumbal et l'activité neuronale déterminent un comportement orienté vers un objectif. Neurone. 2007; 54: 237 – 244. [PubMed]
  35. Cheramy A, Kemel ML, Gauchy C, Desce JM, Galli T, Barbeito L, Glowinski J. Rôle des acides aminés excitateurs dans la régulation présynaptique directe et indirecte de la libération de la dopamine par les terminaisons nerveuses des neurones à dopamine nigrostriataux. Acides aminés. 1991; 1: 351 – 363. [PubMed]
  36. Chew SH, Ho JL. Hope: une étude empirique de l'attitude envers le moment de la résolution de l'incertitude. Journal de risque et d'incertitude. 1994; 8: 267 – 288.
  37. Chiodo LA, SM Antelman, AR Caggiula, CG Lineberry. Les stimuli sensoriels modifient le taux de décharge des neurones à dopamine (DA): preuve de l'existence de deux types fonctionnels de cellules DA dans la substance noire. Brain Res. 1980; 189: 544 – 549. [PubMed]
  38. Christoph GR, Leonzio RJ, Wilcox KS. La stimulation de l'habenula latérale inhibe les neurones contenant de la dopamine dans la substantia nigra et la région tegmentale ventrale du rat. J Neurosci. 1986; 6: 613 – 619. [PubMed]
  39. Chuhma N, Choi WY, Mingote S, Rayport S. cotransmission de glutamate de neurone dopaminergique: modulation dépendante de la fréquence dans la projection mésoventromédiane. Neuroscience. 2009; 164: 1068 – 1083. [Article gratuit PMC] [PubMed]
  40. Cohen JD, TS Braver, Brown JW. Perspectives computationnelles sur la fonction dopaminergique dans le cortex préfrontal. Opinion actuelle en neurobiologie. 2002; 12: 223 – 229. [PubMed]
  41. Coizet V, EJ Dommett, EM Klop, P Redgrave, PG Overton. Le noyau parabrachial est un lien essentiel dans la transmission d'informations nociceptives à courte latence aux neurones dopaminergiques du cerveau moyen. Neuroscience. 2010; 168: 263 – 272. [Article gratuit PMC] [PubMed]
  42. Coizet V, EJ Dommett, P Redgrave, PG Overton. Les réponses nociceptives des neurones dopaminergiques du cerveau moyen sont modulées par le colliculus supérieur chez le rat. Neuroscience. 2006; 139: 1479 – 1493. [PubMed]
  43. Comoli E, Coizet V, J Boyes, JP Bolam, NS Canteras, RH Quirk, PG Overton, Redgrave P. Une projection directe d'un colliculus supérieur à la substance noire pour détecter des événements visuels saillants. Nat Neurosci. 2003; 6: 974 – 980. [PubMed]
  44. Corbit LH, Balleine BW. Double dissociation des lésions de l'amygdale basolatérale et centrale sur les formes générales et spécifiques du transfert pavlovien-instrumental. J Neurosci. 2005; 25: 962 – 970. [PubMed]
  45. Dalley JW, Laane K, DE Theobald DE, Armstrong HC, PR Corlett, Chudasama Y, Robbins TW. Modulation limitée dans le temps de la mémoire pavlovienne appétitive par les récepteurs D1 et NMDA dans le noyau accumbens. Actes de l'Académie nationale des sciences des États-Unis d'Amérique. 2005; 102: 6189 – 6194. [Article gratuit PMC] [PubMed]
  46. Daly HB. La préférence pour l'imprévisibilité est inversée lorsqu'une non-récompense imprévisible est aversive: procédures, données et théories relatives à l'acquisition d'une réponse d'observation observante. Dans: Gormezano I, Wasserman EA, éditeurs. Apprentissage et mémoire: les substrats comportementaux et biologiques. Associés LE; 1992. pp. 81 – 104.
  47. Davidson MC, Horvitz JC, Tottenham N, Fossella JA, Watts R, Ulug AM, Casey BJ. Activation différentielle caudée et cingulaire suite à des stimuli inattendus et non gratifiants. NeuroImage. 2004; 23: 1039 – 1045. [PubMed]
  48. Day JJ, MF Roitman, RM Wightman, RM Carelli. L'apprentissage associatif intervient dans les modifications dynamiques de la signalisation de la dopamine dans le noyau accumbens. Nat Neurosci. 2007; 10: 1020 – 1028. [PubMed]
  49. Dayan P, Niv Y. Apprentissage par renforcement: le bon, le mauvais et le laid. Opinion actuelle en neurobiologie. 2008; 18: 185 – 196. [PubMed]
  50. Descarries L, N Berube-Carrière, Riad M, Bo GD, Mendez JA, Trudeau LE. Glutamate dans les neurones dopaminergiques: transmission synaptique ou diffuse. Examens de recherche sur le cerveau. 2008; 58: 290 – 302. [PubMed]
  51. Di Chiara G. Nucleus accumbens dopamine shell-core: rôle différentiel dans le comportement et la dépendance. Recherche comportementale sur le cerveau. 2002; 137: 75 – 114. [PubMed]
  52. Dommett E, Coizet V, CD Blaha, J Martindale, V Lefebvre, N Walton, JE Mayhew, PG Overton et Redgrave P. Comment les stimuli visuels activent les neurones dopaminergiques à courte latence. Science. 2005; 307: 1476 – 1479. [PubMed]
  53. Dormont JF, Conde H, Farin D. Le rôle du noyau tegmental de la pédonculopontine en relation avec les performances motrices conditionnées chez le chat. I. Activité individuelle dépendante du contexte et liée au renforcement. Recherche expérimentale sur le cerveau. Experimentelle Hirnforschung. 1998; 121: 401 – 410. [PubMed]
  54. Duzel E, Bunzeck N, Guitart-Masip M, Motivation de l'anticipation et de l'exploration par la dopamine liée à Duzel S. NOvelty (NOMAD): implications pour un vieillissement en bonne santé. Neurosciences et examens biocomportementaux. 2010; 34: 660 – 669. [PubMed]
  55. El-Amamy H, PC Holland. Les effets dissociables de la déconnexion du noyau central de l'amygdale de la région tegmentale ventrale ou de la substance noire sur la motivation acquise et la motivation. Le journal européen des neurosciences. 2007; 25: 1557 – 1567. [Article gratuit PMC] [PubMed]
  56. Ettenberg A. Processus de traitement des propriétés de la cocaïne auto-administrée. Neurosciences et examens biocomportementaux. 2004; 27: 721 – 728. [PubMed]
  57. Fadok JP, Dickerson MC, Palmiter RD. La dopamine est nécessaire pour le conditionnement de la peur dépendant du signal. J Neurosci. 2009; 29: 11089 – 11097. [Article gratuit PMC] [PubMed]
  58. Fairhall AL, Lewen GD, Bialek W, de Ruyter Van Steveninck, RR. Efficacité et ambiguïté dans un code neural adaptatif. La nature. 2001; 412: 787 – 792. [PubMed]
  59. Faure A, U Haberland, Condé F, El Massioui N. Une lésion du système dopaminergique nigrostriatal perturbe la formation d'habitudes stimuli-réponse. J Neurosci. 2005; 25: 2771 – 2780. [PubMed]
  60. Faure A, SM Reynolds, Richard JM, KC Berridge. La dopamine mésolimbique dans le désir et l’effroi: elle permet de générer la motivation par des perturbations localisées du glutamate dans le noyau accumbens. J Neurosci. 2008; 28: 7184 – 7192. [Article gratuit PMC] [PubMed]
  61. Fiorillo CD, Newsome WT, Schultz W. La précision temporelle de la prédiction de la récompense dans les neurones dopaminergiques. Nat Neurosci. 2008; 11: 966 – 973. [PubMed]
  62. Fiorillo CD, PN Tobler, Schultz W. Codage discret de la probabilité de récompense et de l’incertitude par les neurones dopaminergiques. Science. 2003; 299: 1898 – 1902. [PubMed]
  63. Floresco SB, Ghods-Sharifi S, C Vexelman, Magyar O. Rôles dissociables pour le noyau accumbens dans la régulation du décalage des ensembles. J Neurosci. 2006; 26: 2449 – 2457. [PubMed]
  64. Ford CP, SC Gantz, Phillips PE, Williams JT. Contrôle de la dopamine extracellulaire aux extrémités des dendrites et des axones. J Neurosci. 2010; 30: 6975 – 6983. [Article gratuit PMC] [PubMed]
  65. Frank MJ. Modulation dynamique de la dopamine dans les noyaux gris centraux: analyse neurocomputationnelle des déficits cognitifs liés au parkinsonisme médicamenteux et non médicamenté. Journal of neuroscience cognitive. 2005; 17: 51 – 72. [PubMed]
  66. Frank MJ, le juge Fossella Neurogénétique et pharmacologie de l'apprentissage, de la motivation et de la cognition. Neuropsychopharmacologie. 2010 [Article gratuit PMC] [PubMed]
  67. Frank MJ, LC Seeberger, RC O'Reilly. À la carotte ou au bâton: apprentissage par renforcement cognitif dans le parkinsonisme. Science. 2004; 306: 1940 – 1943. [PubMed]
  68. Gallistel CR, Gibbon J. Heure, taux et conditionnement. Psychol Rev. 2000; 107: 289 – 344. [PubMed]
  69. Gao DM, Jeaugey L, Pollak P, Benabid AL. Réponses nociceptives dépendantes de l'intensité de neurones dopaminergiques présumés de la substance noire, de la pars compacta chez le rat et de leur modification par des entrées d'habenula latérales. Brain Res. 1990; 529: 315 – 319. [PubMed]
  70. Gauriau C, Bernard JF. Les voies de la douleur et les circuits parabrachiaux chez le rat. Physiologie expérimentale 2002; 87: 251 – 258. [PubMed]
  71. Geisler S, Zahm DS. Afférences de la zone tégumentale ventrale dans le substratum anatomique du rat pour les fonctions intégratives. Journal de neurologie comparée. 2005; 490: 270 – 294. [PubMed]
  72. Gerfen CR, Engber TM, Mahan LC, Susel Z, Chase TN, Monsma FJ, Jr, Sibley DR. D1 et D2: expression génique régulée par les récepteurs de la dopamine des neurones striatonigral et striatopallidal. Science. 1990; 250: 1429 – 1432. [PubMed]
  73. Ghods-Sharifi S, Floresco SB. Effets différentiels sur la réduction de l’effort induite par les inactivations du noyau accumbens. Neuroscience comportementale. 2010; 124: 179 – 191. [PubMed]
  74. Gonon FG. Relation non linéaire entre le flux d’impulsion et la dopamine libérée par les neurones dopaminergiques du cerveau moyen du rat, telle que étudiée par électrochimie in vivo. Neuroscience. 1988; 24: 19 – 28. [PubMed]
  75. Goto Y, CR Yang, Otani S. Plasticité synaptique fonctionnelle et dysfonctionnelle dans le cortex préfrontal: rôles dans les troubles psychiatriques. Psychiatrie biologique. 2010; 67: 199 – 207. [PubMed]
  76. Grace AA. Libération de dopamine phasique versus tonique et modulation de la réactivité du système dopaminergique: une hypothèse pour l'étiologie de la schizophrénie. Neuroscience. 1991; 41: 1 – 24. [PubMed]
  77. Grace AA, Bunney BS. Electrophysiologie intracellulaire et extracellulaire des neurones dopaminergiques nigraux – 1. Identification et caractérisation. Neuroscience. 1983; 10: 301–315. [PubMed]
  78. Grace AA, SB Floresco, Goto Y, Lodge DJ. Régulation du déclenchement des neurones dopaminergiques et contrôle des comportements orientés vers un objectif. Tendances en neurosciences. 2007; 30: 220 – 227. [PubMed]
  79. Grecksch G, Matties H. Le rôle des mécanismes dopaminergiques dans l'hippocampe de rat pour la consolidation dans une discrimination de luminosité. Psychopharmacologie (Berl) 1981; 75: 165 – 168. [PubMed]
  80. Guarraci FA, Kapp BS. Une caractérisation électrophysiologique des neurones dopaminergiques de la région tegmentale ventrale au cours du conditionnement différentiel par la peur pavlovienne chez le lapin éveillé. Recherche comportementale sur le cerveau. 1999; 99: 169 – 179. [PubMed]
  81. Haber SN, Fudge JL, RN McFarland. Les voies striatonigostriatales chez les primates forment une spirale ascendante allant de la coquille au striatum dorsolatéral. J Neurosci. 2000; 20: 2369 – 2382. [PubMed]
  82. Hall J, JA Parkinson, Connor TM, Dickinson A, Everitt BJ. Implication du noyau central de l'amygdale et du noyau accumbens dans la médiation des influences pavloviennes sur le comportement instrumental. Le journal européen des neurosciences. 2001; 13: 1984 – 1992. [PubMed]
  83. Han JS, McMahan RW, Holland P, Gallagher M. Le rôle d'une voie amygdale-nigrostriatale dans l'apprentissage associatif. J Neurosci. 1997; 17: 3913 – 3919. [PubMed]
  84. Harris GC, Aston-Jones G. Éveil et récompense: une dichotomie dans la fonction de l'orexine. Tendances en neurosciences. 2006; 29: 571 – 577. [PubMed]
  85. Herry C, Bach DR, Esposito F, Di Salle F, Perrig WJ, Scheffler K, Luthi A, Seifritz E. Traitement de l'imprévisibilité temporelle dans l'amygdale humaine et animale. J Neurosci. 2007; 27: 5958 – 5966. [PubMed]
  86. Hikida T, Kimura K, N Wada, K Funabiki, Nakanishi S. Rôles distincts de la transmission synaptique dans les voies striatales directes et indirectes pour récompenser et un comportement aversif. Neurone. 2010; 66: 896 – 907. [PubMed]
  87. Hikosaka O. Mécanismes des ganglions de la base des mouvements de l’œil axés sur la récompense. Annales de l'Académie des sciences de New York. 2007; 1104: 229 – 249. [PubMed]
  88. Hikosaka O. L'habenula: de l'évitement du stress à la prise de décision fondée sur les valeurs. Nat Rev Neurosci. 2010; 11: 503 – 513. [Article gratuit PMC] [PubMed]
  89. Hikosaka O, Y Takikawa, Kawagoe R. Rôle des ganglions de la base dans le contrôle des mouvements oculaires saccadés à dessein. Revues physiologiques. 2000; 80: 953 – 978. [PubMed]
  90. PK Hitchcott, JJ Quinn, JR JR. Modulation bidirectionnelle des actions dirigées vers les objectifs par la dopamine corticale préfrontal. Cereb Cortex. 2007; 17: 2820 – 2827. [PubMed]
  91. Hnasko TS, Chuhma N, Zhang H, Goh GY, Sulzer D, Palmiter RD, Rayport S, Edwards RH. Le transport vésiculaire du glutamate favorise le stockage de la dopamine et le glutamate corelease in vivo. Neurone. 2010; 65: 643 – 656. [Article gratuit PMC] [PubMed]
  92. Holland PC, Gallagher M. Amygdala, circuits dans les processus d’attention et de représentation. Tendances en sciences cognitives. 1999; 3: 65 – 73. [PubMed]
  93. Hollerman JR, neurones Schultz W. Dopamine signalent une erreur dans la prédiction temporelle de récompense pendant l'apprentissage. Nat Neurosci. 1998; 1: 304 – 309. [PubMed]
  94. Holroyd CB, Coles MG. Base neuronale du traitement des erreurs humaines: apprentissage par renforcement, dopamine et négativité liée à l'erreur. Psychol Rev. 2002; 109: 679 – 709. [PubMed]
  95. Hong S, Hikosaka O. Le globus pallidus envoie des signaux relatifs aux récompenses à l'habenula latéral. Neurone. 2008; 60: 720 – 729. [Article gratuit PMC] [PubMed]
  96. Horvitz JC. Réponses dopaminergiques mésolimbocorticales et nigrostriatales à des événements saillants non liés à une récompense. Neuroscience. 2000; 96: 651 – 656. [PubMed]
  97. Horvitz JC, Stewart T, Jacobs BL. L'activité des neurones à dopamine tegmentale ventrale est stimulée par des stimuli sensoriels chez le chat éveillé. Brain Res. 1997; 759: 251 – 258. [PubMed]
  98. Houk JC, Adams JL, Barto AG. Un modèle de la façon dont les noyaux gris centraux génèrent et utilise des signaux neuronaux qui prédisent le renforcement. Dans: Houk JC, Davis JL, DG Beiser, éditeurs. Modèles de traitement de l'information dans les ganglions de la base. Cambridge, MA: MIT Press; 1995. pp. 249 – 274.
  99. Ikemoto S. Circuits de récompense du cerveau au-delà du système dopaminergique mésolimbique: une théorie neurobiologique. Neurosciences et examens biocomportementaux. 2010 [Article gratuit PMC] [PubMed]
  100. Ito R, Dalley JW, SR Howes, TW Robbins, Everitt BJ. Dissociation de la libération de dopamine conditionnée dans le noyau et le shell du noyau accumbens en réponse aux signaux de cocaïne et lors du comportement de recherche de cocaïne chez le rat. J Neurosci. 2000; 20: 7489 – 7495. [PubMed]
  101. Ivlieva NY, Timofeeva NO. Activité des neurones dans le noyau de la pédonculopontine au cours d’un réflexe conditionné opérant lié à l’alimentation. Neuroscience et physiologie comportementale. 2003a; 33: 919 – 928. [PubMed]
  102. Ivlieva NY, Timofeeva NO. Activité des neurones dans le noyau de la pédonculopontine au cours d’un réflexe conditionné opérant. Neuroscience et physiologie comportementale. 2003b; 33: 499 – 506. [PubMed]
  103. Jalabert M, Aston-Jones G, Herzog E, Manzoni O, Georges F. Rôle du noyau du lit de la strie terminale dans le contrôle des neurones dopaminergiques de la zone tegmentale ventrale. Progrès en neuro-psychopharmacologie et psychiatrie biologique. 2009; 33: 1336–1346. [Article gratuit PMC] [PubMed]
  104. Jeanblanc J, Hoeltzel A, Louilot A. Dissociation dans l'implication de neurones dopaminergiques innervant les sous-régions du noyau et de la coquille du noyau accumbens dans l'inhibition latente et la perception affective. Neuroscience. 2002; 111: 315 – 323. [PubMed]
  105. Jensen J, AJ Smith, Willeit M., AP Crawley, DJ Mikulis, Vitcu I et KAPUR S. codent pour des régions du cerveau distinctes pour la saillance et la valence lors de la prédiction de la récompense chez l'homme. Cartographie du cerveau humain. 2007; 28: 294 – 302. [PubMed]
  106. Jhou TC, champs HL, MG Baxter, CB Saper, PC Holland. Le noyau tegmental rostromedial (RMTg), un neurone GABAergique de la dopamine du cerveau moyen, code pour les stimuli aversifs et inhibe les réponses motrices. Neurone. 2009a; 61: 786 – 800. [Article gratuit PMC] [PubMed]
  107. Jhou TC, Geisler S, Marinelli M, Degarmo BA, Zahm DS. Noyau tegmental rostromédial mésopontine: Structure visée par l’habenula latéral qui se projette dans la région tegmentale ventrale de Tsai et de la substantia nigra compacta. Journal de neurologie comparée. 2009b; 513: 566 – 596. [Article gratuit PMC] [PubMed]
  108. Ji H, PD Shepard. La stimulation latérale de l'habenula inhibe les neurones dopaminergiques du cerveau moyen du rat par le biais d'un mécanisme à médiation par le récepteur GABA (A). J Neurosci. 2007; 27: 6923 – 6930. [PubMed]
  109. Jin X, Costa RM. Les signaux de démarrage / d'arrêt apparaissent dans les circuits nigrostriataux pendant l'apprentissage par séquence. La nature. 2010; 466: 457 – 462. [Article gratuit PMC] [PubMed]
  110. Johansen JP, Fields HL. L'activation glutamatergique du cortex cingulaire antérieur produit un signal d'enseignement aversif. Nat Neurosci. 2004; 7: 398 – 403. [PubMed]
  111. Joseph MH, Datla K, Young AM. L’interprétation de la mesure du noyau accumbens dopamine par dialyse in vivo: le kick, le désir ou la cognition? Neurosciences et examens biocomportementaux. 2003; 27: 527 – 541. [PubMed]
  112. Joshua M, Adler A, Bergman H. La dynamique de la dopamine dans le contrôle du comportement moteur. Opinion actuelle en neurobiologie. 2009a; 19: 615 – 620. [PubMed]
  113. Joshua M, Adler A, Mitelman R, Vaadia E, Bergman H. Neurones dopaminergiques du cerveau moyen et interneurones cholinergiques striataux encodent la différence entre récompense et événements aversifs à différentes époques d'essais probabilistes de conditionnement classique. J Neurosci. 2008; 28: 11673 – 11684. [PubMed]
  114. Joshua M, Adler A, Prut Y, Vaadia E, Wickens JR, Bergman H. La synchronisation des neurones dopaminergiques du cerveau moyen est renforcée par des événements enrichissants. Neurone. 2009b; 62: 695 – 704. [PubMed]
  115. Kable JW, Glimcher PW. La neurobiologie de la décision: consensus et controverse. Neurone. 2009; 63: 733 – 745. [Article gratuit PMC] [PubMed]
  116. Kakade S, Dayan P. Dopamine: généralisation et bonus. Les réseaux de neurones. 2002; 15: 549 – 559. [PubMed]
  117. Kapur S. La psychose en tant qu'état de saillance aberrante: un cadre reliant biologie, phénoménologie et pharmacologie de la schizophrénie. Le journal américain de psychiatrie. 2003; 160: 13 – 23. [PubMed]
  118. Kaufling J, P Veinante, SA Pawlowski, MJ Freund-Mercier, Barrot M. Afférents à la queue GABAergic de la région tegmentale ventrale chez le rat. Journal de neurologie comparée. 2009; 513: 597 – 621. [PubMed]
  119. Kennerley SW, Wallis JD. Évaluation des choix de neurones individuels dans le lobe frontal: valeur de résultat codée pour plusieurs variables de décision. Le journal européen des neurosciences. 2009; 29: 2061 – 2073. [Article gratuit PMC] [PubMed]
  120. Kim H., Sul JH, Huh N, Lee D, Jung MW. Rôle du striatum dans la mise à jour des valeurs des actions choisies. J Neurosci. 2009; 29: 14701 – 14712. [PubMed]
  121. Kiyatkin EA. Propriétés fonctionnelles des neurones présumés contenant de la dopamine et d’autres neurones de la région tegmentale ventrale chez le rat conscient. Int J Neurosci. 1988a; 42: 21 – 43. [PubMed]
  122. Kiyatkin EA. Modification induite par la morphine des propriétés fonctionnelles des neurones de la région tegmentale ventrale chez le rat conscient. Stagiaire J Neuroscience. 1988b; 41: 57 – 70. [PubMed]
  123. Klingberg T. Formation et plasticité de la mémoire de travail. Tendances en sciences cognitives. 2010; 14: 317 – 324. [PubMed]
  124. Kobayashi S, K Nomoto, M Watanabe, O Hikosaka, W Schultz, Sakagami M. Influences des résultats valorisants et aversifs sur l'activité dans le cortex préfrontal latéral de macaque. Neurone. 2006; 51: 861 – 870. [PubMed]
  125. Kobayashi S, Schultz W. Influence des retards de récompense sur les réponses des neurones dopaminergiques. J Neurosci. 2008; 28: 7837 – 7846. [Article gratuit PMC] [PubMed]
  126. Kobayashi Y, Y Inoue, Yamamoto M., Isa T et Aizawa H. Contribution des neurones du noyau tégmental de la pédonculopontine à l'exécution de tâches de saccade guidées visuellement chez le singe. J Neurophysiol. 2002; 88: 715 – 731. [PubMed]
  127. Koyama T, Tanaka YZ, Mikami A. Les neurones nociceptifs du macaque cingulaire antérieur s'activent lors de l'anticipation de la douleur. Neuroreport. 1998; 9: 2663 – 2667. [PubMed]
  128. Kravitz AV, Freeze BS, RP Parker, Kay K, Thwin MT, Deisseroth K, Kreitzer AC. Régulation des comportements moteurs parkinsoniens par contrôle optogénétique des circuits des noyaux gris centraux. La nature. 2010 [Article gratuit PMC] [PubMed]
  129. Lammel S, Hetzel A, Hackel O, Jones I, Liss B, Roeper J. Propriétés uniques des neurones mésopréfrontaliers dans un système dual de dopamine mésocorticolimbique. Neurone. 2008; 57: 760 – 773. [PubMed]
  130. Lang PJ, Davis M. Émotion, motivation et cerveau: fondements réflexes dans la recherche animale et humaine. Progrès dans la recherche sur le cerveau. 2006; 156: 3 – 29. [PubMed]
  131. Lapish CC, S Kroener, D Durstewitz, Lavin A, Seamans JK. Capacité du système dopaminergique mésocortical à fonctionner dans des modes temporels distincts. Psychopharmacologie (Berl) 2007; 191: 609 – 625. [PubMed]
  132. Lee D, Seo H. Mécanismes d'apprentissage par renforcement et de prise de décision dans le cortex préfrontal dorsolatéral de primate. Annales de l'Académie des sciences de New York. 2007; 1104: 108 – 122. [PubMed]
  133. Lee HJ, Groshek F, Petrovich GD, JP Cantalini, Gallagher M, Holland PC. Rôle des circuits amygdalo-nigraux dans le conditionnement d'un stimulus visuel associé à de la nourriture. J Neurosci. 2005; 25: 3881 – 3888. [Article gratuit PMC] [PubMed]
  134. Levita L, Dalley JW, Robbins TW. Le noyau accumbens dopamine et appris la peur revisité: une revue et quelques nouvelles découvertes. Recherche comportementale sur le cerveau. 2002; 137: 115 – 127. [PubMed]
  135. Lin SC, Nicolelis MA. Ensemble neuronal éclatant dans le cerveau antérieur basal code la saillance indépendamment de Valence. Neurone. 2008; 59: 138 – 149. [Article gratuit PMC] [PubMed]
  136. Lisman JE, Grace AA. La boucle hippocampal-VTA: contrôle l’entrée des informations dans la mémoire à long terme. Neurone. 2005; 46: 703 – 713. [PubMed]
  137. Litt A, H Plassmann, Shiv B, Rangel A. Dissocier les signaux de valorisation et de saillance lors de la prise de décision. Cereb Cortex. 2010 dans la presse. [PubMed]
  138. Liu Z, Richmond BJ, Murray EA, Saunders RC, Steenrod S, Stubblefield BK, DM de Montague, Ginns EI. Le ciblage de l'ADN de la protéine du récepteur D2 du cortex rhinal bloque de manière réversible l'apprentissage des signaux prédictifs de la récompense. Actes de l'Académie nationale des sciences des États-Unis d'Amérique. 2004; 101: 12336 – 12341. [Article gratuit PMC] [PubMed]
  139. Liu ZH, Shin R, Ikemoto S. Double rôle des neurones dopaminaux A10 internes dans le codage affectif. Neuropsychopharmacologie. 2008; 33: 3010 – 3020. [Article gratuit PMC] [PubMed]
  140. Ljungberg T, Apicella P, Schultz W. Réponses de neurones dopaminergiques de singe lors de l'apprentissage de réactions comportementales. J Neurophysiol. 1992; 67: 145 – 163. [PubMed]
  141. Lobo MK, Covington HE, 3rd, Chaudhury D, Friedman AK, Sun H, Damez-Werno D, Dietz DM, Zaman S, Koo JW, Kennedy PJ, et al. La perte de signalisation de BDNF spécifique à un type de cellule imite le contrôle optogénétique de la récompense de la cocaïne. Science. 2010; 330: 385 – 390. [Article gratuit PMC] [PubMed]
  142. Maeda H, Mogenson GJ. Effets de la stimulation périphérique sur l'activité des neurones de la région tégmentale ventrale, de la substance noire et de la formation réticulaire du cerveau moyen chez le rat. Bulletin de recherche sur le cerveau. 1982; 8: 7 – 14. [PubMed]
  143. Mantz J, Thierry AM, Glowinski J. Effet du pincement de la queue sur le taux de décharge des neurones dopaminaux mésocorticaux et mésolimbiques: activation sélective du système mésocortical. Brain Res. 1989; 476: 377 – 381. [PubMed]
  144. Margolis EB, écluse H, GO Hjelmstad, champs HL. La région tegmentale ventrale revisitée: existe-t-il un marqueur électrophysiologique des neurones dopaminergiques? Le journal de physiologie. 2006; 577: 907 – 924. [Article gratuit PMC] [PubMed]
  145. Margolis EB, Mitchell JM, Ishikawa J, Hjelmstad GO, Fields HL. Neurones dopaminergiques du cerveau moyen: la cible de la projection détermine la durée du potentiel d’action et l’inhibition des récepteurs de la dopamine D (2). J Neurosci. 2008; 28: 8908 – 8913. [PubMed]
  146. Mark GP, Blander DS, Hoebel BG. Un stimulus conditionné diminue la dopamine extracellulaire dans le noyau accumbens après le développement d'une aversion gustative acquise. Brain Res. 1991; 551: 308 – 310. [PubMed]
  147. Marowsky A, Y Yanagawa, Obata K, Vogt KE. Une sous-classe spécialisée d'interneurones intervient dans la facilitation dopaminergique de la fonction de l'amygdale. Neurone. 2005; 48: 1025 – 1037. [PubMed]
  148. Matsumoto M, Habikula latéral O. Hikosaka comme source de signaux de récompense négatifs dans les neurones dopaminergiques. La nature. 2007; 447: 1111 – 1115. [PubMed]
  149. Matsumoto M, Hikosaka O. Représentation de la valeur motivationnelle négative dans l'habenula latéral de primate. Nat Neurosci. 2009a; 12: 77 – 84. [Article gratuit PMC] [PubMed]
  150. Matsumoto M, Hikosaka O. Deux types de neurones dopaminergiques transmettent distinctement des signaux de motivation positifs et négatifs. La nature. 2009b; 459: 837 – 841. [Article gratuit PMC] [PubMed]
  151. Matsumoto M, K Matsumoto, Abe H, Tanaka K. Activité cellulaire préfrontal médiale signalant des erreurs de prédiction des valeurs d'action. Nat Neurosci. 2007; 10: 647 – 656. [PubMed]
  152. Mai PJ, JG McHaffie, TR Stanford, Jiang H, MG Costello, Coizet V, LM Hayes, Haber SN, projections Redgrave P. Tectonigral chez le primate: une voie pour une entrée sensorielle pré-attentive des neurones dopaminergiques du cerveau moyen. Le journal européen des neurosciences. 2009; 29: 575 – 587. [Article gratuit PMC] [PubMed]
  153. Mazzoni P, Hristova A, Krakauer JW. Pourquoi n'allons-nous pas plus vite? Maladie de Parkinson, vigueur du mouvement et motivation implicite. J Neurosci. 2007; 27: 7105–7116. [PubMed]
  154. Merali Z, Michaud D, McIntosh J, Kent P, Anisman H. Implication différentielle du (des) système (s) CRH amygdaloïde dans la saillance et la valence des stimuli. Progrès en neuro-psychopharmacologie et psychiatrie biologique. 2003; 27: 1201-1212. [PubMed]
  155. Mirenowicz J, Schultz W. Activation préférentielle des neurones dopaminergiques du cerveau moyen par des stimuli appétitifs plutôt qu'aversifs. La nature. 1996; 379: 449 – 451. [PubMed]
  156. Molina-Luna K, A Pekanovic, S Rohrich, Hertler B, M Schubring-Giese, MS Rioult-Pedotti, AR Luft. La dopamine dans le cortex moteur est nécessaire à l'apprentissage des compétences et à la plasticité synaptique. PLoS ONE. 2009; 4: e7082. [Article gratuit PMC] [PubMed]
  157. Montague PR, Berns GS. Économie neuronale et substrats biologiques de l'évaluation. Neurone. 2002; 36: 265 – 284. [PubMed]
  158. Montague PR, Dayan P, TJ Sejnowski. Un cadre pour les systèmes dopaminergiques mésencéphaliques basé sur l'apprentissage prédictif de Hebbian. J Neurosci. 1996; 16: 1936 – 1947. [PubMed]
  159. Morris G, Arkadir D, Nevet A, Vaadia E, Bergman H. Messages coïncidents mais distincts de la dopamine du cerveau moyen et de neurones toniquement actifs du striatal. Neurone. 2004; 43: 133 – 143. [PubMed]
  160. Morris G., Nevet A., Arkadir D., Vaadia E. et Bergman H. Les neurones dopaminergiques du cerveau moyen codent des décisions pour une action future. Nat Neurosci. 2006; 9: 1057 – 1063. [PubMed]
  161. Morrison SE, CD Salzman. La convergence des informations sur les stimuli valorisants et aversifs chez un seul neurone. J Neurosci. 2009; 29: 11471 – 11483. [Article gratuit PMC] [PubMed]
  162. Nakahara H, H Itoh, R Kawagoe, Y Takikawa, Hikosaka O. Les neurones dopaminergiques peuvent représenter une erreur de prédiction dépendante du contexte. Neurone. 2004; 41: 269 – 280. [PubMed]
  163. Nakamura K, Hikosaka O. Rôle de la dopamine dans le noyau caudé des primates dans la modulation de la récompense des saccades. J Neurosci. 2006; 26: 5360 – 5369. [PubMed]
  164. Neve KA, Seamans JK, signalisation du récepteur de la dopamine Trantham-Davidson H. Journal de recherche sur la transduction de récepteurs et de signaux. 2004; 24: 165 – 205. [PubMed]
  165. Nishijo H, Ono T, Nishino H. Réponses de neurone unique dans l'amygdale d'un singe en alerte au cours d'une stimulation sensorielle complexe ayant une signification affective. J Neurosci. 1988; 8: 3570 – 3583. [PubMed]
  166. Niv Y, ND ND, Joël D, Dayan P. Dopamine tonique: coûts d'opportunité et contrôle de la vigueur de la réponse. Psychopharmacologie. 2007; 191: 507 – 520. [PubMed]
  167. Nomoto K, W Schultz, T Watanabe, Sakagami M. temporairement étendu les réponses de la dopamine à des stimuli prédictifs de récompense perceptuellement exigeants. J Neurosci. 2010; 30: 10692 – 10702. [Article gratuit PMC] [PubMed]
  168. Okada K, Toyama K, Y Inoue, T Isa, Kobayashi Y. Différents neurones tégmentaires pédonculopoponiques signalent les tâches prédites et les résultats obtenus. J Neurosci. 2009; 29: 4858 – 4870. [PubMed]
  169. Omelchenko N, Bell R, Sesack SR. Projections latérales de l'habenula sur les neurones dopaminergiques et GABA dans la région tegmentale ventrale du rat. Le journal européen des neurosciences. 2009; 30: 1239 – 1250. [Article gratuit PMC] [PubMed]
  170. Owesson-White CA, Ariansen J, Stuber GD, Cleaveland NA, Cheer JF, Wightman RM, Carelli RM. Le codage neuronal du comportement de recherche de cocaïne coïncide avec la libération phasique de dopamine dans le noyau et la coquille d’accumbens. Le journal européen des neurosciences. 2009; 30: 1117 – 1127. [Article gratuit PMC] [PubMed]
  171. Oyama K, Hernadi I, Iijima T, Tsutsui K. Erreur de prédiction de récompense codant dans les neurones striataux dorsaux. J Neurosci. 2010; 30: 11447 – 11457. [PubMed]
  172. Packard MG, White NM. Dissociation des systèmes de mémoire noyau hippocampe et caudé par post-formation d'injection intracérébrale d'agonistes de la dopamine. Neuroscience comportementale. 1991; 105: 295 – 306. [PubMed]
  173. Padoa-Schioppa C. Le cortex orbitofrontal et le calcul de la valeur économique. Annales de l'Académie des sciences de New York. 2007; 1121: 232 – 253. [PubMed]
  174. Palmiter RD. La signalisation de la dopamine dans le striatum dorsal est essentielle pour des comportements motivés: leçons de souris déficientes en dopamine. Annales de l'Académie des sciences de New York. 2008; 1129: 35 – 46. [Article gratuit PMC] [PubMed]
  175. Pan WX, Hyland BI. Le noyau tegmental de pédonculopontine contrôle les réponses conditionnées des neurones dopaminergiques du cerveau moyen chez des rats en comportement. J Neurosci. 2005; 25: 4725 – 4732. [PubMed]
  176. Pan WX, R Schmidt, JR Wickens, BI Hyland. Mécanisme d'extinction tripartite suggéré par l'activité des neurones dopaminergiques et le modèle de différence temporelle. J Neurosci. 2008; 28: 9619 – 9631. [PubMed]
  177. Parker JG, LS Zweifel, JJ Clark, SB SB Evans, Phillips PE, RD Palmiter. L'absence de récepteurs NMDA dans les neurones dopaminergiques atténue la libération de dopamine mais ne constitue pas une approche conditionnée pendant le conditionnement de Pavlovian. Actes de l'Académie nationale des sciences des États-Unis d'Amérique. 2010 [Article gratuit PMC] [PubMed]
  178. Pascoe JP, Kapp BS. Caractéristiques électrophysiologiques des neurones du noyau central amygdaloïde lors du conditionnement de la peur par Pavlovien chez le lapin. Recherche comportementale sur le cerveau. 1985; 16: 117 – 133. [PubMed]
  179. Pascucci T, Ventura R, EC Latagliata, Cabib S., Puglisi-Allegra S. Le cortex préfrontal médial détermine la réponse dopaminergique d'accumbens au stress par le biais des influences opposées de la noradrénaline et de la dopamine. Cereb Cortex. 2007; 17: 2796 – 2804. [PubMed]
  180. Pearce JM, Hall G. Un modèle d'apprentissage pavlovien: variations de l'efficacité de stimuli conditionnés mais non conditionnés. Psychol Rev. 1980; 87: 532 – 552. [PubMed]
  181. Pezze MA, Feldon J. Voies dopaminergiques mésolimbiques dans le conditionnement de la peur. Progrès en neurobiologie. 2004; 74: 301 – 320. [PubMed]
  182. Phillips AG, Ahn S, Howland JG. Contrôle amygdalaire du système dopaminergique mésocorticolimbique: voies parallèles menant à un comportement motivé. Neurosciences et examens biocomportementaux. 2003a; 27: 543 – 554. [PubMed]
  183. Phillips GD, Salussolia E, Hitchcott PK. Rôle de la projection de dopamine mésoamygdaloïde dans l'apprentissage émotionnel. Psychopharmacologie. 2010 [PubMed]
  184. Phillips PE, Stuber GD, Heien ML, Wightman RM, Carelli RM. Une libération de dopamine inférieure à la seconde favorise la recherche de cocaïne. La nature. 2003b; 422: 614 – 618. [PubMed]
  185. LJ Porrino, PS Goldman-Rakic. Innervation du tronc cérébral du cortex préfrontal et antérieur chez le singe rhésus révélée par le transport rétrograde de la PRH. Journal de neurologie comparée. 1982; 205: 63 – 76. [PubMed]
  186. Puryear CB, Kim MJ, Mizumori SJ. Encodage conjonctif du mouvement et de la récompense par les neurones de la région du tegmental ventral chez le rongeur à navigation libre. Neuroscience comportementale. 2010; 124: 234 – 247. [Article gratuit PMC] [PubMed]
  187. Ravel S, Legallet E, Apicella P. Les neurones toniquement actifs du striatum de singe ne répondent pas préférentiellement aux stimuli d'appétit. Recherche expérimentale sur le cerveau. Experimentelle Hirnforschung. 1999; 128: 531 – 534. [PubMed]
  188. Ravel S, Legallet E, Apicella P. Les réponses des neurones toniquement actifs du striatum de singe font la distinction entre des stimuli opposés sur le plan de la motivation. J Neurosci. 2003; 23: 8489 – 8497. [PubMed]
  189. Ravel S, Richmond BJ. Réponses neuronales à la dopamine chez les singes effectuant des calendriers de récompenses déterminés visuellement. Le journal européen des neurosciences. 2006; 24: 277 – 290. [PubMed]
  190. Redgrave P, Gurney K. Le signal dopamine à latence courte: un rôle dans la découverte de nouvelles actions? Nat Rev Neurosci. 2006; 7: 967 – 975. [PubMed]
  191. Redgrave P, Prescott TJ, Gurney K. La réponse dopamine à latence courte est-elle trop courte pour signaler une erreur de récompense? Tendances en neurosciences. 1999; 12: 146 – 151. [PubMed]
  192. Rescorla RA, Wagner AR. Une théorie du conditionnement pavlovien: variations de l'efficacité du renforcement et du non renforcement. Dans: Black AH, Prokasy WF, éditeurs. Conditionnement classique II: recherches et théories actuelles. New York, New York: Appleton Century Crofts; 1972. pp. 64 – 99.
  193. Reynolds JNJ, BI Hyland, Wickens JR. Un mécanisme cellulaire d'apprentissage lié à la récompense. La nature. 2001; 413: 67 – 70. [PubMed]
  194. Reynolds SM, Berridge KC. Motivation positive et négative dans la coquille du noyau accumbens: gradients rostrocaudaux bivalents pour l'alimentation provoquée par le GABA, réactions de goût «aimer» / «ne pas aimer», préférence de place / évitement et peur. J Neurosci. 2002; 22: 7308–7320. [PubMed]
  195. Richardson RT, DeLong MR. Études électrophysiologiques des fonctions du noyau basal chez les primates. Les progrès de la médecine expérimentale et de la biologie. 1991; 295: 233 – 252. [PubMed]
  196. Robbins TW, Arnsten AF. La neuropsychopharmacologie de la fonction fronto-exécutive: modulation monoaminergique. Revue annuelle des neurosciences. 2009; 32: 267 – 287. [Article gratuit PMC] [PubMed]
  197. Robinson DL, Hermans A, Seipel AT, Wightman RM. Surveiller la communication chimique rapide dans le cerveau. Examens chimiques. 2008; 108: 2554 – 2584. [Article gratuit PMC] [PubMed]
  198. Roesch MR, Calu DJ, Schoenbaum G. Les neurones dopaminergiques codent la meilleure option chez le rat qui décide entre des récompenses différées ou de taille différente. Nat Neurosci. 2007; 10: 1615 – 1624. [Article gratuit PMC] [PubMed]
  199. Roesch MR, Olson CR. L'activité neuronale liée à la valeur de récompense et à la motivation dans le cortex frontal des primates. Science. 2004; 304: 307 – 310. [PubMed]
  200. MF Roitman, RA Wheeler, RM Wightman, RM Carelli. Les réponses chimiques en temps réel dans le noyau accumbens différencient les stimuli valorisants et aversifs. Nat Neurosci. 2008; 11: 1376 – 1377. [Article gratuit PMC] [PubMed]
  201. Rutledge RB, Lazzaro SC, Lau B, Myers CE, Gluck MA, Glimcher PW. Les médicaments dopaminergiques modulent les taux d'apprentissage et la persévérance chez les patients atteints de la maladie de Parkinson dans une tâche de recherche de nourriture dynamique. J Neurosci. 2009; 29: 15104-15114. [Article gratuit PMC] [PubMed]
  202. Salamone JD. L'implication du noyau accumbens dopamine dans la motivation appétitive et aversive. Recherche comportementale sur le cerveau. 1994; 61: 117 – 133. [PubMed]
  203. Salamone JD, Correa M, Farrar A, Mingote SM. Fonctions liées à l'effort du noyau accumbens dopamine et des circuits associés du cerveau antérieur. Psychopharmacologie (Berl) 2007; 191: 461 – 482. [PubMed]
  204. Satoh T, Nakai S, T Sato, Kimura M., codage corrélé de la motivation et du résultat de la décision par les neurones dopaminergiques. J Neurosci. 2003; 23: 9913 – 9923. [PubMed]
  205. Savine AC, Beck SM, Edwards BG, Chiew KS, Braver TS. Amélioration du contrôle cognitif par approche et évitement des états motivationnels. Cognition et émotion. 2010; 24: 338–356. [Article gratuit PMC] [PubMed]
  206. Schoenbaum G, MR Roesch, Stalnaker TA, Takahashi YK. Une nouvelle perspective sur le rôle du cortex orbitofrontal dans le comportement adaptatif. Nat Rev Neurosci. 2009; 10: 885 – 892. [Article gratuit PMC] [PubMed]
  207. Schultz W. Réponses des neurones dopaminergiques du cerveau moyen aux stimuli comportementaux du singe. J Neurophysiol. 1986; 56: 1439 – 1461. [PubMed]
  208. Schultz W. Signal de récompense prédictif des neurones dopaminergiques. J Neurophysiol. 1998; 80: 1 – 27. [PubMed]
  209. Schultz W. Plusieurs fonctions de la dopamine à différents moments. Revue annuelle des neurosciences. 2007; 30: 259 – 288. [PubMed]
  210. Schultz W. Indicateurs de dopamine pour la valeur de récompense et le risque: données de base et récentes. Behav Brain Funct. 2010; 6: 24. [Article gratuit PMC] [PubMed]
  211. Schultz W, Dayan P, PR de Montague. Un substrat neural de prédiction et de récompense. Science. 1997; 275: 1593 – 1599. [PubMed]
  212. Schultz W, Romo R. Réponses de neurones dopaminergiques nigrostriataux à une stimulation somatosensorielle de haute intensité chez le singe anesthésié. J Neurophysiol. 1987; 57: 201 – 217. [PubMed]
  213. Schultz W, Romo R. Neurones dopaminergiques du cerveau moyen du singe: contingences de réponses à des stimuli provoquant des réactions comportementales immédiates. J Neurophysiol. 1990; 63: 607 – 624. [PubMed]
  214. Seo H, Lee D. Filtrage temporel des signaux de récompense dans le cortex cingulaire antérieur dorsal lors d'un jeu de stratégie mixte. J Neurosci. 2007; 27: 8366 – 8377. [Article gratuit PMC] [PubMed]
  215. Shabel SJ, Janak PH. Similitude substantielle dans l'activité neuronale de l'amygdale au cours de l'éveil émotionnel appétitif et aversif conditionné. Actes de l'Académie nationale des sciences des États-Unis d'Amérique. 2009; 106: 15031 – 15036. [Article gratuit PMC] [PubMed]
  216. Shadmehr R, MA Smith, Krakauer JW. Correction d'erreur, prévision sensorielle et adaptation dans le contrôle moteur. Revue annuelle des neurosciences. 2010 [PubMed]
  217. Shen W, M Flajolet, Greengard P, DJ Surmeier. Contrôle dopaminergique dichotomique de la plasticité synaptique striatale. Science. 2008; 321: 848 – 851. [Article gratuit PMC] [PubMed]
  218. Shimo Y, Wichmann T. L'activité neuronale dans le noyau sous-thalamique module la libération de dopamine dans le striatum de singe. Le journal européen des neurosciences. 2009; 29: 104 – 113. [Article gratuit PMC] [PubMed]
  219. Shippenberg TS, R Bals-Kubik, Huber A, Herz A. Substrats neuroanatomiques médiant les effets aversifs des antagonistes des récepteurs de la dopamine D-1. Psychopharmacologie (Berl) 1991; 103: 209 – 214. [PubMed]
  220. Shumake J, Ilango A, Scheich H, Wetzel W, Ohl FW. Neuromodulation différentielle de l'acquisition et de la récupération de l'apprentissage d'évitement par l'habenula latéral et la région tegmentale ventrale. J Neurosci. 2010; 30: 5876 – 5883. [PubMed]
  221. Petit DM, Gregory MD, Mak YE, Gitelman D, Mesulam MM, Parrish T. Dissociation de la représentation neurale de l'intensité et de l'évaluation affective dans la gustation humaine. Neurone. 2003; 39: 701 – 711. [PubMed]
  222. Stefani MR, Moghaddam B. L'apprentissage des règles et la contingence de récompense sont associés à des modèles dissociables d'activation de la dopamine dans le cortex préfrontal de rat, le noyau accumbens et le striatum dorsal. J Neurosci. 2006; 26: 8810 – 8818. [Article gratuit PMC] [PubMed]
  223. Steinfels GF, Heym J, RE Strecker, Jacobs BL. Réponse des neurones dopaminergiques chez le chat aux stimuli auditifs présentés tout au long du cycle veille-sommeil. Brain Res. 1983; 277: 150 – 154. [PubMed]
  224. Strecker RE, Jacobs BL. Activité de l’unité dopaminergique de Substantia nigra chez les chats se comportant: effet de l’excitation sur la décharge spontanée et l’activité évoquée sensorielle. Brain Res. 1985; 361: 339 – 350. [PubMed]
  225. Stuber GD, TS Hnasko, Britt JP, Edwards RH, Bonci A. Terminaux dopaminergiques situés dans le noyau accumbens mais non du glutamate du striatum corelease dorsal. Journal of Neuroscience. 2010; 30: 8229 – 8233. [Article gratuit PMC] [PubMed]
  226. Stuber GD, RM Wightman, RM Carelli. L’extinction de l’auto-administration de cocaïne révèle des signaux dopaminergiques distincts sur les plans fonctionnel et temporel dans le noyau accumbens. Neurone. 2005; 46: 661 – 669. [PubMed]
  227. Sul JH, Kim H., Huh N., Lee D., Jung MW. Rôles distincts du cortex préfrontal orbitofrontal et médial de rongeur dans la prise de décision. Neurone. 2010; 66: 449 – 460. [Article gratuit PMC] [PubMed]
  228. DJ Surmeier, Ding J, Jour M, Wang Z, Shen W. Modulation D1 et D2 des récepteurs de la dopamine de la signalisation striatale glutamatergique dans les neurones épineux à milieu strié. Tendances en neurosciences. 2007; 30: 228 – 235. [PubMed]
  229. DJ Surmeier, Shen W, Jour M, Gertler T, Chan S, Tian X, Plotkin JL. Le rôle de la dopamine dans la modulation de la structure et de la fonction des circuits striataux. Progrès dans la recherche sur le cerveau. 2010; 183C: 148 – 167. [PubMed]
  230. Sutton RS, Barto AG. Vers une théorie moderne des réseaux adaptatifs: attente et prédiction. Psychol Rev. 1981; 88: 135 – 170. [PubMed]
  231. Takahashi YK, MR Roesch, Stalnaker TA, Haney RZ, DJ Calu, AR Taylor, KA Burke, G. Schoenbaum. Le cortex orbitofrontal et la région tégmentale ventrale sont nécessaires pour tirer des enseignements de résultats inattendus. Neurone. 2009; 62: 269 – 280. [Article gratuit PMC] [PubMed]
  232. Takikawa Y, R Kawagoe, Hikosaka O. Un rôle possible des neurones dopaminergiques du cerveau moyen dans l'adaptation à court et à long terme des saccades à la cartographie position-récompense. J Neurophysiol. 2004; 92: 2520 – 2529. [PubMed]
  233. Tecuapetla F, Patel JC, Xenias H, anglais D, Tadros I, Shah F, Berlin J, Deisseroth K, Rice ME, Tepper JM, Koos T. Glutamatergic signalant par des neurones dopaminergiques mésolimbiques dans le noyau accumbens. J Neurosci. 2010; 30: 7105 – 7110. [Article gratuit PMC] [PubMed]
  234. Thierry AM, JP Tassin, Blanc G, Glowinski J. Activation sélective du système DA mésocortical par le stress. La nature. 1976; 263: 242 – 244. [PubMed]
  235. Tobler, PN, Dickinson A, Schultz, W. Codage de l’omission de récompenses prédites par des neurones dopaminergiques dans un paradigme d’inhibition conditionnée. J Neurosci. 2003; 23: 10402 – 10410. [PubMed]
  236. Tobler PN, CD Fiorillo, Schultz W. Codage adaptatif de la valeur de la récompense par les neurones dopaminergiques. Science. 2005; 307: 1642 – 1645. [PubMed]
  237. Tsai HC, Zhang F, Adamantidis A, Stuber GD, Bonci A, L de Lecea, Deisseroth K. La mise à feu phasique dans les neurones dopaminergiques est suffisante pour le conditionnement comportemental. Science. 2009 [PubMed]
  238. Ullsperger M. Études d'association génétique du suivi de la performance et du retour d'expérience: le rôle de la dopamine et de la sérotonine. Neurosciences et examens biocomportementaux. 2010; 34: 649 – 659. [PubMed]
  239. Ungless MA. La dopamine: le principal problème. Tendances en neurosciences. 2004; 27: 702 – 706. [PubMed]
  240. Uylings HB, Groenewegen HJ, Kolb B. Les rats ont-ils un cortex préfrontal? Recherche comportementale sur le cerveau. 2003; 146: 3 – 17. [PubMed]
  241. Ventura R, Cabib S, Puglisi-Allegra S. Réponse opposée de la dopamine mésocortico-limbique dépendante du génotype au stress. Neuroscience. 2001; 104: 627 – 631. [PubMed]
  242. Ventura R, Latagliata EC, Morrone C, La Mela I, Puglisi-Allegra S. La norépinéphrine préfrontal détermine l'attribution d'une saillance motivationnelle «élevée». PLoS ONE. 2008; 3: e3044. [Article gratuit PMC] [PubMed]
  243. Ventura R, Morrone C, Puglisi-Allegra S. Le système de catécholamine préfrontal / accumbal détermine l’attribution de la saillance motivationnelle aux stimuli liés à la récompense et à l’aversion. Actes de l'Académie nationale des sciences des États-Unis d'Amérique. 2007; 104: 5181 – 5186. [Article gratuit PMC] [PubMed]
  244. Vogt BA. Interactions douleur et émotions dans les sous-régions du gyrus cingulaire. Nat Rev Neurosci. 2005; 6: 533 – 544. [Article gratuit PMC] [PubMed]
  245. Voon V, M Pessiglione, C Brezing, C Gallea, HH Fernandez, RJ Dolan, Hallett M. Mécanismes sous-tendant la récompense induite par la dopamine dans les comportements compulsifs. Neurone. 2010; 65: 135 – 142. [Article gratuit PMC] [PubMed]
  246. Waelti P, Dickinson A, Schultz W. Les réponses à la dopamine sont conformes aux hypothèses de base de la théorie de l’apprentissage formel. La nature. 2001; 412: 43 – 48. [PubMed]
  247. Wallis JD, Kennerley SW. Signaux de récompense hétérogènes dans le cortex préfrontal. Opinion actuelle en neurobiologie. 2010; 20: 191 – 198. [Article gratuit PMC] [PubMed]
  248. Walton ME, Behrens TE, Buckley MJ, PH Rudebeck, Rushworth MF. Systèmes d'apprentissage séparables dans le cerveau des macaques et rôle du cortex orbitofrontal dans l'apprentissage contingent. Neurone. 2010; 65: 927 – 939. [Article gratuit PMC] [PubMed]
  249. Wheeler RA, RC Twining, JL Jones, JM Slater, PS Grigson, RM Carelli. Les indices comportementaux et électrophysiologiques des effets négatifs prédisent l’auto-administration de cocaïne. Neurone. 2008; 57: 774 – 785. [PubMed]
  250. Wightman RM, Heien MLAV, KM Wassum, Sombers LA, Aragona BJ, Khan AS, Ariansen JL, Bravo JF, Phillips PE, Carelli RM. La libération de dopamine est hétérogène au sein des micro-environnements du noyau accumbens du rat. Le journal européen des neurosciences. 2007; 26: 2046 – 2054. [PubMed]
  251. Williams GV, Castner SA. Sous la courbe: problèmes critiques pour élucider la fonction du récepteur D1 dans la mémoire de travail. Neuroscience. 2006; 139: 263 – 276. [PubMed]
  252. Williams SM, PS Goldman-Rakic. Origine répandue du système dopaminergique mésofrontal chez le primate. Cereb Cortex. 1998; 8: 321 – 345. [PubMed]
  253. Winn P. Comment mieux considérer la structure et la fonction du noyau tegmental de la pédonculopopne: données probantes provenant d'études chez l'animal. Journal des sciences neurologiques. 2006; 248: 234 – 250. [PubMed]
  254. Sage RA. Dopamine, apprentissage et motivation. Nat Rev Neurosci. 2004; 5: 483 – 494. [PubMed]
  255. Sage RA. Substrat du cerveau antérieur de récompense et de motivation. Journal de neurologie comparée. 2005; 493: 115 – 121. [Article gratuit PMC] [PubMed]
  256. Sage SP. Champs frontaux avancés: phylogénie et fonction fondamentale. Tendances en neurosciences. 2008; 31: 599 – 608. [Article gratuit PMC] [PubMed]
  257. Yamada H, Matsumoto N, Kimura M. Neurones toniquement actifs dans le noyau caudé et le putamen du primate codent de manière différentielle les résultats de la motivation de l'action. J Neurosci. 2004; 24: 3500 – 3510. [PubMed]
  258. Yamada H, N Matsumoto, Kimura M., Codage historique et actuel basé sur les instructions des résultats comportementaux à venir dans le striatum. J Neurophysiol. 2007; 98: 3557 – 3567. [PubMed]
  259. Yin HH, Knowlton BJ. Le rôle des ganglions de la base dans la formation des habitudes. Nat Rev Neurosci. 2006; 7: 464 – 476. [PubMed]
  260. Young AM, Moran PM, Joseph MH. Le rôle de la dopamine dans le conditionnement et l'inhibition latente: quoi, quand, où et comment? Neurosciences et examens biocomportementaux. 2005; 29: 963 – 976. [PubMed]
  261. Zaghloul KA, Blanco JA, Weidemann CT, McGill McGill, Jaggi JL, Baltuch, GH, Kahana MJ. Les neurones de la substance humaine noire codent des avantages financiers inattendus. Science. 2009; 323: 1496 – 1499. [Article gratuit PMC] [PubMed]
  262. Zahniser NR, Sorkin A. Régulation rapide du transporteur de dopamine: rôle dans la dépendance aux stimulants? Neuropharmacologie. 2004; Supplément 47 1: 80 – 91. [PubMed]
  263. Zhang L, Doyon WM, Clark JJ, Phillips PE et Dani JA. Contrôles de la transmission tonique et phasique de la dopamine dans le striatum dorsal et ventral. Pharmacologie moléculaire. 2009; 76: 396 – 404. [Article gratuit PMC] [PubMed]
  264. Zink CF, G Pagnoni, Martin ME, Dhamala M et GS Berns. Réponse striatale humaine aux stimuli saillants non valorisants. Journal of Neuroscience. 2003; 23: 8092 – 8097. [PubMed]
  265. Zweifel LS, Argilli E, Bonci A, Palmiter RD. Rôle des récepteurs NMDA dans les neurones dopaminergiques pour la plasticité et les comportements addictifs. Neurone. 2008; 59: 486 – 496. [Article gratuit PMC] [PubMed]
  266. Zweifel LS, Parker JG, Lobb CJ, Rainwater A, Wall VZ, JP Fadok, Darvas M., Kim MJ, Mizumori SJ, CA Paladini, et al. La perturbation de la décharge en rafale dépendante de NMDAR par les neurones dopaminergiques permet une évaluation sélective du comportement phasique dopaminergique dépendant. Actes de l'Académie nationale des sciences des États-Unis d'Amérique. 2009; 106: 7281 – 7288. [Article gratuit PMC] [PubMed]