Indywidualne różnice w przypisywaniu zachęt do bodźców związanych z nagrodami: implikacje dla uzależnienia (2009)

2010 styczeń 1. Opublikowane w ostatecznej formie edytowanej jako:

 

SHELLY B. FLAGEL,* HUDA AKIL,* i TERRY E. ROBINSON

Ostateczna, zredagowana wersja tego artykułu jest dostępna pod adresem Neuropharmacology
Zobacz inne artykuły w PMC, że cytować opublikowany artykuł.

Podsumowanie

Narkotyki nabywają różne stopnie kontroli nad myślami i działaniami nie tylko w oparciu o efekty samych leków, ale także o predyspozycje jednostki. Osoby uzależnione nie są w stanie odrzucić myśli i działań od narkotyków i bodźców związanych z narkotykami. Tak więc u osób uzależnionych narażenie na miejsca lub rzeczy (sygnały), które wcześniej były związane z zażywaniem narkotyków, często powoduje wznowienie zażywania narkotyków. My i inni postulowaliśmy, że sygnały związane z narkotykami nabierają zdolności do utrzymywania i wywoływania zachowań związanych z zażywaniem narkotyków, po części dlatego, że nabywają one motywacyjne właściwości motywacyjne poprzez naukę Pawłowa (bodziec stymulujący). W przypadku kompulsywnych zaburzeń zachowania, w tym uzależnienia, takie wskazówki można przypisać patologicznej wartości zachęty („zachęty”). Z tego powodu niedawno zaczęliśmy badać indywidualne różnice w tendencji do przypisywania zachęty do wskazówek, które przewidują nagrody. Gdy dyskretne sygnały są związane z nieprzewidzianą dostawą żywności lub nagród za narkotyki, niektóre zwierzęta przychodzą, aby szybko podejść i włączyć sygnał, nawet jeśli znajduje się on w pewnej odległości od miejsca, w którym nagroda zostanie dostarczona. U tych zwierząt sam wskaźnik przewidywania nagrody staje się atrakcyjny, wzbudzając wobec niego podejrzenie, przypuszczalnie dlatego, że przypisuje się je zachęty motywacyjnej. Zwierzęta, które rozwijają ten typ warunkowej odpowiedzi, nazywane są „znakowcami”. Inne zwierzęta, „tropiciele bramek”, nie zbliżają się do wskazówki przewidującej nagrodę, ale po przedstawieniu wskazówki natychmiast udają się do miejsca, w którym zostanie dostarczona żywność („cel”). Dla osób śledzących cele wskaźnik przewidywania nagrody nie jest atrakcyjny, prawdopodobnie dlatego, że nie przypisuje się go zachęty motywacyjnej. Przeglądamy tutaj wstępne dane sugerujące, że te indywidualne różnice w tendencji do przypisywania zachęty do wskazówek przewidujących nagrodę mogą nadawać wrażliwość lub odporność na kompulsywne zaburzenia zachowania, w tym uzależnienie. Dlatego ważne będzie zbadanie, w jaki sposób interakcje środowiskowe, neurobiologiczne i genetyczne określają zakres, w jakim jednostki przypisują wartość bodźca bodźcom przewidującym nagrodę.

Słowa kluczowe: uzależnienie, autoshaping, śledzenie celów, zachęta motywacyjna, uwarunkowania Pavlovian, śledzenie znaków

Wprowadzenie

Głównym problemem klinicznym w leczeniu uzależnienia jest skłonność uzależnionych do nawrotu nawet długo po przerwaniu zażywania narkotyków. W rzeczywistości najbardziej przewidywalnym wynikiem pierwszej diagnozy uzależnienia jest 90% szans na nawrót (DeJong, 1994), a to częściowo wynika z wrażliwości na bodźce związane z lekiem. Na przykład, gdy uzależnieni napotykają sygnały wcześniej związane z podaniem leku (ludzie, miejsca, akcesoria itp.), Często powoduje to wznowienie poszukiwania leku i / lub pragnienie leku (do przeglądu patrz Childress i in., 1993). Jednym z powodów, dla których sygnały związane z lekiem są uważane za wywołujące takie skutki, jest to, że gdy w przeciwnym razie neutralne bodźce środowiskowe są wielokrotnie łączone z podawaniem nagród, w tym potencjalnie uzależniających leków, takie bodźce nie tylko działają jako predyktory zbliżającej się nagrody, ale przez Pawłowski bodziec) uczenie się nabierają motywacyjnych właściwości motywacyjnych - stają się przepełnione „bodźcem motywacyjnym” (Berridge, 2001; Bindra, 1978; Bolles, 1972; Toates, 1986). Przypisanie istotności motywacyjnej jest zdefiniowane przez Berridge (1996) jako przekształcenie względnie neutralnego zdarzenia percepcyjnego lub reprezentacyjnego (np. wskazówki) w atrakcyjny i „pożądany” bodziec motywacyjny. Oznacza to, że dzięki nauce Pawłowa informacje sensoryczne o nagrodach i ich sygnałach (widoki, dźwięki i zapachy) są przekształcane w „atrakcyjne, pożądane, nitujące zachęty” (Berridge i Robinson, 2003). W konsekwencji bodźce warunkowe mogą stać się „magnesami motywacyjnymi” (Berridge, 2001) wzbudzające podejście do nich, jak w przypadku zachowania warunkowego Pawłowa w stosunku do nagród i ich sygnałów (patrz poniżej i Cardinal i in., 2002a). Tomie (1996) twierdził, że gdy takie wskazówki są wbudowane w urządzenie, które dostarcza lek, taki jak specjalistyczne szkło używane do spożywania alkoholu lub rur używanych do palenia kokainy, sygnały te mogą promować szczególnie kompulsywne wzorce zachowań charakterystyczne dla uzależnienia.

Uważa się, że motywacyjne właściwości motywacyjne sygnałów Pawłowa, ich zdolność do pobudzania jednostki do działania, są przede wszystkim odpowiedzialne za zdolność sygnałów związanych z narkotykami (i miejsc) zarówno do utrzymywania poszukiwania narkotyków przy braku leku (Everitt i Robbins, 2000; Schindler i in., 2002) i przywrócenia zachowania polegającego na poszukiwaniu narkotyku lub nawrotu podczas abstynencji (np. Kruzich i in., 2001). Byłoby jednak niedbale, gdybyśmy nie wspomnieli, że istnieją inne sposoby, które sygnały (a zwłaszcza konteksty) związane z narkotykami mogą wpływać na zachowanie i nawroty związane z poszukiwaniem narkotyków. Na przykład sygnały związane z narkotykami mogą działać jako bodźce dyskryminacyjne, „nadając okazję” zachowaniom związanym z zażywaniem narkotyków (Skinner, 1938). Ustawniki okazji są warunkowymi wskazówkami lub kontekstami, które same w sobie nie mogą wywoływać odpowiedzi lub wzmacniać działania, ale działają w sposób hierarchiczny, aby modulować albo reakcję instrumentalną, aby uzyskać nagrodę i / lub wystąpienie warunkowych odpowiedzi Pawłowa (Holland, 1992; Rescorla, 1988; Schmajuk i Holland, 1998). Takie bodźce mogą mieć silny wpływ na zachowania związane z poszukiwaniem narkotyków. Na przykład, (Ciccocioppo i in., 2004) zgłosił, że bodziec dyskryminacyjny związany z pojedynczy sesja samodzielnego podawania kokainy może wywołać silne zachowania związane z poszukiwaniem kokainy do roku po ostatnim doświadczeniu z kokainą. Podobnie konteksty często dają okazję do ponownego poszukiwania narkotyków (Crombag i Shaham, 2002) i może nawet modulować ekspresję uczulenia behawioralnego (Anagnostaras i Robinson, 1996; Anagnostaras i in., 2002). Oczywiście, ekspozycja na sam lek (pierwszy narkotyk) może być skuteczna w wywołaniu nawrotu / przywrócenia po części, ponieważ sygnały interoceptywne wytwarzane przez lek mogą również „stwarzać okazję” do dalszego poszukiwania narkotyków, chociaż rodzi to pytanie, do jakich procesów psychologicznych doprowadził pierwszy napój, puff lub zastrzyk. Zakres, w jakim bodźce warunkowe „wyższego rzędu” działają jako bodźce motywacyjne, nie jest dobrze rozumiany.

Wiele teorii uzależnienia uznało rolę warunkowej motywacji Pawłowa w przyciągnięciu ludzi do bodźców związanych z narkotykami i źródeł uzależniających leków oraz w nawrotach (Di Chiara, 1998; Everitt i Robbins, 2005; Robinson i Berridge, 1993; Stewart i in., 1984; Tomie, 1996; Tomie i in., 2007), jednak było bardzo niewiele prób bezpośredniego badania tego procesu. W jednym przykładzie Zobacz i współpracownicy (Kruzich i in., 2001) zgłosił, że klasycznie uwarunkowane sygnały mogą przywrócić zachowanie poszukiwania narkotyków. Jednak w większości badań przedklinicznych dotyczących tego, jak sygnały wpływają na poszukiwanie narkotyków i ich podejmowanie, początkowe powiązanie między sygnałem a dostarczaniem leku następuje w instrumentalnym środowisku uczenia się, gdzie zarówno sygnał, jak i lek są prezentowane zależnie od działania. W tych badaniach, na przykład, zwierzę zostanie przeszkolone do dźwigania prasy w celu otrzymania infuzji leku, któremu towarzyszy prezentacja wskazówki (np. Światła). Przywrócenie wywołane przez cue jest następnie badane w warunkach wyginięcia (gdy lek nie jest już dostępny), a po udzieleniu odpowiedzi ustaje zdolność związanej z lekiem wskazówki (np. Światła) w celu przywrócenia zachowania związanego z poszukiwaniem leku. Tak więc podczas testów przywracania działanie zachowania nacisku dźwigni, które poprzednio wytwarzało lek i światło, powoduje teraz prezentację samego światła (do przeglądu patrz Shaham i in., 2003). Zatem wskazówka może działać jako wzmocnienie warunkowe (wtórne), wzmacniając działanie, które je wytwarza. Jednak u ludzi zwykle występują sygnały środowiskowe związane z iniekcją leku wcześniejszy do wstrzykiwania leku - nie pojawiają się nagle w wyniku zażywania leku. Ponadto, u uzależnionych, sygnały, które generują nawrót lub głód ogólnie poprzedzać działania mające na celu pozyskanie leku, nie podążają za nimi; tzn. działają jako bodźce motywacyjne, które zachęcają jednostkę do działania, a nie wzmacniają działania, które już zostało wyemitowane (Stewart i in., 1984).

Brakuje zatem informacji na temat wpływu warunkowych sygnałów Pawłowa na poszukiwanie narkotyków lub zachowania związane z zażywaniem narkotyków. Większość badań w tej dziedzinie obejmuje procedury, które bardzo utrudniają określenie stopnia, w jakim zachowanie jest kontrolowane przez wzmocnienie instrumentalne (wzmocnienie działania, które już miało miejsce) w porównaniu z zachętami Pawłowskimi, które powodują działania. To rozróżnienie jest ważne, ponieważ procesy psychologiczne i neurobiologiczne leżące u podstaw uczenia się instrumentalnego mogą bardzo różnić się od procesów Pawłowskich, które nadają wartość zachęty na podstawie sygnałów i miejsc związanych z narkotykami (Cardinal i in., 2002a; Tomie i in., 2007). Tak więc, próbując zrozumieć, w jaki sposób wskazówki dotyczące narkotyków mogą utrzymywać poszukiwanie narkotyków przez długi okres czasu, nawet przy braku leku i jak mogą przyspieszyć nawrót, musimy przeanalizować podstawowe procesy psychologiczne, dzięki którym takie bodźce uzyskują zachętę salience (Berridge i Robinson, 2003), a następnie wytyczyć podłoże neuronowe. Z tego powodu niedawno zaczęliśmy badać zdolność pawłowskich wskazówek do kontrolowania zachowania (Flagel i wsp., 2008; Flagel i wsp., 2007; Uslaner i wsp., 2006), a zwłaszcza indywidualne różnice w sposobie, w jaki takie wskazówki wpływają na zachowanie. Ta praca ma charakter wstępny, ale mamy nadzieję, że w końcu dostarczy wglądu w psychologiczne i neurobiologiczne mechanizmy, dzięki którym sygnały związane z narkotykami zyskują zdolność kontrolowania zachowań w uzależnieniu. Poniżej omówimy najpierw część literatury historycznej na temat tego, w jaki sposób badacze badali przypisywanie istotności bodźców do wskazówek związanych z nagrodami oraz jak to ujawnia się w zachowaniu, a następnie nasze ostatnie badania dotyczące różnic indywidualnych.

Śledzenie znaków

W klasycznym warunkowaniu Pawłowskim prezentacja wskazówki (bodziec warunkowy, CS) jest związana z prezentacją nagrody (bodziec bezwarunkowy, US), a przy powtarzających się parach CS przychodzi, aby wywołać odpowiedź warunkową (CR). W oryginalnych badaniach Pawłowa wykorzystujących nagrodę pokarmową jego psy były zazwyczaj powstrzymywane, a reakcja na CS często mierzona była ślinieniem, dając wrażenie, że CS wywołał prostą reakcję zwrotną podobną do reakcji bezwarunkowej (UR) wytwarzanej przez USA. Jednakże, kiedy zwierzęta zostały uwolnione od swoich ograniczeń i zaobserwowano ich zachowanie, stało się oczywiste, że to, czego się nauczyło, nie było zwykłą reakcją zwrotną, ponieważ w tej sytuacji CS wywołało złożone wzorce zachowań, w tym zachowania żebractwa pokarmowego (H. Liddell , niepublikowane, cytowane w Timberlake i Grant, 1975). Wiele późniejszych badań wykazało, że oprócz prostych odpowiedzi pawłowskie CS wywołują złożone stany emocjonalne i motywacyjne, które mogą manifestować się na różne sposoby (Rescorla, 1988). Tak więc, gdy zwierzęta mogą swobodnie poruszać się w swoim otoczeniu, często obserwuje się, że CR składa się z początkowej orientacji na CS (wskazówka lub „znak”), po której następuje podejście do niego i często zaangażowanie z nim (Brown i Jenkins, 1968; Hearst i Jenkins, 1974). Łącznie odpowiedzi kierowane do CS nazywano „śledzeniem znaków”, ponieważ zachowania były skierowane na wskazówkę lub „znak”, który przewidywał nagrodę. Godne uwagi jest to, że śledzenie znaków rozwija się, chociaż zwierzęta nie muszą podejmować żadnych działań, aby otrzymać nagrodę; to znaczy, żadne działania nie są wzmocnione. (Należy zauważyć, że termin „automatyczne kształtowanie” jest często używany do opisu procedura która wytwarza tę formę zachowania warunkowego podejścia Pawłowa, chociaż „automatyczne kształtowanie” jest naprawdę błędne, ponieważ w procedurze pawłowskiej żadna odpowiedź nie jest wzmocniona ani „ukształtowana”; Hearst i Jenkins, 1974).

Dzięki automatycznemu kształtowaniu dokładna topografia CR zależy od gatunku i natury zarówno CS, jak i USA. Początkowo zauważono, że często występuje uderzające podobieństwo między wzorcami zachowań związanych ze spożywaniem nagrody a tymi skierowanymi na CS. Podczas studiów z psami i nagrodą za jedzenie Pavlov (1932) oświadczył: „… zwierzę może lizać lampę elektryczną [CS] lub wydawać się, że zabiera powietrze do ust lub jeść dźwięk… oblizując wargi i sprawiając, że hałas żucia zębami jest jakby kwestią samo jedzenie ”(str. 95). Podobnie, jeśli natychmiast po prezentacji dźwigni następuje niezależne od odpowiedzi dostarczenie granulek żywności, niektóre szczury zbliżają się i często chwytają i gryzą dźwignię, jakby to była sama żywność (Davey i Cleland, 1982). A kiedy gołębie są wystawione na działanie światła kluczowego (CS), które zostało połączone z prezentacją wody (USA), wykazują one specyficzny dla picia wzór motoryczny (wraz z ruchem przełyku) skierowany na światło klucza. Ten wzorzec zachowania różni się od reakcji pojawiającej się u gołębi po parach z nagrodą za jedzenie (Jenkins i Moore, 1973; Zobacz też http://go.owu.edu/~deswartz/introduction.html). Co ciekawe, gdy CS jest połączony z możliwością kopulacji z kobietą (USA), męską przepiórką japońską (Coturnix japonica), pod pewnymi warunkami, podejdzie i kopuluje z nieożywionym obiektem CS (Koksal i in., 2004, Zobacz też Burns i Domjan, 1996; Burns i Domjan, 2001).

Fakt, że prezentacja CS często prowadzi do CR, który przypomina zachowanie wywoływane przez samą nagrodę (np. Zachowanie konsumpcyjne) doprowadził do przekonania, że ​​CS działa jako surogat dla USA - „substytucja bodźców” (Pavlov, 1927; Staddon i Simmelhag, 1971). Chociaż jest to zgodne z teorią, że CS przejmuje właściwości motywacyjne nagrody, w przeszłości niektórzy twierdzili, że takie zachowanie jest jedynie odbiciem uwarunkowania sensomotorycznego przy braku jakichkolwiek procesów motywacyjnych (patrz Berridge, 2001). Jednak teraz wiemy, że CS, które wywołują te konsumpcyjne reakcje, nabywają trzy podstawowe właściwości bodźców motywacyjnych (Berridge, 2001; Cardinal i in., 2002a): (1) muszą potrafić wywołać podejście do nich, jak wskazuje pawłowskie podejście warunkowe lub zachowanie śledzenia znaków (np. Flagel i wsp., 2008; Hearst i Jenkins, 1974; Peterson i in., 1972); (2) mogą pobudzać trwające działania instrumentalne, na co wskazuje efekt przeniesienia Pavloviana do instrumentu (np. Dickinson i in., 2000; Lovibond, 1983; Wyvell i Berridge, 2000); i (3) mogą wzmocnić naukę nowych działań instrumentalnych; to znaczy mogą działać jako wzmacniacze warunkowe (np. Di Ciano i Everitt, 2004; Williams i Dunn, 1991). Ponadto istnieje wiele przykładów ilustrujących, że forma CR zależy od natury CS (patrz Holland, 1977), sugerując, że zachowanie polegające na śledzeniu znaków nie jest spowodowane prostym zastępowaniem bodźców. Na przykład forma CR do CS, która przewiduje jedzenie, jest bardzo różna, jeśli CS jest dźwignią lub żywym szczurem, lub blokiem drewna (Timberlake i Grant, 1975). Tak więc powstające CR uważa się za odzwierciedlenie aktywacji złożonych procesów motywacyjnych, które są pod kontrolą wielu czynników, w tym natury USA i CS (Buzsaki, 1982; Davey i in., 1984; Jenkins i Moore, 1973; Moore, 1973; Timberlake i Lucas, 1985).

Zjawisko śledzenia znaków zostało dobrze scharakteryzowane za pomocą naturalnych nagród wykorzystywanych jako US (patrz przegląd Boakes, 1977; Hearst i Jenkins, 1974; Tomie i in., 1989) i istnieje wiele przykładów, w których sygnały związane z nagrodami stają się tak nieodparcie atrakcyjne, że wywołują pozornie nieprzystosowalne i prawdopodobnie kompulsywne zachowania (Boakes et al., 1978; Breland i Breland, 1961; Hearst i Jenkins, 1974; Williams i Williams, 1969). W klasycznym przykładzie nazwano „niewłaściwe zachowanie organizmów” (Breland i Breland, 1961, 1966), szopy zostały przeszkolone, aby zdeponować drewnianą monetę przez szczelinę w celu uzyskania nagrody żywnościowej. Szopy początkowo wykonywały to zadanie bez wahania, ale dzięki dalszemu treningowi wydawało się, że nie są w stanie puścić monety, poświęcając kilka minut na przymusowe manipulowanie nią przednimi łapami - żucie, lizanie, pocieranie i mycie monety - tak jakby próbowały wyczyścić kęs jedzenia - i wielokrotnie wkładając monetę do szczeliny, ale potem wyciągając ją bez zwalniania. Sama moneta wydawała się mieć wielką wartość motywacyjną, ponieważ szopy bardzo niechętnie ją rezygnowały, choć trzymanie się jej z opóźnieniem lub nawet uniemożliwiało otrzymanie prawdziwego jedzenia. Inny interesujący przykład, określany jako „negatywna konserwacja”, został pierwotnie opisany przez Hearst i Jenkins (1974), który sparował oświetlenie kluczowego światła na jednym końcu długiego pudełka z późniejszym dostarczeniem nagrody żywnościowej na drugim końcu. Chociaż nie trzeba było reagować na jedzenie, gołębie zaczęły zbliżać się i wielokrotnie dziobać kluczowe światło, mimo że uniemożliwiło im to zdobycie jedzenia, które było dostępne na drugim końcu pudełka tylko przez ograniczoną ilość czasu. To zachowanie utrzymywało się pomimo faktu, że badani byli często bardzo głodni. Można by się spodziewać, że gdyby gołębie były w stanie zrezygnować z odpowiedzi na odległe CS (iw konsekwencji odzyskać i zużyć nagrodę), zrobiłyby to. Ten pozornie kompulsywny wzorzec odpowiedzi jest podobny do tego, który widzi się w uzależnieniu, ponieważ jest wywoływany przez impuls określony przez przeszłe doświadczenia i wydaje się być względnie niezależny od woli (Tomie, 1996). Co więcej, brak kontroli hamującej (tj. Zachowania nieprzystosowującego) widocznej u zwierząt, które znakowanie to jest atrybutem impulsywności i dodatkowo łączy to zachowanie z uzależniającymi zachowaniami i innymi zaburzeniami kontroli impulsów (Tomie, 1996; Tomie i in., 1998).

Opisane powyżej badania są zgodne z szeregiem innych, które wykazały, że śledzenie znaków nie jest spowodowane „przypadkowym wzmocnieniem” odpowiedzi i utrzymuje się nawet wtedy, gdy prowadzi do utraty wzmocnienia (patrz Gamzu i Williams, 1971; Killeen, 2003; Lajoie i Bindra, 1976; Timberlake i Lucas, 1985). Pomimo tych ustaleń niektórzy badacze zakwestionowali rolę procesów Pawłowa (bodziec stymulujący) w zachowaniu śledzenia znaków i twierdzili, że takie zachowanie może być spowodowane wzmocnieniem reakcji (np. Patrz Farwell i Ayres, 1979; Locurto i in., 1976; Locurto, 1981; Myerson i in., 1979; Sanabria i in., 2006; Wessels, 1974). Na przykład po szkoleniu w zakresie kształtowania automatycznego, w którym szczury rozwinęły znak śledzenia CR, Locurto i współpracownicy (1976) przeniósł zwierzęta do harmonogramu zaniechania. Zgodnie z tym harmonogramem, jeśli zwierzęta skontaktowały się z dźwignią CS, nagrodę żywnościową wstrzymano. Wcześniejsze badania sugerowały, że w tej sytuacji gołębie nadal kontaktują się z lampą kluczową CS, chociaż z mniejszą częstotliwością, co zostało uznane za dowód, że zachowanie nie było kontrolowane przez wzmocnienie reakcji (np. Williams i Williams, 1969). W przeciwieństwie, Locurto i in. (1976) donieśli, że w tych warunkach szczury przestały kontaktować się z dźwignią CS, co miało na celu wskazanie, że zachowanie było mediowane wzmocnieniem reakcji. Jednak nawet w tym ostatnim badaniu istnieją wyraźne dowody na to, że dźwignia CS zachowała swoje pawłowskie warunkowe właściwości motywacyjne, ponieważ Locurto i współpracownicy (1976) poinformował również, że topografia odpowiedzi warunkowej różniła się w zależności od harmonogramu wzmocnienia (tj. autoshaping vs. pominięcie). Przed ustanowieniem harmonogramu pominięcia CR składał się z podejścia do dźwigni i kontaktu z nią (tj. Gryzienia i gryzienia). Podczas harmonogramu zaniechania zwierzęta nadal zbliżały się i wykazywały zachowanie badawcze (tj. Wąchanie) skierowane w stronę dźwigni CS, ale po prostu przestały się z nią kontaktować fizycznie. Odkrycia te sugerują, że nawet w warunkach pominięcia dźwignia CS nadal posiadała właściwości motywacyjne - szczury nadal zbliżały się i kierowały swoją uwagę na to, a czego się nauczyły, to unikać bezpośredniego kontaktu z nimi. Zatrzymali oni tylko łącze końcowe w łańcuchu zachowań, które zawierały Pavlovian CR (patrz także Stiers i Silberberg, 1974). Tak więc, nawet te dane są zgodne z wnioskiem, że CR śledzący znak (podejście) zależy od uczenia się Pawłowa, a nie od wzmocnienia odpowiedzi, i dodatkowo ilustruje zdolność pawłowskich wskazówek do zachowania zachowania nawet przy braku wzmocnienia odpowiedzi.

Śledzenie znaków do sygnałów związanych z narkotykami

Tomie (1996) był jednym z pierwszych, którzy opisali podobieństwa między zachowaniem Pawłowskiego śledzenia śladów a objawami nadużywania narkotyków, aw ostatnich latach badacze nadużywania narkotyków zaczęli dalej badać ten związek (Flagel i wsp., 2008; Flagel i wsp., 2006; Newlin, 2002; Tomie i in., 2007). Wciąż jednak niewiele jest badań nad tym, w jakim stopniu sygnały związane z lekami potwierdzają CR-sign (Cunningham i Patel, 2007; Kearns i in., 2006; Krank i in., 2008; Uslaner i wsp., 2006). Rzeczywiście, w przeglądzie 2005 Everitt and Robbins odpowiednio odnotowanym (str. 1482), „logicznie można sądzić, że podejście Pawłowa jest zaangażowane w nieprzystosowanie przyciągające ludzi do źródeł uzależniających wzmacniaczy narkotyków… jak podkreślono w teorii uzależnienia od zachęt. Jednak… podejście do predykcyjnego CS leku […] nie zostało wyraźnie wykazane w badaniach laboratoryjnych… chociaż… [jest] łatwo widoczne u zwierząt reagujących na naturalne nagrody. Może być ... że behawioralny wpływ CS związanych z narkotykami i naturalnymi wzmacniaczami różni się zasadniczo pod tym względem ”. Pomysł ten był początkowo wspierany przez raport, który robią szczury nie podejście dyskretne sygnały połączone z iv dostawą kokainy (Kearns i Weiss, 2004). Jeśli prawdą jest, że „narkotyki i wzmacniacze naturalne różnią się zasadniczo pod tym względem”, szereg teorii uzależnienia wymagałoby poważnej rewizji.

Istnieje jednak szereg doniesień, że zwierzęta zbliżają się do dyskretnych sygnałów, które są związane z dostarczaniem leków (Cunningham i Patel, 2007; Krank i in., 2008; Uslaner i wsp., 2006). Na przykład USA składające się z pochłoniętego doustnie etanolu / sacharyny (Krank, 2003; Tomie, 2001; Tomie i in., 2003) lub roztwór amfetaminy / sacharyny (Tomie, 2001) może wspierać zachowanie śledzenia znaków. Jedną z obaw związanych z tymi badaniami jest możliwość, że było to słodkie rozwiązanie, a nie alkohol, który wspierał podejście, chociaż próbowano kontrolować tę zmienną. Ostatnio, Krank i współpracownicy (2008) jednoznacznie zademonstrowano zdolność sparowanego etanolu wskaźnika (światła) do wywołania zachowania śledzenia znaków u szczurów przy użyciu niesłodzonego roztworu etanolu w USA. Ponadto, warunkowe podejście Pavlovian do wizualnego wskaźnika związanego z dootrzewnowymi wstrzyknięciami etanolu zostało niedawno zademonstrowane na myszach przy użyciu zmodyfikowanej procedury preferencyjnej warunkowania miejsca, która ma odzwierciedlać zachowanie śledzenia znaków (Cunningham i Patel, 2007). Wreszcie wykazano, że sygnał związany z etanolem wywołuje efekty przeniesienia Pavlovian-instrumental (Corbit i Janak, 2007).

Według naszej wiedzy pierwsze badanie, które wykazało, że podawanie iv leku może wspomagać śledzenie znaków w dyskretnym sygnale, było przez Uslaner i in. (2006). W tym eksperymencie prezentacja 8 podświetlanej chowanej dźwigni (CS) została sparowana z niezależny od odpowiedzi dostarczenie dożylnego wstrzyknięcia kokainy (USA). Osiem par CS-US przedstawiono w harmonogramie z losowo zmieniającym się odstępem między próbami ze średnią 900 sek. Powtarzając parowanie dźwigni i kokainy, szczury zaczęły zbliżać się do dźwigni bardziej niezawodnie i szybciej, podczas gdy szczury, które otrzymały pseudolosowe (tj. Niesparowane) prezentacje CS-US nie. Odkrycia te różnią się od tych zgłoszonych przez Kearns and Weiss (2004)i spekulujemy, że te rozbieżne wyniki wynikają z różnic metodologicznych (szczegóły - patrz Uslaner i wsp., 2006). Kearns and Weiss (2004) stosował stosunkowo krótkie interwały próbne, przy czym prezentacje CS-US odbywały się średnio co 90 sek. W przeciwieństwie do nagrody pokarmowej, neurobiologiczne i interoceptywne działanie kokainy utrzymuje się dłużej niż 90 sek. Jest zatem możliwe, że efekty poprzedniej infuzji leku były nadal odczuwane podczas kolejnych par CS-US, co utrudnia szczurom powiązanie tych zdarzeń. W rzeczy samej, Uslaner i współpracownicy (2006) z powodzeniem używał dłuższego interwału między próbami 900 tylko po nieudanej obserwacji zachowania śledzenia znaków przy krótszych odstępach między próbami.

W niezależnym (niepublikowanym) badaniu z wykorzystaniem linii szczurów selektywnie hodowanych (Stead i wsp., 2006), niedawno odkryliśmy, że zwierzęta, które podpisują się do CS związanego z pożywieniem, nagradzają również znakowanie CS sparowanym kokainą; mając na uwadze, że osoby śledzące cele nie. Odkrycia te sugerują, że indywidualne różnice w kontroli nad zachowaniem przez wskazówki przewidujące nagrody żywnościowe mogą również dotyczyć nagród za leki. Należy jednak zauważyć, że pojawiająca się topografia CR jest zupełnie inna, gdy kokaina kontra żywność jest używana jako CS. Kiedy kokaina jest używana jako zwierzęta amerykańskie, rzadko wchodzą w kontakt z dźwignią, ale wykazują wyraźne zachowanie polegające na śledzeniu znaków, polegające na orientacji na dźwignię, a następnie zbliżaniu się i eksploracji w bezpośrednim sąsiedztwie przedłużonej dźwigni (Uslaner i wsp., 2006), podobny do CR, gdy stosuje się wewnątrzczaszkową stymulację elektryczną jako USA (Peterson, 1975; Peterson i in., 1972; Phillips i wsp., 1981; Wilkie i McDonald, 1978).

Uwarunkowana preferencja miejsca a śledzenie znaków

Chociaż istnieje bardzo niewiele badań wykorzystujących procedury automatycznego kształtowania jako sposób na badanie właściwości motywacyjnych bodźców warunkowych Pawłowa, istnieje oczywiście wiele badań wykorzystujących inną procedurę - warunkową preferencję miejsca (CPP). W tej sytuacji nieprzewidziane podawanie leku jest sparowane z umieszczeniem w określonym kontekście (miejscu) i solą fizjologiczną z innym, a w dniu testu zwierzęta mają dostęp do obu miejsc. Mówi się, że zwierzęta wykazują CPP, jeśli spędzają więcej czasu w kontekście sparowanym z narkotykami (patrz przegląd Bardo i Bevins, 2000). Uwarunkowana preferencja miejsca jest często interpretowana jako forma zachowania warunkowego podejścia Pawłowa, ponieważ uważa się, że środowisko sparowane z narkotykami nabyło motywacyjne właściwości motywacyjne i stało się atrakcyjne, dlatego zwierzęta są do niego „wciągane” (Carr i in., 1989). CPP został nawet opisany jako „niezręczna forma automatycznego kształtowania” (Newlin, 1992). Jednak charakter procesu psychologicznego prowadzącego do CPP jest niejednoznaczny (zob Cunningham i in., 2006). Podczas gdy początkowe uczenie się w CPP może obejmować procesy Pawłowa, zachowanie w dniu testu może nie odzwierciedlać warunkowego podejścia Pawłowa (McAlonan i in., 1993; Biały, 1996; White i in., 2005). Na przykład, Cunningham i in. (2006) uzyskał CPP z użyciem bodźców dotykowych w ciemności i twierdził, że CPP prawdopodobnie nie wynikało z warunkowego podejścia Pavlovian, ponieważ zwierzęta nie mogły wykryć odpowiedniego bodźca z odległości i tym samym być do niego przyciągane. Twierdzili, że CPP było spowodowane warunkowym wzmocnieniem. Zatem, biorąc pod uwagę niejednoznaczność w interpretacji CPP, bardziej odpowiednią procedurą badania „atrakcyjności” bodźców warunkowych Pawłowa może być autoformowanie. W dalszej części tego artykułu skupimy się na badaniach z naszego własnego laboratorium i innych, które odkryły indywidualne różnice w zakresie, w jakim bodźce warunkowe Pawłowa nabierają motywacyjnych właściwości motywacyjnych, które, jak sądzimy, mogą przyczynić się do podatności na uzależnienia.

Indywidualne różnice w przypisywaniu znaczenia zachęty do wskazówek związanych z nagrodami: śledzenie znaków a śledzenie celów

Jak wspomniano powyżej, gdy dyskretna wskazówka (CS) jest wielokrotnie prezentowana w związku z dostarczeniem nagrody (US), może pojawić się wiele różnych odpowiedzi, które są uzależnione od tej zależności (CR), a topografia CR zależy od wiele czynników, w tym gatunek lub szczep zwierzęcia (Boakes, 1977; Kearns i in., 2006; Kemenes i Benjamin, 1989; Nilsson i in., 2008; Purdy i in., 1999), charakter CS i US (Burns i Domjan, 1996; Davey i Cleland, 1982; Davey i in., 1984; Domjan i in., 1988; Holland, 1977; Jenkins i Moore, 1973; Peterson i in., 1972; Schwam i Gamzu, 1975; Timberlake i Grant, 1975; Wasserman, 1973), przestrzenne i czasowe awarie między CS i USA (Brown i wsp., 1993; Costa i Boakes, 2007; Holland, 1980a; Silva i in., 1992; Timberlake i Lucas, 1985), wcześniejsze doświadczenia z CS lub US (Boughner i Papini, 2003; Engberg i in., 1972; Gamzu i Williams, 1971) i stan wewnętrznego napędu zwierzęcia (Berridge, 2001; Boakes, 1977; Davey i Cleland, 1982; Toates, 1986; Zamble i in., 1985; Zener, 1937). Podsumowując, wszystkie te czynniki przyczyniają się do motywacyjnego stanu motywacyjnego zwierzęcia, a tym samym wpływają na stopień, w jakim CS nabywa motywacyjne właściwości motywacyjne (Lajoie i Bindra, 1976).

Jednak nawet podczas szkolenia w identycznych warunkach mogą występować duże indywidualne różnice w charakterze CR. Jak nam wiadomo, Zener (1937) był pierwszym, który systematycznie opisywał takie indywidualne różnice, gdy zwierzęta były szkolone przy użyciu klasycznych pawovskich procedur warunkujących. Zener (1937) parowany dzwonek z dostawą jedzenia, ale w przeciwieństwie do większości Pawłowa (1932) oryginalne eksperymenty psy w badaniach Zenera nie były powściągliwe. To nie tylko ujawniło złożoność rozwijających się CR, ale także duże różnice indywidualne. Zener (1937) poinformował, że po treningu niektóre psy zareagowały na CS „początkowym spojrzeniem na dzwon”, a następnie „stałym utrwaleniem… na patelnię…”, podczas gdy inne wykazywały „mały, ale określony ruch podejścia do warunkowego bodźca… cofając się później do pozycji do jedzenia ”, sekwencja opisana przez Zenera jako„ uderzające zjawisko ”(str. 391). Jeszcze inne psy wahały się, patrząc w przód iw tył między dzwonkiem a patelnią.

Indywidualna zmienność topografii CR wywołana przez bodziec przewidujący pokarm nie była przedmiotem większej uwagi aż do 1977, gdy Boakes opisał podobne indywidualne różnice u szczurów. Boakes (1977) zastosował standardową procedurę autoshaping polegającą na krótkim podświetleniu dźwigni, po której nastąpiło bezwarunkowe dostarczenie granulatu spożywczego. Poinformował, że podczas prezentacji CS niektóre szczury podeszły i skontaktowały się z dźwignią i poszły na tacę po przesunięciu CS, podobnie jak to opisano wcześniej (Hearst i Jenkins, 1974). Jednak po prezentacji CS inne szczury natychmiast udały się do miejsca, w którym dostarczono żywność, a podczas okresu CS wielokrotnie obsługiwały klapę tacy. Boakes (1977), podobnie jak jego poprzednicy (Hearst i Jenkins, 1974), zwany CS-wywołane podejście do cue (lub znak) “śledzenie znaków”I ze względu na symetrię odniosło się do przywołanego przez CS podejścia do miejsca, w którym żywność zostanie dostarczona”śledzenie celów, ”I będziemy nadal używać tej terminologii tutaj. Co ciekawe, prawdopodobieństwo śledzenia znaków lub śledzenia celu było uwarunkowane obecnością podświetlonej dźwigni (CS) i spadło, gdy żywność (USA) została usunięta lub została przedstawiona losowo w odniesieniu do CS (Boakes, 1977). Boakes (1977) odkryli również, że zmiany prawdopodobieństwa wzmocnienia mogą znacząco wpłynąć na pojawienie się odpowiedzi behawioralnej. Dostarczanie pożywienia tylko w połowie badań okazało się bardziej skuteczne w wykrywaniu oznak CR niż w przypadku dostarczania pożywienia w każdym badaniu, co zwiększyło skuteczność CR w śledzeniu celów. Zmiana poziomu pozbawienia pokarmu badanych miała mniejszy, ale wymierny efekt (Boakes, 1977).

Biorąc pod uwagę wagę przypisywaną Pawłowskim warunkowym procesom w kontrolowaniu zachowań i uzależnieniu - temat ten był przedmiotem licznych badań i przeglądów (np. Cardinal i in., 2002a; Day and Carelli, 2007; Tomie, 1996; Tomie i in., 2007) - to zaskakujące, że od czasu pierwszych badań przeprowadzonych przez Zener (1937) i Boakes (1977). Jednym z wyjaśnień tego może być fakt, że w większości badań dotyczących warunkowego podejścia Pawłowa do warunków stosowanych albo nie pozwala na jednoczesną ocenę śledzenia znaków i śledzenia celów, ani nie sprzyja rozwojowi tylko jednego z dwóch CR (dla wyjątków widzieć Burns i Domjan, 1996; Nilsson i in., 2008). Odnotowano jednak kilka badań na temat warunków sprzyjających śledzeniu znaków w porównaniu do śledzenia celów. Na przykład, używając szczurów, Davey, Cleland i współpracowników (Cleland i Davey, 1983; Davey i Cleland, 1982; Davey i in., 1981) zgłosił, że śledzenie znaków odbywa się do dyskretnego bodźca wzrokowego połączonego z nagrodą za żywność, ale nie do zlokalizowanego słuchowego CS. Dominującą odpowiedzią warunkową na bodziec słuchowy jest śledzenie celu, przy niewielkim podejściu do CS. Ustalono również, że zwiększenie odległości czasowej lub przestrzennej między CS i USA powoduje spadek odpowiedzi śledzenia znaków i zwiększenie odpowiedzi śledzenia celu (Brown i wsp., 1993; Costa i Boakes, 2007; Holland, 1980a, b; Silva i in., 1992).

Chociaż przeprowadzono pewne badania nad warunkami, które prowadzą do rozwoju śledzenia znaków w porównaniu z CR śledzenia celu, prawie nie zwracano uwagi na indywidualne różnice w skłonności do rozwijania jednego lub drugiego CR. Uważamy, że może to być ważny obszar badań, ponieważ zapewnia sposób oceny indywidualnych różnic w skłonności do przypisywania wartości zachęty wskaźnikom przewidującym nagrody. Tomie i in. (2000) doniósł o indywidualnych różnicach w wydajności prasy dźwigniowej (tj. skłonności do podpisywania śladów) za pomocą paradygmatu autoformowania i stwierdził związane z tym zmiany w indukowanym stresem uwalnianiu kortykosteronu i poziomach mezolimbicznych monoamin. Konkretnie, Tomie (2000) stwierdzili, że osoby, które wykazywały zwiększoną odpowiedź na śledzenie objawów, również miały podwyższony poziom kortykosteronu po sesji (patrz także Rysunek 4 poniżej) i wyższe poziomy dopaminy i DOPAC w tkance półleżącej, niższe poziomy obrotu DOPAC / DA w skorupie ogoniastej i niższe poziomy obrotu 5-HIAA i 5-HIAA / 5-HT w brzusznym obszarze nakrywkowym (VTA ). Tomie i współpracownicy (2000) doszedł do wniosku, że profil neurochemiczny widoczny u szczurów, które częściej podpisywały się, podzielał pewne cechy podatności na nadużywanie narkotyków. Tomie (1998) poinformował również, że szczury, które wykonują bardziej energiczne zachowanie polegające na śledzeniu znaków, są bardziej impulsywne, co mierzy się tendencją do wybierania małych nagród natychmiastowych w stosunku do większych opóźnionych nagród.

Rysunek 4 

Odpowiedź kortykosteronu przed i po pierwszej sesji autoshaping. Dane wyrażono jako średnie poziomy kortykosteronu (Cort) (ng / ml) ± SEM przed treningiem (Pre lub poziomy podstawowe) i bezpośrednio po pierwszej sesji treningowej (Post). ...

Praca Tomie nad śledzeniem znaków w żywności i sygnałami związanymi z etanolem oraz w jaki sposób to zachowanie może przyczynić się do rozwoju kompulsywnego używania narkotyków, skłoniło nas do rozpoczęcia badania indywidualnych różnic w tym zachowaniu. Nasze wstępne badania koncentrowały się na opracowaniu procedur badania warunkowego podejścia do wskazówki połączonej z dożylnym dostarczaniem kokainy (Uslaner i wsp., 2006). W ten sposób przeprowadziliśmy jednak badania z wykorzystaniem żywności jako nagrody, aw tych badaniach zaobserwowaliśmy duże indywidualne różnice w CR, które pojawiły się po parowaniu prezentacji dźwigni z dostawą granulki żywności (Flagel i wsp., 2008; Flagel i wsp., 2007), jak zostało opisane przez Boakes (1977). W skrócie, w naszych badaniach podświetlona dźwignia (CS) jest prezentowana dla 8 sec, a natychmiast po jej wycofaniu granulka żywności o smaku banana (US) jest dostarczana do pobliskiego pojemnika znajdującego się około 2.5 cm od położenia dźwigni CS . Dostarczenie nagrody jest niezależne od zachowania zwierzęcia (tj. Żadne wyraźne działanie nie jest wzmocnione). Pojedyncza sesja składa się z par 25 CS-US przedstawionych w losowym odstępie czasu 90, a jedna sesja (≈40 min) jest przeprowadzana dziennie. Szczury nie są pozbawione pożywienia, ale wszystkie konsumują wszystkie dostarczane granulki żywności. W tych warunkach, używając próbki dostępnych w handlu szczurów Sprague-Dawley, odkryliśmy, że zwierzęta można podzielić z grubsza na trzy grupy w oparciu o pojawiającą się warunkową odpowiedź. Około jedna trzecia szczurów (tropicieli) przychodzi, aby preferencyjnie podejść i energicznie angażować wskaźnik przewidywania nagrody (dźwignia CS; patrz Rysunki 1A, 2A, 2C i I 3) .3). Jednym z wskaźników tej reakcji śledzenia znaku jest liczba naciśnięć dźwigni przez szczura (Rysunek 2C) które zazwyczaj robi, chwytając go i gryząc (Rysunek 1A). Gdy dźwignia jest cofnięta, zwierzęta te natychmiast wychodzą i pobierają granulki żywności. Około jedna trzecia szczurów (celujących) bardzo rzadko zbliża się do CS z przewidywaniem nagrody (Rysunek 3), ale zamiast tego, po przedstawieniu dźwigni CS uczą się, jak szybko iść do pojemnika na żywność i przychodzą, aby wielokrotnie wkładać do niego nos, czekając na dostarczenie nagrody (patrz Rysunki 1B, 2B i 2D). Pozostała jedna trzecia szczurów (grupa pośrednia) nie wykazuje wyraźnego śledzenia znaków ani śledzenia celu, ale waha się między wskazówką a celem (patrz Ryciny 2 i I 3; 3; Flagel i wsp., 2008; Zobacz też Boakes, 1977; Zener, 1937). Wszystkie zwierzęta, niezależnie od ich CR, pobierają i zjadają wszystkie granulki pokarmowe, a ich zachowanie podczas interwałów między próbami jest praktycznie identyczne. Zatem zarówno śledzenie znaków, jak i śledzenie celów są uzależnione od przedstawienia dźwigni (CS). Ponadto, jeśli prezentacja CS-dźwigni jest jawna nie w połączeniu z dostawą żywności, ale pojawia się losowo, nie rozwija się ani śledzenie znaków, ani śledzenie celów (dane niepublikowane).

Rysunek 1 

Reprezentatywne klatki z taśmy wideo szczura zaangażowanego w (A) znak śledzenia CR lub (B) CR śledzenia celu. Śledzenie znaków CR jest skierowane w stronę dźwigni CS (po lewej stronie pojemnika na żywność) i polega na chwytaniu i gryzieniu dźwigni. The ...
Rysunek 2 

Śledzenie znaków i zachowanie śledzenia celów. Szczury podzielono na trzy grupy na podstawie ich średniej liczby „naciśnięć dźwigni” w codziennych sesjach treningowych 16. Czarne kółka stanowią jedną trzecią zwierząt, które najbardziej się przydały ...
Rysunek 3 

Różnica w prawdopodobieństwie zbliżenia się do dźwigni w porównaniu z podejściem do kubka z jedzeniem (tj. Różnica w kubku dźwigni-jedzenia; Boakes, 1977; Flagel i wsp., 2008). Jak w Rysunek 2, czarne kółka oznaczają trackery znakowe (ST; n = 14), otwarte kółka reprezentują trackery celów ...

Chociaż różnice indywidualne są widoczne nawet po pierwszym dniu szkolenia, ważne jest, aby to podkreślić obie śledzenie znaków i śledzenie celów to wyuczone odpowiedzi, które są uzależnione od powtarzających się par CS-US, a oba CR są wywoływane przez tę samą wskazówkę; to znaczy ten sam bodziec warunkowy (dźwignia; patrz Ryciny 2 i I 3) .3). Zarówno dla osób śledzących znaki, jak i dla osób śledzących cel powtarzane parowania CS-US zwiększają prawdopodobieństwo zbliżenia się w okresie CS odpowiednio do wskazania lub celu (Ryciny 2 i I 3), 3), wigor, z jakim angażują sygnał lub cel (Rysunek 2C i 2D) oraz szybkość, z jaką zbliżają się do wskazówki lub celu (Rysunek 2E i 2F). Co więcej, tendencja osób śledzących znaki do zbliżania się do dźwigni przewidywania nagród i zbliżania się celowników do kubka z jedzeniem (celu) w okresie CS pozostaje stabilna, nawet przy długotrwałym treningu. W naszych opublikowanych raportach (Flagel i wsp., 2008; Flagel i wsp., 2007) pokazujemy dane tylko z dni treningowych 5, ale w Rysunek 3 pokazujemy wcześniej niepublikowane dane, w których zwierzęta były szkolone przez kolejne dni 16 i jasne jest, że po ich opracowaniu, śledzenie znaków i CR śledzenie celu pozostały stabilne. W przeciwieństwie do tego, w przypadku przedłużonego treningu, szczury w grupie pośredniej zaczynają się podpisywać, chociaż wciąż nie są na poziomie równoważnym zwierzętom początkowo sklasyfikowanym jako tropiciele. Początkowa preferencja dla kubka z jedzeniem u wszystkich zwierząt (lub brak wstępnej preferencji dla dźwigni w urządzeniach do śledzenia znaków) nie jest zaskakująca, biorąc pod uwagę, że wszystkie zwierzęta były „wstępnie przeszkolone”, aby pobierać granulki z kubka z jedzeniem (patrz także Flagel i wsp., 2008).

Na podstawie tych danych jasne jest, że zarówno dla osób śledzących znaki, jak i dla osób śledzących cele, cue-predictive cue (CS) dostarcza informacji niezbędnych do wspierania uczenia się. Zarówno w przypadku osób śledzących znaki, jak i osób śledzących cele, powtarzające się parowania CS-US skutkują opracowaniem wyuczonej odpowiedzi, która jest uzależniona od prezentacji CS. Oznacza to, że CS jest jednakowo proroczy nagrody dla obu grup, a obie grupy rozwijają warunkową odpowiedź, ale to, co się różni, to kierunek CR. Śledzący znaki podchodzą i manipulują samą prognozą nagrody (dźwignią), nawet jeśli znajduje się ona z dala od miejsca, w którym zostanie wydana nagroda (puchar żywności). W przeciwieństwie do tego, po przedstawieniu dźwigni CS-celnicy nie zbliżają się do niej, lecz traktują ją jako sygnał do zbliżającego się dostarczenia nagrody i zbliżają się do miejsca, w którym nagroda zostanie dostarczona (tj. Puchar żywności). Zatem sygnał, który działa jako predykcyjny, „informacyjny” CS i wspiera naukę we wszystkich zwierzętach, staje się „atrakcyjny” i wywołuje podejście do siebie w niektórych, ale nie innych.

Chociaż podstawowe mechanizmy nie zostały jeszcze określone, przydatne może być rozważenie tych ustaleń przy użyciu teoretycznych ram motywacji motywacyjnej (Berridge, 2001; Bindra, 1978; Bolles, 1972). Jak wspomniano powyżej, CS, które nabywają motywacyjne właściwości motywacyjne lub używają terminologii Berridge (2001), bodźce, które przypisuje się bodźcowi motywacyjnemu, stają się atrakcyjne, mogą pobudzać obecne zachowania i mogą działać jako wzmacniacze warunkowe (patrz także Cardinal i in., 2002a). W trackerach znaków CS staje się atrakcyjny, na co wskazuje fakt, że się do niego zbliżają. Co ważne, w serii niepublikowanych badań odkryliśmy również, że w przypadku urządzeń do śledzenia znaków dźwignia CS działa jako skuteczne wzmocnienie warunkowe, wzmacniając naukę nowej reakcji instrumentalnej. W związku z tym w przypadku urządzeń do śledzenia znaków sama CS uzyskuje co najmniej dwie z definiujących właściwości bodźca motywacyjnego, co sugeruje, że u tych zwierząt dźwignia CS jest przypisywana za pomocą zachęty. Z drugiej strony, w trackerach celów CS nie wydaje się być atrakcyjny, ponieważ nie podchodzą do niego, a co ważne, w niepublikowanych badaniach stwierdziliśmy, że w trackerach celowych dźwignia CS jest stosunkowo nieskuteczna jako warunkowa wzmocnienie. W związku z tym w przypadku śledzenia celów CS nie nabywa tych definiujących właściwości bodźca motywacyjnego, co sugeruje, że u tych zwierząt samo CS nie jest przypisywane z zachętą motywacyjną.

W kontekście tego teoretycznego sformułowania warto zastanowić się nad różnicami między urządzeniami do śledzenia znaków a lokalizatorami celów. Może się zdarzyć, że nie różnią się one zdolnością przypisywania zachęty do bodźców per se, ale w gdzie to jest przypisane. Zatem dla osób śledzących cele może się zdarzyć, że CS kieruje motywację motywacyjną od siebie - aw tym przypadku do kubka z jedzeniem - gdy osoby śledzące cele przychodzą, by energicznie zaangażować kielich z jedzeniem i skierować do niego konsumpcyjne zachowania (Mahler i Berridge 2008, komunikacja osobista). Z drugiej strony możliwe jest również, że w przypadku osób śledzących cele CS wywołuje poznawcze oczekiwanie nagrody, a ich zachowanie jest regulowane bardziej przez procesy poznawcze niż przez procesy motywacyjne (Toates, 1998). Niezależnie od przypadku, zebrane razem te dane sugerują, że w trackerach znaków sam wskaźnik przewidywania nagrody, CS, nabywa motywacyjne właściwości motywacyjne, aw trackerach celów nie. Inną interesującą implikacją tych indywidualnych różnic jest to, że sugerują one możliwość oddzielenia wartości predykcyjnej lub „informacyjnej” CS od jej motywacyjnych właściwości motywacyjnych. Biorąc pod uwagę, że „informacyjne” i „motywujące” właściwości wskazówek przewidujących nagrodę, są dysocjującymi zjawiskami psychologicznymi, w których przypuszczalnie pośredniczą dysocjujące systemy neuronowe. To rozróżnienie może być ważne w badaniu mechanizmów neuronalnych, dzięki którym sygnały związane z nagrodami dochodzą do kontroli zachowania i czekają na dalsze badania.

Korelaty śledzenia znaków i zachowania śledzenia celów

Odpowiedź na kokainę

Indywidualne różnice w tendencji do przypisywania bodźców warunkowych bodźcom warunkowym są przypuszczalnie związane z indywidualnymi różnicami w organizacji i działaniu regionów mózgu zwykle zaangażowanych w ten proces psychologiczny. Układ nerwowy uważany za krytycznie zaangażowany obejmuje projekcje dopaminergiczne z VTA do rdzenia jądra półleżącego i związane z nim obwody, ponieważ istnieje wiele badań wykazujących, że uszkodzenia lub manipulacje farmakologiczne tego obwodu uniemożliwiają nabycie i ekspresję zachowania warunkowego podejścia Pawłowa (Cardinal i in., 2002b; Dalley i wsp., 2005; Day and Carelli, 2007; Day i in., 2006; Phillips i wsp., 1981). Dlatego w naszych początkowych badaniach zbadaliśmy, czy osoby śledzące znak i osoby śledzące cel różniły się w reagowaniu na środek farmakologiczny, który aktywuje układ dopaminergiczny i jest również potencjalnie uzależniający - kokaina. Zbadaliśmy zarówno ostrą reakcję psychomotoryczną na kokainę, jak i skłonność do indukowanego kokainą uczulenia psychomotorycznego (Flagel i wsp., 2008). Szczury po raz pierwszy przeszły trening Pavlovian z nagrodą pokarmową, jak opisano powyżej, w celu określenia ich fenotypu - znakowania lub śledzenia celu - a następnie poddano je działaniu kokainy. Osoby, które po raz pierwszy doświadczyły leku, były bardziej wrażliwe na działanie kokainy na aktywację lokomotoryczną (występowały różnice grupowe przy jednej z trzech badanych dawek), chociaż nie było różnic między grupami w zdolności kokainy do wytwarzania powtarzających się ruchów głowy po ostrym leczeniu. W przeciwieństwie do tego, osoby śledzące objawy wykazywały większą skłonność do uczulenia psychomotorycznego po wielokrotnym leczeniu (Flagel i wsp., 2008). W związku z tym indywidualne różnice w tendencji do znakowania ścieżki lub ścieżki celu wiążą się z podatnością na formę plastyczności indukowanej kokainą - uczuleniem - która może przyczyniać się do rozwoju uzależnienia. Różnice w zależnych od doświadczenia zmianach funkcji dopaminy mogą przyczyniać się do skłonności do uczulenia psychomotorycznego u tych zwierząt (patrz poniżej).

Korelaty neurobiologiczne

Chociaż zostało dobrze udokumentowane, że aktywność dopaminy w jądrze półleżącym (zwłaszcza rdzeniu) ma kluczowe znaczenie dla rozwoju zachowania Pawłowa w podejściu warunkowym (do przeglądu patrz Kardynał i Everitt, 2004; Day and Carelli, 2007; Everitt i Robbins, 2005; Tomie i in., 2007), jako pierwsi, według naszej wiedzy, badamy neurobiologiczne korelaty śledzenia znaków i zachowania śledzenia celów. Użyliśmy in situ hybrydyzacja w celu zbadania wielu genów związanych z dopaminą (patrz Flagel i wsp., 2007). Po pierwsze, poziomy ekspresji mRNA określono, gdy mózgi otrzymano bezpośrednio po pierwszej sesji treningowej (40 min), w nadziei, że będzie to zbyt wcześnie po doświadczeniu zmiany ekspresji receptora dopaminy (D1R lub D2R), transporter dopaminy (DAT) lub mRNA hydroksylazy tyrozynowej (TH), a zatem zapewniają miarę „podstawowej” ekspresji. W tej sytuacji osoby śledzące sygnały miały znacznie wyższe poziomy mRNA dopaminy D1R w jądrze półleżącym w porównaniu ze wskaźnikami celu. Te ustalenia są zgodne z tymi Dalley i współpracownicy (2005), który poinformował, że półleżące D1R są niezbędne do wczesnej konsolidacji i nabywania zachowań związanych ze śledzeniem znaków. Po pierwszej sesji treningowej nie było różnic grup w mRNA półleżącego D2R, ani w poziomach mRNA DAT lub TH w VTA. Mózgi uzyskano z oddzielnej grupy zwierząt po dniach treningu 5 i rozwoju silnego śledzenia znaków lub CR śledzenia celu. Mogą one bardziej odzwierciedlać zmiany w ekspresji genów, które występują w wyniku uczenia się. Po szkoleniu osoby śledzące sygnały miały znacznie niższy poziom DAT i TH mRNA w VTA niż osoby śledzące cel oraz mRNA D2R (ale nie D1R) w jądrze półleżącym. Biorąc pod uwagę różnice metodologiczne, trudno jest bezpośrednio porównać nasze wyniki z podwyższonymi poziomami dopaminy i DOPAC Tomie (2000) zgłaszane u zwierząt, które miały tendencję do podpisywania się. Niemniej jednak oczywiste jest, że rozwój CR śledzenia śladów w porównaniu ze śledzeniem celu wiąże się z wyraźnymi zmianami w układach dopaminergicznych. Niewątpliwie potrzeba znacznie więcej pracy, aby określić naturę i funkcjonalne znaczenie tych różnic. W potencjalnie powiązanym badaniu Uslaner i in. (2007) niedawno doniósł, że uszkodzenia jądra podwzgórza znacznie poprawiają śledzenie znaków w kierunku bodźca związanego z nagrodą pokarmową lub kokainową, co implikuje tę strukturę jako część układu nerwowego kontrolującego przypisywanie bodźca motywacyjnego do wskazówek związanych z nagrodą.

Odpowiedź na stres (kortykosteron i odpowiedź ruchowa na nowość)

Innym fizjologicznym korelatem doświadczenia w śledzeniu objawów jest podwyższenie poziomu kortykosteronu w osoczu. Tomie i współpracownicy donieśli, że szczury otrzymujące sparowane prezentacje dźwigni CS i pokarmu US (podobnie jak w przypadku stosowanych tutaj metod) wykazują wyższe poziomy kortykosteronu w porównaniu z tymi u niesparowanej lub losowej grupy CS-US (Tomie i in., 2000; Tomie i in., 2004). Co więcej, Tomie (2000) zgłosił znaczącą korelację między częstotliwością naciśnięcia dźwigni (lub zachowaniem śledzenia znaku) a odpowiedzią kortykosteronu (chociaż uzyskano to po 20th sesja autoshaping). Dlatego w grupach opisanych w Rysunek 2 uzyskaliśmy również pomiar stężenia kortykosteronu w osoczu z próbek krwi ogonowej przed i po pierwszej sesji autosystemowania. Kortykosteron był znacznie zwiększony po pierwszej sesji autoskładania we wszystkich grupach, ale co ciekawe, był podwyższony w większym stopniu u zwierząt, które później zostały scharakteryzowane jako osoby śledzące znak w stosunku do osób śledzących cele lub grupy pośredniej (patrz Rysunek 4). Dane te dostarczają zatem jednej odpowiedzi fizjologicznej, która różnicuje grupy nawet po pojedynczej sesji treningowej. Zwierzęta pokazują się Rysunek 2 zostały również wstępnie przebadane pod kątem odpowiedzi lokomotorycznej na nowe środowisko i nie znaleźliśmy żadnej istotnej korelacji między lokomocją indukowaną nowością - wskaźnikiem poszukiwania nowości - a późniejszymi zachowaniami w zakresie śledzenia znaków (tj. prawdopodobieństwem podejścia do dźwigni; r2 = 0.06, P = 0.13), sugerując, że te dwie cechy są dysocjowalne (patrz także Belin i wsp., 2008).

Badania wykorzystujące selektywnie hodowane linie szczurów

Dopiero zaczynamy odkrywać niektóre neurobiologiczne i behawioralne korelaty śledzenia znaków i zachowania śledzenia celów, i jak może to być związane z rozwojem kompulsywnych zaburzeń zachowania (Flagel i wsp., 2008; Tomie i in., 2007). Ponadto nie jest jasne, jakie czynniki są odpowiedzialne za indywidualne różnice w odpowiedziach na sygnały związane z nagrodami, czy są to czynniki behawioralne, neurobiologiczne czy genetyczne. Jedno podejście, które może pozwolić nam lepiej zbadać interakcje gen-środowisko, obejmuje trwające (niepublikowane) badania z wykorzystaniem selektywnie hodowanych linii szczurów. Z tych trwających badań jasno wynika, że ​​cecha śledzenia znaku / celu może być selektywnie hodowana i dlatego jest dziedziczna. Jest jednak również prawdopodobne, że na cechę tę będą miały wpływ zachowania matki, wydarzenia rozwojowe i inne czynniki środowiskowe. W związku z tym potrzebne są dalsze badania, aby przeanalizować genetyczne, psychologiczne i neurobiologiczne mechanizmy, które leżą u podstaw różnych cech, które mogą być ważne dla zrozumienia indywidualnych różnic w skłonności do rozwoju kompulsywnych zaburzeń zachowania, takich jak uzależnienie (np. Belin i wsp., 2008).

Wniosek: Implikacje dla uzależnienia

Jest to przypisywanie motywacyjnych właściwości motywacyjnych (poprzez naukę Pawłowską), które sprawiają, że wskazówki przewidujące nagrodę są atrakcyjne, pożądane i „pożądane” (Berridge i Robinson, 2003; Robinson i Berridge, 1993) - a nadmierne lub patologiczne przypisywanie zachęty do takich wskazówek może przyczynić się do rozwoju kompulsywnych zaburzeń zachowania (Robinson i Berridge, 1993). Idea, że ​​sygnały związane z nagrodami mogą stać się nieodparcie atrakcyjne i uzyskać nadmierną kontrolę nad zachowaniem, nie jest nową koncepcją. Zjawisko to zostało żywo opisane przez hazardzistę w jednym z najstarszych znanych tekstów pisanych na świecie, Rig Veda, datowanych na 1200 BCE (patrz O'Flaherty, 1981). Mówiąc o jego kościach hazardzista stwierdził: „Drżące krople orzecha laskowego wielkiego drzewa… upajać ja, gdy toczą się po pomarszczonej desce… Kości wydają mi się jak napój soma… trzymający mnie obudzony i podekscytowany„…„ Kiedy brązowe kości podnoszą swój głos, gdy są rzucane, biegnę od razu na spotkanie z nimi, jak kobieta do kochanka ”…„ Oni (kości) są pokryte miodem - nieodparta moc nad hazardzistą. ”Stosując obecną terminologię, kości te wydają się być przypisywane znacznej motywacji.

Podsumowując, uważa się, że nauka Pawłowa odgrywa rolę w nieprzystosowaniu przyciągającym ludzi do bodźców związanych z narkotykami i źródeł uzależniających leków, przyczyniając się do skłonności do nawrotów (Di Chiara, 1998; Everitt i Robbins, 2005; Robinson i Berridge, 1993; Stewart i in., 1984; Tomie, 1996; Tomie i in., 2007). Opierając się na przedstawionych tutaj sprawozdaniach teoretycznych i wynikach eksperymentalnych, sugerujemy, że indywidualne różnice w tendencji do przypisywania istotności zachęty do wskazówek przewidujących nagrodę mogą nadawać wrażliwość lub odporność na kompulsywne zaburzenia zachowania, w tym uzależnienie. Sugerujemy zatem, że rozróżnienie między fenotypem śledzenia śladów a fenotypem śledzenia celu może dostarczyć środków do zbadania indywidualnych różnic w tendencji do przypisywania wartości zachęty wskaźnikom przewidywania nagrody oraz ich zdolności do uzyskania nadmiernej kontroli nad zachowaniem.

Podziękowanie

Wiele z naszych prac przedstawionych w niniejszym manuskrypcie zostało wspartych dotacjami z Narodowego Instytutu Nadużywania Narkotyków na TER (R37 DA04294) i HA (R01 DA012286) oraz grant na program, który obejmuje zarówno HA, jak i TER (5P01DA021633-02). Praca z wybiórczo hodowanymi zwierzętami była również wspierana przez Biuro Badań Morskich w HA (N00014-02-1-0879). Ponadto fundusze zostały przyznane przez Instytut Badań nad Patologicznym Hazardem i Powiązanymi Zaburzeniami (Cambridge Health Alliance), przyznany SBF. Autorzy dziękują dr. Kent Berridge i Jonathan Morrow za pomocne i wnikliwe komentarze do wcześniejszych wersji rękopisu. Chcielibyśmy również uznać anonimowych recenzentów za ich przemyślane komentarze, które znacznie poprawiły jakość tego manuskryptu.

Przypisy

Zastrzeżenie wydawcy: Jest to plik PDF z nieedytowanym manuskryptem, który został zaakceptowany do publikacji. Jako usługa dla naszych klientów dostarczamy tę wczesną wersję manuskryptu. Rękopis zostanie poddany kopiowaniu, składowi i przeglądowi wynikowego dowodu, zanim zostanie opublikowany w ostatecznej formie cytowania. Należy pamiętać, że podczas procesu produkcyjnego mogą zostać wykryte błędy, które mogą wpłynąć na treść, a wszystkie zastrzeżenia prawne, które odnoszą się do czasopisma, dotyczą.

Referencje

  • Anagnostaras SG, Robinson TE. Uczulenie na psychomotoryczne działanie pobudzające amfetaminy: modulacja przez uczenie asocjacyjne. Behav Neurosci. 1996; 110: 1397 – 1414. [PubMed]
  • Anagnostaras SG, Schallert T, Robinson TE. Procesy pamięci rządzące indukowanym amfetaminą uczuleniem psychomotorycznym. Neuropsychofarmakologia. 2002; 26: 703 – 715. [PubMed]
  • Bardo MT, Bevins RA. Uwarunkowana preferencja miejsca: co dodaje do naszego przedklinicznego rozumienia nagrody za leki? Psychopharmacology (Berl) 2000; 153: 31 – 43. [PubMed]
  • Belin D, Mar AC, Dalley JW, Robbins TW, Everitt BJ. Wysoka impulsywność przewiduje zmianę na kompulsywne przyjmowanie kokainy. Nauka. 2008; 320: 1352 – 1355. [Artykuł bezpłatny PMC] [PubMed]
  • Berridge KC. Nagroda za pokarm: substraty mózgowe o chęci i lubieniu. Neurosci Biobehav Rev. 1996; 20: 1 – 25. [PubMed]
  • Berridge KC. Uczenie się z nagrodami: wzmocnienie, zachęty i oczekiwania. W: Medin D, redaktor. Psychologia uczenia się i motywacji. Academic Press; 2001. str. 223 – 278.
  • Berridge KC, Robinson TE. Nagroda za przetworzenie. Trendy Neurosci. 2003; 26: 507 – 513. [PubMed]
  • Bindra D. Jak powstają zachowania adaptacyjne: percepcyjno-motywacyjna alternatywa dla wzmocnienia reakcji. Nauki behawioralne i mózgowe. 1978; 1: 41 – 91.
  • Boakes R. Wydajność uczenia się powiązania bodźca z pozytywnym wzmocnieniem. W: Davis H, Hurwitz H, redaktorzy. Interakcje operacyjno-pawłowskie. Erlbaum; Hillsdale, NJ: 1977. str. 67 – 97.
  • Boakes RA, Poli M, Lockwood MJ, Goodall G. Badanie niewłaściwego zachowania: symboliczne wzmocnienie szczura. J Exp Anal Behav. 1978; 29: 115 – 134. [Artykuł bezpłatny PMC] [PubMed]
  • Bolles RC. Wzmocnienie, oczekiwanie i nauka. Psychol Rev. 1972; 79: 394 – 409.
  • Boughner RL, Papini MR. Apetyczne utajone hamowanie u szczurów: teraz to widać (śledzenie znaków), teraz nie (śledzenie bramek) Dowiedz się Behav. 2003; 31: 387 – 392. [PubMed]
  • Breland K, Breland M. Niewłaściwe zachowanie organizmów. Am Psychol. 1961; 16: 681 – 683.
  • Breland K, Breland M. Animal Behavior. Macmillan; Nowy Jork: 1966.
  • Brązowy B, Hemmes N, Vaca SCd, Pagano C. Znakowanie i śledzenie celów podczas opóźniania i śledzenia przebiegu gołębi. Nauka i zachowanie zwierząt. 1993; 21: 360 – 368.
  • Brown PL, Jenkins HM. Automatyczne kształtowanie dziobaka gołębia. J Exp Anal Behav. 1968; 11: 1 – 8. [Artykuł bezpłatny PMC] [PubMed]
  • Burns M, Domjan M. Śledzenie znaku a śledzenie celu w warunkowaniu seksualnym męskiej przepiórki japońskiej (Coturnix japonica) J Exp Psychol Anim Behav Process. 1996; 22: 297 – 306. [PubMed]
  • Burns M, Domjan M. Topografia przestrzennie ukierunkowanego warunkowego odpowiedzi: efekty kontekstu i czas trwania próby. J Exp Psychol Anim Behav Process. 2001; 27: 269 – 278. [PubMed]
  • Buzsaki G. Odruch „gdzie to jest?”: Automatyczne kształtowanie odpowiedzi orientacyjnej. J Exp Anal Behav. 1982; 37: 461 – 484. [Artykuł bezpłatny PMC] [PubMed]
  • Kardynał RN, Everitt BJ. Mechanizmy neuronalne i psychologiczne leżące u podstaw uczenia się apetycznego: powiązania z uzależnieniem od narkotyków. Curr Opin Neurobiol. 2004; 14: 156 – 162. [PubMed]
  • Cardinal RN, Parkinson JA, Hall J, Everitt BJ. Emocje i motywacja: rola ciała migdałowatego, prążkowia brzusznego i kory przedczołowej. Neurosci Biobehav Rev. 2002a; 26: 321 – 352. [PubMed]
  • Cardinal RN, Parkinson JA, Lachenal G, Halkerston KM, Rudarakanchana N, Hall J, Morrison CH, Howes SR, Robbins TW, Everitt BJ. Wpływ selektywnych ekscytotoksycznych uszkodzeń jądra półleżącego, przedniej obręczy obręczy i jądra centralnego ciała migdałowatego na działanie autoshaping u szczurów. Behav Neurosci. 2002b; 116: 553 – 567. [PubMed]
  • Carr G, Fibiger H, Phillips A. Kondycjonowana preferencja miejsca jako miara nagrody za lek. W: Liebman J, Cooper S, redaktorzy. Neuropharmakologiczne podstawy nagrody. Oxford University Press; 1989. str. 264 – 319.
  • Childress AR, Ehrman R, Rohsenow D, Robbins SJ, O'Brien CP. Czynniki warunkowane klasycznie w uzależnieniu od narkotyków. W: Lowinson J, Millman RP, redaktorzy. Kompleksowy podręcznik nadużywania substancji. Williams i Wilkins; Baltimore: 1993. str. 56 – 69.
  • Ciccocioppo R, Martin-Fardon R, Weiss F. Stymulacja związana z pojedynczym doświadczeniem kokainowym wywołuje długotrwałe poszukiwania kokainy. Nat Neurosci. 2004; 7: 495 – 496. [PubMed]
  • Cleland GG, Davey GC. Autokształtowanie u szczura: wpływ lokalizowalnych sygnałów wizualnych i dźwiękowych na pożywienie. J Exp Anal Behav. 1983; 40: 47 – 56. [Artykuł bezpłatny PMC] [PubMed]
  • Corbit LH, Janak PH. Sygnały związane z etanolem generują ogólny transfer pawłowo-instrumentalny. Alkohol Clin Exp Res. 2007; 31: 766 – 774. [PubMed]
  • Costa DS, Boakes RA. Utrzymanie reakcji, gdy wzmocnienie zostanie opóźnione. Dowiedz się Behav. 2007; 35: 95 – 105. [PubMed]
  • Crombag HS, Shaham Y. Odnowienie poszukiwania leków przez kontekstowe wskazówki po długotrwałym wymieraniu u szczurów. Behav Neurosci. 2002; 116: 169 – 173. [PubMed]
  • Cunningham CL, Patel P. Szybka indukcja podejścia Pavlovian do sprzężonego z etanolem wizualnego wskaźnika u myszy. Psychopharmacology (Berl) 2007; 192: 231 – 241. [PubMed]
  • Cunningham CL, Patel P, Milner L. Lokalizacja przestrzenna jest krytyczna dla warunkowania preferencji miejsca wizualnymi, ale nie dotykowymi bodźcami. Behav Neurosci. 2006; 120: 1115 – 1132. [PubMed]
  • Dalley JW, Laane K, Theobald DE, Armstrong HC, Corlett PR, Chudasama Y, Robbins TW. Ograniczona w czasie modulacja apetycznej pamięci Pawłowa przez receptory D1 i NMDA w jądrze półleżącym. Proc Natl Acad Sci US A. 2005; 102: 6189 – 6194. [Artykuł bezpłatny PMC] [PubMed]
  • Davey GC, Cleland GG. Topografia zachowania skoncentrowanego na sygnale u szczura: skutki stanu deprywacji i typu wzmacniającego. J Exp Anal Behav. 1982; 38: 291 – 304. [Artykuł bezpłatny PMC] [PubMed]
  • Davey GC, Cleland GG, Oakley DA, Jacobs JL. Wpływ doświadczenia wczesnego karmienia na topografię odpowiedzi ukierunkowanej na sygnał u szczura. Physiol Behav. 1984; 32: 11 – 15. [PubMed]
  • Davey GC, Oakley D, Cleland GG. Autokształtowanie u szczura: skutki pominięcia w formie odpowiedzi. J Exp Anal Behav. 1981; 36: 75 – 91. [Artykuł bezpłatny PMC] [PubMed]
  • Day JJ, Carelli RM. Jądro półleżące i nauka Pawłowa. Neurobiolog. 2007; 13: 148 – 159. [Artykuł bezpłatny PMC] [PubMed]
  • Day JJ, Wheeler RA, Roitman MF, Carelli RM. Nukleusowe neurony półleżące kodują zachowania podejścia Pavlovian: dowody z paradygmatu autoshaping. Eur J Neurosci. 2006; 23: 1341 – 1351. [PubMed]
  • DeJong W. Zapobieganie nawrotom: nowa technologia promująca długotrwałą abstynencję narkotykową. Int J Addict. 1994; 29: 681 – 705. [PubMed]
  • Di Chiara G. Hipoteza motywująca do uczenia się roli mezolimbicznej dopaminy w kompulsywnym zażywaniu narkotyków. J Psychopharmacol. 1998; 12: 54 – 67. [PubMed]
  • Di Ciano P, Everitt BJ. Wzmocnione właściwości wzmacniające bodźce powiązane z samodzielnie podawaną kokainą, heroiną lub sacharozą: implikacje dla utrzymywania się uzależnienia. Neuropharmakologia. 2004; 47 Suppl 1: 202 – 213. [PubMed]
  • Dickinson A, Smith J, Mirenowicz J. Dysocjacja Pawłowskiego i instrumentalnego uczenia się motywacyjnego pod antagonistami dopaminy. Behav Neurosci. 2000; 114: 468 – 483. [PubMed]
  • Domjan M, O'Vary D, Greene P. Uwarunkowanie apetycznego i konsumpcyjnego zachowania seksualnego u męskich przepiórek japońskich. J Exp Anal Behav. 1988; 50: 505 – 519. [Artykuł bezpłatny PMC] [PubMed]
  • Engberg LA, Hansen G, Welker RL, Thomas DR. Nabycie kluczowego dziobania poprzez autoshaping jako funkcja wcześniejszego doświadczenia: „wyuczone lenistwo”? Nauka. 1972; 178: 1002 – 1004. [PubMed]
  • Everitt BJ, Robbins TW. Harmonogramy drugiego rzędu wzmacniania leku u szczurów i małp: pomiar skuteczności wzmacniającej i zachowania poszukującego leków. Psychopharmacology (Berl) 2000; 153: 17 – 30. [PubMed]
  • Everitt BJ, Robbins TW. Neuronowe systemy wzmacniania uzależnienia od narkotyków: od działań po przyzwyczajenia. Nat Neurosci. 2005; 8: 1481 – 1489. [PubMed]
  • Farwell BJ, Ayres JJB. Relacje wzmacniające bodźce i wzmacniające reakcję w kontroli uwarunkowanego apetytu na głowę („śledzenie celów”) u szczurów. Nauka i motywacja. 1979; 10: 295 – 312.
  • Flagel SB, Watson SJ, Akil H, Robinson TE. Indywidualne różnice w przypisywaniu istotności zachęty do wskazówki związanej z nagrodą: wpływ na uczulenie na kokainę. Behav Brain Res. 2008; 186: 48 – 56. [Artykuł bezpłatny PMC] [PubMed]
  • Flagel SB, Watson SJ, Robinson TE, Akil H. Zwierzęcy model indywidualnych różnic w „warunkowości”: znaczenie dla psychopatologii. Neuropsychofarmakologia. 2006; 31: S262 – S263.
  • Flagel SB, Watson SJ, Robinson TE, Akil H. Indywidualne różnice w skłonności do zbliżania się do sygnałów względem celów promują różne adaptacje w układzie dopaminowym szczurów. Psychopharmacology (Berl) 2007; 191: 599 – 607. [PubMed]
  • Gamzu E, Williams DR. Klasyczne warunkowanie złożonej odpowiedzi szkieletowej. Nauka. 1971; 171: 923 – 925. [PubMed]
  • Hearst E, Jenkins H. Sign-tracking: relacja wzmacniająco-stymulująca i działanie ukierunkowane. Monografia Towarzystwa Psychonomicznego; Austin: 1974.
  • Holland PC. Uwarunkowany bodziec jako wyznacznik formy warunkowej odpowiedzi Pawłowa. J Exp Psychol Anim Behav Process. 1977; 3: 77 – 104. [PubMed]
  • Holland PC. Przedział CS-US jako wyznacznik formy odpowiedzi warunkowej Pawłowa. J Exp Psychol Anim Behav Process. 1980a; 6: 155 – 174. [PubMed]
  • Holland PC. Wpływ wizualnych uwarunkowań bodźca warunkowego na postać warunkowej odpowiedzi Pawłowa na szczury. J Exp Psychol Anim Behav Process. 1980b; 6: 81 – 97. [PubMed]
  • Holland PC. Ustawienie okazji w warunku Pawłowskim. W: Medin DL, redaktor. Psychologia uczenia się i motywacji. Academic Press; San Diego: 1992. str. 69 – 125.
  • Jenkins HM, Moore BR. Forma automatycznej odpowiedzi ze wzmacniaczem żywności lub wody. J Exp Anal Behav. 1973; 20: 163 – 181. [Artykuł bezpłatny PMC] [PubMed]
  • Kearns DN, MA Gomez-Serrano, Weiss SJ, Riley AL. Porównanie obciążeń Lewisa i Fischera w zakresie autoformowania (śledzenie znaków), uczenia się o odwróceniu dyskryminacji i negatywnej automatycznej konserwacji. Behav Brain Res. 2006; 169: 193 – 200. [PubMed]
  • Kearns DN, Weiss SJ. Śledzenie znaków (autoshaping) u szczurów: porównanie kokainy i żywności jako bodźców bezwarunkowych. Dowiedz się Behav. 2004; 32: 463 – 476. [PubMed]
  • Kemenes G, Benjamin PR. Śledzenie celów w ślimaku stawu, Lymnaea stagnalis. Behav Neural Biol. 1989; 52: 260 – 270. [PubMed]
  • Killeen PR. Złożone procesy dynamiczne w śledzeniu znaków z awarią pominięcia (negatywna konserwacja) J Exp Psychol Anim Behav Process. 2003; 29: 49 – 61. [Artykuł bezpłatny PMC] [PubMed]
  • Koksal F, Domjan M, Kurt A, Sertel O, Orung S, Bowers R, Kumru G. Zwierzęcy model fetyszyzmu. Behav Res Ther. 2004; 42: 1421 – 1434. [PubMed]
  • Krank MD. Kondycjonowanie pawłowskie etanolem: śledzenie znaków (autoshaping), warunkowa zachęta i samodzielne podawanie etanolu. Alkohol Clin Exp Res. 2003; 27: 1592 – 1598. [PubMed]
  • Krank MD, O'Neill S, Squarey K, Jacob J. Zachęta ukierunkowana na cel i sygnał: uwarunkowane podejście, poszukiwanie i konsumpcja ustalona przy użyciu niesłodzonego alkoholu u szczurów. Psychopharmacology (Berl) 2008; 196: 397 – 405. [PubMed]
  • Kruzich PJ, Congleton KM, Patrz RE. Uwarunkowane przywrócenie zachowania związanego z poszukiwaniem leku z dyskretnym bodźcem złożonym klasycznie uwarunkowanym dożylną kokainą. Behav Neurosci. 2001; 115: 1086 – 1092. [PubMed]
  • Lajoie J, Bindra D. Interpretacja autoshaping i powiązanych zjawisk w kategoriach samych bodźców stymulujących bodźce. Canadian Journal of Psychology. 1976; 30: 157 – 173.
  • Locurto C, Terrace HS, Gibbon J. Autoshaping, losowa kontrola i trening omijania u szczura. J Exp Anal Behav. 1976; 26: 451 – 462. [Artykuł bezpłatny PMC] [PubMed]
  • Locurto CM. Wkład autoformowania do podziału warunkowego zachowania. W: Locurto CM, Terrace HS, Gibbon J, redaktorzy. Teoria autoformowania i warunkowania. Academic Press; Nowy Jork: 1981. str. 101 – 135.
  • Lovibond PF. Ułatwienie zachowania instrumentalnego przez apolityczny bodziec warunkowy Pawłowa. J Exp Psychol Anim Behav Process. 1983; 9: 225 – 247. [PubMed]
  • McAlonan GM, Robbins TW, Everitt BJ. Wpływ przyśrodkowych grzbietowych wzgórzowych i brzusznych zmian palidalnych na nabycie warunkowej preferencji miejsca: dalsze dowody na udział brzusznego układu striatopalidowego w procesach związanych z nagrodami. Neuroscience. 1993; 52: 605 – 620. [PubMed]
  • Moore BR. Rola ukierunkowanych reakcji Pawłowa w prostym instrumentalnym uczeniu się gołębia. W: Hinde RA, Stevenson-Hinde J, redaktorzy. Ograniczenia w uczeniu się: ograniczenia i predyspozycje. Academic Press; Londyn: 1973.
  • Myerson J, Myerson WA, Parker BK. Konserwacja bez zbrojenia zmieniającego bodźce: Sterowanie czasowe dziurkami klucza. J Exp Anal Behav. 1979; 31: 395 – 403. [Artykuł bezpłatny PMC] [PubMed]
  • Newlin DB. Porównanie warunkowania lekami i głodu alkoholu i kokainy. Najnowsze Dev Alkohol. 1992; 10: 147 – 164. [PubMed]
  • Newlin DB. Teoria samooceny przetrwania i sprawności reprodukcyjnej (SPFit) teorii zaburzeń używania substancji. Uzależnienie. 2002; 97: 427 – 445. [PubMed]
  • Nilsson J, Kristiansen TS, Fosseidengen JE, Ferno A, van den Bos R. Śledzenie znaków i celów w dorsze atlantyckim (Gadus morhua) Anim Cogn. 2008 W prasie. [PubMed]
  • O'Flaherty WD. The Rig Veda: An Anthology. Penguin Books; Nowy Jork: 1981. Gracze narzekają.
  • Pawłow I. Odruchy warunkowe: badanie aktywności fizjologicznej kory mózgowej. Oxford University Press; Londyn: 1927.
  • Pavlov I. Odpowiedź fizjologa na psychologów. Psychol Rev. 1932; 39: 91 – 127.
  • Peterson GB. Właściwości selekcji odpowiedzi żywności i wzmacniaczy stymulacji mózgu u szczurów. Physiol Behav. 1975; 14: 681 – 688. [PubMed]
  • Peterson GB, Ackil JE, Frommer GP, Hearst ES. Uwarunkowane podejście i zachowanie kontaktowe w kierunku sygnałów dotyczących pożywienia lub wzmocnienia stymulacji mózgu. Nauka. 1972; 177: 1009 – 1011. [PubMed]
  • Phillips AG, McDonald AC, Wilkie DM. Zakłócenie autoshaped odpowiedzi na sygnał nagrody stymulacji mózgu przez leki neuroleptyczne. Pharmacol Biochem Behav. 1981; 14: 543 – 548. [PubMed]
  • Purdy JE, Roberts AC, Garcia CA. Śledzenie znaków w mątwach (Sepia officinalis) J Comp Psychol. 1999; 113: 443 – 449. [PubMed]
  • Rescorla RA. Kondycja Pawłowa. To nie tak, jak myślisz. Am Psychol. 1988; 43: 151 – 160. [PubMed]
  • Robinson TE, Berridge KC. Neuralna podstawa głodu narkotykowego: teoria uzależnienia motywacyjno-uwrażliwiająca. Brain Res Rev. 1993; 18: 247 – 291. [PubMed]
  • Sanabria F, Sitomer MT, Killeen PR. Trening pominięcia negatywnej konserwacji jest skuteczny. J Exp Anal Behav. 2006; 86: 1 – 10. [Artykuł bezpłatny PMC] [PubMed]
  • Schindler CW, Panlilio LV, Goldberg SR. Harmonogramy samopodawania leku drugiego rzędu u zwierząt. Psychopharmacology (Berl) 2002; 163: 327 – 344. [PubMed]
  • Schmajuk NA, Holland PC. Ustawienie okazji: uczenie asocjacyjne i poznanie u zwierząt. Amerykańskie Stowarzyszenie Psychologiczne; Waszyngton, DC: 1998.
  • Schwam E, Gamzu E. Ograniczenia autoshaping w małpce wiewiórki: czynniki bodźca i odpowiedzi. Bull Psychonom Soc. 1975; 5: 369 – 372.
  • Shaham Y, Shalev U, Lu L, De Wit H, Stewart J. Model przywracania nawrotu leku: historia, metodologia i główne odkrycia. Psychopharmacology (Berl) 2003; 168: 3 – 20. [PubMed]
  • Silva FJ, Silva KM, Pear JJ. Śledzenie celu w zależności od celu: efekty odległości warunkowego bodźca warunkowego do nieuwarunkowanego. J Exp Anal Behav. 1992; 57: 17 – 31. [Artykuł bezpłatny PMC] [PubMed]
  • Skinner BF. Zachowanie organizmów. Appleton-Century-Crofts; Nowy Jork: 1938.
  • Staddon JER, Simmelhag VL. Eksperyment „przesądu”: ponowne zbadanie jego implikacji dla zasad zachowania adaptacyjnego. Psychol Rev. 1971; 78: 3 – 43.
  • Stead JD, Clinton S, Neal C, Schneider J, Jama A, Miller S, Vazquez DM, Watson SJ, Akil H. Selektywna hodowla dla rozbieżności w poszukiwaniu cech nowości: odziedziczalność i wzbogacenie w spontanicznych zachowaniach związanych z lękiem. Behav Genet. 2006; 36: 697 – 712. [PubMed]
  • Stewart J, de Wit H, Eikelboom R. Rola bezwarunkowych i uwarunkowanych efektów leków w samopodawaniu opiatów i stymulantów. Psychol Rev. 1984; 91: 251 – 268. [PubMed]
  • Stiers M, Silberberg A. Odpowiedzi dźwigniowe u szczurów: konserwacja z i bez negatywnej odpowiedzi-zależność od wzmacniacza. J Exp Anal Behav. 1974; 22: 497 – 506. [Artykuł bezpłatny PMC] [PubMed]
  • Timberlake W, Grant DL. Automatyczne kształtowanie u szczurów prezentacji innego szczura przewidującego jedzenie. Nauka. 1975; 190: 690 – 692.
  • Timberlake W, Lucas GA. Podstawa zabobonnego zachowania: przypadkowa przygodność, substytucja bodźców lub zachowanie apetyczne? J Exp Anal Behav. 1985; 44: 279 – 299. [Artykuł bezpłatny PMC] [PubMed]
  • Toates F. Systemy motywacyjne. Cambridge University Press; Cambridge, Wielka Brytania: 1986.
  • Toates F. Interakcja procesów poznawczych i procesów stymulacyjnych w kontroli zachowania. Neurosci Biobehav Rev. 1998; 22: 59 – 83. [PubMed]
  • Tomie A. Lokalizowanie wskazówek dotyczących nagradzania przy manipulandum odpowiedzi (CAM) wywołuje objawy nadużywania narkotyków. Neurosci Biobehav Rev. 1996; 20: 505 – 535. [PubMed]
  • Tomie A. Autoshaping i zażywanie narkotyków. W: Mowrer RR, Klein SB, redaktorzy. Podręcznik współczesnych teorii uczenia się. Erlbaum; Hillsdale, NJ: 2001. str. 409 – 439.
  • Tomie A, Aguado AS, Pohorecky LA, Benjamin D. Ethanol wywołuje reakcję impulsywną w procedurze wyboru operatora opóźnienia nagrody: impulsywność przewiduje automatyczne kształtowanie. Psychopharmacology (Berl) 1998; 139: 376 – 382. [PubMed]
  • Tomie A, Aguado AS, Pohorecky LA, Benjamin D. Indywidualne różnice w autologicznym kształtowaniu nacisku dźwigni u szczurów przewidują wywołane stresem uwalnianie kortykosteronu i mezolimbiczne poziomy monoamin. Pharmacol Biochem Behav. 2000; 65: 509 – 517. [PubMed]
  • Tomie A, Brooks W, Zito B. Sign-tracking: poszukiwanie nagrody. W: Klein S, Mowrer R, redaktorzy. Współczesne teorie uczenia się: uwarunkowania Pawłowa i status tradycyjnej teorii uczenia się. Lawrence Erlbaum Associates; Hillsdale, NJ: 1989. str. 191 – 223.
  • Tomie A, Festa ED, Sparta DR, Pohorecky LA. Kierowane przez dźwignię automatyczne kształtowanie bodźca indukowane bezwarunkowym roztworem bodźca sacharyna-etanol: wpływ stężenia etanolu i odstępów między próbami. Alkohol. 2003; 30: 35 – 44. [PubMed]
  • Tomie A, Grimes KL, Pohorecky LA. Cechy behawioralne i substraty neurobiologiczne wspólne dla Pawłowskiego śledzenia znaków i nadużywania narkotyków. Brain Res Rev. 2007 W prasie. [Artykuł bezpłatny PMC] [PubMed]
  • Tomie A, Tirado AD, Yu L, Pohorecky LA. Pawłowskie procedury kształtowania kształtują kortykosteron w osoczu i poziom noradrenaliny i serotoniny w korze przedczołowej u szczurów. Behav Brain Res. 2004; 153: 97 – 105. [PubMed]
  • Uslaner JM, Acerbo MJ, Jones SA, Robinson TE. Przypisanie zachęty do bodźca, który sygnalizuje dożylne wstrzyknięcie kokainy. Behav Brain Res. 2006; 169: 320 – 324. [PubMed]
  • Uslaner JM, Dell'orco JM, Pevzner A, Robinson TE. Wpływ zmian w obrębie jądra podwzgórza na śledzenie znaków na bodźce powiązane z nagrodami żywnościowymi i lekami: ułatwienie przyznawania premii motywacyjnych? Neuropsychofarmakologia. 2007 In Press. [PubMed]
  • Wasserman EA. Pawlovskie kondycjonowanie za pomocą wzmocnienia cieplnego powoduje wywieranie piskląt w kierunku bodźców. Nauka. 1973; 181: 875 – 877. [PubMed]
  • Wessels MG. Wpływ wzmocnienia na zachowania przygniatania gołębi w eksperymencie z automatycznym kształtowaniem. Journal of Experimental Analysis of Behavior. 1974; 21: 125 – 144. [Artykuł bezpłatny PMC] [PubMed]
  • Biały NM. Uzależniające leki jako wzmacniacze: wielokrotne częściowe działania w systemach pamięci. Uzależnienie. 1996; 91: 921 – 949. dyskusja 951-965. [PubMed]
  • Biały NM, Chai SC, Hamdani S. Poznanie preferencji wskazań morfiny: konfiguracja cue określa efekty uszkodzeń. Pharmacol Biochem Behav. 2005; 81: 786 – 796. [PubMed]
  • Wilkie DM, McDonald AC. Autokształtowanie u szczura z elektryczną stymulacją mózgu jako USA. Physiol Behav. 1978; 21: 325 – 328. [PubMed]
  • Williams BA, Dunn R. Preferowanie kondycjonowanego wzmocnienia. J Exp Anal Behav. 1991; 55: 37 – 46. [Artykuł bezpłatny PMC] [PubMed]
  • Williams D, Williams H. Konserwacja gołębi: Długotrwałe dziobanie pomimo warunkowego braku wzmocnienia. J Exp Anal Behav. 1969; 12: 511 – 520. [Artykuł bezpłatny PMC] [PubMed]
  • Wyvell CL, Berridge KC. Amfetamina półleżąca zwiększa uwarunkowany efekt zachęty nagrody sacharozy: zwiększenie „chęci” nagrody bez zwiększonego „lubienia” lub wzmocnienia odpowiedzi. J Neurosci. 2000; 20: 8122 – 8130. [PubMed]
  • Zamble E, Hadad GM, Mitchell JB, Cutmore TR. Pawłowskie uwarunkowania pobudzenia seksualnego: efekty pierwszego i drugiego rzędu. J Exp Psychol Anim Behav Process. 1985; 11: 598 – 610. [PubMed]
  • Zener K. Znaczenie zachowania towarzyszącego warunkowanemu wydzielaniu śliny dla teorii warunkowej odpowiedzi. Am J Psychol. 1937: 384 – 403.