Selelekela

Lenaneo la pele la lenaneo la Narcotic Anonymous le re: “Re ile ra lumela hore ha re na matla ho feta bokhoba ba rona ba tahi — hore bophelo ba rona bo se bo sa laoloe” [1]. Sena se bontša kamoo batho ba lemaletseng ho hloka lithethefatsi ba iphumanang ba thulana le lithethefatsi, leha ba tseba hore ho sebelisa lithethefatsi ke ketso e fosahetseng. [2]-[4]. Ebile, lets'oao le lemalloang la ho lemalla lithethefatsi ke ho qobella batho ho sebelisa lithethefatsi [5]. Letšoao la boitšoaro bo joalo ba ts'ebetso ea methapo ea methapo le totobala litekong tse laoloang moo lithethefatsi li bonts'ang "motho ea itlhalositseng" phoso: ho se lumellane pakeng tsa karabelo ea boitšoaro bo amanang le liqeto tse amanang le lithethefatsi le boleng bo tlase bo tlisoang ke lekhoba leo. [4], [6], [7]. Ha e kopantsoe le tahlehelo ea taolo ea kelello ea boitšoaro bo sa thibaneng, kamora ho pepesehela lithethefatsi, phapang ena lipakeng tsa merero ea kelello le litloaelo tse kopaneng li ka fella ka phetoho ho tloha ho tloaelo ho ea ho boits'oaro bo qobellang ho batla lithethefatsi [8].

Ho felloa ke taolo ea kelello le liphoso tse itlhalositseng ho fihlela joale ho felisitse tlhaloso e nang le motheo ke litekanyetso tse hlophisitsoeng tsa bokhoba [9]-[13]. Likhopolo tse fetileng tsa khokahano ea lithethefatsi tsa bokhoba ba lithethefatsi, tse hlahisoang haholo-holo ka har'a moralo oa thuto ea ho matlafatsa, sheba tšebeliso e le boemo ba methati ea ho ithuta tloaelo (ts'usumetso ea karabelo) [9]-[13]. Khopolo-taba ea mantlha ea mefuta ena kaofela ke hore phello ea litlhare tsa litlhare ho ho saena ha dopamine, eo ho nahanoang hore e na le lets'oao la ho ruta le susumetsang, e fella ka ho matlafatsa butle-butle mekhatlo e joalo. Phello ena e lebisa mekhoeng e tlamang ea ho batla lithethefatsi. Le ha pono ena e fokotsehileng ea bokhoba ba tahi e hapile likarolo tse ling tsa ketsahalo ena, tumellano e ntseng e hola ea lingoliloeng tsa bokhoba e bontša hore litsamaiso tse ngata tsa ho ithuta li kentse letsoho bolwetseng. Ke setšoantšo se rarahaneng joalo feela se kenyelletsang ts'ebetso ea kelello, hammoho le lits'ebetso tse maemong a tlase, se ka hlalosang mefuta e fapaneng ea boits'oaro bo joalo ka bokhoba. [8], [14].

Ka pampiri ena, re amohela mokhoa oa ho matlafatsa boikokobetso ba thuto ea puso [15] moo liqeto li emeloang maemong a fapaneng a ho khahlapetsoa maemong a fapaneng a thuto. Re nka hore bohlasoa ba matšoao a ho ithuta a itšetlehileng ka dopamine bo hokahanya maemo a sehlopha sa mmuso hammoho [16]. Re boela re nka hore lithethefatsi tsa tlhekefetso litheknoloji li utsoetsa mokhoa oa puisano lipakeng tsa maemo. Ho ipapisitsoe le likhopolo tsena, re bonts'a hore mokhoa o tlalehiloeng oa ho lemalla lithethefatsi o hlaha kahare ho moralo oa ho khothaletsa boithuto ba maemo a phahameng ha ho pepesetsoa tšebeliso e mpe ea lithethefatsi ho sitisa ho ithuta ka boleng ho latela maemo a phahameng. Ts'ebetso ena e baka tšebeliso e kholo ea boleng ba khetho ea lithethefatsi maemong a tlase a tloaelo 'me ke kahoo e khannang boitšoaro bo tloaetseng ho batla lithethefatsi. Joale re bonts'a hore "ha re rate" empa ho phehella ho ts'oara lithethefatsi ho ka hlalosoa e le lits'ebetso tse tlase tse hiriloeng ke lithethefatsi, ha litsamaiso tse phetseng hantle tse maemong a holimo a emelang taolo ea boitšoaro. Ntle le moo, re bonts'a hore mohlala o hlahisitsoeng o ka ikarabella bakeng sa bopaki ba morao-rao mabapi le nts'etsopele e potlakileng ea nts'etsopele ea lithethefatsi tsa dopamine tse fumanehang kahare ho dorsal striatum, ka ho latellana, le ho its'etleha ha mokhoa ona ho dopamine spiraling circry.

Lisebelisoa le mekhoa

Li-preliminaries

Ka concordance le lingoliloeng tse ngata tsa kelello tsa kelello, thuto ea rona ea matlafatso ea hierarchical [15], [18] Moralo o nka hore leano la mohopolo le ke keng la bonoa le "ho hlahisa tee" le ka rojoa ka tatellano ea liketso tse tlase: metsi a belang, ho tšela tee ka pitseng, jj. molaoli (Setšoantšo sa 1A). Neurobiologically, maemo a fapaneng a mokhahlelo oa liqeto ho tloha boemong ba kelello ho isa maemong a makoloi a emeloa haufi le mokokotlo oa rostro-caudal oa potoloho ea cortico-basal ganglia (BG) [19]-[21]. Potoloho ena e na le likarolo tse 'maloa tse koaletsoeng ka kotloloho pakeng tsa cortex ea kapele le gangal [22], [23] (Setšoantšo sa 1B). Le ha litletle tsa kahare li le kahar'a pontšo e sa laoleheng ea liketso, li-loudal tsa caudal, tse nang le methapo ea kutlo ea motor-cortex le dorsolateral striatum, mekhoa ea boemo bo tlase. [19]-[21].

Download:

• PPT

  Slide sa PowerPoint

• PNG

  setšoantšo se seholoanyane (1.06MB)

• TIFF

  setšoantšo sa pele (1.56MB)

Setšoantšo sa 1. Mokhatlo o hlophisitsoeng oa boitšoaro le tsamaiso ea cortico-BG.

A, Mohlala oa sehlopha sa liqeto tsa likhetho tse peli tse fapaneng: Lithethefatsi le lijo. Mokhoa o mong le o mong oa ts'ebetso o emeloa ka mekhahlelo e fapaneng ea ho hula, ho nahanoa hore e entsoe ka li-loort tse fapaneng tsa cortico-BG. Ho batla mofuta o mong le o mong oa moputso ho ka latela kotlo e kholo. B, Likhokahanyo tsa Glutamatergic tse tsoang libakeng tse fapaneng tsa pele tsa projeke ho isa libakeng tse ikemetseng ebe li khutlela ho PFC ka pallidum le thalamus, li etsa loops tse 'maloa. Ka marang-rang a striato-nigro-striatal dopamine, libaka tse ka hare tsa striatum li susumetsa libaka tse eketsehileng tsa dorsal. vmPFC, ventral medial prelineal cortex; OFC, orbital frontal cortex; dACC, dorsal anterior cingrate cortex; SMC, sensor-motor cortex; VTA, sebaka sa ho kenella hare; SNc ,antianti nigra par compacta. Setšoantšo sa 1B E fetotsoe ho tloha ho 21.

doi: 10.1371 / journal.pone.0061489.g001

Ka har'a potoloho ena, ts'ebetso ea phasic ea li-neurbrain dopamine (DA) e ts'ebetsang striatum e bonts'a phoso e pakeng tsa moputso o boletsoeng esale pele, ka tsela eo e nang le tlhaiso-leseling e matlafatsang [24]. Tsena tsa projeke tsa DAergic li theha bohokahanyi bo kopanyang bo kopanyang libaka tse kenang ka hare tsa striatum ho ea libakeng tse khutsitseng tse tsoelang pele ka likhokahanyo tseo ho thoeng ke "li-spiraling". [25]-[27] (Setšoantšo sa 1B). Ka mokhoa o atlehileng, mokhatlo o joalo o fetisang phepelo ea marang-rang ho hokahanya rostral le Caudal cortico-BG, o lumella ho kopanya ho tlohang ho tse ling ho ea ho boemeli bo botle. Ka mokhoa o tšoanang, mehopolo ea DA e anngoe hore e fane ka sebopeho sa ts'ebetso ea tsoelo-pele ea phoso ea ho bolela moputso ka maemo a hloahloa a sehlopha sa (ho kenyeletsa tsebo e ke keng ea lekanngoa mabapi le boleng ba khetho ea boitšoaro). Phoso ena e sebelisetsoa ho ntlafatsa boleng ba liketso maemong a hlakileng haholoanyane [16]. Ka mantsoe a mang, mekhahlelo ea DA e lumella maemo a bonyatsi a tlhaiso-leseling ho tataisa thuto maemong a qaqileng a boleng ba boleng ba boleng.

Setšoantšo sa tharollo

Mabapi le mohopolo oa computational oa ho matlafatsa thuto [28] (RL), moemeli (molemong oa rona kapa phoofolo) o ithuta ho etsa liqeto tse nepahetseng ka ho ntlafatsa boleng ba eona bo neng bo lekantsoe pele, bakeng sa setho ka seng sa mehato ea mmuso, , ha moputso e amoheloa ke moemeli ka nako ka lebaka la ho etsa ketso maemong a kgothaletsang (tsusumetso) . Bohlokoa e ntlafatsoa ka ho sebelisa komporo ea polelo ea phoso ea moputso. Letshwao lena ha le felle feela moputsong o amohetseng hang-hang (), empa hape le ka boleng ba mmuso o mocha moemeli o qetella a le teng, kamora hore ketso eo e etsoe. E qotsoa ke , boleng bona bo tsoetseng pele ba nakoana bo emela kakaretso ea meputso ea nako e tlang eo phoofolo e lebelletseng ho e fumana ho tsoa maemong a hlahang, , ho ea pele. Phoso ea ho noha e ka kopantsoe ke equation e latelang:

(1)

Ka mokhoa o ts'oanang, lets'oao la phoso ea ponelo-pele le kopanya phapang lipakeng tsa tse lebelletsoeng le boleng bo khotsofatsang ba ketso. Boemong ba liqeto tsa boikhethelo, leha ho le joalo, ho fapana le ho ithuta - Lits'ireletso ka botsona litekong tse fapaneng, litekanyetso tse fetang tse sa thabiseng li ka ts'oants'a lets'oao la ho ruta le maemong a tlase. Kaha maemo a hloahloeng a phahameng a phahameng a emela lipontšo tse sa rateheng tsa maemo a tikoloho, ho ithuta ho etsahala ka potlako maemong ao. Sena se bakoa ke boemo bo tlase ba sebopeho sa boitšoaro bo sa bonahaleng: morero oa tšebetso o ka hlahisoa e le mohato o le mong (tekanyo e le 'ngoe) maemong a hloahloa a phahameng le joalo ka liketso tse qaqileng tse fapaneng (boholo bo fapaneng) maemong a tlase. ea sehlopha sa bosebeletsi. Boleng ba maemo a holimo a moralo ona oa tšebetso bo tla ithutoa kapele ha bo bapisoa le maemo a qaqileng moo liphoso tsa moputso li tla hloka ho khutlisetsa mehato eohle e qaqileng ea ketso. Kahoo, ho hlophisa boleng bo tlase ka tlhahisoleseling ea boleng bo tsoang maemong a holimo ho ka potlakisa ho hokahanya ha litekanyetso tsena. Mokhoa o mong o sebetsang oa lipalo o etsa sena ke ho nahana hore bakeng sa ho etsa komporo ea letšoao le boletsoeng esale pele ho Boemong ba ho amohela lintho, , boleng ba nakoana bo ntlafalitsoeng, , e tsoa boemong bo le bong bo phahameng ba ho qhekelloa, [16]:

(2)

Ho boloka ts'epo, tekanyetso ea 2 e ka sebelisoa bakeng sa ho etsa phoso ea ho bolela feela ha ho etsoa ketso ea ho qetela ea khetho ea mantlha (bona setšoantšo sa S1 ho Fanala S1). Maemong a mang, ho ithuta ka boleng maemong a fapaneng ho hlaha ka boikemelo, joalo ka ha ho etsoa equation 1. Maemong ana ka bobeli, lets'oao la ho ruta le sebelisoa ho ntlafatsa boleng ba pele ka nako e lumellanang.

(3)
moo sekhahla sa thuto. Mofuta ona oa ho arolelana tlhahisoleseling o pakeng tsa litaba o utloahala ka ho hlakileng kaha o bonahatsa sebopeho sa mokha oa DA, o nkile tlhahisoleseling ka sepheo sa tataiso. Ka nako e ts'oanang, ho tataisoa ke maemo a sa laoleheng ho potlakisa ho ithuta, ho fokotsa maemo a phahameng a thuto ea boleng bo phahameng maemong a qaqileng [16].

Ka pampiri ena re bonts'a hore tšebelisano lipakeng tsa mofuta o fetotsoeng oa mohlala e hlahisitsoe ho [16] le litlamorao tse ikhethang tsa litla-morao tsa lithethefatsi tsa tlhekefetso holima dopaminergic li ka hula lintlha tse amanang le tšebeliso ea litekanyetso maemong a fapaneng a tekanyo: boits'oaro le methapo ea methapo ea methapo. Taba ea pele, mofuta o mocha o tlisa tlhaloso e kopanetsoeng bakeng sa lintlha tse 'maloa tse khahlang tsa boitšoaro tse amanang le ho lemalla lithethefatsi (mohlala, phoso e itlhalositseng) [4], [6], [7]). Taba ea bobeli, re ka ikarabella bakeng sa bopaki bo fapaneng mabapi le matla a tokollo ea dopamine e ntšitsoeng ka lithethefatsi [17].

Re fetola mohlala o hlahisitsoeng [16] ka mokoa o latelang. Re etsa hore mohlala o sebetse hantle ho feta boemong ba mohopolo oa ho sebetsa ka ho o busetsa le , ho equation 2, hobane litekanyetso tse peli li fetohela boemong bo ts'oanang (bona setšoantšo sa S2 ho Fanala S1, molemong oa computational le neurobiological):

(4)

Mona, ke khetho e ke keng ea amoheloa mme ke ketso ea ho qetela ea tatellano ea boitšoaro e tlatsang khetho ena ka botlalo. Ka mokhoa o ts'oanang ke boleng bo khotsofatsang ba , e akarelletsang (boleng bo khotsofatsang ba ).

Ka bomalimabe, lithethefatsi tse fapaneng tse hlekefelitsoeng ke batho li arolelana moaho oa mantlha oa litheko tsa dopamine ka har'a striatum [29]. Ka hona, re kenyeletsa phello ea lithethefatsi tsa sehlahisoa ka ho eketsa leeme, , (bona le [9]-[12]) ho lets'oao la phoso le boletsoeng esale pele le tsamaisoang ke li-dopamine neurons (bona setšoantšo sa S3 ho Fanala S1, molemong oa computational le neurobiological):

(5)

mona e hapa litlamorao tsa lithethefatsi ka kotloloho litlamong tsa DA, mme ke boleng ba eona bo matlafatsang ka lebaka la litlamorao tsa euphorigenic (bona Fanala S1 bakeng sa tlhaiso-leseling e tlatselletsang).

Ha equations 3 le 5 mmoho li hlalosa mochine oa khomphutha ho ntlafatsa boleng mohlaleng oa rona, re fana ka maikutlo a hore mochine oa tlholisano o thehiloeng ho marang-rang o khetholla boemo ba ho se sebetse bo laolang boitšoaro. Sena se bululetsoe ke mochine o hlahisitsoeng ho [29] bakeng sa ho ngangisana pakeng tsa litsamaiso tse tloahelehileng le tse lebisitsoeng ho sepheo. Mabaka ana, ntlheng e 'ngoe le e' ngoe ea liqeto, ke boemo ba tšitiso bo nang le bonnete bo phahameng feela ba ho hakanya boleng ba likhetho tse laolang boitšoaro. Ha boemo bona bo se bo nkile qeto ea ho nka bohato, maemo ohle a tlase a sehlopha sa maemo a phahameng a tla romelloa ke boemo bona bo phahameng ho kenya ts'ebetsong ketso e khethiloeng e le tatellano ea likarabo tsa makoloi tsa pele (bona likarabo tsa pele) Fanala S1 bakeng sa tlhaiso-leseling e tlatselletsang; Setšoantšo sa S4 ho Fanala S1; Setšoantšo sa S5 ho Fanala S1). Kamora ho fumana karabo ea moputso ho tsoa tikolohong, boleng lipakeng tsohle li ntlafatsoa. Mokhoa ona oa ho pheha khang o sa tsejoeng o bolela esale pele hore joalo ka ha mekhoa ea ho ngola e fetoha habonolo, o na le bokhoni bo phahameng ba ho lekana nakong ea methati ea pele ea ho ithuta, ka hona, o laola boitšoaro maemong ana. Leha ho le joalo, kaha maemo a hloahloa a sebelisa setšoantšo se kopaneng sa tikoloho (mohlala ka lebaka la mesebetsi e mengata e nyane), matla a bona a boleng bo holimo ha a ts'oana hantle le a maemo a qaqileng. Ka mantsoe a mang, kamora thupelo e pharaletseng netefatso e amanang le boleng bo lekantsoeng e tlase bakeng sa maemo a tlase a maemo a phahameng ha a bapisoa le maemo a holimo. Ka hona, ka ho ithuta ho tsoelang pele, maemo a tlaase a sehlopha sa ba busang a nka taolo holim'a khetho ea ketso, ha ho hloka botsitso ha bona ho fokotseha butle butle. Sena se lumellana le lintlha tse 'maloa tsa bopaki bo bonts'ang matla a tsoelo-pele a bokhoni ba dorsal holim'a "ventral striatum" taolong ea ho batla lithethefatsi (hammoho le ho batla meputso ea tlhaho) [8], [30], [31].

Results

Tekanyo ea boleng ba Hierarchy e hlaha tlasa lithethefatsi eseng meputso ea tlhaho

Ha ho bapisoa le mefuta ea tlhabollo ea tlatsetso e tlatselletsang molemong oa ho ithuta [9]-[13] tse ipapisitseng le mokhoa oa ho etsa liqeto o le mong, ak'haonte ea rona e hahiloe holim'a moralo oa lits'ebetso tse ngata tse sebetsanang. Ka lebaka leo, leha mofuta oa litlamorao tsa setlamatlama ho lets'oao la phoso ea ho noha ka mohlala oa rona o ts'oana le oa pele [9]-[12], e hlahisa litlamorao tse fapaneng. Phokotso ea nakoana ea dopamine e theotsoeng lithethefatsi e eketsa phokotso ea ho bolela esale pele boemong bo bong le bo bong ba maemo mme ka lebaka leo, e kenyelletsa leeme, , phetisong ea tsebo ho tloha boemong bo le bong ba ho khelohela ho e latelang, ho ea ka lehlakoreng le letle la tataiso ho ea maemong a phahameng. Leeme lena le etsa hore boleng ba asymptotic ba ho batla lithethefatsi ka tekanyo e itseng bo be diyuniti tse phahameng ho feta tsa mokato o mong o sa ratoang (Setšoantšo sa 2B). Ho bokellana ha liphapang tsena haufi le rostro-caudal axis butle-butle ho etsa hore ho be le phapang e kholo boleng ba boits'oaro ba ho batla lithethefatsi lipakeng tsa maemo a holimo le tlase tsa maemo a holimo. Kahoo, leha e lateloa ke kotlo e matla, boleng ba boitšoaro bo amanang le lithethefatsi bo lula bo le bobebe maemong a tlase a koloi, ha bo ntse bo fetoha bo bobe maemong a kelello. Ka mantsoe a mang, mohlala o bolela esale pele hore ho bokella phello ea lithethefatsi holim'a spirals tsa DA ho eketsa boleng ba ho batla lithethefatsi maemong a boemo ba makoloi ho fihlela ho boemo bo phahameng hoo esita le kotlo e matla ea tlhaho e ke keng ea khona ho e fokotsa ka ho lekana. Re fana ka maikutlo a hore sena se hlalosa ho se lumellane ho pakeng tsa tlhahlobo ea kelello le boemo bo tlase ba boitšoaro bo amanang le lithethefatsi ho batho ba lemaletseng lithethefatsi. Ka mantsoe a mang, re fana ka maikutlo a hore ho batla lithethefatsi ho tlamang le ho fokotsoa haholo ho litjeo tse amanang le tsona ho bakoa ke litlamorao tsa litheko tsa ts'ebeliso ea lithethefatsi mochini o ts'ehetsang dopamine o fetisang tlhaiso-leseling har'a mekhahlelo ea sehlopha sa liqeto.

Download:

• PPT

  Slide sa PowerPoint

• PNG

  setšoantšo se seholoanyane (289KB)

• TIFF

  setšoantšo sa pele (471KB)

Setšoantšo sa 2. Khothatso ea lijo le lithethefatsi maemong a fapaneng a litšibollo (liphetho tsa sim sim).

Litekong tsa pele tse 150 moo ho sa fuoeng kotlo e latelang moputso, boleng ba ho batla moputso oa tlhaho maemong ohle bo fetohela ho ba 10 (A). Bakeng sa lithethefatsi, leha ho le joalo, phello e tobileng ea pharmacological ea lithethefatsi (, beha ho) sephetho sa boleng ba asymptotic boemong bo bong le bo bong ho ba diyuniti tse phahameng ho feta tsa boemo bo le bong bo phahameng ba ho se bitse (B). Kahoo, ha e lateloa ke kotlo, athe litoro tsa kelello li fana ka boleng bo bobe boikhethong bo batlang lithethefatsi, li-loops tsa boemo bo phahameng tsa motlakase li fumana tse lakatsehang tse batlang lithethefatsi (boleng bo nepahetseng). Li-curve tse nang le palo ena li bonts'a ho iphetola hoa "phoofolo" e le 'ngoe kahoo ho ne ho se na tlhahlobo ea lipalo.

doi: 10.1371 / journal.pone.0061489.g002

Le ha lithethefatsi, ka mohlala oa rona, li fella ka boleng bo sa lekanyetsoang maemong ohle, boleng ba meputso ea tlhaho bo fetoha boleng bo lekanang mehatong eohle, ka lebaka la ho haelloa ke ts'ebetso e tobileng ea theknoloji mochineng oa ho saena oa DA (). Ka lebaka leo, ho se lumellane kapa ho phahamisa maemo ka botlalo ho ke ke ha bonoa bakeng sa moputso oa tlhaho (Setšoantšo sa 2A). Ho fetisoa ha likarabo tse batlang lithethefatsi litekong tse tlase tsa maemo a phahameng a mosebetsi ho lokela ho fella ka ho rata lithethefatsi tse sa tloaelehang ho feta meputso ea tlhaho, le ho ikamahanya le ho feta liketsong tse amanang le lithethefatsi.

Dopamine e arohaneng e arabelang ka har'a ventral le dorsal striatum ho lithahasello tse amanang le lithethefatsi

Neurobiologically, likarolo tse fapaneng tsa mekhahlelo ea litheko ho fumana le ho bontša boits'oaro ba ho batla lithethefatsi e se e le karolo ea bohlokoa lipatlisisong tsa bokhoba ba taolo. Bopaki bo fetolang bo tsoang mefuteng e fapaneng ea lipatlisiso bo fana ka maikutlo a hore phetoho ea boits'ebetso ho tloha boithabisong ho isa ho ts'ebeliso e mpe ea lithethefatsi e bonts'a phetoho ea boleng ba moea ho tloha ho porral ho ea ho dorsolateral striatum [8], [33], [34], e tsamaellanang le phetoho ho tloha maemong a hlakileng ho ea maemong a qaqileng mohlaleng oa rona. E lumellana le mohlala oa rona, marang-rang a arohaneng a DA a hokahanyang setsi ho ea libakeng tse kenang butle tsa striatum o bontšoa a bapala karolo ea bohlokoa phetohong ena [25].

Thutong ea bohlokoa ea morao tjena Willuhn et al. [17] e ile ea hlahloba mohlala oa tokollo ea dopamine ho arabela likhakanyo tse amanang le lithethefatsi kahare ho moea le dorsolateral striatum ea likhoto nakong ea libeke tse tharo tsa ho tšoaroa ke koae. U sebelisa volclic voltlicet e potlakileng, sepheo sa bohlokoa e ne e le hore sephetho sa DA se tsitsitseng ts'ebetsong ea "ventral striatum" se hlaha le kamora boikoetliso bo fokolang haholo. Ka lehlakoreng le leng, dorsolateral striatum e bontsitse cue-triggered DA efflux feela kamora thupelo e pharalletseng, 'me nts'etsopele ea mokhoa ona oa tokollo e ile ea nyamela ha ho ne ho qosoa lesela ka hare ho lefatše.

Hoba qeto ea nakoana ea voltammetry e lebelo e potlakisang ho feto-fetoha ha maemo ho potelletseng, mokhoa o bonoang oa efflux oa DA o lokela ho hlahisoa ke "phasic" ho supa DA mme ka hona, ka polelo ea phoso e boletsoeng esale pele, ho latela khopolo ea RL ea dopamine. [24]. Ho latela khopolo ea RL, letšoao la ho bolela esale pele ha u bona tšusumetso e sa lebelloang, le lekana le boleng bo putsa boo khothatso e bo bolelang esale pele. Ka hona, ho lokolloa ha DA ka cue-e kentsoeng ho lekana le boleng bo boletsoeng esale pele ke seo.

Mabaka ana, moralo oa rona oa puso o fana ka litlhaloso tse hlakileng bakeng sa sebopeho se fapaneng sa "infralx" sa ventral le dorsal striatal DA efflux se tlalehiloeng ho [17]. Boleng bo boletsoeng esale pele ke cue e amanang le lithethefatsi maemong a bonohe a bonoang ke maemo a phahameng a phahameng a eketseha ka sekhahla maemong a pele a thupelo (Setšoantšo sa 2B), ka lebaka la tekanyo e tlase ea bothata ba ho ithuta maemong a hloahloa a ho thibeloa. Ka lebaka leo, mohlala oa rona o bonts'a hore "cue-ikiwa e khothalletsoang" ea DA e lokela ho bonoa maemong a morao leha e le ka mor'a thupelo e fokolang (Setšoantšo sa 3). Maemong a qaqileng haholoanyane a boemeli, leha ho le joalo, ts'ebetso ea ho ithuta e ea lieha (Setšoantšo sa 2B), ka lebaka la bophahamo bo phahameng ba sebaka sa bothata, le ho its'etleha ha ho ithuta maemong a phutholohileng ka spirals tsa DA. Ka lebaka leo, cue-eletso e susumetsang ea DA ka har'a dorsolateral striatum e lokela ho hola butle mme e hlokomelehe feela kamora thupelo e batsi (Setšoantšo sa 3).

Download:

• PPT

  Slide sa PowerPoint

• PNG

  setšoantšo se seholoanyane (447KB)

• TIFF

  setšoantšo sa pele (896KB)

Setšoantšo sa 3. Dopamine efflux libakeng tse fapaneng tsa bophelo ba litoropo ho arabela methapong e amanang le lithethefatsi (liphetho tsa simulation).

Tumellanong le tlhahlobo ea tlhaiso-leseling [17], mohlala o bonts'a (mola o ka letsohong le letšehali) hore ka lebaka la likhakanyo tse amanang le lithethefatsi, ho tla ba le dopamine efflux ho ventral striatum, kamora koetliso e fokolang le e pharaletseng. Leha ho le joalo, lithutong tse eketsehileng tsa dorsolateral, leha ho le joalo, litlatsetso tse hlakileng tsa DA li tla hola butle nakong ea ho ithuta. Moetso o bolela esale pele (kholomo ea bobeli ho tloha ka ho le letona) hore ts'ebetso ena e liehisoa ea nts'etsopele ea mekhosi e emisitsoeng ea DA ho dorsal striatum e itšetlehile ka khokahano e ts'epahetseng ea DA e kopanyang serethe le dorsal striatum. Ke hore, ka lebaka la ho khaola lits'oants'o tsa DA, athe karabelo e khahlisitsoeng ke DA e lula e tsitsitse ho ventral striatum, e fokotseha haholo ho dorsolateral striatum. Ntle le moo, mohlala o bolela esale pele (moqolo oa boraro ho tloha ka ho le letona) sephetho se ts'oanang sa cue-eletso ea DA ka har'a dorsolateral striatum bakeng sa taba ea leseli le kenngoeng tseleng. Kamora nako, haeba kamora ho kenella ka bongata litabeng tsa lithethefatsi ho phoofolo e ts'oanang, kotlo e latela ts'ebeliso ea lithethefatsi, mohlala o bolela esale pele (kholomo e ka ho le letona) hore cue e amanang le lithethefatsi e fella ka thibelo ea leqhubu la moea la spirals tsa DA, le kamora ho koetlisoa hanyane. Libakeng tse kenang ka tlung tse ngata, leha ho le joalo, li-efflux tsa DA li fokotseha hanyane ka nako ea ho ithuta, empa li tla lula li le ntle, le kamora ho hira lithethefatsi tse ngata tsa kotlo ea lithethefatsi. Lintlha tse hlahisitsoeng ka palo ena li fumanoa ho phoofolo e le 'ngoe "e lekantsoeng, ka hona ha ho na tlhahlobo ea lipalo.

doi: 10.1371 / journal.pone.0061489.g003

Ho feta moo, mohlala oa rona o hlalosa bopaki bo ho [17] hore nts'etsopele e joalo e liehang ea nts'etsopele ea mofufutso oa DA o kopantsoeng le "dorsolateral striatum" e its'etleha ho "ventral striatum"Setšoantšo sa 3). Mohlaleng oa rona, leseli le etselitsoeng ho se lekane la ventral striatum (boemo ba boleng bo sa lekanyetsoang ka sebopeho) bo fokotseha haholo boleng ba litekanyetso tsa setheo se boletsoeng esale pele ka litekanyetso tse qaqileng ho ipsilateral hemisphere, ka hona, e fokotseha haholo boemo ba cue-e hlahisang DA efflux. E le ho etsa mohlala lesion ea ventral striatum, re mpa re lokisa boleng ba tsohle tse susumetsoang boemong bo phahameng ba maemo a phahameng ho ba zero.

Ka mokhoa o ts'oanang, mohlala oa rona o bolela esale pele hore nts'etsopele ea matšoao a bontšang phasic DA ho dorsolateral striatum e its'etleha botšepehing ba potoloho ea DA e tsamaeang butle (Setšoantšo sa 3). Ebile, kgokahano kahara mokokotlo o atisang ho hlaha oa DA e theola puisano maemong ohle a tšilafalo, e leng se thibelang ho bokelloa hoa leeme le tlatselitsoeng ke lithethefatsi ponts'ong ea matlafatso, hammoho le maemo a bosebeletsi ba liqeto. Ho etsa mohlala oa khokahano ho tsoa ho mokokotlo o itšetlehileng ka DA oa potral ho dorsal striatum, re tiisa boemo bo bong le bo bong ba ho tlosa likhakanyo tsa ponelo-pele ea lehae (joalo ka tekanyo ea 3), ntle le ho fumana boleng ba mmuso o tsoetseng pele oa nakoana ho tloha kapele boemo ba ho thibeloa.

Ntle le moo, mohlala o bolela hore sebopeho sa cue-elicised DA efflux se tla fetoha haeba kamora thupelo e pharalletseng le litloaelo tse amanang le koae, joalo ka tlhahlobo e kaholimo, motho o qala ho kopanya phepelo ea koae ka kotlo e matla. Re bolela esale pele hore efflux ea DA ho arabela cue e amanang le koae e lokela ho fokotseha ka potlako ka tlase ho motheo oa "ventral striatum". Ka dorsolateral striatum, leha ho le joalo, cue-ikiwa e hlahisitsoeng ke DA e lokela ho lula ka holim'a motheo (Setšoantšo sa 3) ka ho fokotseha ho hoholo hoa nakoana. Sena se supa ho abela boleng bo botle ba subjential ho khothalletso ea lithethefatsi maemong a qaqileng, leha ho na le litekanyetso tse mpe (tse ka tlase) tsa motheo maemong a kelello. Hoa hlokomeleha hore polelo ena e boletsoeng esale pele e itšetleha ka mohopolo oa hore kotlo e tšoaroa ke boko feela joalo ka moputso o seng monate. Khopolo ena e tsosa khang: e ts'ehetsoa ka ho hlakileng ke lithuto tsa liteko [35], leha ho le joalo hape e tšohliloe ke ba bang [14], [36]. Ntle le polelo ena, likarolo tse ling tsa mohlala ha lia itšetleha ka hore na kotlo e kentsoe ke dopamine kapa mokhoa o mong oa ho supa.

Mokhoa oa koetliso o sebelisitsoeng ke Willuhn et al. [34] ha e eketsoe ka mokhoa o lekaneng ho hlahisa boitšoaro bo qobelloang ba ho batla lithethefatsi, bo khetholloang ka ho se ananele likotlo tse amanang le lithethefatsi [37], [38]. Kahoo, potso ea bohlokoa e lokelang ho arajoa ke kamano e liehang ho arabeloa ha karabelo ea DA ea cue-in le DLS, le nts'etsopele ea karabelo e potlakileng. Ho latela mohlala oa rona, boits'oaro bo qobelloang ha bo hloke feela boleng bo fetelletseng ba khetho ea lithethefatsi maemong a tlase a maemo a phahameng, empa hape le phetiso ea taolo ea boits'oaro ho tloha tlhokomelong e sa utloahaleng ho ea lits'ebetsong tse tlase tsa maemo a tlase. Nako ea lits'ebetso tsena tse peli e itšetlehile feela ka tse ling: ts'ebetso ea ho lekola theko e phahameng ho latela ponts'o ea phoso, athe phetiso ea taolo ea boits'oaro e boetse e itšetleha ka ho hloka botsitso ha tekanyetso ea boleng. Kahoo, boleng bo phahameng ba litheko tse amanang le lithethefatsi maemong a tlase a sehlopha sa pele li ka etella pele phetoho ea taolo holim'a boits'oaro ho tloha holimo ho ea tlase tlase ho moifo. Palo ea nako ea lits'ebetso tsena ka bobeli e ipapisitse le sekhahla sa ho ithuta le lerata leo maemong a fapaneng a fapaneng ka lona. Fanala S1 bakeng sa tlhaiso-leseling e tlatselletsang). Ka mantsoe a mang, ho ka etsahala hore cue-indued dopamine efflux ho DLS e ka hlaha haholo pele ts'ebetso e qobelloang ea ho batla lithethefatsi e bonahala ka boitšoaro.

Litlamorao tsa boitsoaro ba boleng bo sa lumellaneng ba lithethefatsi le meputso ea tlhaho

Ka boits'oaro, mohlaleng oa rona, haeba kotlo e kopantsoe le lithethefatsi qalong ea tšebeliso ea lithethefatsi ka boithaopo, boleng bo sa laoleheng ba karabelo e batlang lithethefatsi bo fetoha bobe kapele. Ho nka hore ho batla lithethefatsi ho laoloa ke maemo a sa tsitsang nakong ea litekanyetso tsena tse fetileng, tlhahlobo e mpe ea khetho ea lithethefatsi e etsa hore taba eo e sa rate ho ba le ts'ebetso eo. Sena se tla thibela ho kopanngoa ha khetho e matla ea boemo bo tlase ho lithethefatsi ka nako e telele. Kahoo, mohlala o hlalosa ho hloaea ha khetho ea lithethefatsi ho litšenyehelo nakong ea litekanyetso tsa pele tsa ts'ebeliso ea lithethefatsi, empa eseng kamora ts'ebeliso e sa foleng. Kamehla, mehlala ea liphoofolo tse lemalloang e bonts'a hore ho hloka tharollo ha likarabo tse batlang lithethefatsi litlamorao tse mpe tse amanang le lithethefatsi li hlaha feela kamora ho itaola ka nako e telele, empa ho sa sebelisoe lithethefatsi hampe [37], [38]. Ho fapana le mohopolo oa rona, mehlala ea likhomphutha e tlileng pele [9], [10] li hanyetsana ka kotloloho le bopaki bona, hobane li bolela esale pele hore litlamorao tse mpe tse latelang ts'ebeliso ea lithethefatsi ha li na tšusumetso leha e le lithutong tsa pele tsa ho sebelisa lithethefatsi (bona. Fanala S1 bakeng sa tlhaiso-leseling e tlatselletsang).

Mohlala oa rona o tsoela pele ho baka tšitiso ea litlamorao tsa litlamorao tsa lithethefatsi [39]. Ho thibela ke boemo bo etsahalang moo ho pakiloeng pele ho khothaletso A ho nang le lithibelo ho theha setsoalle lipakeng tsa khothalletso e fapaneng B ka sepheo sa mohato o latelang oa thupelo, moo A le B li hlahisoang pele ho phethoa sephetho. [40]. Liphetho tsa ho latela mohlala oa rona sebopeho sa liteko sa Pavlovian (bona Fanala S1 bakeng sa tlhaiso-leseling e tlatselletsang phetolelong ea Pavlovian ea mohlala) e bonts'a hore maemong ka bobeli a meputso ea tlhaho le lithethefatsi, ha boleng bo hakantsoeng boemong bo itseng ba maemo a phahameng bo fihla boemong ba eona bo tsitsitseng (ho fapana le ho hola ntle le tšitiso), ha ho na thuto e tsoelang pele e etsahalang ho seo boemo, kaha lets'oao la phoso e boletsoeng esale pele le fokotsehile ho fihla ho zero (Setšoantšo sa 4). Ka hona, ho hokahanya mohopolo o mocha le moputso o seng o boletsoe esale pele o tla koaloa. Bopaki ba boits'oaro bo bonts'a phello e thibeleng e amanang le litlatsetso tsa lithethefatsi le tsa tlholeho [39] e sebelisitsoe e le phehisano e kholo ea ho nyatsa mokhoa oa phetoho o thehiloeng holima dopamine o thehiloeng tlhahisong [9]. Mona re bonts'itse hore ho shebisisa maemo a phahameng a boemeli le mokhatlo oa dorsal-ventral spiraling dopamine loop o ka ikarabella bakeng sa data e thibelang, ka ho etsa joalo a qoba ho nyatsuoa hona (bona Fanala S1 bakeng sa tlhaiso-leseling e tlatselletsang).

Download:

• PPT

  Slide sa PowerPoint

• PNG

  setšoantšo se seholoanyane (360KB)

• TIFF

  setšoantšo sa pele (615KB)

Setšoantšo sa 4. Matla a thibelo bakeng sa meputso ea tlhaho ea lithethefatsi.

Mohlala o bolela esale pele hore ho thibela ho hlaha bakeng sa meputso ea tlhaho (A) le lithethefatsi (B), ha feela nako ea thupelo ea pele e "atile", ka moo khothatso ea pele e bonts'a boleng ba sephetho. Kamora 'boikoetliso “bo leka-lekaneng”, maemo a kelello a fetohang le maemo ka botlalo a bolela litekanyetso ebe o thibela ho tsoela pele ho ithuta. Leha ho le joalo, ho ithuta ho ntse ho sebetsa mesebetsing ea maemo a tlase ha karolo ea bobeli ea koetliso (tlhahiso e tšoanang ea lintlha tse peli tse qalang) e qala. Kahoo, mohlala oa rona o bolela esale pele hore boikoetliso bo itekanetseng ba ho ikoetlisa bo tla thibela meputso ea tlhaho, bo tla baka ho se lumellane / boits'oaro. Lintlha tse hlahisitsoeng ka palo ena li fumanoa ho phoofolo e le 'ngoe "e lekantsoeng, ka hona ha ho na tlhahlobo ea lipalo.

doi: 10.1371 / journal.pone.0061489.g004

Joalokaha ho se ho boletsoe pejana, lintlha tse 'maloa tsa bopaki li bontša mohato o tsoelang pele oa dorsal holim'a "ventral striatum" taolong ea boitšoaro nakong ea thuto [8], [31], [32]. Ka ho tolokoa ka semelo sa bopaki boo, tekanyetso e sa leka-lekanang ea ho batla lithethefatsi ho pholletsa le bolaoli e boetse e hlalosa boiteko bo sa atleheng ba makhoba ba ho felisa ts'ebeliso ea lithethefatsi kamora boiphihlelo ba nako e telele ba lithethefatsi, ha taolo ea likhetho tse amanang le lithethefatsi e fetohile ho tloha kutloisisong ho ea tlase- lits'ebetso tse tloaelehileng. Boemo bona bo phahameng ba lits'ebetso tse laoloang ke lithethefatsi ka tlhaho bo lebisa ho itšoareng ka boits'oaro ho litšenyehelo tse amanang le lithethefatsi (ho qobella ho batla lithethefatsi), mohlomong ho tsamaea le phoso e itlhalosang. Bakeng sa meputso ea tlhaho, leha ho le joalo, mohlala oa rona o bolela esale pele hore leha boits'oaro bo se nang boitsoaro bo eketseha nakong ea thuto, kaha ha ho na tekanyetso-ho se lumellane ho hlahang maemong ohle a bolaoli, likotlo tse amanang le moputso li tla emisa ho batla moputso.

Mohlala oa rona o shebana le ho lekola liketso molemong oa qeto eo ho nahanoang hore o entsoe, 'me o siea ka thoko tsela eo likhetho tse sa tloaelehang le li-subroutine tse tsamaisanang le tsona tsa maemo a tlase li fumanoeng pele nakong ea kholo. Ho sibolla maemo a phahameng a qeto ho khothaletsoa ho ba ts'ebetso e tlase, e phethoang ka ho qoba tatellano ea liketso tse tlase le ho theha likhetho tse ling tse hloahloa. [41]. Ts'ebetso ena, eo ho thoeng e fetoha phetoho ho tloha dorsal ho ea ventral striatum, e ka lehlakoreng le fapaneng la mochini oa tlholisano o reriloeng mona, bakeng sa ho laola boitšoaro.

Puisano

'Mele o ntseng o hola oa bopaki likarolong tse fapaneng tsa litlatsetso tse fapaneng tsa bokhoba ba tahi, hangata o hlalosoa ka sebopeho sa dichotomy se tloaelo ho latela sepheo [8], [14], [34]. Mokhoa oa ho etsa liqeto oa maiketsetso oo re o sebelisang mona o tlatsana le litlalehong tse joalo tsa tsamaiso e 'meli. Le ha mokhoa oa tšebetso o kopane o sebetsana le li-algorithms tse fapaneng (mohlala-free vs. seka-seka [30]) bakeng sa ho rarolla bothata bo le bong, sebopeho sa hierarkical RL se shebana le lipontšo tse fapaneng tsa bothata bo tšoanang maemong a fapaneng a tšilafalo ea nakoana. Ka khopolo-taba, e ka ba tloaelo kapa sebopeho se lebisitsoeng ho sepheo se ka rarollang e 'ngoe le e' ngoe ea liphatlalatso tse fapaneng tsa bothata. Mohlaleng oa rona, ho bokelloa hoa khethollo ea lithethefatsi ka lebaka la mehopolo ea DA ho etsahala sebakeng seo ho sona boleng ba algorithm bo se nang mohlala (ho ithuta ka tloaelo). Leha ho le joalo, sena ha se bolele hore ho na le litsamaiso tse ipapisitseng le mehlala e sebetsang maemong a hloahloeng. Motho a ka kenyelletsa feela boleng le tataiso ea sepheo tse lebisitsoeng ke PFC ho latela mohlala ka ho nka hore liketso tse maemong a phahameng ka ho fetesisa li hlahlojoa ke sistimi e lebisitsoeng ho sepheo. Leha mathata a joalo a sa fetole mofuta oa sephetho se hlahisitsoeng bukeng ena e ngotsoeng ka letsoho, phetoho ea eona e eketsehileng ho hlaloseng karolo e 'ngoe ea bokhoba e tlohetse lithutong tsa nako e tlang. Ebile, mohlaleng oa rona, ho sa tsotelehe hore na ho na le tsamaiso e tobileng ea sepheo kapa che, ho se tšoane ka boleng ba asymptotic ba ho batla lithethefatsi lipakeng tsa maemo a mabeli a phahameng a puso ho hola ka palo ea maemo a liqeto a laoloang ke ts'ebetso ea "tloaelo" .

Ka lebaka la mohopolo oa rona, ho khutlisetsoa morao ho ka talingoa e le ntlafatso ea litloaelo tse mpe tsa boemo bo bobe ba koloi, kamora nako ea taolo ea maemo a kelello. Ebile, motho a ka nahana hore ka lebaka la kalafo ea kelello (litlamong tsa batho) kapa ho felisoa ka mokhoa o qobelloang (mehlaleng ea liphoofolo ea ho se laole), boleng bo phahameng ba ho batla lithethefatsi boemong bo qaqileng ba sehlopha sa mabotho ha bo felisoe, empa e ba bo nyahamisang ka lebaka ho fetolela taolo khutlela maemong a kelello. Kaha boitšoaro bo amanang le lithethefatsi bo shebana le litlamorao tse mpe maemong a sa laoleheng, ka hona ho batla lithethefatsi ho ka qojoa ha feela lits'ebetso tse phahameng tsa taolo li laola taolo ea boitšoaro. Motho a ka nahana hore mananeo a 12 a tsebahalang (mohlala, Alcoholics Anonymous, Ancotic Anonymous, jj) a sebetsa ka ho hlakisa hore barupeluoa ba lumelle ho se lumellane ha bophelo ba bona bo amanang le lithethefatsi, ka ho etsa joalo ba fa matla a hlakileng a ho laola matla a bona a ho laola boits'oaro. Maemo a sithabetsang kapa ho pepesehela lithethefatsi hape (priming) ho ka nahanoa hore ke lintho tse ka fokotsang matla a ho fokola hoa boitšoaro, a ka lebisang ho hlaheng likarabo tse batloang ke lithethefatsi (ka lebaka la litekanyetso tse phahameng tsa morao-rao tse sa lemoheng. ).

Ka kakaretso, re sisinya ak'haonte e momahaneng bakeng sa liketsahalo tse 'maloa, tse bonahalang li sa tšoane tsa ho lemalla lithethefatsi. Moetso oa rona o fana ka ak'haonte e tloahelehileng bakeng sa tlhaiso-leseling ka likarolo tse fapaneng tsa lipotoloho tsa ventral vs dorsal striatal ho fumaneng lithethefatsi le ts'ebetso ea litloaelo, hammoho le karolo e khethiloeng ea khokahanyo ea fepa-pele ea DA bakeng sa litlamorao tsa batlatsi ba lithethefatsi. Habohlokoa ka ho fetisisa, re bonts'a hore na ts'oaetso e bakoang ke lithethefatsi ho DA ea ventral-to-dorsal e thetsa tlhaiso-leseling e khothatsang ho ba boholong boemelong bo ka lebisang ho se lumellane lipakeng tsa maikutlo a lemalloang a lithethefatsi mabapi le ho batla lithethefatsi le seo ba hlileng ba se etsang. Ho hlakile hore mohlala oa rona ha o rere, ebile ha oa rereloa ho fana ka tlaleho e felletseng ea bokhoba ba lithethefatsi. Ho hlalosa likarolo tse ling tse sa hlalosoang tsa bokhoba ba tahi ho hloka ho kenyelletsa litsamaiso tse ling tse ngata tsa boko tse bontšitsoeng li anngoe ke lithethefatsi tsa tlhekefetso [42]. Mokhoa oa ho kenyelletsa lits'ebetso tse joalo ka har'a marangrang a hlophisitsoeng a kopaneng o lula e le sehlooho sa lipatlisiso tse ling.

Ho tšehetsa Boitsebiso

Fanala S1.

Setšoantšo sa S1,Sebaka sa mehlala ea liqeto tse tla nka maemo a mahlano. Setšoantšo sa S2, Potoloho e tsamaellanang ea neural bakeng sa li-algorithm tse tharo tse ithutoang ka boleng ke sebopeho sa qeto sa boemo bo holimo. A, U sebelisa algorithm e bonolo ea ho ithuta ea TD (equation S7), lets'oao la phoso ea ho bolela esale pele boemong bo bong le bo bong ba ho qhekelloa ho ipapisitsoe le bona ntle le maemo a mang. B, Mohlaleng o ntlafalitsoeng ke Haruno le Kawato (4) (equation S8), boleng ba mmuso bo tsoetseng pele ka nakoana bo tsoa boemong bo le bong bo phahameng ba ho qhekelloa. C, mohlaleng oa rona (equation S9) boleng ba mmuso bo tsoetseng pele ka nakoana bo nkeloa sebaka ka kopanelo ea moputso le boleng ba Q ba ketso e entsoeng maemong a holimo a phumanoang. Setšoantšo sa S3, Mohlala oa rona o bolela esale pele libaka tse fapaneng tsa ts'ebeliso ea lithethefatsi ho potoloho ea ho ithuta moputso: libaka tsa 1 ho isa ho 3. Lithethefatsi tse amang libaka tsa 4 ho isa ho tse 6, ka lehlakoreng le leng, li ke ke tsa baka mekhoa le mekhoa ea ts'ebetso ea methapo e hlahisoang ke papiso ea mohlala oa lithethefatsi, empa e tla hlahisa liphetho tse tšoanang le tsa meputso ea tlhaho. Setšoantšo sa S4, Mosebetsi o sebelisitsoeng bakeng sa ho kopanya mokhoa oa tlholisano o sa thehoeng lipakeng tsa maemo a baphethahatsi ba ho nka taolo holim'a boits'oaro. Setšoantšo sa S5, Sephetho sa lits'oants'o, se bonts'a phetoho ea butle-butle ea taolo ea boits'oaro ho tloha maemong a hloahloa ho ea tlase. Q (s, a) 'me USA) bonts'a boleng bo lekantsoeng le ho hloka botsitso ha lihlopha tsa ketso tsa mmuso, ka ho latellana.

doi: 10.1371 / journal.pone.0061489.s001

(PDF)