DSM-5in Internet-pelitapahtuman rakenteellinen kliininen haastattelu: IGD: n diagnosoinnin kehittäminen ja validointi nuorilla (2017)

. 2017 Jan; 14 (1): 21 – 29.

Julkaistu verkossa 2016 Dec 29. doi:  10.4306 / pi.2017.14.1.21

PMCID: PMC5240456

Abstrakti

Tavoite

Tämän tutkimuksen tarkoituksena oli kehittää ja validoida strukturoitu kliininen haastattelu Internet-pelihäiriöihin (SCI-IGD) murrosikäisillä.

Menetelmät

Ensin tuotimme alustavat kohteet SCI-IGD: stä DSM-5-kirjallisuuskatsausten ja asiantuntijakonsulttien tietojen perusteella. Seuraavaksi rekrytoitiin yhteensä 236-murrosikäisiä sekä yhteisöstä että kliinisestä ympäristöstä arvioimaan SCI-IGD: n psykometrisiä ominaisuuksia.

tulokset

Ensinnäkin SCI-IGD: n havaittiin olevan johdonmukainen noin kuukauden ajanjakson aikana. Toiseksi, SCI-IGD: n ja kliinikon diagnostisen vaikutelman väliset diagnostiset yhdenmukaisuudet olivat hyvistä erinomaisiin. Todennäköisyyssuhde positiivinen ja todennäköisyyssuhde negatiiviset arviot SCI-IGD-diagnoosille olivat vastaavasti 10.93 ja 0.35, mikä osoittaa, että SCI-IGD oli 'erittäin hyödyllinen testi' IGD: n läsnäolon tunnistamiseksi ja 'hyödyllinen testi' poissaolon tunnistamiseksi IGD: n. Kolmanneksi SCI-IGD pystyi tunnistamaan häiriintyneet pelaajat häiriöttömistä pelaajista.

Yhteenveto

Tutkimuksen vaikutuksista ja rajoituksista keskustellaan myös.

Avainsanat: DSM-5 -kriteerit, Internet-pelihäiriöt, jäsennelty kliininen haastattelu, luotettavuus, voimassaolo

JOHDANTO

Viime vuosikymmenen aikana on julkaistu yhä enemmän tutkimuksia Internet-pelihäiriöistä (IGD). Vaikka luonteeltaan alustava, on ehdotettu, että IGD: stä epäillään henkilöillä, joilla on yleisesti pakonomaista käyttöä, vetäytymistä, suvaitsevaisuutta ja kielteisiä vaikutuksia, jotka luonnehtivat aineiden käytön häiriöitä. Viimeaikaiset tutkimukset ovat myös ilmoittaneet henkilöistä, joilla on samanlaisia ​​neurobio-psykososiaalisia ominaisuuksia, kun seulotaan IGD- ja aineiden käyttöhäiriöitä. Kuitenkin käydään huomattavaa keskustelua IGD: n pätevyydestä itsenäisenä kliinisenä häiriönä, koska IGD on käsitteellinen sekaannus ja usein esiintynyt komorbidisissa olosuhteissa. Sen legitimiteetin vahvistamiseksi on välttämätöntä kehittää sovittu määritelmä ja kerätä tietoja sen esittämisestä eri ikäisillä ja kulttuureilla, ajallisella vakaudella ja psykopatologian taustalla olevilla mekanismeilla.

Äskettäin Petry et ai. esitteli mielenterveyden häiriöiden diagnostiikan ja tilastollisen käsikirjan viidennessä painosessa (DSM-5) IGD: n diagnostiikkakriteereihin liittyvän kansainvälisen konsensuksen, joka on tulevaisuuden tutkimuksen arvoinen ehto. Kriittinen ensimmäinen askel yksimielisyyteen perustuvien diagnoosikriteerien määrittämisessä otettiin peliriippuvuusalalla, missä etenemistä oli haitannut diagnoosikriteerien vakiojoukon ja standardoidun arviointityökalun puuttuminen IGD: n mittaamiseksi. Vaikka Petry et ai. tasoitti tietä IGD: n arvioinnille johdonmukaisella tavalla, DSM-5-kriteerien tarkoituksenmukaisuuteen, parhaisiin sanoihin niiden mittaamiseksi ja diagnoosikynnykseen on vielä puututtava. Jotta IGD voidaan sisällyttää erilliseksi mielenterveyden häiriöksi, on kerättävä vankkaa empiiristä näyttöä IGD: n käsitteellistämisen selvittämiseksi joko riippuvuutena tai ei.

IGD: n kliininen diagnoosi käsittää kognitiivisen ja käyttäytymismallin, joka kattaa jatkuvan ja toistuvan Internet-pelien käytön, mikä johtaa merkittävään heikkenemiseen tai ahdinkoon 12 kuukauden ajanjakson ajan, kuten viidellä tai useammalla yhdeksästä kriteeristä vahvistetaan. IGD: n yhdeksän kriteeriä ovat: 1) huolehtiminen Internet-peleistä; 2) vieroitusoireet, kun Internet-pelaaminen otetaan pois; 3) suvaitsevaisuus, joka johtaa tarpeeseen viettää yhä enemmän aikaa Internet-peleihin; 4) epäonnistuneet yritykset hallita osallistumista Internet-peleihin; 5) kiinnostuksen menetys aikaisemmista harrastuksista ja viihteestä Internet-pelien seurauksena; 6) jatkoi Internet-pelien liiallista käyttöä huolimatta psykososiaalisten ongelmien tuntemisesta; 7) perheenjäsenten, terapeutien tai muiden pettäminen Internet-pelaamiseen osallistumisen ajan suhteen; 8) Internet-pelien käyttö paeta tai lievittää negatiivisia tunnelmia; ja 9) vaarantavat tai menettävät merkittävät suhteet, työpaikat, koulutuksen tai uramahdollisuudet Internet-peleihin osallistumisen vuoksi. DSM-5: n IGD-diagnoosikriteerit, jotka perustuvat kansainväliseen yksimielisyyteen, on enimmäkseen lainattu päihteiden käyttöhäiriöistä tai rahapelien häiriöistä. Vaikka nämä kriteerit ovat väliaikaisesti sovittuja ominaisuuksia IGD-diagnoosille tutkijoiden keskuudessa, on välttämätöntä määrittää kunkin kriteerin diagnostinen pätevyys systemaattisella tutkimuksella.

Äskettäisessä peliriippuvuuden arviointiin tarkoitettujen välineiden katsauksessa todettiin, että 18-laitteita oli kehitetty ja käytetty 63-tutkimuksissa. Huolimatta erinomaisesta sisäisestä johdonmukaisuudesta ja yhdentyvästä pätevyydestä, tarkistetut instrumentit osoittivat johdonmukaisten ydinriippuvuusindikaattorien puuttumista, epäjohdonmukaisia ​​kliiniseen tilaan liittyviä rajapisteitä, huonoa luottamusten lukumäärää ja ennustettavuutta. Griffiths et ai. vaati voimakkaasti yhtenäistä lähestymistapaa IGD: n arviointiin, joka mahdollistaisi vertailun eri väestöryhmien ja kulttuurien välillä. IGD: n käyttöönoton jälkeen DSM-5: ssä tutkijat ovat kehittäneet innostuneesti uusia diagnoosivälineitä, kuten Internet Gaming Disorder Scale tai ovat muuttaneet olemassa olevia instrumentteja, joiden ajateltiin heijastavan IGD: n yhdeksää kriteeriä, kuten videopelien riippuvuusasteikko ja Internet-pelihäiriötesti. Nämä instrumentit ovat itseraportoivia toimenpiteitä, jotka on suunniteltu seulomaan ja luokittelemaan mahdolliset epäjärjestyneiden pelaajien vs. häiriöttömät pelaajat.

Itseraportointikyselyillä on jonkin verran vahvuutta siinä mielessä, että ne ovat kustannustehokkaita ja helppo hallita. Heillä on kuitenkin joitain rajoituksia. Ensinnäkin lasten ja nuorten saattaa olla vaikea keskittyä lehtien painettuihin pitkiin kysymyksiin. Toiseksi heiltä saattaa puuttua tietoisuus, joka tarvitaan arvioimaan omaa käyttäytymistään oikealla tavalla. Kolmanneksi, heillä voi olla vaikeuksia sijoittaa oma käyttäytymisensä sopivaan aika- / kestoyhteyteen. Näistä syistä on suositeltavaa jäsenneltyä diagnostista haastattelua lasten ja nuorten psykiatristen häiriöiden diagnosoimiseksi., Sama argumentti on erittäin merkityksellinen lasten ja nuorten IGD: n arvioinnissa ja diagnosoinnissa etenkin siksi, että he yleensä kieltäytyvät ongelmapeleistään tai puuttuvat tietoisuudesta arvioida omaa käyttäytymistään. Siksi on erittäin vaativaa kehittää jäsennelty diagnostinen haastatteluaikataulu nuorten IGD: n arvioimiseksi.

Jäsennellyllä haastatteluohjelmalla on joitain etuja avoimeen kliiniseen haastatteluun verrattuna. Jopa DSM-5-diagnostiikkajärjestelmän kanssa, arvioijien välillä voi olla merkittäviä erimielisyyksiä, kun diagnoosi perustuu avoimeen kliiniseen haastatteluun. Klinikot tekevät usein intuitiivisen diagnoosin tarkistamatta kaikkia diagnoosikriteerejä. Kun he käyttävät DSM-5-kriteerejä, eri kriteerien tutkimiseen käytetty järjestys vaihtelee kliinisten lääkäreiden välillä ja heidän arviointiperusteistaan ​​riippuu heidän oma kliininen kokemus. Toisin kuin avoimet kliiniset haastattelut, jäsennellyt diagnostiset haastattelut liittyvät huolellisesti diagnoosikriteereihin ja sanat ja kysymysjärjestys on ennalta määritetty. Seurauksena on, että arvioijien välinen luotettavuus on suurempi, kun käytetään jäsenneltyjä haastatteluaikatauluja, koska he ovat vähemmän alttiita haastattelijan puolueellisuudelle. Siksi rakenteellisen kliinisen haastattelun kehittämistä on tarvittu suuresti tällä uudella IGD-kentällä sen varmistamiseksi, että DSM-5: n kriteerit voidaan arvioida luotettavasti. Tämän tutkimuksen päätavoitteena oli kehittää nuorten jäsennelty kliininen haastattelu, jotta voidaan mitata DSM-5: n yhdeksän IGD-kriteeriä ja testata rakenteellisen kliinisen haastattelun luotettavuus ja pätevyys DSM-5: ssä (SCI- IGD).

Toinen tavoite oli arvioida yhdeksän yksittäisen IGD-kriteerin diagnostinen pätevyys DSM-5: ssä. Vaikka suurimman osan IGD: n ehdotetuista DSM-5-kriteereistä katsottiin kuvaavan ilmiötä riittävästi, tietyistä kriteereistä on tullut keskustelua alan tutkijoiden keskuudessa.,, Toistaiseksi on ollut joitain yrityksiä käyttää puoliksi jäsenneltyä haastattelua diagnoosin IGD: hen DSM-5: ssä. Ko et ai. äskettäin arvioinut IGD: n yksittäisten kriteerien diagnostisen pätevyyden DSM-5: ssä diagnostista haastattelua käyttämällä. Raportoitiin, että kaikilla IGD-kriteereillä oli diagnostinen tarkkuus vaihtelemassa 77.3%: sta 94.7%: iin, paitsi ”harhauttamis-” ja ”paeta” -kriteerit IGD: n yliopisto-opiskelijoiden erottamiseksi valtuutetuista opiskelijoista. van Rooij et ai. laajensi myös olemassa olevaa kliinikon hallinnoimaa arviointityökalua (kliininen videopelien riippuvuustesti, C-alv) tutkiakseen yhdeksän DSM-5-kriteerin herkkyyttä kliinisessä nuorten näytteessä ja osoittanut, että C-alv-2.0 tunnisti oikein 91% näytteestä käyttämällä ehdotettua DSM-5-rajapistettä. C-VAT 2.0: n spesifisyyttä ei kuitenkaan voitu tutkia, koska ne eivät sisältäneet terveitä pelaajia. Vaikka nämä kaksi tutkimusta tarjosivat arvokasta tietoa DSM-5-kriteerien pätevyydestä, DSM-5: n IGD-diagnostiikkakriteereille on tehtävä laaja psykometrinen testaus käyttämällä sekä yhteisönäytteitä että kliinisiä näytteitä hyvän luotettavuuden ja pätevyyden varmistamiseksi.

SCI-IGD: n kehittäminen

SCI-IGD kehitettiin kolmessa vaiheessa. Tutkimuksen ensimmäinen vaihe koostui esineiden muodostamisesta. Kirjailijat määrittelivät IGD: n alustavasti erityiseksi käyttäytymisriippuvuudeksi, jolla ei ole vain samankaltaisia ​​esityksiä aineiden käyttöhäiriöiden ja uhkapelien kanssa (esim. Hallinnan menetys, negatiiviset seuraukset), mutta joilla on myös IGD: lle ainutlaatuisia piirteitä (esim. Ärtyneisyys, terveyteen liittyvät) ongelmia). Kirjallisuuskatsaus ja kuuleminen 8-asiantuntijoiden kanssa, joilla on merkittävää IGD-kliinistä kokemusta, tehtiin komponenttien laatimiseksi IGD-työryhmälle. Tuloksena valittiin yhteensä 7-komponentteja, kuten huolenaihe, miellyttävyys, hallinnan menetys, suvaitsevaisuus, vetäytyminen, mielialan muutokset ja negatiiviset seuraukset. Kohteiden kehittämiseksi 7-komponentteja napauttavia kohteita ylenäytteistettiin olemassa olevista, psykometrisesti vakiintuneista välineistä sekä ehdotettiin sanamuotoja DSM-työryhmästä.,,,,, Tutkiessaan alkuperäistä alkioiden joukkoa poistettiin päällekkäiset tai epäselvät merkinnät. Asioiden viimeistelyä ja kysymysten muotoilua varten keskusteltiin kirjoittajien keskuudessa ja asiantuntijoiden kanssa käydystä neuvottelutapaamisesta, jonka tuloksena tehtiin alustava SCN-IGD 16-kohteista, joissa arvioitiin 6-komponentteja: huolenaihe (mukaan lukien näkyvyys), vetäytyminen, toleranssi, hallinnan menetys (DSM) -5-kriteerit; 'epäonnistunut yritys hallita' ja 'jatkaa ongelmista huolimatta'), mielialan muutokset (DSM-5-kriteerit; 'paeta'), negatiiviset seuraukset (DSM-5-kriteerit; 'kiinnostuksen menetys', 'pettää', ' vaarantaa'). Toisessa vaiheessa alustava SCI-IGD annettiin yhteisönäytteelle pelaamisongelmista kärsivistä 28-keskiasteen oppilaista (19-miehet ja 9-naiset), jotka suostuivat osallistumaan haastatteluun. Haastatteluesineiden kasvojen pätevyyden tutkimiseksi tarkkailtiin tarkkaan haastatteluaiheisiin saatujen vastausten ja yleisvaikutuksen välistä eroa. Tässä prosessissa havaittiin, että olisi noudatettava erityistä varovaisuutta, kun haastateltavat eivät tunnustaneet ongelmapelejä. Epäselvien merkitysten vuoksi 4-tuotteet jätettiin lopullisesta versiosta. SCI-IGD: n alustavan testauksen perusteella, yhteensä 12-kohteita valittiin SCI-IGD: n lopulliseksi versioon.

Kuvaus SCI-IGD: n lopullisesta versiosta

Diagnostinen kattavuus

SCI-IGD mahdollistaa DSM-5 Internet-pelihäiriön arvioinnin viimeisen 6 kuukauden aikana.

Rakenne ja sisältö

SCI-IGD on kattava, täysin standardisoitu diagnostinen haastattelu, jota käytetään pääasiassa epidemiologisissa tutkimuksissa ja mielenterveyden tutkimuksessa. SCI-IGD: n lopullinen versio koostui kahdesta osasta. SCI-IGD: n ensimmäinen osa oli diagnoosia edeltävä osa, joka koostui kysymyksistä, mukaan lukien väestötiedot ja pelien käyttötavat. SCI-IGD: n toinen osa oli diagnostinen haastatteluosasto.

Pisteytysalgoritmi

SCI-IGD vaatii ainakin yhden yhdestä, kahdesta tai kolmesta diagnostisesta kysymyksestä.

Menetelmät

osallistujat

SCI-IGD: n lopullista versiota annettiin yhteensä 236-lukion oppilaille [keskimääräinen ikä: 13.61 vuotta (SD = 0.87)] Soulissa, Koreassa [69 tytöt (29.3%), 167 pojat (70.7%)]; 192-osallistujia rekrytoitiin viidestä keskiasteen koulusta Soulissa ja Gyeonggin provinssissa Koreassa (joissain kouluissa koulujen hallintohenkilöt rohkaisivat raskaan pelin oppilaita osallistumaan tutkimukseen tietoisuuden lisäämistä varten, ja 39-näytteitä otettiin Internet-kahviloista, joissa nuoret, joilla on vaikea Internet siihen liittyvät ongelmat viettävät yleensä suurimman osan vapaa-ajallaan, ja 5-potilaat, jotka etsivät peliin liittyvien ongelmien hoitoa Soulin A-yliopistollisesta sairaalasta. Osallistujat valittiin seuraavien perusteiden perusteella: 1), he voivat osallistua 20-min haastattelu ja 2), he voisivat tarjota johdonmukaisia ​​vastauksia kysymyksiin. 236-osallistujien joukossa 111 [keskimääräinen ikä: 13.53 (SD = 0.73); 27 tytöt (24.3%), 84 pojat (75.7%); 93 keskikoulusta, 18 Internet-kahviloista] tehtiin kaksi haastattelua tutkiakseen diagnoosisopimusta; kerran haastattelija, joka käyttää SCI-IGD: tä, ja kerran psykiatri, joka suorittaa avoimen kliinisen haastattelun.

menettely

B-yliopiston institutionaalinen arviointineuvosto (IRB) hyväksyi kaikki menettelyt. Lisäksi kaikki arviointiistunnot pidettiin yksityisesti ja muiden haastattelujen tulosten perusteella sokeat ihmiset. Hallintojärjestys oli vastapainotettu. Kunkin haastattelun keskimääräinen kesto vaihteli välillä 15 ja 20 minuuttia. Kaikilta osallistujilta ja heidän vanhemmiltaan saatiin tietoinen suostumus ennen haastattelua; sen jälkeen osallistujat täyttivät lisäksi itseraportointikyselyt. Jokainen nuori sai $ 10-lahjakortin kirjojen ostamiseksi osallistumisestaan. Testaustestauksen luotettavuuden vuoksi 16-osallistujat saivat ensimmäisen SCI-IGD -haastattelunsa jälkeen toisen haastattelijan kutsumaan toiseen riippumattomaan identtiseen SCI-IGD -haastatteluun, joka ei ollut tietoinen ensimmäisen haastattelun tuloksista. Heille ilmoitettiin myös, että heidän ei pitäisi olettaa, että testihaastattelussa ilmoitettuja oireita ei tarvitse ilmoittaa uudestaan ​​uudelleentestissä. Keskimääräinen aikaväli kunkin tutkimuksen välillä tässä tutkimuksessa oli noin neljä viikkoa.

Haastattelijan ominaisuudet ja koulutus

Kahdella osallistuvalla psykiatrilla oli laaja kokemus IGD: n arvioinnista ja hoidosta Internet-peliriippuvuuden neuvontakeskuksessa, joka oli yhteydessä A-yliopistollisen sairaalan psykiatrian osastoon. Psykiatrin diagnoosien luotettavuuden arvioimiseksi kappa laskettiin kriteerien ja diagnostisen tason perusteella. Kahden psykiatrin välinen sopimus vaihteli hyvistä erinomaisiin, jotka kaikki vaihtelivat yli 0.89.

Jokaista SCI-IGD-hoitoa suoritti neljä tohtoritason kliinistä psykologia, joilla on vähintään viiden vuoden koulutettu kliininen kokemus, ja kuusi jatko-opiskelijaa, joita valvovat jatkotason kliiniset psykologit. Ennen tapaamista osallistujien kanssa kaikkia haastattelijoita opastetaan 60 minuutin SCI-IGD -koulutukseen. Haastattelijoiden välinen sopimus vaihteli hyvästä erinomaiseen eniten 0.89: n yläpuolella.

Toimenpiteet

K-Scale

K-asteikkoa annettiin SCI-IGD: n samanaikaisen pätevyyden tarkistamiseksi. K-asteikko koostuu 40-kohteista. Jokainen kohta pisteytetään 4-pisteasteikolla, joka vaihtelee 1 (ei ollenkaan) - 4 (aina). Alun perin oli olemassa kolme vaikuttavaa tekijän aliasteikkoa, kuten todellisuuden testauksen häiriöiden alakaalat, automaattiset riippuvuustehtävät ja virtuaaliset ihmissuhteet, sekä neljä oireisiin liittyvää tekijän aliskaalaa, kuten jokapäiväisen elämän häiriön, poikkeavan käyttäytymisen, suvaitsevaisuuden ja peruuttamista. Koo et ai. Tutki äskettäin K-oireiden asteikon diagnostista validiteettia, säveltäen 24 kohdetta neljästä oireisiin liittyvästä alaasteesta ja laskien uudet diagnostiset raja-arvot. Cronbachin K-asteikon alfa oli tässä tutkimuksessa 0.96.

Lyhyt oireluettelo

BSI: n korealainen versio annettiin tutkittavien masennuksen ja ahdistustasojen arvioimiseksi. Aiheet vahvistivat kunkin kohteen merkityksen kokemukselleen viimeisen seitsemän päivän ajalta viiden pisteen asteikolla, 7: sta (ei ollenkaan) 5: een (erittäin). Cronbachin alfa masennuksen ja ahdistuneisuuden alaluokassa oli 0 ja 4 alkuperäisessä validointitutkimuksessa ja 0.89 ja 0.91 nykyisessä tutkimuksessa.

Vahvuudet ja vaikeudet kyselylomake

SDQ: n korealainen versio käytettiin käyttäytymisongelmien, huomio-ongelmien ja vertaisarviointien arviointiin. Se koostuu 25 kappaleesta, joissa on 5 kohtaa kussakin viidessä alaluokassaan. Pisteet pisteytetään käyttämällä 4 pisteen asteikkoa 0: sta (ei lainkaan) 3: een (erittäin). Cronbachin alfa SDQ: n käyttäytymistä, huomiota ja vertaisarviointia koskevissa alaluokissa oli 0.50 - 0.80 korealaisessa otoksessa ja 0.70 - 0.87 nykyisessä tutkimuksessa.

Vaikeus tunteiden säätelykyselyssä

DERQ: n korealainen versio käytettiin arvioimaan tunteiden säätökykyä. Siinä on 36 kohtaa ja se arvioidaan käyttäen 5 pisteen asteikkoa 1 (melkein koskaan) 6: een (melkein aina). DERQ: n Cronbachin alfa oli 0.93 korealaisessa näytteessä ja 0.90 nykyisessä tutkimuksessa.

Tilastollinen analyysi

Lasimme diagnostisen tarkkuuden indeksejä (herkkyys, spesifisyys, todennäköisyyden suhteet) tutkiaksesi diagnoosin vastaavuutta SCI-IGD: n ja psykiatrien suorittaman kliinisen vaikutelman välillä. Herkkyys on todennäköisyys, että SCI-IGD sanoo, että henkilöllä on IGD, kun psykiatrit ovat tosiasiassa diagnosoineet IGD. Erityisyys on todennäköisyys, että SCI-IGD sanoo, että henkilöllä ei ole IGD, vaikka psykiatrit eivät tosiasiassa ole diagnosoineet IGD: tä. Vaikka positiivisia ja negatiivisia ennustavia arvoja (PPV ja NPV) lainataan usein testin diagnostisen tarkkuuden kuvaamiseksi, niillä on haittoja, että ne voivat vaihdella häiriön esiintyvyyden mukaan. Siten todennäköisyyssuhteet, jotka perustuvat herkkyyden ja spesifisyyden suhteisiin ja jotka eivät vaihtele yleisön esiintyvyyden mukaan, valittiin vaihtoehtoisiksi tilastoiksi diagnostisen tarkkuuden yhteenvetoa varten. Se määritellään seuraavasti: Todennäköisyyden suhde positiivinen (LRP) = herkkyys / (1-spesifisyys), Todennäköisyyden suhde negatiivinen (LRN) = (1-herkkyys) / spesifisyys. Testi, jonka LRP on> 10 tai LRN <0.1, on todennäköisesti 'erittäin hyödyllinen testi', ja LRP: t 2-10 tai LRN 0.1-0.5 ovat todennäköisesti 'hyödyllinen testi'. Toisaalta, vaikka LRP <2 ja LRN> 0.5 tarkoittaa 'harvoin hyödyllistä testiä'.,

SCI-IGD: n diagnosoiman yli- tai aliraportoinnin laajuuden määrittämiseksi suhteessa kliiniseen diagnostiikkavaikutelmaan tehtiin ristitaulukointitaulukoita, joissa tutkittiin SCI-IGD-positiivisen diagnoosin suhdetta positiiviseen kliiniseen diagnoosiin. Luotettavuusanalyysit tehtiin diagnostisella ja diagnostisella kysymystasolla. Erityisesti Prevalenssisäädetyllä esijännityksellä mukautetulla kappa (PABAK) -kerroin luokitellaan heikoksi (≤0), vähäiseksi (0.01 - 0.20), kohtuulliseksi (0.21 - 0.40), kohtalaiseksi (0.41 - 0.60), huomattavaksi (0.61 - 0.80) tai melkein täydellinen (0.81 - 1.00) käytettiin luotettavuuden mittana, ja se määritellään parillisten sopimusten mittana, jotka on korjattu sattuman vuoksi. PABAK-kerrointa käytettiin, koska kappa-kerroin aiheuttaa tyypillisesti kappa-arvioiden olevan edustamatta alhainen etenkin silloin, kun perustasot ovat alhaiset tutkimuksen populaatiossa.

TULOKSET

Kuvailevia tilastoja

Taulukko 1 on yhteenveto nykyisen otoksen kaikista asiaankuuluvista sosiodemografisista tiedoista. Kaksikymmentäkolme (11.0%, n = 26) osallistujaa oli ilmoittanut, että heidän pisin pelin pelaamiseen käytetty aika 24-tunnin aikana on ollut yli 12 tuntia. Seitsemänkymmentä neljä (31.4%) vastasi pelavansa pelejä joka päivä. Lisäksi useimmat pelaajat kertoivat aloittaneensa pelaamisen ensin hyvin varhaisessa iässä, tyypillisesti ennen 6-ikää (15.3%, n = 36) ja 7 – 12 (69.9%, n = 165).

Taulukko 1 

Osallistujien sosiodemografiset ominaisuudet (N = 236)

Vastaavuus kliinisen haastattelun tuottamien diagnoosien ja SCI-IGD: n välillä

Taulukko 2 esittää herkkyyden (Sen), spesifisyyden (Spe), positiivisen todennäköisyyden suhteen (LRP) ja negatiivisen todennäköisyyden suhteen (LRN) estimaatit SCI-IGD: lle DSM-5: n kriteereillä ja diagnostisella tasolla. 111 osallistujan joukossa 10.8: lla (7%) diagnosoitiin IGD SCI-IGD: n mukaan [n = 93 koulujen 7.5: sta (5%); n = 18 27.8 (12%) joukossa internetkahviloista]. Psykiatrin kliininen haastattelu, joka perustui IGD: n DSM-66.7: een, kahdeksasta (5%) diagnosoitiin SCI-IGD: n diagnosoimasta 10.93: sta. LRP: n ja LRN: n estimaatit SCI-IGD: n lopulliselle diagnoosille olivat vastaavasti 0.35 ja 2, mikä osoittaa, että SCI-IGD oli 'erittäin hyödyllinen testi' IGD: n läsnäolon tunnistamiseksi ja 'hyödyllinen testi' IGD: n puuttumisen tunnistamiseksi. Erityisesti useimpien SCI-IGD-tuotteiden LRP: n osoitettiin olevan yli 0.5, mikä viittaa siihen, että ne ovat hyödyllisiä tunnistamaan IGD: n diagnostisten oireiden läsnäolo. Vaikka '' peruuttamisen '' ja 'epäonnistuneen yrityksen hallita' LRN ylitti hiukan 0.5, suurin osa SCI-IGD-tuotteiden LRN oli alle 8, mikä osoittaa, että SCI-IGD-tuotteet olivat hyödyllisiä tunnistamaan IGD: n diagnostisten oireiden puuttuminen . Sitä vastoin kahdeksannen kriteerin ('' paeta '') LRP oli alle 2 ja yli 0.5, mikä viittaa siihen, että '' paeta '' -kohteen osoitettiin olevan '' harvoin hyödyllinen '' tunnistamaan '' paeta '' -diagnoosin oireiden puuttuminen . Se voi johtua oireen arvioinnin vaikeudesta, koska yksikään osallistuja, joka vastasi positiivisesti 'paeta' -kriteeriin kliinikon avoimen haastattelun aikana, vaatii erityisen varovaisuutta tuloksen tulkinnassa.

Taulukko 2 

Kliinisen lääkärin suorittaman IGD-diagnoosin vertailu SCI-IGD: n kanssa

SCI-IGD -testin uudelleentestin luotettavuus

Tulokset osoittivat, että kaikilla diagnoosikriteereillä oli ”kohtalainen” - ”melkein täydellinen” sopusointu PABAK-kertoimien ollessa välillä 0.41 ja 0.91. Vieroitus- ja harhaanjohtamiskriteereille saatiin 0.91: n ”melkein täydellinen” PABAK-kerroin, mikä osoitti, että ne voivat olla. melko yhdenmukainen noin yhden kuukauden ajanjaksolla. Toisaalta 0.44: n 'kohtalaiset' PABAK-kertoimet havaittiin 'epäonnistuneille yrityksille hallita' ja 'kielteisen mielialan kiertämiselle', mikä viittaa siihen, että nämä kriteerit saattavat olla suhteellisen herkkiä ajalliselle tai tilanteelliselle muutokselle kuin muut kriteerit.

Syrjivä pätevyys: erot IGD-ryhmän ja ei-IGD-ryhmän välillä SCI-IGD: n mukaan

Kaikki osallistujat (n = 236) jaettiin edelleen IGD-ryhmään (n = 27) ja ei-IGD-ryhmään (n = 209) SCI-IGD: n mukaan. Taulukko 3 osoitti, että K-asteikolla (F = 45.34, p <0.001) ja K-oireiden asteikolla (F = 44.37, p <0.001) oli merkittäviä eroja IGD- ja ei-IGD-ryhmien välillä. On huomionarvoista, että keskiarvon IGD-ryhmän K-oireiden asteikolla havaittiin olevan suunnilleen yhtä suuri kuin Koo ja hänen kollegoidensa (60.5) ehdottama diagnostinen raja-arvo (2015). IGD-ryhmällä oli myös korkeammat pisteet masennuksessa (F = 15.03, p <0.001), ahdistuksessa (F = 12.80, p <0.001), käytösongelmissa (F = 16.75, p <0.001), huomio-ongelmissa (F = 3.86, p <0.001) ja emotionaalisen sääntelyn vaikeudet (F = 3.93, p <0.05) kuin SCI-IGD: n osoittama häiriötön ryhmä lukuun ottamatta vertaisryhmäongelmia (F = 1.18, ns).

Taulukko 3 

K-asteikon ja psykososiaalisten muuttujien erot häiriintymättömän ja häiriintymättömän ryhmän välillä SCI-IGD: n mukaan

KESKUSTELU

Tämän tutkimuksen tarkoituksena oli kehittää SCI-IGD ja tutkia sen psykometrisiä ominaisuuksia murrosikäisillä yhteisönäytteen avulla. Osoitettiin, että SCI-IGD havaittiin olevan varsin pätevä ja luotettava väline diagnosoimaan IGD murrosikäisillä.

Ensinnäkin testin uudelleentestauksen luotettavuus, jota tutkittiin 4-viikon aikavälillä, osoitti merkittäviä arvioita kohtalaiselta tasolta melkein täydelliselle tasolle. Tämä osoittaa, että SCI-IGD: n todettiin olevan melko yhdenmukainen pitkän ajanjakson ajan, joka kesti ainakin yhden kuukauden. Jotkut arviot PABAK-kertoimista kahden arvioinnin välillä olivat kuitenkin suhteellisen alhaiset. Esimerkiksi 0.44: n suhteellisen alhainen PABAK-kerroin, vaikkakin kohtalaisella tasolla, havaittiin 'epäonnistuneille yrityksille hallita' ja 'kielteisen mielialan päästämiseen'. Se voi johtua siitä, että tässä tutkimuksessa käytettiin arviointien välillä huomattavasti pidempi kuukauden aikaväli kuin muissa tutkimuksissa. On myös mahdollista, että jotkut diagnostiikkakohdat saattavat olla herkempiä ajallisille tai tilanteellisille muutoksille kuin muut. Näiden havaintojen tulkinnassa on kuitenkin noudatettava varovaisuutta otoksen pienen koon vuoksi.

Seuraavaksi tutkimme SCI-IGD: n diagnostista tarkkuutta käyttämällä todennäköisyyssuhdetta, koska esiintyvyysaste vaikuttaa siihen vähemmän. SCI-IGD: n osoitettiin olevan hyödyllinen työkalu psykiatrin kliinisessä haastattelussa arvioidun IGD-diagnoosin läsnäolon ja puuttumisen tunnistamiseksi. Diagnostisten tuotteiden tasolla SCI-IGD osoitti yleisesti hyvän kyvyn tunnistaa IGD: n diagnostisten kriteerien läsnäolo. 'Poistamisen' ja 'epäonnistuneen kontrollinyrityksen' LRN ylitti kuitenkin hieman 0.5, mikä tarkoittaa, että näiden kohteiden diagnostinen kyky ei ole kovin hyödyllinen tunnistamaan näiden kriteerien puuttumista. Toisin sanoen SCI-IGD-tuotteilla voi olla hieman korkea epäonnistumisaste. Tämä on saattanut johtua vaikeuksista laatia tarkkoja raportteja murrosikäisiltä, ​​joilla ei ole riittävästi tietoisuutta tunnistaa 'vieroitus' ja 'hallinnan menetys' oireiden emotionaaliset tai sisäiset tilat. On myös mahdollista, että useimmat nuoret eivät koskaan yrittäneet vähentää tai lopettaa pelaamista, ja siksi heidän oli vaikea vastata kysymyksiin arvioidakseen 'peruuttamisen' ja 'hallinnan menettämisen' oireita. Kun otetaan huomioon näiden kriteerien monimutkainen kliininen luonne, on myös todennäköistä, että pätevän tuomion saamiseksi voidaan tarvita tarkempia kysymyksiä. Tulevaisuuden validointitutkimuksen tulisi ponnistella enemmän kliinisten näytteiden saavuttamiseksi ja tutkimiseksi. Kun otetaan huomioon näiden kriteerien monimutkainen kliininen luonne, on myös todennäköistä, että pätevän tuomion saamiseksi voidaan tarvita tarkempia kysymyksiä. Muista kriteereistä saadut yleiset todennäköisyyssuhde-estimaatit olivat kuitenkin hyviä, mikä viittaa siihen, että SCI-IGD-haastattelijat pystyvät erottamaan "normaalit" ja "kliinisesti merkittävät kokemukset". Yksi strategia tämän haastattelutyökalun pätevyyden parantamiseksi olisi tarjota haastattelijoille jatkokoulutusta, jotta voidaan ymmärtää kriteerien luonnetta ja käsitellä tarvittaessa selventäviä kysymyksiä. Kirjallisuudessa on kuitenkin hyvin dokumentoitu taipumus rakenteisiin diagnostisiin haastatteluihin ali- tai ylidiagnoosiin verrattuna lääkäreihin. Tämä johtuu siitä, että lääkärit pystyvät hyödyntämään useita tietolähteitä ja omaa kliinistä kokemustaan ​​diagnoosien määrittämisessä.

Lisäksi pako-oirekriteerin diagnostinen kyky osoittautui ongelmalliseksi johtuen siitä, että sen perustaso oli erittäin alhainen. On olemassa useita mahdollisuuksia, jotka selittävät erittäin alhaisen perustason "pako" -diagnostiikkakriteerille. Yksi mahdollisuus liittyy DSM-5 'paeta' -diagnostiikkakriteerin ulkoiseen pätevyyteen. Diagnostisten kriteerien ulkoinen pätevyys viittaa niiden hyödyllisyyteen potilaiden erottamisessa ”kultastandardin” perusteella. Tähän mennessä on kuitenkin ollut hyvin vähän empiirisiä tutkimuksia DSM-5: n yksittäisten IGD-diagnoosikriteerien pätevyyden arvioimiseksi. Ko ja hänen kollegansa Tutki IGD-perusteiden pätevyyttä nuorten aikuisten suhteen ja ilmoitti hyväksyttävän herkkyyden, mutta ”harhaanjohtamisen” ja ”paeta” -kriteerien diagnostisen tarkkuuden suhteellisen heikko. On mahdollista, että murrosikäisillä on vähemmän tietoisuutta pako motivaatiostaan ​​kuin nuorilla aikuisilla. Toinen mahdollisuus on, että ”paeta” -kriteeri voidaan hyväksyä harvoin yhteisön näytteessä, kun taas se voidaan tunnistaa helposti kliinisessä näytteessä. Tämä havainto saattaa myös heijastaa sitä, että "paeta" -diagnostiikkakriteeri ei voinut olla yksi olennaisimmista oireista, jotka tunnistavat Internet-peliriippuvaiset ja erottavat heidät edelleen tavanomaisista käyttäjistä, kuten myös muut tutkijat väittivät.,, Se ansaitsee lisätutkimusta DSM-5: n yksittäisten IGD-kriteerien pätevyyden tutkimiseksi.

Tulokset osoittivat myös, että SCI-IGD: n mukaan heille, joille on diagnosoitu häiriintynyt murrosikäinen pelaaja, oli K-asteikolla huomattavasti korkeampi pistemäärä, joka on yksi Koreassa yleisimmin käytetyistä välineistä IGD: n seulomiseksi murrosikäisillä, mikä osoittaa, että SCI- IGD voi pätevästi erottaa häiriöttömät murrosikäiset pelaajat häiriöttömistä murrosikäisistä pelaajista. Lisäksi osoitettiin, että SCI-IGD: n arvioima häiriintynyt ryhmä oli merkitsevästi erilainen kuin ei-häiriintymätön ryhmä useilla psykososiaalisilla muuttujilla, kuten masennus, ahdistus, käyttäytymis- ja huomio-ongelmat sekä emotionaalinen toimintahäiriö, joiden kaikkien tiedettiin olevan liittyy IGD: hen. Sitä vastoin SCI-IGD: n arvioiman häiriintymättömän ryhmän ja häiriintymättömän ryhmän välillä ei ollut merkittävää eroa vertaisongelmissa. Se on johdonmukainen aiempien havaintojen kanssa että vertaisongelmat liittyvät vähemmän IGD: hen kuin muut tekijät.

Viimeiseksi, tämä tutkimus osoitti suhteellisen korkean IGD-esiintyvyyden (10.8%) verrattuna aikaisemmissa tutkimuksissa ilmoitettuihin. Tämä suhteellisen korkea esiintyvyys johtuu näytteenottoprosessista. Kuten edellä ”osallistuja” -osiossa todettiin, joidenkin keskikoulujen oppilaat osallistuivat tähän tutkimukseen osana ennaltaehkäisy- ja koulutusprosessia raskaiden pelien käyttäjille, ja joillekin oppilaille tehtiin otoksia Internet-kahviloista, joissa nuoret, joilla on vakavia Internet-ongelmia, yleensä viettävät suurimman osan ajastaan. Lisäanalyysi osoitti, että esiintyvyys vaihteli näytteenottopaikkojen mukaan vaihteleen 3.3% - 33.3%.

Tämän tutkimuksen rajoitukset olivat seuraavat. Ensinnäkin jotkut analyysit kärsivät suhteellisen alhaisesta IGD: n peruskurssista suhteellisen pienen yhteisöotoksen vuoksi. Toiseksi, koska nuorten Internet-pelien liiallisella käytöllä on merkittävä kansanterveydellinen merkitys, tämän tutkimuksen tarkoituksena oli validoida SCI-IGD-ikä 18-vuotiaille nuorille. Rekrytoitiin kuitenkin melko nuori otos keskiasteen oppilaista, koska halusimme kehittyä haastattelukysymykset, jotka on helppo ymmärtää nuorille nuorille, ja tutkia luotettavuutta ja diagnoosin tarkkuutta. Koska nuorten pelinkäytön osoitettiin olevan samanlainen iän myötä (Gentile 2009), oletettiin, että nykyiset havainnot SCI-IGD: n luotettavuudesta ja pätevyydestä voidaan yleistää vanhemmille nuorille. Tulevissa tutkimuksissa nykyiset havainnot tulisi kuitenkin toistaa käyttämällä suurempaa otosta vanhempien osallistujien kanssa.

Näistä rajoituksista huolimatta ensimmäinen yritys kehittää hyvin dokumentoidun luotettavuuden ja pätevyyden omaava diagnostinen jäsennelty haastattelumittari tarjoaa 1) kohteet, jotka vastaavat läheisesti DSM-5-kriteereitä; 2) binäärilausekkeet häiriön esiintymisestä / puuttumisesta ja jokaisesta sen oireesta; ja 3) riittävä yksinkertaisuus, jotta koulutettu maallikkohaastattelija voi hallinnoida sitä. Tämä äskettäin kehitetty jäsennelty IGD: n kliininen haastattelu voi täyttää tarpeen psykometrisesti järkevälle haastattelutyökalulle IGD: n arvioimiseksi tarkemmin kuin lyhyet seulontakyselyt. Se auttaa parantamaan IGD: n kliinisen diagnoosin tarkkuutta ja parantamaan kliinikkojen välistä sopimusta. Se voisi myös edistää tutkimusta IGD: n esiintyvyyden, kurssin, ennusteen ja riskitekijöiden arvioimiseksi. Kaiken kaikkiaan tämän tutkimuksen tulokset antavat empiiristä tukea DSM-5: n ehdottamaan IGD: n käsitteeseen (APA, 2013). Vaikka ratkaiseva ensimmäinen askel yleisen yksimielisyyden saavuttamiseksi IGD: n käsitteestä ja diagnoosista otettiin, tulevassa tutkimuksessa on vielä vastattava kysymyksiin IGD: n luonteesta ja esityksistä eri vaiheissa tai iissä.

Kiitokset

Kansallinen tietoyhteiskuntavirasto (NIA), Korea, rahoitti tätä tutkimusta. NIA: lla ei ollut roolia tutkimuksen suunnittelussa, tietojen keräämisessä, analysoinnissa tai tulkinnassa, käsikirjoituksen kirjoittamisessa tai päätöksessä toimittaa paperi julkaistavaksi.

Viitteet

1. Estä JJ. DSM-V: n ongelmat: Internet-riippuvuus. Am J psykiatria. 2008, 165: 306-307. [PubMed]
2. Kuss DJ, van Rooij AJ, Shorter GW, Griffiths MD, van de Mheen D. Nuorten Internet-riippuvuus: esiintyvyys ja riskitekijät. Laske ihmisen käyttäytymistä. 2013, 29: 1987-1996.
3. Petry NM, Rehbein F, Gentile DA, Lemmens JS, Rumpf HJ, Mößle T, et ai. Kansainvälinen konsensus Internet-pelaamishäiriöiden arvioimiseksi käyttämällä uutta DSM-5-lähestymistapaa. Riippuvuus. 2014, 109: 1399-1406. [PubMed]
4. American Psychiatric Association. Psyykkisten häiriöiden diagnostiikka- ja tilastollinen käsikirja. 5th Ed. Washington DC: Am Psychiatr Assoc; 2013.
5. Lemmens JS, Valkenburg PM, Gentile DA. Internet-pelaamishäiriöasteikko. Psykoli arvioi. 2015, 27: 567-582. [PubMed]
6. King DL, Haagsma MC, Delfabbro PH, Gradisar M, Griffiths MD. Kohti patologisten videopelien yksimielisyyttä: psykometristen arviointityökalujen systemaattinen tarkastelu. Clin Psychol Rev. 2013; 33: 331 – 342. [PubMed]
7. Griffiths MD, kuningas DL, Demetrovics Z. DSM-5 Internet-pelihäiriö tarvitsee yhtenäisen lähestymistavan arviointiin. Neuropsykiatria. 2014, 4: 1-4.
8. Rehbein F, Kliem S, Baier D, Mößle T, Petry NM. Internet-pelihäiriöiden esiintyvyys saksalaisilla nuorilla: yhdeksän DSM-5-kriteerin diagnostinen vaikutus valtiollisessa edustavassa näytteessä. Riippuvuus. 2015, 110: 842-851. [PubMed]
9. Pontes HM, Király O, Demetrovics Z, Griffiths MD. DSM-5-Internet-pelihäiriön käsitteellistäminen ja mittaus: IGD-20-testin kehittäminen. PloS One. 2014, 9: e110137. [PMC vapaa artikkeli] [PubMed]
10. Cohen P, Cohen J, Kasen S, Velez CN, Hartmark C, Johnson J, et ai. Epidemiologinen tutkimus myöhäislapsuuden ja murrosiän häiriöistä - I. Ikä- ja sukupuolikohtaiset levinneisyys. J Lasten psykolipsykiatria. 1993, 34: 851-867. [PubMed]
11. Flamen MF, Whitaker A, Rapoport JL, Davies M, Berg CZ, Kalikow K, et ai. Pakko-oireinen häiriö murrosikässä: epidemiologinen tutkimus. J Am Acad Lasten murrosikäinen psykiatria. 1988, 27: 764-771. [PubMed]
12. Griffiths MD, van Rooij AJ, Kardefelt-Winther D, Starcevic V, Király O, Pallesen S, et ai. Työskentely kohti kansainvälistä konsensusta kriteereistä Internet-pelaamishäiriöiden arvioimiseksi: kriittinen kommentti Petry et al. (2014) Riippuvuus. 2016, 111: 167-175. [PubMed]
13. Kardefelt-Winther D. Kriittinen kuvaus DSM-5-kriteereistä Internet-pelihäiriöille. Addict Res Theory. 2015, 23: 93-98.
14. van Rooij A, Prause N. Kriittinen arvostelu Internet-riippuvuuskriteereistä ja ehdotuksia tulevaisuudeksi. J Behav Addict. 2014, 3: 203-213. [PMC vapaa artikkeli] [PubMed]
15. Ko CH, Yen JY, Chen SH, Wang PW, Chen CS, Yen CF. Arviointi DSM-5: n Internet-pelihäiriöiden diagnostiikkakriteereistä nuorten aikuisten Taiwanissa J Psychiatr Res. 2014, 53: 103-110. [PubMed]
16. van Rooij AJ, Schoenmakers TM, van de Mheen D. Arviointi pelien pelaamiseen kliinisessä tutkimuksessa C-VAT 2.0. Verslaving. 2015, 11: 184-197.
17. Kim EJ, Lee SY, Oh SK. Korealaisen murrosikäisen Internet-riippuvuusasteikon (K-AIAS) validointi Korean J Clin Psychol. 2003, 22: 125-139.
18. Ko CH, Yen JY, Chen CC, Chen SH, Yen CF. Ehdotetut diagnoosikriteerit nuorten Internet-riippuvuudesta. J Nerv Ment Dis. 2005, 193: 728-733. [PubMed]
19. Lee H, Ahn C. Internet-peliriippuvuuden diagnoosiasteikon kehittäminen. Korean J Health Psychol. 2002, 7: 211-239.
20. Rehbein F, Kleimann M, Mediasci G. Videopeliriippuvuuden yleisyys ja riskitekijät murrosikällä: Saksan valtakunnallisen tutkimuksen tulokset. Cyberpsychol Behav Soc Netw. 2010, 13: 269-277. [PubMed]
21. Tao R, Huang X, Wang J, Zhang H, Zhang Y, Li M. Ehdotetut diagnoosikriteerit Internet-riippuvuudelle. Riippuvuus. 2010, 105: 556-564. [PubMed]
22. Kansallinen tietoyhteiskuntavirasto. Kolmas korealaisen Internet-riippuvuusasteikon standardointi. Soul, Korea: Kansallinen tietoyhteiskuntavirasto; 2014.
23. Koo HJ, Cho SH, Kwon JH. Tutkimus K-asteikon diagnosointikyvyn tutkimiseksi DSM-5: n Internet-pelihäiriön diagnostiikkatyökaluna. Korean J Clin Psychol. 2015, 34: 335-352.
24. Derogatis LR, Melisaratos N. Lyhyt oireluettelo: johdantoraportti. Psychol Med. 1983, 13: 595-605. [PubMed]
25. Park KP, Woo SW, Chang MS. Lyhyiden oireiden kartoituksen-18: n validointitutkimus yliopisto-opiskelijoilla. Korean J Clin Psychol. 2012, 31: 507-521.
26. Goodman R. Vahvuuksia ja vaikeuksia koskeva kyselylomake: tutkimushuomautus. J Lasten psykolipsykiatria. 1997, 38: 581-586. [PubMed]
27. Ahn JS, Jun SK, Han JK, Noh KS, Goodman R. Vahvuuksien ja vaikeuksien kyselylomakkeen korealaisen version kehittäminen. J Korean Neuropsychiatr Assoc. 2003, 42: 141-147.
28. Gratz KL, Roemer L. Tunteiden säätelyn ja sääntelyn moniulotteinen arviointi: kehitys, tekijärakenne ja tunteiden säätelyasteikon vaikeuksien alkuperäinen validointi. J Psychopathol Behav arvioi. 2004, 26: 41-54.
29. Cho Y. Tunteiden häiriintymisen arviointi: tunteiden säätelyasteikon vaikeuksien korealaisen version psykometriset ominaisuudet. Korean J Clin Psychol. 2007, 26: 1015-1038.
30. Attia J. Herkkyyden ja spesifisyyden ylittäminen: käyttämällä todennäköisyyssuhteita diagnostisten testien tulkintaan. Aust Prescr. 2003, 26: 111-113.
31. Manuel Porcel J, Vives M, Esquerda A, Ruiz A. Brittiläisen rintakehän seuran ja American College of Chest lääkärien ohjeiden hyödyllisyys ennustettaessa ei-märkivää parepnoonista keuhkopussin vuotamista. Respir Med. 2006, 100: 933-937. [PubMed]
32. Tacconelli E. Järjestelmälliset katsaukset: CRD: n ohjeet terveydenhuollon arviointien tekemiseen. Lancet tartuttaa Dis. 2010, 10: 226.
33. Landis JR, Koch GG. Tarkkailijan sopimuksen mittaaminen kategorialliselle tiedolle. Biometrics. 1977, 33: 159-174. [PubMed]
34. Hallgren KA. Raportointitietojen laskeminen havainnointitiedoille: yleiskatsaus ja opetusohjelma. Tutor Quant Methods Psychol. 2012, 8: 23-34. [PMC vapaa artikkeli] [PubMed]
35. Wittchen HU, Semler G, von Zerssen D. Kahden diagnostisen menetelmän vertailu: kliiniset ICD-diagnoosit vs. DSM-III ja tutkimusdiagnostiikkakriteerit käyttämällä Diagnostic Interview Schedule (versio 2) Arch Gen Psychiatry -menetelmää. 1985, 42: 677-684. [PubMed]
36. Merikangas KR, Dartigues JF, Whitaker A, Angst J. Migreenin diagnostiikkakriteerit. Kelpoisuustutkimus. Neurologia. 1994; 44 (6 Suppl 4): S11 – S16. [PubMed]
37. Charlton JP, Danforth ID. Tietokoneriippuvuuden ja sitoutumisen välisen eron validointi: online-pelien pelaaminen ja persoonallisuus. Behav Inf Technol. 2010, 29: 601-613.
38. Pakolainen D. Patologinen videopelien käyttö nuorten ikäluokissa 8 - 18: kansallinen tutkimus. Psychol. 2009, 20: 594-602. [PubMed]
39. Koo HJ, Kwon JH. Internetin väärinkäytön riski- ja suojatekijät: metaanalyysi empiirisistä tutkimuksista Koreassa. Yonsei Med J. 2014; 55: 1691 – 1711. [PMC vapaa artikkeli] [PubMed]