Context: Vain harvoissa tutkimuksissa on selvitetty, kuinka hyvin COMLEX-USA (Comprehensive Osteopathic Medical Licensing Examination-USA) -tutkintosarjan pisteet ennustavat asukkaiden tuloksia, kuten suorituksia lautakunnan sertifiointikokeissa.
Tavoitteet: Määrittää, kuinka hyvin COMLEX-USA ennustaa suoritusta American Osteopathic Board of Emergency Medicine (AOBEM) Part I -sertifiointikokeessa.
Menetelmät: Tutkimuksen kohderyhmänä olivat ensikertalaiset, jotka suorittivat AOBEM:n osan I vuosina 2011 ja 2012 ja joiden suoritukset COMLEX-USA:n tasolla 1, tasolla 2-kognitiivinen arviointi (CE) ja tasolla 3 vastasivat toisiaan. Pearsonin korrelaatiot laskettiin AOBEM:n ensimmäisen A-osan pisteiden ja COMLEX-USA-suoritusten välillä, jotta voitiin mitata näiden kokeiden välistä yhteyttä. Asteittainen lineaarinen regressioanalyysi tehtiin AOBEM:n ensimmäisen osan pisteiden ennustamiseksi kolmen COMLEX-USA-pistemäärän perusteella. Riippumattomalla t-testillä verrattiin COMLEX-USA-suoritusten keskiarvoja niiden hakijoiden välillä, jotka olivat läpäisseet ja jotka eivät läpäisseet AOBEM:n osan I, ja asteittaisella logistisella regressioanalyysillä ennustettiin AOBEM:n osan I läpäisyn logaritmisia todennäköisyyksiä COMLEX-USA-pisteiden perusteella.
Tulokset: AOBEM:n osan I pistemäärillä oli korkein korrelaatio COMLEX-USA-tason 3 pistemäärien kanssa (.57) ja hieman alhaisempi korrelaatio COMLEX-USA-tason 2-CE-pistemäärien kanssa (.53). Alhaisin korrelaatio oli AOBEM:n osan I ja COMLEX-USA:n tason 1 pisteiden välillä (.47). Vaiheittaisen regressiomallin mukaan COMLEX-USA:n tason 1 ja tason 2-CE:n tulokset, joita erikoistumisohjelmat käyttävät usein valintakriteereinä, selittivät yhdessä 30 prosenttia AOBEM:n osan I pisteiden vaihtelusta. Tason 3 pistemäärien lisääminen selitti 37 prosenttia varianssista. Riippumaton t-testi osoitti, että 397 AOBEM:n osan I läpäisevää kokelasta suoriutui kaikilla kolmella COMLEX-USA-tasolla merkittävästi paremmin kuin 54 kokelasta, jotka eivät läpäisseet AOBEM:n osaa I (P<.001 kaikilla kolmella tasolla). Logistinen regressiomalli osoitti, että COMLEX-USA-tason 1 ja tason 3 pistemäärät ennustivat AOBEM:n osan I läpäisyn logaritmisia todennäköisyyksiä (P=.03 ja P<.001).
Päätelmät: Tässä tutkimuksessa tuettiin empiirisesti COMLEX-USA-sarjan ennakoivaa ja erottelevaa validiteettia suhteessa AOBEM Part I -sertifiointikokeeseen. Vaikka erikoistumisohjelmat saattavat käyttää COMLEX-USA:n tason 1 ja 2-CE:n pistemääriä osittaisina kriteereinä valittaessa asukkaita, tason 3 pistemäärät, vaikka niitä ei yleensä ole saatavilla hakuajankohtana, ovat itse asiassa tilastollisesti eniten yhteydessä AOBEM:n osan I suorituksiin.