Contexto: Poucos estudos têm investigado quão bem as notas da série Comprehensive Osteopathic Medical Licensing Examination-USA (COMLEX-USA) prevêem resultados residentes, tais como o desempenho nos exames de certificação do Conselho de Medicina de Emergência.
Objetivos: Determinar quão bem o COMLEX-USA prevê o desempenho no exame de certificação AOBEM (American Osteopathic Board of Emergency Medicine) Parte I.
Métodos: A população-alvo do estudo foi examinada pela primeira vez que fez o AOBEM Parte I em 2011 e 2012, com desempenhos correspondentes no COMLEX-USA Nível 1, Nível 2 – Avaliação cognitiva (CE), e Nível 3. As correlações de Pearson foram computadas entre os resultados da primeira tentativa da AOBEM Parte I e os resultados do COMLEX-USA para medir a associação entre estes exames. A análise de regressão linear por etapas foi realizada para prever as pontuações da AOBEM Parte I pelas 3 pontuações COMLEX-USA. Foi realizado um teste t independente para comparar o desempenho médio COMLEX-USA entre os candidatos que passaram e os que reprovaram no AOBEM Parte I, e uma análise de regressão logística por etapas foi utilizada para prever os log-odds de aprovação no AOBEM Parte I com base nos escores COMLEX-USA.
Resultados: Os resultados do AOBEM Parte I tiveram a maior correlação com os resultados do nível 3 do COMLEX-USA (.57) e a menor correlação com os resultados do nível 2-CE do COMLEX-USA (.53). A correlação mais baixa foi entre as pontuações da AOBEM Parte I e COMLEX-USA Nível 1 (.47). De acordo com o modelo de regressão por etapas, as pontuações COMLEX-USA Nível 1 e Nível 2CE, que os programas de residência freqüentemente utilizam como critério de seleção, em conjunto explicaram 30% da variação nas pontuações da AOBEM Parte I. A adição das pontuações do Nível 3 explicou 37% da variância. O teste t independente indicou que os 397 examinadores que passaram no AOBEM Parte I tiveram um desempenho significativamente melhor que os 54 examinadores que falharam no AOBEM Parte I em todos os 3 níveis COMLEX-USA (P<.001 para todos os 3 níveis). O modelo de regressão logística mostrou que as pontuações dos níveis 1 e 3 do COMLEX-USA previram os log-odds de passagem do AOBEM Parte I (P=.03 e P<.001, respectivamente).
Conclusão: O presente estudo suportou empiricamente as validades preditivas e discriminantes da série COMLEX-USA em relação ao exame de certificação AOBEM Parte I. Embora os programas de residência possam utilizar as pontuações COMLEX-USA Nível 1 e Nível 2-CE como critérios parciais na seleção de residentes, as pontuações de Nível 3, embora normalmente não disponíveis no momento da aplicação, são na verdade as mais estatisticamente relacionadas ao desempenho na AOBEM Parte I.