Predictive validity of academy mock tests against MIRexam: a retrospective multicohort observational concordance study.

dc.contributor.authorCampos Pavón, Jaime
dc.contributor.authorCarazo Casas, Carlos
dc.contributor.authorGonzález Castro, Pablo
dc.contributor.departmentSin departamento asociado
dc.date.accessioned2026-02-09T14:49:02Z
dc.date.available2026-02-09T14:49:02Z
dc.date.created2025
dc.date.issued2025-10-16
dc.description.abstractIntroducción: El examen MIR es un requerimiento para acceder al sistema público deformación sanitaria especializada en España. Este estudio evalúa, a lo largo de cinco años, laconcordancia entre los simulacros administrados por una academia preparatoria del MIR y losresultados oficiales del MIR. Métodos: Los registros de candidatos se vincularon; sobre laintersección emparejada se calcularon la R de Pearson y la ρ de Spearman (percentiles ypuntuaciones netas), el sesgo (simulacro−oficial) y el RMSE. Los indicadores clave anuales (KPI) seponderaron por pares y los análisis se estratificaron por cohortes de percentil (≤27, 28–73, >73); losmapas de calor resumen las correlaciones en percentiles. Resultados: A lo largo de los años, lascorrelaciones ponderadas en percentiles se situaron habitualmente entre 0,71 y 0,76, con sesgopromedio pequeño y RMSE moderado. Los análisis por cohortes mostraron errores mayores en lospercentiles extremos en algunos años. El sesgo en la puntuación neta ponderado por pares fueglobalmente cercano a cero, con variabilidad interanual. Conclusiones: Los simulacros de academiaproporcionan una señal de clasificación en gran medida consistente con respecto a los resultadosoficiales del MIR. El sesgo residual y la dispersión sugieren un margen de mejora mediantecalibración —especialmente en los extremos de las cohortes— y motivan la monitorización rutinariade los KPI de concordancia en futuras promociones.
dc.description.abstractIntroduction: MIR examination is a requirement to access Spain’s public specialisttraining system. This study evaluates, across five years, the concordance between mock examsadministered by a MIR preparatory academy and the official MIR results. Methods: Candidaterecords were linked; on the matched intersection we computed Pearson’s R and Spearman’s ρ(percentiles, net scores), bias (simulation−official), and RMSE. Annual key performance indicators(KPIs)were pair-weighted and analyses stratified by percentile cohorts (≤27, 28–73, >73); heatmapsummarize percentile correlations. Results: Across years, weighted percentile correlations typicallyfell in the 0.71–0.76 range, with small average bias and moderate RMSE. Cohort analyses indicatedlarger errors at extreme percentiles in some years. Net-score bias weighted by pairs was near zerooverall, with year-to-year variability. Conclusions: Academy mock tests provide a broadlyconsistent ranking signal relative to official MIR outcomes. Residual bias and dispersion suggestpotential gains from calibration—particularly at cohort extremes—and motivate routine monitoringof concordance KPIs in future cohorts.
dc.formatapplication/pdf
dc.format.extent8
dc.identifier.citationGonzález Castro, P., Campos Pavón, J., & Carazo Casas, C. (2025). Validez predictiva de los simulacros de academia frente al examen MIR: un estudio observacional retrospectivo multicohorte de concordancia. Revista Española De Educación Médica, 6(6).
dc.identifier.doihttps://doi.org/10.6018/edumed.681901
dc.identifier.eissn2660-8529
dc.identifier.urihttp://hdl.handle.net/10201/202441
dc.languageeng
dc.publisherUniversidad de Murcia, Servicio de Publicaciones
dc.relationSin financiación externa a la Universidad
dc.rightsAttribution-NonCommercial-NoDerivatives 4.0 International*
dc.rights.accessRightsinfo:eu-repo/semantics/openAccess
dc.rights.urihttp://creativecommons.org/licenses/by-nc-nd/4.0/*
dc.subjectMock examinations
dc.subjectPredictive validity
dc.subjectConcordance
dc.subjectPearson correlation
dc.subjectSpearman correlation
dc.subjectRMSE
dc.subjectBias
dc.subjectSimulacros
dc.subjectValidez predictive
dc.subjectConcordancia
dc.subjectCorrelación de Pearson
dc.subjectCorrelación de Spearman
dc.subjectSesgo
dc.subjectMIR
dc.subject.odsNo relacionado con ningún objetivo de desarrollo sostenible
dc.titlePredictive validity of academy mock tests against MIRexam: a retrospective multicohort observational concordance study.
dc.title.alternativeValidez predictiva de los simulacros de academia frente alexamen MIR: un estudio observacional retrospectivomulticohorte de concordancia.
dc.typeinfo:eu-repo/semantics/article
Files
Original bundle
Now showing 1 - 1 of 1
Loading...
Thumbnail Image
Name:
Article+AMIR+corregido+después+publicado.pdf
Size:
404.63 KB
Format:
Adobe Portable Document Format
Description:
License bundle
Now showing 1 - 1 of 1
Loading...
Thumbnail Image
Name:
license.txt
Size:
1.37 KB
Format:
Item-specific license agreed upon to submission
Description: