Publication:
Issues and possible solutions in cognitive diagnosis modeling applications: The case of a large-scale educational assessment in Mexico

relationships.isAuthorOfPublication
relationships.isSecondaryAuthorOf
relationships.isDirectorOf
Authors
Vázquez-Lira, Ramsés ; Leenen, Iwin ; Sorrel, Miguel A. ; Escudero, Scarlett
item.page.secondaryauthor
item.page.director
Publisher
Servicio de Publicaciones. Universidad dde Murcia
publication.page.editor
publication.page.department
DOI
https://doi.org/10.6018/analesps.650971
item.page.type
info:eu-repo/semantics/article
Description
Abstract
Cognitive diagnosis modeling (CDM) is a proposed framework for the creation and analysis of measurement tools that originated in the field of education and have extended to other areas of interest in psychol ogy. These models have received a lot of attention in recent years, resulting in an abundance of theoretical contributions. However, there is still a shortage of studies applying these methodologies to real data. It is essential to evaluate the procedures in their natural context of application and to provide solutions tailored to the problems that may arise in practice. The purpose of this study is to apply CDM to a large-scale evaluation that as sesses high school teachers in Mexico, which was designed based on a CDM framework. Five issues are identified that arose in the analysis of these data and provide guidelines on how to explore and find solutions to these issues with implementation in R. Besides discussing psychometric so lutions, this paper also emphasizes the importance of consulting with con tent experts. By highlighting potential challenges that can arise even when all necessary elements for a large-scale CDM educational assessment are in place, this study aims to guide future empirical applications and methodo logical proposals.
Los modelos de diagnóstico cognitivo (CDM, por sus siglas en inglés) son un marco propuesto para la creación y análisis de instrumentos de medición que se originó en el campo de la educación y se ha extendido a otras áreas de interés en la psicología. Estos modelos han recibido una gran atención en los últimos años, lo que ha dado lugar a numerosas contribu ciones teóricas. Sin embargo, aún existe una escasez de estudios que apli quen estas metodologías a datos empíricos. Es fundamental evaluar los procedimientos en su contexto natural de aplicación y proporcionar solu ciones adaptadas a los problemas que puedan surgir en la práctica. El obje tivo de este estudio es aplicar CDM a una evaluación a gran escala diseñada bajo este marco, la cual tiene como objetivo evaluar a docentes de nivel medio superior en México. En el análisis de estos datos, se identificaron cinco problemas y se presentan directrices sobre cómo explorarlos y en contrar soluciones utilizando R. Además de discutir soluciones psicométri cas, este trabajo enfatiza la importancia de la consulta con expertos en con tenido. Al destacar los posibles desafíos que pueden surgir incluso cuando se cuentan con todos los elementos necesarios para una evaluación educa tiva a gran escala basada en CDM, este estudio busca orientar futuras apli caciones empíricas y propuestas metodológicas.
Citation
Annals of Psychology, 42(2), e16
item.page.embargo