| Revista: | Investigación en educación médica |
| Base de datos: | PERIÓDICA |
| Número de sistema: | 000447627 |
| ISSN: | 2007-5057 |
| Autores: | Giaconi, Elisa1 Bazán, María Elisa1 Castillo, Manuel1 Hurtado, Amelia1 Rojas, Héctor1 Giaconi, Valentina2 Guiraldes, Ernesto1 |
| Instituciones: | 1Universidad Mayor, Facultad de Ciencias, Santiago de Chile. Chile 2Universidad de O’Higgins, Instituto de Ciencias de la Educación, Rancagua, Cachapoal. Chile |
| Año: | 2021 |
| Periodo: | Oct-Dic |
| Volumen: | 10 |
| Número: | 40 |
| Paginación: | 61-69 |
| País: | México |
| Idioma: | Español |
| Tipo de documento: | Artículo |
| Enfoque: | Analítico, descriptivo |
| Resumen en español | Introducción: La Facultad de Ciencias de la Universidad Mayor utiliza regularmente pruebas de opción múltiple (POM) en la evaluación del aprendizaje en estudiantes de pregrado. Desde hace 10 años estas pruebas son corregidas con sistemas automáticos; esto permitió generar un diagnóstico global de las POM utilizadas. Objetivo: Analizar el índice de dificultad, el de discriminación, el coeficiente de fiabilidad y los distractores de las POM aplicadas en las distintas carreras de la salud y corregidas de manera automatizada y centralizada en la Facultad de Ciencias de la Universidad Mayor, en el periodo 2013-2017. Método: Para este estudio cuantitativo, descriptivo, no experimental, transversal y retrospectivo, de 2,640 pruebas corregidas por lector óptico, aplicadas por 7 carreras de la salud, se seleccionaron aleatoriamente 337 por muestreo probabilístico estratificado con selección sistemática. Se estimaron indicadores psicométricos en el marco de la Teoría Clásica de Test y se utilizó el test de ANOVA para la comparación entre carreras. Resultados: Los índices de dificultad, de discriminación y el coeficiente de fiabilidad presentan promedios de 68%, 0.23 y 0.50 respectivamente. Se observaron diferencias significativas entre carreras en los índices de dificultad y discriminación. En relación a los distractores, en promedio, 1.51 distractores son funcionales (1.52 para preguntas de cuatro alternativas, y 1.49 para preguntas de cinco alternativas). Conclusiones: Los resultados develan situaciones críticas en evaluación de los aprendizajes, que demandan profundizar la reflexión de directivos y docentes de las distintas carreras para asegurar la validez y calidad de las POM |
| Resumen en inglés | Introduction: Multiple-choice question tests (MCTs) are widely used to assess undergraduate students’ learning at the Health Sciences Schools (HSS) of our Universidad Mayor. In the last decade, the process of checking MCQs has been accomplished by optical mark recognition. This fact allowed this research study to obtain a diagnostic vision of the quality of this process. Objective: To analyze the difficulty, discrimination, reliability and distractors of MCTs applied in seven HSS of Universidad Mayor during the 2013-2017 period. Method: For this quantitative, descriptive, non-experimental, cross-sectional, and retrospective study, of the population of tests under study, i.e. 2640 MCTs, 337 were randomly selected by stratified probabilistic sampling with systematic selection. Psychometric indicators were estimated from the framework of Classical Test Theory. ANOVA tests were used to compare between programs. Results: For item difficulty, item discrimination, and reliability coefficient, the respective means were: 68%, 0.23 and 0.50. Only for item difficulty and discrimination were there significant differences among the participating HSS. Regarding distractors, on average, 1,51 distractors were found to be functional (1,52 for items with four choices and 1,49 for items with five choices). Conclusions: These results reveal that there is considerable room for improvement in the application of MCTs in the assessment of students‘ learning in our HSS. An in-depth reflection between faculty and university authorities should be carried out to ensure the future validity inferences and quality of MCTs |
| Disciplinas: | Medicina, Educación |
| Palabras clave: | Evaluación educativa, Educación médica, Exámenes de opción múltiple, Control de calidad, Formación médica, Psicometría |
| Keyword: | Educational evaluation, Medical education, Multiple choice tests, Quality control, Medical formation, Psychometrics |
| Texto completo: | Texto completo (Ver HTML) Texto completo (Ver PDF) |
