DESCRIPCIÓN DEL NIVEL DE FACILIDAD Y PODER DE DISCRIMINACIÓN DEL EXAMEN DE INFERENCIA ESTADÍSTICA EN MÉTODOS ESTADISTICOS EN MEDICINA VETERINARIA Y ZOOTECNIA MC Ma. Guadalupe Sánchez González1 Dra. Graciela Guadalupe Tapia Perez1 1Fac. de Medicina Veterinaria y Zootecnia. UNAM. Departamento de Genética y Bioestadística. Evaluación La evaluación educativa: La elaboración La aplicación El análisis de los instrumentos de medición. La función principal de un instrumento de medición, es el ofrecer información para la toma de correcta decisiones. Características Psicométricas de los reactivos Indicadores: Nivel de dificultad Poder de discriminación Funcionamiento de sus distractores El nivel de dificultad (la proporción de personas que responden correctamente un reactivo). El poder de discriminación (capacidad del ítem de discriminar entre aquellos que tuvieron buenas calificaciones y aquellos que obtuvieron bajas calificaciones) Objetivo Evaluar los resultados de los indicadores psicométricos (nivel de facilidad y poder de discriminación) de los reactivos del examen de inferencia estadística (contrastación de hipótesis) en Métodos Estadísticos en Medicina Veterinaria y Zootecnia. Material y Métodos Semestres:2007-2, 2008-1, 2009-1 y 2009-2 Exámenes: teóricos y prácticos, se realizaron en la plataforma Moodle. El análisis de los reactivos fueron obtenidos en la plataforma: Nivel de facilidad (Índice de facilidad=IF) Poder de discriminación: Índice de discriminación (ID) Coeficiente de discriminación (CD) Los reactivos se clasificaron según el manual de EXHCOBA (Examen de Habilidades y Conocimientos Básicos). Índice de facilidad (IF) El índice de facilidad o índice de dificultad (IF), EXCOBA (Proporción) Clasificación del reactivo 0.00-0.05 0.06-0.25 Difícil Medianamente difícil 0.26-0.75 0.76-0.95 Media Medianamente fácil 0.96-1.00 Fácil Índice de discriminación (ID) Indicador del desempeño de los individuos con puntuaciones altas frente a sujetos con puntuaciones bajas. El parámetro abarca (-1≤ID≤1). Un índice es inferior a 0 (cero) significa que los estudiantes del grupo bajo rindieron más en el ítem que los del grupo alto, tales ítems deberían eliminarse debido a su escasa fiabilidad, reducen la precisión del cuestionario. EXCOBA (Proporción) Clasificación del reactivo Recomendación (-) Negativo 0.00-0.19 Pésima Pobre Descartar 0.20-0.29 0.30-0.39 0.40-1.00 Regular Buena Excelente Revisar a profundidad o descartar Revisar Posibilidad de mejorar Conservar Coeficiente de discriminación (CD) El parámetro adopta valores entre (-1≤CD≤1). Los valores positivos indican una buena discriminación. Los valores negativos se dan cuando los ítems son contestados mejor por los estudiantes con calificaciones más bajas, o son contestados incorrectamente por los estudiantes mejores, dichos ítems deberán eliminarse. EXCOBA (Proporción) Clasificación del reactivo Recomendación (-) Negativo 0.00-0.19 Pésima Pobre Descartar 0.20-0.29 0.30-0.39 Regular Buena Posibilidad de mejorar 0.40-1.00 Excelente Conservar Revisar a profundidad o descartar Revisar CD vs. ID La ventaja del CD frente al ID es que el primero utiliza información proveniente de la población total de estudiantes, no sólo de los tercios superior e inferior. Este parámetro es más sensible para detectar el comportamiento de los ítems. Resultados Examen Teórico Examen Práctico Promedio ± D.E. (n=63) General Índice de facilidad Índice de discriminación Coeficiente de discriminación 15.75±2.5 49.86±15.31 Media 0.18±0.35 Pobre 0.31±0.11 Bueno General Índice de facilidad Índice de discriminación Coeficiente de discriminación n2007-2=433 n2009-1=104 n2008-1=195 n2009-2=481 Promedio ± D.E. (n=43) 10.75±3.4 57.47±15.68 Media 0.58±0.19 Excelente 0.53±0.15 Excelente Resultados IF EXHCOBA (Proporción) Clasificación del reactivo Examen Teórico MEMVZ-FMVZ (%) Examen Práctico MEMVZ-FMVZ (%) 0.00-0.05 0.06-0.25 0.26-0.75 0.76-0.95 0.96-1.00 Difícil Medianamente difícil Media Medianamente fácil Fácil 0.00 4.75 87.30 7.94 0.00 0.00 5.00 81.00 14.00 0.00 Resultados del ID EXHCOBA (Proporción) Clasificación del reactivo Examen Teórico MEMVZ-FMVZ (%) Examen Práctico MEMVZ-FMVZ (%) (-) Negativo 0.00-0.19 0.20-0.29 0.30-0.39 0.40-1.00 Pésima Pobre Regular Buena Excelente 39.68 6.35 4.76 12.70 36.51 0.00 2.30 7.00 9.30 81.40 Resultado del CD EXHCOBA (Proporción) Clasificación del reactivo Examen Teórico MEMVZ-FMVZ (%) Examen Práctico MEMVZ-FMVZ (%) (-) Negativo 0.00-0.19 0.20-0.29 0.30-0.39 0.40-1.00 Pésima Pobre Regular Buena Excelente 0.00 6.35 20.63 20.63 36.51 0.00 0.00 0.00 7.00 93.00 Discusión y Conclusiones El IF muestra: 1) Un gran número de reactivos tienen una dificultad media a facilidad media. 2) Se carece de reactivos difíciles o fáciles. Discusión y Conclusiones 3) El ID y el CD para el examen teórico mostraron diferencia entre estimadores (53.97%reactivos óptimos) y (93.65%) El ID no está discriminando entre los estudiantes del grupo alto y los alumnos del grupo bajo La literatura indica una ventaja del CD (población total) frente al ID (tercios extremos). Por consiguiente, el CD es más sensible para detectar el comportamiento de los reactivos. Discusión y Conclusiones 4) El porcentaje de reactivos óptimos en el examen práctico fue similar 100% con el CD y 97.7% con el ID. 5) El análisis de reactivos proporcionado por la plataforma Moodle, permite determinar en forma sencilla y rápida si los reactivos son fáciles o difíciles y si estos están discriminando correctamente. Gracias