DESCRIPCIÓN DEL NIVEL DE FACILIDAD Y PODER DE

Anuncio
DESCRIPCIÓN DEL NIVEL DE FACILIDAD Y
PODER DE DISCRIMINACIÓN DEL EXAMEN
DE INFERENCIA ESTADÍSTICA EN MÉTODOS
ESTADISTICOS EN MEDICINA VETERINARIA
Y ZOOTECNIA
MC Ma. Guadalupe Sánchez González1
Dra. Graciela Guadalupe Tapia Perez1
1Fac.
de Medicina Veterinaria y Zootecnia.
UNAM.
Departamento
de
Genética
y
Bioestadística.
Evaluación
La
evaluación
educativa:
La elaboración
La aplicación
El análisis de los
instrumentos
de
medición.
La función principal de
un instrumento de
medición, es el ofrecer
información para la
toma
de
correcta
decisiones.
Características Psicométricas de los reactivos
Indicadores:
Nivel de dificultad
Poder de discriminación
Funcionamiento de sus distractores
El nivel de dificultad (la proporción de personas
que responden correctamente un reactivo).
El poder de discriminación (capacidad del ítem de
discriminar entre aquellos que tuvieron buenas
calificaciones y aquellos que obtuvieron bajas
calificaciones)
Objetivo
Evaluar los resultados de los indicadores
psicométricos (nivel de facilidad y poder
de discriminación) de los reactivos del
examen
de
inferencia
estadística
(contrastación de hipótesis) en Métodos
Estadísticos en Medicina Veterinaria y
Zootecnia.
Material y Métodos
Semestres:2007-2, 2008-1, 2009-1 y 2009-2
Exámenes: teóricos y prácticos, se realizaron en
la plataforma Moodle.
El análisis de los reactivos fueron obtenidos en la
plataforma:
Nivel de facilidad (Índice de facilidad=IF)
Poder de discriminación:
Índice de discriminación (ID)
Coeficiente de discriminación (CD)
Los reactivos se clasificaron según el manual de
EXHCOBA
(Examen
de
Habilidades
y
Conocimientos Básicos).
Índice de facilidad (IF)
El índice de facilidad o índice de dificultad (IF),
EXCOBA (Proporción)
Clasificación del reactivo
0.00-0.05
0.06-0.25
Difícil
Medianamente difícil
0.26-0.75
0.76-0.95
Media
Medianamente fácil
0.96-1.00
Fácil
Índice de discriminación (ID)
Indicador del desempeño de los individuos con
puntuaciones altas frente a sujetos con puntuaciones bajas.
El parámetro abarca (-1≤ID≤1).
Un índice es inferior a 0 (cero) significa que los estudiantes
del grupo bajo rindieron más en el ítem que los del grupo
alto, tales ítems deberían eliminarse debido a su escasa
fiabilidad, reducen la precisión del cuestionario.
EXCOBA
(Proporción)
Clasificación
del reactivo
Recomendación
(-) Negativo
0.00-0.19
Pésima
Pobre
Descartar
0.20-0.29
0.30-0.39
0.40-1.00
Regular
Buena
Excelente
Revisar a profundidad o
descartar
Revisar
Posibilidad de mejorar
Conservar
Coeficiente de discriminación (CD)
El parámetro adopta valores entre (-1≤CD≤1).
Los valores positivos indican una buena discriminación.
Los valores negativos se dan cuando los ítems son
contestados mejor por los estudiantes con calificaciones
más bajas, o son contestados incorrectamente por los
estudiantes mejores, dichos ítems deberán eliminarse.
EXCOBA
(Proporción)
Clasificación del
reactivo
Recomendación
(-) Negativo
0.00-0.19
Pésima
Pobre
Descartar
0.20-0.29
0.30-0.39
Regular
Buena
Posibilidad de mejorar
0.40-1.00
Excelente
Conservar
Revisar a profundidad o
descartar
Revisar
CD vs. ID
La ventaja del CD frente al ID es que el
primero utiliza información proveniente de
la población total de estudiantes, no sólo
de los tercios superior e inferior.
Este parámetro es más sensible para
detectar el comportamiento de los ítems.
Resultados
Examen Teórico
Examen Práctico
Promedio ± D.E.
(n=63)
General
Índice
de
facilidad
Índice
de
discriminación
Coeficiente de
discriminación
15.75±2.5
49.86±15.31
Media
0.18±0.35
Pobre
0.31±0.11
Bueno
General
Índice
de
facilidad
Índice
de
discriminación
Coeficiente de
discriminación
n2007-2=433 n2009-1=104
n2008-1=195 n2009-2=481
Promedio ± D.E.
(n=43)
10.75±3.4
57.47±15.68
Media
0.58±0.19
Excelente
0.53±0.15
Excelente
Resultados IF
EXHCOBA
(Proporción)
Clasificación del reactivo
Examen Teórico
MEMVZ-FMVZ (%)
Examen Práctico
MEMVZ-FMVZ (%)
0.00-0.05
0.06-0.25
0.26-0.75
0.76-0.95
0.96-1.00
Difícil
Medianamente difícil
Media
Medianamente fácil
Fácil
0.00
4.75
87.30
7.94
0.00
0.00
5.00
81.00
14.00
0.00
Resultados del ID
EXHCOBA
(Proporción)
Clasificación del
reactivo
Examen Teórico
MEMVZ-FMVZ (%)
Examen Práctico
MEMVZ-FMVZ (%)
(-) Negativo
0.00-0.19
0.20-0.29
0.30-0.39
0.40-1.00
Pésima
Pobre
Regular
Buena
Excelente
39.68
6.35
4.76
12.70
36.51
0.00
2.30
7.00
9.30
81.40
Resultado del CD
EXHCOBA
(Proporción)
Clasificación del
reactivo
Examen Teórico
MEMVZ-FMVZ (%)
Examen Práctico
MEMVZ-FMVZ (%)
(-) Negativo
0.00-0.19
0.20-0.29
0.30-0.39
0.40-1.00
Pésima
Pobre
Regular
Buena
Excelente
0.00
6.35
20.63
20.63
36.51
0.00
0.00
0.00
7.00
93.00
Discusión y Conclusiones
El IF muestra:
1) Un gran número de reactivos tienen una
dificultad media a facilidad media.
2) Se carece de reactivos difíciles o fáciles.
Discusión y Conclusiones
3) El ID y el CD para el examen teórico
mostraron diferencia entre estimadores
(53.97%reactivos óptimos) y (93.65%)
El ID no está discriminando entre los estudiantes del
grupo alto y los alumnos del grupo bajo
La literatura indica una ventaja del CD (población
total) frente al ID (tercios extremos). Por
consiguiente, el CD es más sensible para detectar el
comportamiento de los reactivos.
Discusión y Conclusiones
4) El porcentaje de reactivos óptimos en el
examen práctico fue similar 100% con el
CD y 97.7% con el ID.
5) El análisis de reactivos proporcionado
por la plataforma Moodle, permite
determinar en forma sencilla y rápida si
los reactivos son fáciles o difíciles y si
estos están discriminando correctamente.
Gracias
Descargar