El Instrumento de Desarrollo Temprano (EDI) y su uso en la Evaluación Nacional de Educación Inicial 2014 GRADE Septiembre, 2016 Objetivos de la Evaluación Nacional de Educación Inicial Establecer un conjunto de indicadores acerca de la calidad del entorno educativo de las IEI y del desarrollo infantil al término del segundo ciclo del nivel inicial (3-5 años). Evaluar la calidad del entorno educativo en educación inicial Evaluar el desarrollo infantil de los niños de 5 años de edad Relacionar factores del contexto familiar y educativo con el desarrollo infantil (MINEDU, 2014) ¿Qué características debía tener la prueba de desarrollo infantil a seleccionar? Una prueba que pueda ser escalable. No requiera personal altamente calificado para su evaluación. Haya sido administrada en otros países de América Latina. Presente una buena confiabilidad y fuentes de validez concurrente o de constructo. Permita medir el nivel de desarrollo de los niños y niñas de 5 años. Instrumento de Desarrollo Temprano (EDI) Mide de manera indirecta el nivel de desarrollo infantil de los niños y niñas entre 4 y 5 años. No sirve para hacer diagnostico individual sino que es una medida poblacional (p.ej.: Distrito). Ha sido empleado en países de Latino América como Brasil, Chile, Colombia y México. Cuenta con un buen nivel de confiabilidad y moderados niveles de validez concurrente (TVIP, TEPSI, McCarthy). No requiere personal calificado sino trabajadores de campo bien capacitados. ¿Qué es el Instrumento de Desarrollo Temprano (EDI)? El Instrumento de Desarrollo Temprano (Offord Centre de la McMaster University de Canada, 1998) reporta el estado de niños y niñas en edad pre-escolar sobre diferentes áreas del desarrollo infantil. Consta de 103 preguntas divididas en 5 dimensiones: Desarrollo físico y bienestar. Competencia social. Madurez emocional. Desarrollo de lenguaje y cognitivo. Habilidades de comunicación y conocimiento general. Las 5 dimensiones se forman a partir de 16 sub-dimensiones. La interpretación es grupal y la evaluación es indirecta (reporte de los docentes). Dimensiones y Sub-dimensiones que mide el EDI Dimensión Desarrollo físico y bienestar Competencia social Madurez emocional Desarrollo cognitivo y del lenguaje Habilidades de comunicación y conocimiento general Subdimensión 1. Estado físico 2. Independencia física 3. Habilidades motoras gruesas y finas 1. Responsabilidad y respeto 2. Métodos de aprendizaje 3. Competencia social 4. Actitud hacia explorar cosas nuevas 1. Comportamiento prosocial y colaborador 2. Hiperactividad e inatención 3. Comportamiento temeroso y ansioso 4. Comportamiento agresivo 1. Habilidades numéricas 2. Habilidades avanzadas en literatura 3. Interés en la literatura/números y memoria 4. Habilidades de literatura básica - Ítems 4 4 5 8 9 5 4 8 7 8 7 7 6 5 8 8 Vulnerable 0% - 10% Puntos de Corte del EDI En riesgo 10% - 25% Desarrollo No Adecuado 75% - 100% Desarrollo Adecuado Desarrollo adecuado: significa que los niños y/o niñas cuentan con habilidades y capacidades que les permiten beneficiarse de actividades educativas que se ofrecen en el nivel inicial y en la escuela primaria En riesgo: significa que los niños y/o niñas tienen pocas probabilidades de adquirir habilidades y/o capacidades que les permitan aprovechar las actividades educativas que se ofrecen en el nivel inicial y en la escuela primaria. Vulnerable: significa que los niños y/o niñas no han desarrollado habilidades y/o capacidades que les permitirán aprovechar las actividades educativas que se ofrecen en el nivel inicial y en la escuela primaria. Los equipos de trabajo de la EN 2014 El trabajo para la Evaluación Nacional fue dividido en tres, que son: Equipo técnico: el equipo de Evaluación de la Dirección Nacional de Educación Inicial encargado de la elaboración de los instrumentos y la capacitación al personal seleccionado para el trabajo de campo. Operador logístico: el consorcio conformado por las instituciones ESAN (Escuela de Negocios) y la ONG PRISMA encargados de la recolección de la información. Equipo metodológico: el centro de investigación Grupo de Análisis para el Desarrollo encargado de realizar la limpieza y análisis de resultados de la información recogida. Pasos previos que se siguieron para el uso del EDI en la EN 2014 Los pasos seguidos fueron: • Se adaptó la versión original del EDI. • Se agregó una sección relacionada al idioma y aptitudes cognitivas en lenguas originarias. • Se realizó una evaluación piloto para determinar la confiabilidad y validez del instrumento (concurrente) en diferentes regiones del país (Ayacucho, Apurímac y Lima). • Se ajusto el instrumento a la luz de los resultados de la evaluación piloto realizada. Detalles de la EN 2014 (i) Muestra Población objetivo: Todas las instituciones educativas de educación inicial en el Perú con aulas de niños y niñas de 5 años con al menos 5 niños o niñas de esta edad en el aula. Muestra: 946 Instituciones Educativas, 1,020 secciones, y 16,105 estudiantes de 5 años. Inferencia: la muestra tiene inferencia nacional, tipo de gestión, área geográfica de la I.E. y región natural (margen de error de 5%) Instrumentos Se aplicaron también los siguientes instrumentos: Instrumento de Desarrollo Temprano (EDI) La Escala de Calificación del Ambiente de la Infancia Temprana ECERS-R Cuestionario a los padres de familia Cuestionario a las docentes Cuestionario a las directoras Detalles de la EN 2014 (ii) Trabajo de campo Análisis de la información Tuvo una duración de siete meses donde se realizaron los siguientes análisis: Capacitación: mes y medio, siendo 5 días la capacitación a los supervisores y capacitadores del EDI. Aplicación de los instrumentos: dos meses y medio para todos los instrumentos. Revisión y critica de los instrumentos: dos meses para la revisión exhaustiva de todos los instrumentos administrados por parte del operador logístico y el equipo técnico. Limpieza de las bases de datos Análisis psicométrico del EDI y los demás instrumentos. Análisis descriptivo del EDI y ECERSR. Análisis de factores asociados para ver que factores individuales, familiares y escolares están asociados al desarrollo infantil. RESULTADOS EDI POR DIMENSIONES Y NIVEL DE DESARROLLO 0 2 4 6 8 Desarrollo físico y bienestar 10 .25 0 0 0 Densidad de Probabilidad .2 .4 .6 Densidad de Probabilidad .1 .2 .3 .4 Densidad de Probabilidad .05 .1 .15 .2 .5 .8 La distribución de los puntajes del EDI por dimensiones 0 4 6 8 Competencia social 10 Simetria: -1.35, Curtosis: 4.72, CV: 0.18 0 0 Densidad de Probabilidad .1 .2 Densidad de Probabilidad .4 .1 .2 .3 .3 .5 Simetria: -1.55, Curtosis: 5.70, CV: 0.14 2 0 2 4 6 8 10 Desarrollo del lenguaje y cognitivo Simetria: -1.07, Curtosis: 3.72, CV: 0.27 0 2 4 6 8 10 Habilidades comunicacionales y conocimiento general Simetria: -1.25, Curtosis: 4.35, CV: 0.21 0 2 4 6 8 Madurez emocional Simetria: -0.75, Curtosis: 3.34, CV: 0.21 10 Porcentaje de niños y niñas vulnerables en al menos una dimensión EDI, por características de los estudiantes y su familia 50.0 43.1 40.0 30.0 36.3 32.1 30.2 23.8 22.7 20.0 27.8 26.6 20.2 10.0 0.0 Niño Sexo Niña 5 años Edad 6 años Castellana No Castellana Lengua Materna Primaria o menos Secundaria Superior Educación de la madre Porcentaje de niños y niñas vulnerables en al menos una dimensión EDI, por características de las instituciones educativas 50.0 40.0 30.0 35.1 30.4 22.1 20.0 26.0 31.8 30.2 24.2 28.1 27.4 25.3 10.0 0.0 Pública Privada Gestión Urbana Rural Área geográfica Costa Sierra Región Natural Selva Inadecuado Mínimo Bueno Calidad del Ambiente Porcentaje de niños y niñas vulnerables en al menos una dimensión EDI, por regiones 100.0 90.0 80.0 70.0 60.0 41.1 43.4 Huancavelica Apurímac Loreto 38.9 Pasco 36.1 Cusco 34.2 34.4 Huanuco Ayacucho San Martín Cajamarca 32.1 32.2 32.7 30.2 30.9 Piura Ucayali La Libertad Ica Callao Junín Arequipa Ancash 28.2 26.6 26.7 27.0 27.3 27.3 24.8 26.0 Lima Tacna Amazonas 0.0 22.9 23.1 21.5 21.6 Tumbes 10.0 18.4 19.1 Moquegua 20.0 Lambayeque 30.0 Madre de Dios 40.0 Puno 50.0 Conclusiones sobre las propiedades Psicométricas del EDI Se logró adaptar el EDI para el contexto peruano a escala nacional. La confiabilidad del EDI fue buena tanto usando índices de estabilidad (tes-retest) como índices de consistencia interna (Cronbach). Los análisis de validez concurrente muestran que las diferentes dimensiones del EDI tienen una moderada correlación con diferentes instrumentos que miden el desarrollo infantil (McCarthy, TVIP y SDQ). Los puntajes de las diferentes dimensiones del EDI presentan una distribución asimétrica y poca dispersión, aspecto que limita su poder explicativo. Recomendaciones Es importante medir el desarrollo infantil a escala nacional para poder monitorear y evaluar políticas educativas a favor de la primera infancia en el país. Por tal motivo, se hacen las siguientes recomendaciones para mejorar el instrumento seleccionado para medir el desarrollo infantil: Debido a que el EDI no es una medida directa del desarrollo infantil sino un reporte del docente del niño o niña evaluada, se recomienda realizar estudios para validar externamente con otras pruebas que midan las mismas dimensiones del desarrollo infantil de forma directa, p.e. la escala Bayley o la escala de Nelson Ortiz. Se deben cambiar los puntos de corte actuales (basados en la distribución) debido a que no son adecuados para medir el nivel de desarrollo de los niños o niñas. Lo adecuado sería puntos de corte que reflejen las habilidades que un niño o niña de 5 años debería lograr a esa edad. No debe ser usada para sistemas de incentivos a los docentes de educación inicial debido a que es un instrumento fácilmente capturable por el individuo que recibiría el incentivo.