Evaluación y medición en desarrollo infantil temprano: Pilotaje de intervenciones, e instrumentos de medicion. Monica Rubio Division de Proteccion Social y Salud Setiembre 2011. De qué vamos a hablar? – El BID tiene como una de sus prioridades el apoyar la implementación y perfeccionamiento continuo de políticas y programas orientados a la Primera Infancia. – Como institución, el BID tiene ventaja comparativa en la construcción de conocimiento de vanguardia y en la transferencia de aprendizajes y experiencias entre paises. Ejemplos de esto: • Pilotaje de intervenciones susceptibles a ser escaladas – Modalidad de intervención para niños de 0 a 3 años en entorno familiar. • Desarrollo de instrumentos de política – Aporte del BID al conocimiento regional de medición de DIT: Identificación de instrumentos de medición costo-efectivos, para niños menores de 3 años. 2 Piloto de una intervención de DIT en Colombia 3 Piloto de una intervención en DIT en Colombia • Estrategia “De Cero a Siempre” • El BID junto con el Institute for Fiscal Studies (en Londres) comparte este interés por identificar estrategias que procuren mejor calidad en la atención en nutrición, salud y educación a los niños menores de 5 años. • En Febrero de 2010 se inició un piloto de una intervención para la promoción del desarrollo infantil a través y en colaboración del programa Familias en Acción (FeA), un PTC. • La intervención está basada en un modelo de visitas domiciliarias a niños beneficiarios de FeA. Este estudio piloto implementa un curriculum especialmente diseñado a través de las madres líderes locales del programa Familia en Acción con el fin de evaluar si este modelo es sostenible y efectivo a gran escala para la atención a niños menores de 3 años. 4 Piloto de una intervención en DIT en Colombia • Por qué de esta intervencion? – Interes en Identificar intervenciones costo-efectivas, viables y sostenibles para promover el desarrollo de la primera infancia. Hay un interés especial en comprender si los recursos existentes y los vínculos de la comunidad se pueden aprovechar como un medio de aplicación de las intervenciones que fomentan el desarrollo de la primera infancia, por ejemplo relacionado con un programa permanente de cuidado infantil. • La innovación del programa aprovecha la capacidad institucional que ha sido generada a través de los años por el programa de transferencias condicionadas 5 Un paréntesis: FeA y su potencial para atender a la primera infancia • FeA es un programa de transferencias condicionadas: 10 años de trayectoria, desplegado en el territorio nacional, cubre al 20% de los hogares de Colombia, y cuenta con un track-record de innovación y evaluación notables. Objetivos generales de FeA: • Contribuir a la formación de capital humano de las familias en extrema pobreza (SISBEN 1, en situación de Desplazamiento, Comunidades Indígenas), mediante dos estrategias: 1) Complementar el ingreso de las familias con niños menores de 18 años, incentivando la formación de capital humano a través de: el consumo de alimentos, la incorporación de hábitos nutricionales y acciones de cuidado de la salud y seguimiento nutricional a los menores de 7 años. 2) La asistencia y permanencia escolar en los niveles de educación básica y educación secundaria y media 6 Un paréntesis: FeA y su potencial para atender a la primera infancia • Otorga subsidios en dinero, a familias nivel 1 del SISBEN, familias en condición de desplazamiento o familias indígenas, con niños menores de 18 años, a cambio del cumplimiento de una serie de compromisos por parte de las familias (educación y salud). • Tradición de 10 años de evaluaciones, tanto de procesos como impacto que muestran la efectividad del Programa. 7 Un paréntesis: FeA y su potencial para atender a la primera infancia • La evaluación de impacto 2005-2006 recomienda potenciar los beneficios del subsidio de nutrición, con acciones que fomenten el desarrollo psicosocial y cognitivo de los niños. • La Estrategia de Cero a Siempre llama a una integración de la oferta programática social, centrada en el niño. • El capital social de FA: el liderazgo de las madres líderes, los Encuentros de cuidado, la organización en redes sociales, etc.. 8 Concretamente, en qué consiste la intervención • • Intervención y evaluación mediante un experimento aleatorio basada en dos intervenciones: – Currículo de Estimulación diseñado por Grantham-McGregor para Jamaica y adaptado a Colombia. – Suplemento nutricional (micronutrientes). Identificar sinergias entre estimulación y nutrición: – Experimento social controlado con noventa y seis municipios que se asignaron aleatoriamente a cuatro grupos: – un grupo de control que recibe los beneficios típicamente disponibles a través de FeA, – un grupo que recibe la estimulación del desarrollo infantil dirigida a niños entre 1 y 2 años de edad, – Un grupo que recibe suplemento nutricional de micro- nutrientes. – y un tercer grupo de tratamiento que recibe ambas cosas 9 Concretamente, en qué consiste la intervención 96 municipios en 3 regiones del país: – Municipios entre 5 y 50 mil habitantes. – 1400 niños de 12 a 24 meses. – 18 meses de intervención. – Asignación aleatoria a 4 grupos. – Recolección de información socio-económica, psicométrica y antropométrica antes de iniciar la intervención y al finalizar. 10 Despliegue Operativo • En cada municipio en los grupos de tratamiento: – Tres madres líderes de FeA fueron seleccionadas y los niños entre los 12 y 24 meses de edad se incluyeron en la muestra de evaluación (1,400 niños). – Las madres líderes fueron capacitadas en la implementación del currículo para la promoción del desarrollo infantil, y posteriormente lo implementaron con las madres de familia y niños en las visitas semanales a sus hogares. • La intervención duró 18 meses y finaliza en Ago. 2011. • Línea de base recolectada antes de la implementación de la intervención. Seguimiento a ser recolectado en Setiembre de 2011. En este punto, los 1,400 niños de la muestra tendrán entre 30 y 40 meses de edad. Resultados: Marzo 2012. 11 Despliegue Operativo • El piloto se diseñó con el propósito específico de hacer la intervención fácilmente escalable y potencialmente costo efectiva. • El costo de la intervención (entrenamiento de las madres líderes, la supervisión de su trabajo por parte de supervisoras debidamente capacitadas y los pagos de ambos grupos) es de cerca de US$500 por niño por año. • Si se trabajara a escala, los costos de capacitación y supervisión podrían ser significativamente más bajos (dado que en cada municipio existirían más que tres madres lideres de Familias en Acción por capacitar y supervisar). Los costos se podrían reducir incluso hasta US$350-400 por niño por año. 12 El curriculum: Visitas domiciliarias dirigidas a: Mejorar las habilidades de la madre para educar al niño. Promover el desarrollo del niño. Lenguaje Motricidad Cognición y creatividad Confianza en sí mismo, autoestima, destrezas sociales Prepararse para la educación formal Incrementar la confianza de la madre en sí misma. Fortalecer el vinculo entre la madre-hijo 13 Metodología • • • • • Canciones Juegos Jugetes con material de reciclaje Material didáctico: • Rompecabezas • Loterías • Libros Participación activa de la famila 14 Material 15 Material 16 Instrumentos de medición del desarrollo en menores de 3 años 17 Instrumentos de medición de desarrollo en menores de 3 años •Estudio que sera de utilidad a la Region: Identificar un instrumento de medición de DIT para niños menores de 3 años, que sea costo efectivo y suceptible de ser implementado a nivel país. •Este estudio, realizado también con el Institute for Fiscal Studies (en Londres) acabó el operativo de campo de recolección de línea de base en Octubre 2011. •El estudio busca: – Identificar tests cortos y más economicos con alta predictibilidad (según comparaciones con el Bayleys) – Calcular el gradiente socioeconomico del desarrollo para una gran urbe latinamericana. 18 Instrumentos de medición de desarrollo en menores de 3 años Por qué realizar esta investigación? La medición de DIT –especialmente en menores de 3 años– sigue presentando una serie de retos: • Existen pocas pruebas psicométricas de alta calidad. • Las pruebas que existen son muy costosas de administrar: tienen largos tiempos de aplicación y requieren de formación muy específica al personal que las administra. • No se conoce el poder de medición y la capacidad de predicción del desarrollo futuro de otras pruebas más sencillas y fáciles de administrar (y en particular, de las versiones en español de estas pruebas). No existe un diagónstico detallado del perfil de desarrollo cognitivo, de lenguaje, motor y socio-emocional por estratos socio-económico en grandes urbes latino-americanas. 19 Instrumentos de medición de desarrollo en menores de 3 años Relevancia para Colombia: 1.Primera medición de desarrollo cognitivo de niños menores de tres años. 2.Perfil de desarrollo infantil comprensivo: cognitivo, de lenguaje, motriz y sociomocional. Útil para planificación, diseño y evaluación de intervenciones de política. 3.Medición clara del “gradiente” en desarrollo cognitivo y no cognitigo entre 6 y 42 meses de edad de distintos niveles de SISBEN. 4.Validación de pruebas cortas puede marcar la estrategia de medición de una línea de base de la estrategia global. 20 Instrumentos de medición de desarrollo en menores de 3 años Puntaje estandarizado del Peabody 85 90 95 • Las diferencias en el desempeño verbal según estrato crecen en el tiempo. 80 – La desigualdad empieza desde temprano en la vida. 100 Prueba de Vocabulario en Imagenes PEABODY por nivel de riqueza de los hogares SOLO entre hogares de SISBEN 1 y SISBEN 2 total nacional 35 40 45 50 Edad en meses 55 60 21 Estudio de medición de DIT Objetivos 1.Validar el poder de medición de una serie de pruebas psicométricas cortas y de relativa facil aplicación, contra una prueba más larga y de más compleja administración, reconocida internacionalmente por su capacidad de predicción de niveles de desarrollo futuros. 2.Identificar y cuantificar la relevancia de los principales factores que influyen en el desarrollo motor, cognitivo y socio-económicas y demográficas del hogar y de los padres, estatus nutricional de los niños y el nivel de estimylación infantil existente en el hogar, entre otros 3.Determinar la existencia de una brecha socio-económica en el desarrollo infantil temprano de forma rigurosa, y cuantificar su tamaño. 22 Concretamente, en qué consiste el ejercicio? 1. Muestra representativa de la ciudad de Bogotá • Selección aleatoria por manzanas con población representativa por estrato y por rango de edad. • Muestreo puerta-a-puerta 126 madres 1440 niños de diferentes estratos socieconomicos. Equipo de recuento, de capacitadoras, de encuestadoras, de investigadores 23 Estudio de medición de DIT Cómo se hizo? 2. Aplicación de diferentes pruebas de desarrollo a los niños. • El Bayley II (sub-escalas de motricidad fina y gruesa, cognitiva y lenguaje) se considera como prueba de referencia para medir desarrollo cognitivo en menores de 3 años BATERÍA A BATERÍA B Sub-escalas de auto-dirección y social de la escala de comportamiento adaptativo del Test de Bayley Inventario de habilidades comunicativas: Versión breve MacArthur-Bates WHO Motor Milestones Denver II Batelle Developmental Inventory Ages & Stages Questionnaire Test de Bayley (incluye sub-escala Socio-Emocional Mediciones antropométricas de peso y talla Encuesta sociodemográfica Encuesta sociodemográfica incluyendo Family Care Indicator 24