Evaluaciones de Aprendizaje Estandarizadas. Análisis Crítico Beatrice Ávalos Simposio Internacional de Calidad y Evaluación de Aprendizajes 3 Septiembre 2015 Miradas analíticas respecto a las evaluaciones estandarizadas • Instrumentos de información • Instrumentos de comparación y comparabilidad entre entidades escolares y sistema educativos • Naturaleza del conocimiento teórico y práctico medido • Utilización para procesos de rendición de cuentas y mercado Características de las evaluaciones estandarizadas • Evaluación de los resultados de aprendizaje en poblaciones escolares grandes y complejas en un momento dado de la progresión escolar • Uso de procedimientos estadísticos rigurosos y complejos, sujetos a revisión periódica • Basados en análisis curricular, discusión con especialistas curriculares y de medición • Aplicación en condiciones resguardas y en forma censal o muestral • Análisis riguroso, basados en sistemas de codificación establecidos y entrenamiento de codificadores • Uso de gama de procedimientos estadísticos de análisis según lo requerido por la complejidad de los informes. Ejemplos de evaluaciones estandarizadas: nacionales • Brasil: Sistema nacional de evaluación (SAEB) desde 1995 (muestral) y Prova Brasil (censal) • Chile: SIMCE desde 1988 y PSU desde 2003 • Colombia: SABER, desde 1997, muestral • México: Evaluación Nacional de Logro en Centros Educativos (ENLACE), desde 2006, muestral • Perú: Pruebas censales en 2º Básico (Matemáticas y Comprensión Lectora) y distintas muestrales desde 2007 • Estados Unidos: NAEP, nacional muestral, grados 4, 8 y 12. • Europa: variedad de pruebas, generalmente en 4º y 10º años. Pruebas estandarizadas: Sus objetivos declarados • Alimentar el conocimiento de autoridades educacionales – efectividad del sistema • Conocer factores intra y extra escuela que afectan aprendizaje • Mejorar procesos de enseñanza-aprendizaje • Llamar a rendición de cuentas a responsables Las críticas de los académicos • Simbología: el número como símbolo del conocimiento (Popkewitz, 2011) • Reducción del currículum a lo “medido” y desconocimiento de la complejidad del proceso de enseñanza-aprendizaje (Glass, 2008) • Carácter político – caso de PISA (Ritzvi & Lingard, 2010) • Tradiciones culturales y restricción de lo que se mide (Münch, 2014) • Uso de resultados para la evaluación de profesores (MacBeath, 2012 y Harris & Harrington, 2015). Las críticas a PISA: Carta Abierta (mayo 2014) • Efecto en el impacto de los resultados sobre acciones de política como “Race to the Top” en USA • Presión por cambios en los sistemas educativos, desconociendo el tiempo que toma su efecto • Ciclo continuado de pruebas daña a los niños y empobrece las aulas Las evaluaciones estandarizadas en Chile La evolución del SIMCE: algunos hitos • 1995 adelante: publicación en periódicos de resultados • 2003: Comité para introducir mejoras • 2006: Consejo Asesor Presidencial • 2011: Ley de Aseguramiento de la Calidad 20.529: aumento de pruebas, ordenamiento y categorización de establecimientos • 2014: Mesa ministerial para discutir cambios Crecimiento reciente de las evaluaciones SIMCE Año Educación Básica 2º 4º 6º Educación Media 8º 2º Total 3º 2012 8 2013 14 2014 15 2015 14 Fuente: Agencia de la Calidad “Alto al SIMCE” • SIMCE como sinónimo de calidad de la educación • Reducción de la educación y currículum a las competencias medidas • Aumento creciente de aplicaciones • Estrés y malestar del profesorado • Expresión de posición política: rankings, mercado y cierre de escuelas no efectivas(García-Huidobro, 2013) La presión de las evaluaciones En cuanto a que el SIMCE está midiendo lo que el niño sabe, entonces los colegios tienen que tener niños que sepan, entonces nos quedamos con los niños que saben. A los que están en riesgo de no saber, les ponemos condiciones y condicionales, y a los que no saben y no han cumplido las condiciones, los sacamos del sistema. Total hay 100 más esperando el cupo… entonces estamos generando un sistema de exclusión, un sistema macabro y el director `por un pobre liderazgo manda a los profes y les exige a los profes... los profes sin tener las herramientas necesarias ni el coaching ni el empowerment necesario para hacer los proyectos, hace lo mismo que le hicieron a él y aprieta a los que tiene abajo y tapa a los niños de tareas, y tiene a los niños hasta las 11 de la noche haciendo tareas... Y, al final, ¿será eso aprendizaje? ¿Es ese el modelo de sociedad que queremos? ¿Estamos construyendo aula?. (Felipe, directivo, colegio particular subvencionado). El año pasado dí SIMCE, me saqué la mugre trabajando, hice muchas cosas, en estos días salen los resultados, estoy como nerviosa tranquila, pero igual, yo me doy satisfecha porque yo lo di todo, más no pude, hacía pruebas, hacía ensayos, los tabulaba, volvía a reformula todo, si los niños se equivocaban, volvía a pasar guías, los volvía a evaluar, así que fue un trabajo de chinos, espero buenos resultados”. (Sara, profesora, colegio particular subvencionado). Para reflexionar • Es importante considerar el nivel de • crítica tanto nacional como internacional a las pruebas estandarizadas y su uso • Hay mejoras en Chile en la forma como recientemente la Agencia de Calidad está publicando resultados. • Pero, sigue el convencimiento de autoridades y políticos que se necesita tener pruebas para fines de diagnóstico y también rendición de cuentas. • Por tanto, es necesario continuar la discusión y aportar evidencia a partir de la investigación para lograr cambios tanto en la frecuencia como en la cobertura ¿Seguirá teniendo el mismo rol y sentido en una política educacional pensada desde la igualdad democrática y la cautela al derecho social a la educación” (GarcíaHuidobro, 2013). MUCHAS GRACIAS