La importancia de equilibrar los propósitos de los sistemas de evaluación Pedro Ravela - 30 de octubre de 2015 Una tensión central para la política pública Exigencias e incentivos ¿CÓMO ALINEAR OBJETIVOS ORGANIZACIÓN / PERSONAS? “El individuo es un actor libre que sigue una estrategia racional con el propósito de alcanzar sus objetivos personales” (Crozier-Friedberg) VS. Construcción de capacidades “La inversión en recursos humanos es la más difícil de todas, pero en caso de éxito también es la más redituable… aunque lleve tiempo y no se puedan esperar resultados inmediatos” (Crozier) ¿CÓMO CONSTRUIR NUEVAS CAPACIDADES? Pedro Ravela - 30 de octubre de 2015 Una tensión central para la política educativa exigencia Alta exigencia Bajo apoyo Alta exigencia Alto apoyo I. IV. apoyo II. III. Baja exigencia Bajo apoyo Baja exigencia Alto apoyo Pedro Ravela - 30 de octubre de 2015 Una clave para comprender e impulsar el cambio Contradicción inherente en la vida de las personas y las instituciones Articular de una manera apropiada e inteligente: • exigencias externas y motivaciones internas • encuadre y procesos • reglas institucionales y desarrollo personal Pedro Ravela - 30 de octubre de 2015 …que tiene su correlato en términos de evaluación… Evaluaciones orientadas a establecer exigencias e incentivos Evaluaciones orientadas a construir de capacidades SUMATIVA FORMATIVA • Aula: calificaciones/ certificación • Aula: devolución/orientación - para el aprendizaje • Escuelas: categorización - ranking - acreditación • Escuelas: autoevaluación + apoyos externos • Docentes: categorización - remuneración • Docentes: orientación acompañamiento Cada una conlleva riesgos y efectos no deseados. Pedro Ravela - 30 de octubre de 2015 Evaluación sumativa y evaluación formativa • Las evaluaciones “sumativas” tienen un efecto directo e inmediato, por sus consecuencias (aprobar un curso, mejorar el salario)… …pero este efecto estará enfocado en aquello que es evaluado (asistencia, puntajes, planificaciones…). • Las evaluaciones “formativas” pueden tener un efecto más profundo en el desarrollo personal y profesional… …pero a condición de que exista motivación para aprender y cambiar. Pedro Ravela - 30 de octubre de 2015 Evaluación sumativa y evaluación formativa ❖ La diferencia central radica su finalidad ❖ Finalidades diferentes = preguntas diferentes Sumativa: orientada a la construcción de categorías con consecuencias - es valorativa ❖ ❖ Formativa: orientada a la comprensión - es más descriptiva que valorativa => dispositivos diferentes, pero alineados Pedro Ravela - 30 de octubre de 2015 Sistemas de pruebas externas con finalidad “sumativa” • Exámenes nacionales para los estudiantes • Publicación de rankings o “league tables” • Sistemas de información pública y rendición de cuentas (por escuela, región, políticas…) - derecho a la educación • Categorización de escuelas con consecuencias administrativas - eventualmente posibilidad de cierre • Establecer incentivos o remuneraciones adicionales, individuales o colectivas • Asignación de recursos a programas o escuelas Pedro Ravela - 30 de octubre de 2015 Sistemas de pruebas externas con finalidad “formativa” • Devolver resultados a cada estudiante, sin consecuencias • Sistemas de aprendizaje en línea con retroalimentación inmediata al propio estudiante • Devolución de resultados y orientaciones pedagógicas a cada escuela en forma reservada (Perú) • Evaluación en línea para uso docente, sin reporte público de resultados (Uruguay) • Información diagnóstica para revisión de políticas (tomadores de decisiones, autoridades, sostenedores) ¿quiénes serían los destinatarios? Pedro Ravela - 30 de octubre de 2015 Posibles propósitos de un sistema de pruebas externas con finalidad formativa para los docentes • Ayudar a comprender procesos cognitivos y dificultades de estudiantes: ¿qué dificultades tienen? ¿cómo piensan? • Ayudar a revisar/analizar prácticas de enseñanza: ¿cómo puedo mejorar mi enseñanza?¿qué debería cambiar? • Revisar prácticas de evaluación sumativa (calificaciones): ¿qué estoy valorando cuando califico? ¿cómo puedo mejorar la manera en que califico a mis estudiantes? • Promover prácticas de evaluación formativa en las aulas: ¿qué es evaluación formativa? ¿por qué y cómo podría incorporarla a mis clases? Pedro Ravela - 30 de octubre de 2015 La evaluación en el aula, el elefante invisible “Hay lista de cotejo por alumno… Por ejemplo ‘levanta la mano para opinar’ y tiene su puntaje. Si recoge un papelito del suelo, se tiene en cuenta un tema transversal, la conciencia ambiental. Si participan en aula, en lluvia de ideas, también se les pone check. Al final tienen un puntaje…” “La nota es como la plata”… si esto no tiene notas, se bajan al tiro y hacen los trabajos a medias. Es como por plata, la nota es la plata. Y todo es para lograr algo, nada se trabaja porque sí” Pedro Ravela - 30 de octubre de 2015 La evaluación en el aula, el elefante invisible Pedro Ravela - 30 de octubre de 2015 Concepciones de evaluación formativa entre los docentes en AL Valorar hábitos y actitudes “Su actitud en clase: cómo se debe sentar o caminar, las normas de convivencia…” “Lo evalúo formativamente: cuando se presenta un libro cómo lo debe de cuidar, dejar el salón arreglado como lo encontramos, que no se tiren objetos...” Señalar errores “Devuelvo los trabajos y hago ver las equivocaciones, las palabras mal escritas” “Le doy los puntos obtenidos y algunos comentarios como ‘esto no es así’, ‘repasa más la resta’” Motivar a los alumnos “Doy estímulos positivos diciéndole ‘tú puedes’” “A un alumno que nunca sale bien, le digo ‘lo felicito mi amor’. Y así se motiva” “Al que ha salido mal le pongo ‘necesitas esforzarte un poco más’, ‘tu tarea no ha estado completa’, ‘muy bien, te felicito’ ” Pedro Ravela - 30 de octubre de 2015 Evaluación como devolución (Wiggins) Tres conceptos diferentes: VALORACIÓN - DEVOLUCIÓN - ORIENTACIÓN “La devolución es información sobre como una persona se desempeñó, a la luz de lo que intentó hacer –intento contra efecto, desempeño real contra desempeño ideal” “Cuanto más auto-evidente sea la devolución, mayor será la autonomía que desarrollará el estudiante” “Devolución y orientación son diferentes; son partes complementarias de un sistema de auto-corrección” El curso de soldadura de Ralph Pedro Ravela - 30 de octubre de 2015 Evaluación como devolución Para que exista evaluación formativa se requiere: • que el estudiante comprenda el objetivo o meta buscado • que la tarea sea suficientemente compleja • evidencia de la situación actual con relación a dicha meta • orientación sobre cómo cerrar la brecha entre ambos Pedro Ravela - 30 de octubre de 2015 Alternativas estrategia de evaluación formativa • Pruebas externas para uso interno en escuelas con fines de mejora pedagógica. Resultados en línea y/o reportes pedagógicos (Perú, Uruguay) (incluir respuesta abierta y codificación por profes). Foco en aprendizajes de los estudiantes • Estrategia de promoción de prácticas de evaluación formativa en las escuelas. Foco en procesos de evaluación en el aula. Banco de herramientas / Red de producción e intercambio / Formación y acompañamiento Pedro Ravela - 30 de octubre de 2015 Cuatro desafíos para un sistema de pruebas externas con finalidad formativa 1. Articulación con las prácticas habituales de los docentes 2. Articulación con los dispositivos de acompañamiento a los docentes 3. Construir redes - desarrollo desde las prácticas - “de profesor a profesor” - estrategia colaborativa 4. Alineamiento entre evaluaciones “formativas” y “sumativas" Pedro Ravela - 30 de octubre de 2015 1. Articulación con las prácticas de enseñanza de los docentes • Requiere comprender la lógica de trabajo de los docentes • La propuesta tiene que insertarse en sus prácticas. No puede asumir que comenzarán a enseñar desde “cero” • Debe constituir un aporte a necesidades de la práctica, no una tarea “adicional” - contribuir a resolver desafíos y problemas del trabajo cotidiano • “Basado en evidencia” : comenzar por estudiar prácticas de enseñanza y evaluación en grado y área en cuestión Pedro Ravela - 30 de octubre de 2015 2. Articulación con los dispositivos de acompañamiento a los docentes • La evaluación formativa siempre requiere acompañamiento directo de algún tipo - “coaching” • No es fácil realizarla “a distancia” • No alcanza con “poner a disposición” de los docentes nuevas herramientas • ¿Cómo se articula el sistema de evaluación formativa con los dispositivos habituales de acompañamiento a los docentes que tiene el Ministerio? Pedro Ravela - 30 de octubre de 2015 3. Construir redes de intercambio • “De profesor a profesor” - “Hecho en el aula” • Desarrollo desde las prácticas • Construir espacios para que escuelas docentes puedan sistematizar y compartir su “conocimiento práctico” - “buenas prácticas” - ejercicio colaborativo • Un tipo distinto de incentivo profesional muy potente • La tecnología está disponible Pedro Ravela - 30 de octubre de 2015 4. Alineamiento entre evaluaciones “formativas” y “sumativas" • Riesgo de propósitos y tipos de tareas/aprendizajes contradictorios - confusión • Distintos instrumentos, los mismos saberes • Alineamiento entre pruebas • Alineamiento con sistema de evaluación docente • Alineamiento de ambos sistemas con estándares y currículo Pedro Ravela - 30 de octubre de 2015 Cierre: cuatro elementos clave para una política de desarrollo profesional docente Pertenencia y dedicación de los profesores en el centro educativo Abrir el aula: visitas, revisión de prácticas, intercambio de materiales Espacios de aprendizaje colectivo, parte del trabajo cotidiano Liderazgo pedagógico: conducción de las instancias colectivas por personal competente Pedro Ravela - 30 de octubre de 2015 ¡Muchas gracias por su atención! Pedro Ravela - 30 de octubre de 2015