Evaluación Formativa: La manera más efectiva de construir aprendizajes Dylan Wiliam (@dylanwiliam) www.dylanwiliamcenter.com Estructura: cuatro preguntas 2 • Por qué es necesario mejorar el logro educativo • Por qué tenemos que centrar nuestros esfuerzos • Por qué la evaluación formativa debe ser una prioridad • Por qué la evaluación formativa require un nuevo modelo de desarrollo profesional Por qué es necesario mejorar el logro educativo 3 • En economías avanzadas, en los próximos 20 a 30 años – Entre un cuarto y un tercio de los empleos podrían ser externalizados en otro país (Blinder, 2011) – Casi la mitad de los empleos podrían ser realizados por máquinas (Frey & Osborne, 2013) • La opción para la gente joven – Esperar que alguien te invente un nuevo trabajo – Crearte uno tu mismo El mundo del trabajo está cambiando 4 Qué clase de habilidades están desapareciendo más rápidamente de los lugares de trabajo? Change 1969-1999 A B C D E Categoría de habilidades Comunicación compleja Pensamiento experto/resolución de problemas Manual no-rutinaria Rutinaria cognitiva Rutinaria manual Autor, Levy and Murnane (2003) +14% +8% –5% –8% –3% ¿Qué tipo de escuelas necesitamos? Modelo de escuela Ethos Proceso clave Refinerías de talento La escuela debe proveer Asegurar buena docencia oportunidades para que y cobertura del currículum los estudiantes muestren su potencial Incubadoras de talento Todos los alumnos Potenciar/sonsacar las pueden aprender, pero capacidades que tiene el no todos pueden lograr alumno resultados de excelencia Fábricas de talentos Todos los estudiantes “Lo que sea necesario” pueden lograr resultados de excelencia ¿Por qué las escuelas deberían hacer un análisis de Pareto? 6 • Vilfredo Pareto (1848-1923) – Economista, filósofo, y sociólogo, asociado con la regla del 80:20 • Mejora de pareto – Un cambio que puede hacer que a lo menos una persona (ej. estudiante) este mejor sin empeorar otro (ej. profesor). • Eficiencia de Pareto/ Óptimo de Pareto – Una asignación (ej. de recursos) es Pareto eficiente o Pareto optima cuando no se puede efectuar ninguna mejora de Pareto adicional 7 Usar la evidencia de investigación Estudios Relevantes 8 • • • • • • • • • Fuchs & Fuchs (1986) Natriello (1987) Crooks (1988) Bangert-Drowns et al. (1991) Dempster (1991) Dempster (1992) Elshout-Mohr (1994) Kluger & DeNisi (1996) Black & Wiliam (1998) • • • • • • • • • Nyquist (2003) Brookhart (2004) Allal & Lopez (2005) Köller (2005) Brookhart (2007) Wiliam (2007) Hattie & Timperley (2007) Shute (2008) Kingston & Nash (2011, 2015) Evaluación formativa: un concepto controvertido 9 Amplitud Período Impacto Ciclo largo plazo Ciclo mediano plazo Ciclo corto plazo Entre semestres y unidades de aprendizajes Dentro y entre unidades de aprendizaje Dentro y entre clases Cuatro semana a un año Una a cuatro semanas Minuto a minuto y día a día Monitoreo, alineación curricular Evaluación con estudiantes involucrados Compromiso, receptivo Desmenuzando la Evaluación Formativa 10 Hacia dónde va el estudiante Docente Par Estudiante Aclarar, compartir y comprender las intenciones del aprendizaje Dónde esta ahora el estudiante Cómo conseguir que estudiante lo alcance Obtener evidencias del aprendizaje Entregar retroalimentación que promueva el avance de los estudantes Activar a estudiantes como recursos para el aprendizaje de otros Activar estudiantes como dueños de sus propios aprendizajes Desmenuzando la evaluación formativa A dónde va el alumno A dónde está el alumno Cómo llevar allá al alumno Profesor Par Estudiante Usar evidencia de logro para adaptar lo que pasa en la sala de clases para satisfacer las necesidades del estudiante Un Sistema de posicionamiento educativo 12 • Un buen professor: – Establece en que nivel están los alumnos respecto a sus aprendizajes. – Identifica el destino de las enseñanzas – Cuidadosamente planifica un itinerario. – Comienza el viaje del aprendizaje. – Hace controles periódicos sobre el progreso en el tiempo. – Hace ajustes en el curso según lo exigan las condiciones. Educational Endowment Foundation toolkit 13 Intervención Costos Calidad de la Meses extra de Evidencia aprendizaje Retroalimentación ££ +8 Metacognición y autoregulación ££ +8 Tutorías entre pares ££ +6 Primeros años de intervención £££££ +6 Tutorías uno a uno ££££ +5 Tareas para la casa (Secundaria) £ +5 Aprendizaje colaborativo £ +5 Fonoaudiología £ +4 Tutorías de pequeños grupos £££ +4 Comportamiento en intervenciones £££ +4 Tecnología Digital ££££ +4 £ +4 Aprendizaje social y emocional Educational Endowment Foundation toolkit 14 Intervention Cost Quality of evidence Extra months of learning Involucramiento parental £££ +3 £££££ +3 Escuelas de verano £££ +3 Participación en deportes £££ +2 Participación en Arte ££ +2 Tiempo extendido en el colegio £££ +2 £ +2 ££££ +2 £ +2 £££ +1 £ +1 Reducción del tamaño de la clase Instrucción individualizada Actividades extraprogramáticas Estilos de aprendizaje Mentoría Tareas para la casa (primaria) Educational Endowment Foundation toolkit 15 Intervención Costos Calidad de la Meses extra de Evidencia aprendizaje ££££ 0 Pago por desempeño ££ 0 Intervenciones vocacionales £££ 0 Agrupamiento de materias £ 0 Uniforme escolar £ 0 Entorno/infraestructura ££ 0 Agrupar por habilidades £ -1 Asistentes de profesores Desmenuzando la evaluación formativa A dónde va el alumno Profesor Par Estudiante Clarificar, compartir y entender intenciones de aprendizaje Dónde está el alumno Cómo llevar allá al alumno Generar discusión efectiva, tareas y actividades que fomenten evidencia de aprendizaje Entregar retroalimentación que movilice a los estudiantes Activar estudiantes como recursos entre ellos Activar a los estudiantes como dueños de su propio aprendizaje 17 Estrategias y técnicas para la evaluación formativa en el aula 18 Aclarar, compartir y entender los objetivos de aprendizaje Compartir los objetivos de aprendizaje 19 • Explica los objetivos de aprendizaje al comienzo de la clase/unidad: – Objetivo de aprendizaje – Criterio de logro • Menciona los objetivos de aprendizaje y criterios de logro en el lenguaje de los estudiantes • Usa posters con palabras claves para hablar del aprendizaje: – Ej., describir, explicar, evaluar • Usa la planificación y esquemas prudentemente • Usa ejemplos escritos de diferentes estandares para darle más sustancia a las rúbricas de evaluación (ej. Reportes de laboratorio). • Da oportunidades a los estudiantes para diseñar sus propias pruebas. 20 Construyendo discusiones, actividades y tareas efectivas en la sala de clases que generen evidencia de aprendizaje Obteniendo la evidencia 21 • Idea clave: al preguntar se debería: – Generar pensamiento – Proveer datos que informe sobre la enseñanza • Mejorar las preguntas de los profesores: – Generando preguntas con los colegas – De bajo/alto nivel y abiertas/cerradas – Con tiempo de espera apropiado • Alejándose del modelo I-R-E (iniciación-respuesta-evaluación): – Basquetbol en vez de “pimponeo” – No “manos arriba” (excepto para preguntar algo) – Preguntas estilo “silla caliente” • Sistemas de respuestas para todos los estudiantes : – Tarjetas ABCD, pizarras individuales, tickets de salida 22 Dar retroalimentación que mejore los aprendizajes Efectos de la retroalimentación 23 • Kluger & DeNisi (1996) revisaron 3000 reportes de investigaciones • Excluyendo aquellos: – – – – – Sin controles adecuados Con diseño pobre Con menos de 10 participantes Que no miden el desempeño Sin detalles de la magnitud de los efectos • Lo que dejó un total de 131 reportes, 607 tamaños de efecto, incluyendo a 12652 individuos • La evidencia señala que, en promedio, la retroalimentación aumenta los logros: – Efectos son altamente variables – 38% (231 de 607) de los efectos fueron negativos Obtener bien la retroalimentación es difícil 24 Tipo de respuesta Retroalimentación indica desempeño… Cuando no está la altura de Cuando excede la meta la meta Cambia la conducta Aumenta el esfuerzo Disminuye el esfuerzo Cambia la meta Aumenta su aspiración Reduce su aspiración Abandona la meta Decide que la meta es muy Decide que la meta es muy difícil fácil Rechaza la retroalimentación Retroalimentación es ignorada Retroalimentación es ignorada Retroalimentación que promueve el aprendizaje 25 • Idea clave: la retroalimentación debe: – Generar reflexión – Dar guías de cómo mejorar • • • • Anotaciones sólo con comentarios Anotaciones enfocadas Referencias explicitas a rubricas Entregar sugerencias sobre cómo mejorar: – No entregar soluciones completas • Reagendar evaluaciones : – Por ejemplo, prueba de unidad a tres cuartos del camino 26 Activadando estudiantes como recursos de aprendizajes entre ellos mismos Ayudar a los estudiantes a ser recursos de aprendizaje 27 • Estudiantes evaluando el trabajo de sus compañeros: – – – – “Pre-flight checklist” “Dos estrellas y un deseo” Elegir-intercambiar-elegir Daily sign-in • Entrenar estudiantes a plantear preguntas / identificar las debilidades del grupo • Revisión de los estudiantes al final de la lección 28 Activando a estudiantes como dueños de su propio aprendizaje Ayudar a estudiantes a que se adueñen de su propio aprendizaje 29 • Estudiantes evaluando su propio trabajo: – Con rúbricas – Con modelos • Autoevaluación de la comprensión: – – – – – Portafolio de aprendizajes Luces de tráfico Discos rojos/verdes Tazas de colores Más / Menos / Interesante Hasta acá con la parte fácil Un modelo para el aprendizaje de los profesores 31 • Contenido, después proceso • Contenido (lo que queremos que los profesores cambien): – Evidencia – Ideas (estrategias y técnicas) • Proceso (cómo hacer el cambio): – – – – – Elección Flexibilidad Pasos pequeños Accountability (rendición). Apoyo Accountability con apoyo 32 • Qué se necesita de los profesores: – Un compromiso con: • El mejoramiento continuo de la práctica • Enfocarse en aquellas cosas que hacen la diferencia a los estudiantes. • Qué se necesita de los líderes: – Un compromiso de construir comunidades de aprendizaje efectivas para profesores a través de: • Creando expectativas para la mejora continua de las prácticas • Manteniendo el foco en las cosas que hacen la diferencia a los estudiantes • Entregando el tiempo, espacio, permisos y apoyos para innovar • Apoyando el tomar riesgos Para encontrar más… 33 www.dylanwiliam.net www.dylanwiliamcenter.com