Investigación Evaluativa en Educación Metodología de Evaluación de Programas Tema 3. Modelos de evaluación Mª José Rodríguez Conde Profesora Titular de MIDE Objetivos de la sesión Conocer el recorrido histórico de los modelos teóricos de evaluación de programas Identificar las principales características de los modelos teóricos que han tenido mayor repercusión en ámbitos educativos Conocer un modelo español de evaluación de programas, transferible a evaluación de programas educativos de Pérez Juste Contenidos Tema 3.­ Modelos teóricos de evaluación de programas 1. Evaluación basada en objetivos (TYLER) 2. Planificación evaluativa (CRONBACH) 3. Modelo CIPP (STUFFLEBEAM) 4. Modelo sin referencia a objetivos (SCRIVEN) 5. Evaluación respondiente (STAKE) 6. Evaluación iluminativa (PARLETT y HAMILTON) 7. Evaluación democrática (MCDONALD) Bibliografía y direcciones en Internet Internet Ejemplos de aplicación de modelos Modelo de evaluación de programas de formación ocupacional (Valencia) http://www.ces.gva.es/pdf/trabajos/articulos/revista_24/art1­rev24.pdf Informe sobre la implantación y el uso de las TIC en los centros docentes de educación primaria y secundaria (CURSO 2005­2006) http://observatorio.red.es/estudios/educacion/index.html Artículo sobre evaluación de centros escolares: http://www.uv.es/RELIEVE/v3n1/RELIEVEv3n1_1.htm http://www.uam.es/personal_pdi/stmaria/jmurillo/recursos/Eval_centros.htm 1. RECORRIDO HISTÓRICO AÑOS 40­50­60 TYLER Objetivos operativos­­­­­­Evaluación Investigación empírica positivista AÑOS 70 Paradigma cualitativo Participantes en el programa Evaluación de proceso 1. RECORRIDO HISTÓRICO AÑOS 80 Paises occidentales Pluralidad de perspectivas Utilidad de la evaluación AÑOS 90… actual Progresos metodológicos Objetivos de la evaluación: cuestión clave Juicios de valor 1. Evaluación basada en objetivos (TYLER) Objetivos operativos ESTRICTA DELIMITACIÓN DE OBJETIVOS (OBSERVABLES) INSTRUMENTOS ADECUADOS ANÁLISIS DE LA INFORMACIÓN EVALUACIÓN 2. Planificación evaluativa (CRONBACH) CONCIENCIA POLÍTICA TRABAJO EN EQUIPO EVALUACIÓN DE PROCESO EVALUACIONES ESTRUCTURADAS 3. Modelo sin referencia a objetivos (SCRIVEN) Necesidades de los usuarios • Antecedentes, contexto, recursos • Descripción de los usuarios • Criterios de evaluación • Proceso de intervención • Resultados • Costes • Comparación progs. alternativos EVALUACIÓN 4. Modelo CIPP (STUFFLEBEAM) Contexto Entrada Medios personales (competencias iniciales): Alumnos y Profesores Medios materiales: Recursos, … Expectativas… Proceso Organización interna del programa Adecuación metodológica Clima del centro (relaciones)… Tipo de centro, ubicación, nivel socioeconómico… Producto Nivel de competencias alcanzadas por los alumnos Satisfacción de la comunidad educativa 5. Evaluación respondiente (STAKE) Examen de la base conceptual del PROGRAMA Descripción del PROGRAMA ­ Antecedentes ­ Actividades ­ Resultados INTENCIONES ≠ OBSERVACIONES Valoración del PROGRAMA 6. Evaluación iluminativa (PARLET y HAMILTON) Metodología cualitativa (años 70) Descripción e interpretación (no medición) Evaluador no emite juicios de valor, genera debates para ayudar a tomar decisiones difíciles Metodológicamente: Observación y entrevista Estrategias determinadas en la negociación Diseño cambiante a los largo de la evaluación, según conocimiento generado 7. Evaluación democrática (MACDONALD) Metodología cualitativa (años 80) Se reconoce el pluralismo de valores y el evaluador ayuda a que se expresen Confidencialidad, negociación y accesibilidad Desde el punto de vista metodológico: Perspectiva naturalista (realidad=ser vivo) 8. Modelo de evaluación de programas (PÉREZ JUSTE) Calidad intrínseca del programa Inicial Adecuación al contexto Medida y logros Calidad intrínseca del programa Final Valoración Continuidad (seguimiento) Ejecución En el desarrollo Marco (clima) Práctica de clase A partir del Anexo I: Pautas para la evaluación de programas educativos del libro de Ramón Pérez Juste (2006): Evaluación de programas educativos (Madrid: La Muralla); vamos a aplicar estos criterios a la evaluación de esta asignatura en grupos. 1º. Individualmente, se responde a cada pregunta en la escala: SÍ Ł 8 NO No procede 2º. Se reúnen por grupos 2­3 personas, se consensúa la respuesta, llegando a una sola respuesta por item. 3º. A nivel de clase, se comenta en gran grupo el resultado.