MODELO REGIONAL DE AUTOEVALUACIÓN PARA DE CENTROS Y SERVICIOS EDUCATIVOS. EMMA DÍEZ BERNAL. Asesora Técnico Docente Dirección Provincial de Educación de Burgos 1. ¿QUÉ PRETENDEMOS? El Modelo Regional de Autoevaluación de Centros y Servicios Educativos pretende ser, inicialmente, una guía para aquellos Centros que, habiendo realizado Planes de Mejora en cursos anteriores, decidan profundizar en este tipo de procesos de una forma más sistemática generalizándose su uso posteriormente. Tomando como referente el Modelo de Excelencia, el Modelo que se presenta pretende familiarizar a los Equipos de Mejora y al profesorado en general con la cultura de la calidad, tanto en su terminología como en sus contenidos y procedimientos. Con ello se sientan las bases para una autoevaluación posterior basada en el Modelo de Excelencia. Como todo Modelo, es una abstracción y simplificación de las realidades particulares con vocación universalista en el ámbito educativo. Por tanto, el ajuste a cada contexto concreto dónde se realice su aplicación, tendrá como primera tarea la revisión y adaptación de los cuestionarios al tipo de centro o servicio determinado. En resumen, el modelo de autoevaluación pretende facilitar la implantación del Modelo de Excelencia de la EFQM en Centros y servicios educativos, pues la experiencia ha demostrado que se hace muy compleja la implantación sin procesos previos en centros educativos. Además, con ello, se persiguen otros objetivos como facilitar un instrumento de Autoevaluación a los centros, dotar de mayor rigor a las autoevaluaciones, sensibilizar y animar el inicio de Experiencias de Calidad. 2. FUNDAMENTACIÓN DEL MODELO En el análisis de los últimos años de la participación de los centros en procesos de mejora nos encontramos con una proporción muy baja de centros que aplican un sistema de autoevaluación. De alguna u otra forma, las diferentes Comisiones Provinciales de Mejora venían demandando una actuación de la Consejería en este sentido, ya que es difícil encontrar en la documentación y bibliografía existente un instrumento que respondiera a las necesidades anteriores. Es más, muchas de las CPM habían elaborado sus propios modelos, herramientas, más o menos sencillos o complejos. 1 Cuando la Dirección General de Coordinación, Inspección y Programas Educativos acomete esta tarea se enfrenta al siguiente dilema: elaborar el borrador del Modelo de Autoevaluación con el suficiente nivel de amplitud/ complejidad que recoja los aspectos: procesos y personas, intervinientes en un centro y a la vez un nivel de sencillez que anime a su implantación. Otros reto, pasaba por optar por un modelo teórico que, además de consistente, recogiera de alguna forma la implicación de las personas, el modelo organizativo de nuestros Sistema de Educativo, etc., así como los principios que en las diferentes órdenes de convocatoria de años anteriores se habían venido instaurando como soporte filosófico, metodológico, etc. Serviría además para sensibilizar y profundizar en la importancia de la Autoevaluación en los procesos de Mejora y a la vez facilitar la autoevaluación. También sería instrumento para mejora de los procesos de autoevaluación que forman parte del Programa de Calidad del Plan de Evaluación y Calidad del Sistema Educativo de la Consejería de Educación de Castilla y León. Objetivos del Modelo Sensibilizar al profesorado de la necesidad de la autoevaluación. Facilitar la realización de la autoevaluación en Centros educativos. Ser el paso previo a la implantación del Modelo de Excelencia. Familiarizar a la Comunidad Educativa con la cultura, técnicas y procedimientos de la Mejora de la Calidad Educativa. Evidenciar, a través de hechos objetivos, los Puntos Fuertes y las Áreas de Mejora del Centro o Servicio Educativo. El Modelo se basa en: La filosofía humanista (en el sentido de dar gran importancia a las personas) y científica del Modelo de Excelencia de la EFQM. Una concepción procesual y dinámica del funcionamiento de Centros y Servicios Educativos. Una concepción de los Centros y Servicios educativos como organizaciones inteligentes que aprenden de su práctica. Principios inspiradores El cambio constante y los entornos cambiantes hacen que haya nuevas necesidades y demandas referidas a la educación. La prestación de un servicio educativo de calidad está ligada a la satisfacción plena de esas necesidades y demandas respondiendo a las expectativas de los usuarios. Esta eficacia en el logro del servicio ha de conseguirse mediante procesos eficientes que sean satisfactorios tanto para los beneficiarios de la educación como para las personas que los realizan. 2 La realidad educativa, como realidad compleja que es, ha de ser conocida mediante la evaluación, para poder establecer el camino de mejora continua que nos lleve de lo observado a lo deseado, en el camino hacia la excelencia. Todos los planteamientos y métodos deben revisarse de manera periódica y obedecer a ciclos de mejora; se deben aplicar las medidas adoptadas. El Equipo Directivo debe liderar, gestionar, motivar, comprometerse e impulsar los procesos de calidad del Centro. La gestión del Centro debe basarse en datos y no en opiniones, estos deben obtenerse siempre con facilidad y periódicamente. La comunicación dentro del Centro debe funcionar eficazmente en todos los ámbitos. La reducción de los tiempos del ciclo de mejora debe constituir un objetivo clave en todos los aspectos del funcionamiento del centro. Es fundamental la comparación de los procesos clave o del conjunto del centro, con las mejores prácticas, lo que permite aprender de los otros. Debe ser evidente el concepto de “usuario interno”, donde cada persona o departamento es proveedor del que le sigue en el proceso interno del centro. El trabajo en equipo debe constituir el procedimiento habitual para conseguir la mejora. Se deben reconocer los esfuerzos que tiendan a aportar mejoras dentro del centro. La implicación de todos en los procesos de mejora, debe convertirse en una práctica cotidiana. El Modelo de Autoevaluación propuesto combina las siguientes metodologías: Cuantitativas: Mediante encuestas a los diferentes sectores de la comunidad educativa. Cualitativas: Mediante comentarios, sugerencias y propuestas de mejora en los diferentes apartados de la encuesta y grupos de discusión. Analíticas: Trabajo en grupos, análisis y valoración de items agrupados en dimensiones. Sintéticas: Análisis estadísticos, elaboración de informes. Al mismo tiempo, se pretende que este modelo se caracterice por ser: Participativo y de consenso: Buscando la implicación de toda la Comunidad Educativa con derecho a conocer los resultados de la misma. El Modelo se estructura en criterios, dichos criterios constituyen el objeto de la autoevaluación (qué evaluar). En cierta medida los criterios responden a una visión del centro o servicio educativo, si bien el criterio procesos nos acerca más a la 3 organización y funcionamiento del centro desde un punto de vista dinámico y transversal. Desde una concepción holística, toda la organización educativa se encuentra atravesada por procesos, tanto organizativos como didácticos. Una concepción más concreta, identifica aquellos aspectos o partes esenciales de la organización permitiendo su análisis de forma más exhaustiva pero menos comprensiva de la realidad, pues no permite el análisis de las interrelaciones entre esas partes o elementos organizativos, visión que sí ofrece el concepto de proceso. El Modelo se estructura en torno a los siguientes criterios: 1. Equipo directivo: Liderazgo. 2. Personas: Personal docente y no docente. 3. Órganos de gobierno y coordinación docente. 4. Documentos de planificación educativa: Planificación y estrategia. 5. Recursos: Instalaciones, equipamiento y servicios complementarios 6. Procesos. 6.1. Enseñanza- aprendizaje. 6.2. Evaluación. 6.3. Orientación y Tutoría. 6.4. Clima escolar. 6.5. Ambiente de trabajo. 6.6. Organización del centro. 6.7. Participación. 7. Resultados. 7.1. En el alumnado y familias. 7.2. En el entorno. 7.3. Resultados clave. El modelo presenta cuestionarios dirigidos a: - Profesorado - Personal de Administración y Servicios - Familias - Alumnos La escala de valoración de los cuestionarios, numéricamente de 1 a 4. se expresa 3. METODOLOGÍA DE ELABORACIÓN DEL MODELO Todo el proceso de elaboración está basado en el diálogo y participación de la Comunidad Educativa: Direcciones Provinciales de Educación, Profesores, Padres, Alumnos y agentes externos: Universidad y Club de Gestión de Calidad. Se estructura en una serie de fases: Borrador Dirección General. 4 Los Servicios Centrales proponen un borrador que consta de dos partes: 1ª parte: consideraciones generales sobre fundamentación, estructura y metodología de aplicación. 2ª parte: inventario de items (demasiados) agrupados en torno a criterios. 1. 2. 3. 4. 5. 6. 7. Equipo Directivo. Liderazgo Personal docente y no docente. Personas Órganos de gobierno y coordinación Documentos de planificación. Planificación y estrategia Recursos Procesos Resultados Encuentro de Ponferrada. A este encuentro asisten miembros de Comisiones Provinciales de Mejora de Castilla y León y colaboradores en el borrador del Modelo de Autoevaluación. El Servicio de Calidad, Evaluación, Supervisión de Programas Educativos y Participación Educativa presenta el Borrador-Modelo de Autoevaluación. Se trabaja en Grupos, cada grupo en un criterio para eliminar, cambiar redacción propuesta y a la vez distribuir los items en función de los cuatro colectivos que van a evaluar: familias, profesorado, alumnos y PAS. Puesto que se trata de un modelo comprensivo que trata de recoger las opiniones en forma de percepciones traducidas en valoraciones cuantitativas del funcionamiento del centro. Grupo Ponferrada En el encuentro de Ponferrada, resultado del consenso de los grupos de trabajo, se constituye un nuevo grupo de trabajo denominado “Grupo Ponferrada" que se ocupará de la integración de las propuestas al borrador y que posteriormente se ha reunido en dos ocasiones al objeto de seguir depurando y estructurando el resultado de Ponferrada. Se reunieron también en torno a criterios, de forma que cada dos personas trabajaron un criterio para los cuatro cuestionarios. Subcomisión de Expertos El trabajo resultante del Grupo Ponferrada pasó a la Subcomisión de Expertos, cinco Expertos Educativos, que trabajaron esta vez en torno a cuestionarios para dar unidad y coherencia a los criterios y cuestionarios. Se reunieron dos veces y su trabajo se envió a 7 expertos (educativos y universitarios) para su validación. 5 Validación de la Universidad de León Esta fase consta de dos partes: - Puntuación de Expertos Un grupo de expertos en validación de cuestionarios establece como criterios de validación de cada ítem: la relevancia, como importancia de cada ítem para medir la categoría a que se refiere; la pertinencia, si es oportuna su inclusión para medir esa categoría y la univocidad, si todos entendemos lo mismo con el enunciado con que se presenta. También se deja una fila en blanco en cada categoría para que se pueda añadir lo que falta a su entender. Cada indicador, en cada ítem, puede puntuarse de 1 a 4: 4 máximo acuerdo, 1 mínimo. Con los criterios anteriores cada evaluador puntúa cada ítem, con las puntuaciones de todos los evaluadores se eliminan aquellos items que menor puntuación han obtenido. Una vez realizada esta operación podemos decir que tenemos la primera versión casi definitiva de los cuatro cuestionarios que se aplicarán en una prueba piloto. - Prueba Piloto Los cuestionarios depurados por el Grupo de Expertos se aplicarán a 10 profesores, 10 alumnos, 10 padres y 10 personas de la Administración y Servicios (PAS). Esta prueba piloto nos ayudará a identificar si los cuestionarios funcionan o no y sobre todo para efectuar correcciones de estilo y vocabulario. Aplicación Experimental El Modelo se aplicará experimentalmente en el último trimestre de este curso en 20 centros de nuestra Comunidad. Para ello se realizará previamente un proceso formativo con dos profesionales de estos centros y miembros de las CPM, a fin de proceder a una aplicación de los cuestionarios de manera uniforme y diferenciada. Evaluación de la Aplicación Experimental A final de curso se procederá a evaluar esta aplicación experimental, quizá se vuelva a reunir a la Subcomisión de Expertos con el grupo que asista a la formación sobre el modelo para desarrollar la citada evaluación. Posteriormente tras la aplicación experimental es fácil que se produzca una nueva versión de los cuestionarios que serán aplicados en 40 centros el año próximo. 6 4. PROTOCOLO INFORMACIÓN DE APLICACIÓN Y TRATAMIENTO DE LA En esta parte, se definen las actuaciones a llevar a cabo, después se identificarán los responsables de las mismas y la duración, para posteriormente y de una manera clara y gráfica relacionar todo ello en un Mapa de Proceso, que sirva de guía para la realización del mismo. Actuaciones - Difusión del Modelo y sensibilización de los Centros hacia el mismo, en la provincia. - Difusión del Modelo de Autoevaluación y sensibilización dentro de los propios centros, susceptibles de aplicarlo. - Solicitud de participación. - Autorización de la participación. - Formación en el Modelo de Autoevaluación de los Centros autorizados a aplicarlo. - Coordinación de la recogida de la información (fotocopias, entrega y recogida de cuestionarios), facilitar acceso a fuentes de información. - Presentación de los documentos de recogida y de las posibles fuentes de información. - Autoevaluación. Respuesta a cuestionarios. - Asesoramiento y Seguimiento externo. - Tratamiento de la información. Análisis informático y estadístico de los datos, descriptivo e inferencial, (medidas de tendencia central, variabilidad, dispersión, correlación, estimación, contraste...). - Valoración de los resultados del análisis de datos. - Elaboración del informe-memoria con los resultados de la Autoevaluación. - Relación de Puntos Fuertes y Áreas de Mejora detectados. - Priorización y Selección de Áreas a abordar en el Plan de Mejora. Responsables de las actuaciones - Comisión Provincial de Mejora - Equipos de Apoyo y Seguimiento - Director/a. Equipo Directivo - Consejo Escolar - Claustro de Profesores. Órganos de Coordinación. - Equipo de Mejora del Centro - Grupos de Discusión - Profesorado - Personal de Administración y Servicios - Alumnado - Familias – Padres o tutores. Tratamiento de la información 7 La información recogida a través de los cuestionarios será analizada con un programa informático que proporcione el análisis estadístico de los datos, descriptivo e inferencial, (medidas de tendencia central, variabilidad, dispersión, correlación, estimación, contraste...) deseado. El Equipo de Mejora a través de grupos de discusión (homogéneos o heterogéneos) valorará los resultados del análisis de datos. El Equipo de Mejora elaborará un informe-memoria que incluirá una relación de puntos fuertes y áreas de mejora detectadas. De estas áreas, mediante las técnicas o herramientas que se consideren adecuadas (jurado de opinión, matriz de decisión...) se realizará una priorización y selección de las áreas que serán abordadas en el Plan de Mejora. 5. CONCLUSIÓN FINAL El resultado final o producto final obtenido deberá responder a los retos planteados y por tanto el Modelo Final deberá tener las características siguientes: Más sencillos que el EFQM Adaptado a Modalidades de Centros y Servicios - Centros de E. Infantil y Primaria - Centros de E. Secundaria - Servicios Educativos Cuestionarios diferenciados para: - Profesores - Alumnos - Padres - Personal no docente A la vez que reunirá los siguientes requisitos: 1. Teórico-Conceptual: principios de Excelencia, terminología cercana a EFQM. 2. Categoría Científica. 3. Estructura: facilitadora de EFQM (criterios, items-indicadores, cuestionarios) 4. Protocolo de aplicación: orientaciones sobre aplicación y utilización. 5. Metodología del Proceso de Autoevaluación: orientaciones. 6. Cuestionarios y tratamiento de la información: aplicación Informática. 7. Guía sobre Áreas de Mejora. 8. Guía sobre Planes de Mejora. Además de sensibilizar a la Comunidad Educativa sobre la Cultura de Calidad y la importancia de la Autoevaluación, ofrecerá a los Centros un Modelo de Autoevaluación asequible y facilitará la implantación del Modelo de Excelencia de la EFQM. 8 9