RECOMENDACIONES POR COMPONENTE SEGÚN ESTRUCTURA, FONDO Y FORMA TALLER ANECA, 29 Y 30 DE OCTUBRE, 2009 OBSERVACIONES GENERALES 1. La descripción de cada componente debe ser de carácter conceptual y debe contener una síntesis de la evidencia de cumplimiento. 2. En cada componente a desarrollar se debe evidenciar que se cumple con las dos dimensiones de la misión: Acreditación y promoción de la calidad de la educación superior. 3. En caso de que una pauta del Manual de RIACES no aplica al CCA, se debe evidenciar cuál es la propuesta de pauta que se incorpora para poder sustituirla. 4. Identificar acciones de mejora inmediatas y a mediano plazo, por medio de una matriz de factibilidad: Esto se debe incorporar en el plan de mejora 5. Alinear estratégicamente los componentes en función de la misión. 6. Los anexos contienen la información detallada referente a cada pauta. 7. Conclusión que resuma las pautas 8. Revisar si las pautas que contiene el componente son las más pertinentes o si adquieren más valor estratégico en otro componente. 9. Las evidencias deben citarse de forma directa, incluyendo aquellas de primer nivel. Se le debe decir al evaluador externo “yo he hecho las cosas y está es la evidencia”. 10. Desarrollar el análisis de las pautas de lo general a lo particular. 11. Desarrollar un Glosario con el fin de clarificar y crear un lenguaje común: Ya se realizó 12. Realizar una tabla de correlación entre los componentes del SIAC y los ejes propuestos por el Manual de RIACES que sirva de guía al evaluador externo. Incluir el documento como anexo: Para la estructura del documento, se consideró pertinente tomar como base la guía para la recolección de información de RIACES e irla contextualizando según la realidad del CCA. Como lo esencial era dejar claro los ejes de mejoramiento de la calidad de la educación superior impulsados por el CCA, a partir de su misión, se procedió a definirlos desde el inicio del documento. Es importante aclarar que aunque las recomendaciones están dadas en relación a los 13. Responder las pautas en función del “Cómo”, de forma clara, directa, incluyendo puntos “contundentes”. Incluir aspectos sustanciales y evitar profundizar en lo complementario. 14. Redactar en positivo, utilizando un lenguaje más estratégico, evitando frases cómo: “No se cuenta”, “No se cumple” 15. En los casos de pautas referentes a auditorías financieras o informes indicar si sus resultados fueron favorables o no. 16. El Consejo del CCA no se ve reflejado en muchas de las pautas. 17. Definir el papel de los agentes. 18. En el plan de mejora se debe hacer una síntesis de las mejoras. 19. Incorporar a los estudiantes en el proceso de autoevaluación. Estudiar la creación de los espacios para los estudiantes. Explicar la experiencia del CCA, con el acercamiento a los estudiantes. 20. Dar énfasis al valor añadido del CCA referente a la promoción de los procesos de integración. 21. RIACES solicita la existencia de mecanismos de regulación de conflictos. OBSERVACIONES ESPECÍFICAS POR COMPONENTE Componentes propuestos 1. Reconocimiento Oficial 2. Misión y Propósitos Estructura Fondo -Pag.5, párrafo 4: el carácter multisectorial del CCA, no le agrega valor jurídico: corregido -Pág. 6, Pauta 1:complementar aclarando que el reconocimiento es con respecto a las acreditaciones, “Tomar responsabilidad en término de evaluación externa”: Corregido -Cómo se indicó que la misión fue revisada y mejorada por el Consejo, se debe explicar la evolución de la Misión: Listo - Clarificar más la misión (eje de acreditación y eje de promoción es decir capacitación y formación) - Indicar que la misión esta en el sitio web: Listo -Complementar el componente incluyendo aspectos Evidencias Pag 13, Evidencias: corregir el año del plan estratégico 2003-201n0 Observaciones Componentes propuestos 3. Mejoramiento de la calidad de la educación superior (ES) Estructura -Tres líneas estratégicas para el mejoramient o de la ES: Modelo de Evaluación del CCA Fondo Evidencias de la Red RECCACES, ya que esta forma parte del cambio en la misión: Listo - La planificación estratégica debe contener los roles que le corresponden a cada actor o grupo de interés. -Aclarar que desde que el CCA nació ha venido trabajando estratégicamente, y ha venido mejorando, al punto de contar con un Plan Estratégico: Listo -Pág. 11, Pauta 2.Mencionar indicadores de logro y hacer referencia al plan de gestión. Mencionar que la misión que la misión es pública y está en la web: Listo Pág. 12, último párrafo: punto c. gestiones para el convenio de cooperación con la UCR en función de recursos. Listo -Pág. 14. Pauta 3: primer párrafo cambiar socios por grupos de interés. Segundo párrafo, evitar la redacción en negativo. Pág. 14, pauta 4: Explicar que el CCA es agencia de II nivel. Explicar la independencia del CCA en la parte política: Listo Pag 13.Evidencias, especificar el año del plan Enfoque del Modelo: -El modelo debe recoger una evaluación de impacto. -Demostrar cómo se aplican los procedimientos, no si los tienes. Mostrar evidencia de cómo se realizan -Uniformar nombres de componente. -Dar mayor coherencia a los componentes del SIAC con respecto a los componentes de l modelo del -Pág. 52 Incluir en la evidencia el Manual de Acreditación y el Código de ética. Pag.20. Evidencias cambiar por “Procedimiento s del Sistema de Gestión Documental” no solo de acreditación. Observaciones Componentes propuestos Estructura Redes de Colaboración Seguimiento y pertinencia Promoción de la calidad de la ES. Fondo CCA. -Visualizar el modelo en función de la misión del CCA. -Enfatizar el valor añadido del CCA en términos de sus aportes a los procesos de integración regional. -Pág. 30 Pauta 2. Traer a colación los talleres de validación de los instrumentos técnicos. -Explicar como ha mejorado en modelo, como resultado de haberlo puesto en práctica con la evaluación externa del SINAES. -El modelo debe recoger una evaluación de impacto. Se deben determinar mecanismos para medir el impacto de los procesos de acreditación del CCA. -Trabajar en la investigación evaluativa. -Determinar el impacto del CCA a través de sus agencias. -Explicar cómo se aplicó el modelo del CCA, describiendo detalles en términos de evidencias. Pag.53: -Explicar mecanismos para la solicitud del proceso de acreditación. Equipo de evaluadores: -Cómo se controla a lo interno la discrecionalidad del equipo de evaluadores. -Se recomienda crear un segundo nivel de revisión por encima de los evaluadores. - La auditoría debe ser una interpretación de los criterios, estilo de redacción. Evidencias Observaciones Componentes propuestos Estructura Fondo -Definir lo que para el CCA significa independencia de criterios. -Puede el evaluador realizar aseveraciones no fundamentadas? -ANECA comenta la experiencia de contar con un nivel de coordinación por encima de los evaluadores “comisión de segundo nivel”, con el fin de que revise el informe antes de que estos salgan. De quién es el informe de evaluación externa del CCA o del equipo de evaluadores? -Explicar el papel de los técnicos. De acuerdo a ANECA los técnicos deben cumplir con ciertas características: *no es un académico *no es profesor *opina con respecto al proceso. *no son del área del conocimiento que se está evaluando. -Se debe emitir una política con respecto a la publicación de los resultados de los procesos de evaluación externa. -Pauta 8. Pág.81 se respondió en función de acreditación y no se incluyeron las actividades de formación y capacitación. -Pág. 82. Incluir que se debe hacer una publicación para comunicar la resolución de acreditación del país o agencia. -Pág. 82. Se pueden tener vínculos con redes de publicaciones. -Pág. 82. Ya que no se cuenta con una política de Evidencias Pág. 82. Incluir como evidencia las actas de la sesión. (Especialmente una donde hay un acuerdo sobre hacer pública la resolución de acreditación). Observaciones Componentes propuestos Estructura Fondo Evidencias comunicación esta debe incluirse en el plan de mejora. Seguimiento y pertinencia -Pág. 115 integrar pautas dos y tres e incluir dentro de la pauta al SIAC como mecanismo de evaluación y mejoramiento de la calidad, con el fin de darle más fuerza al SIAC. -pág.97. la pauta No. 5 se debe trasladar a la pauta No. 1 de ese mismo documento. Redes de Colaboración -Evitar el uso de enunciados negativos. Pág.120. -Con respecto a la pauta 1. pág.120: Revisar el documento de la UNESCO sobre “garantía de calidad y educación transfronteriza”. -El seguimiento debe realizarse de manera cualitativa y cuantitativa. -pág.211. Cuando se habla de “debilidades” cambiar el término por pendientes o cosas que falta por hacer dando la justificación y en caso de que existan, se deben explicar las medidas que se van a tomar. -pág.: 121. Pauta 2. Realizar la vinculación con la cooperación (CECC, DAAD, CSUCA etc.). -Realizar una ponderación de las pautas. -pág. 122 pauta 4. Incluir el taller de RECCACCES que se realizó durante el VI Foro 2008. -En las evidencias de la pág. 123, incluir taller de RECCACCES, algunos hitos y las memorias. Observaciones Componentes propuestos Estructura Fondo Evidencias Observaciones Promoción de la calidad de la ES. 4. Organización y Recursos Pág. 126 Componente de promoción: -Se debe mostrar la madurez que se ha venido alcanzando en esta área. -Referirse a proyectos de cooperación ya que es diferente hablar de acciones de cooperación. completos y no acciones. -Mencionar el plan de cooperación del CCA, y los proyectos de cooperación. -pág.128. Pauta 2. Si se ha consultado a los grupos de interés, especificar qué han dicho. Además, convertir sus comentarios en proyectos para ilusionar a las agencias. -pág. 129 las pautas 3-4-5-6 deben trasladarse a organización y recursos. -Mostrar la evolución de la gestión de la cooperación internacional. -Aclarar más la situación con la UCR. Equipo de Evaluadores: -Comentar acerca de la base de datos de evaluadores con que cuenta el CCA. -Pág. 52. Pauta 1: Uniformar el término “Manual de Evaluación Externa” en todo el documento, ya que algunas veces se le llama Manual de Acreditación. -Explicar la evolución de este Manual. Pág. 53: -Mencionar que los evaluadores firman un compromiso ético, de acuerdo al Código del CCA. Pág. 52. Incluir en la evidencia el Código de Ética Incluye los integrantes del equipo de evaluadores externos, como parte del recurso humano Componentes propuestos Estructura Fondo -Mencionar el perfil de los evaluadores. -Se recomienda que un estudiante sea parte del Comité de evaluadores y se le de el mismo trato de respeto que a los evaluadores. -Explicar el papel del miembro estudiantil ante el Consejo. -Describir cuál estrategia a utilizado el CCA para involucrar a los estudiantes con su labor. -Definir quién es el estudiante, cómo ejerce su papel, el CCA lo capacita?. Se le da incentivos al trabajo del estudiante. -El Consejo y sus distintas Comisiones no se mencionan como parte del recurso humano. -Se debe definir quién va ser la persona responsable del sistema de garantía de calidad y cuales van a ser sus funciones. -Se debe integrar al Consejo dentro de los recursos. -Se debe incluir el desglose de los tiempos laborales. -Definir con cuanto personal técnico de evaluación y acreditación se cuenta. -Explicar cómo estamos nombrados en que área colaboramos (trabajo transversal). -Incluir Perfiles de los funcionarios (formación, sexo, edad) -Incluir el aporte externo del Consejo. -Cuando se mencione que el CCA se sometió a auditorías contables, especificar los resultados más aún si estos son favorables. Evidencias Observaciones Componentes propuestos Estructura Fondo 5. Documentación Pág. 87. -Se debe explicitar muy bien los procedimientos para el control de documentos. Explicar cómo se lleva a cabo la gestión de la documentación. -Se debe explicar el proyecto para la creación de un sistema de gestión documental en el CCA. 6. Procesos para la toma de decisiones -Demostrar que las decisiones que se han tomado se han ejecutado. -Pag.56. Pauta 1: No se desarrolla la parte de trasparencia. Se debe mencionar que todos los procesos son transparentes y remitirlos al componente 7. Transparencia y rendición de cuentas. -Esta pauta solo se desarrolla en términos de acreditación y no de mejoramiento de la calidad de la educación superior (formación y capacitación). -Pág. 57: Citar otras instancias de toma de decisión. Hace referencia a Actas concretas. -Pág. 58. La independencia u autonomía del CCA debe explicarse en términos de criterios de evaluación, procedimientos de evaluación, nombramiento de expertos, resultados de la evaluación. Pág. 65. Mencionar la evidencia del seguimiento que el CCA realizar, de las consecuencias de las decisiones que toma. - ampliar más la explicación sobre el plan de mejora, Evidencias Pa58, incluir dentro de las evidencias el Código de Ética. Pág. 66 incluir las evidencias de la pauta 7. Observaciones Componentes propuestos Estructura Fondo Evidencias el apoyo de las Comisiones. - En la tabla de mejoras de este componente, revisar porque se da solo énfasis a que no hay normativa sobre el trabajo que realizan las Comisiones. 7. Transparencia y Rendición de cuentas -Se debe definir un rol de rendición de cuentas (para el CCA y sus distintos órganos) y realizar un procedimiento. -Reforzar este componente más con mecanismos de rendición de cuentas que con mecanismos de divulgación. -Especificar a quién se le rinde cuentas, cada cuanto tiempo y por medio de cuál instrumento. La rendición de cuentas debe informar en que medida se han cumplido los objetivos de calidad del SIAC. -Comentar sobre los informes anuales de labores como mecanismos de rendición de cuentas. Pág. 74 Pauta 1 -Se debe explicitar a quién rinde cuentas el CCA, con qué periodicidad y a través de que mecanismos. - Se debe formular una política con respecto a la rendición de cuentas (especialmente si se deben hacer públicos o no los resultados de los procesos de acreditación). - De qué forma se puede articular roles o artículos en redes regionales. -Se debe incluir al SICA dentro de la estrategia de rendición de cuentas (sectores sociales/33 organizaciones). Pág. 82. Incluir las Actas dentro de las evidencias. Observaciones Componentes propuestos Estructura Fondo -Se debe incluir a las Comisiones Nacionales para que rindan cuentas a sus países de la labor del CCA (Utilizar la experiencia de la Comisión de Panamá) -Se sugiere modificar el sentido del Foro Centroamericano por la Acreditación de la educación superior para que se deje un espacio para recibir críticas de los grupos de interés. Incluir la rendición de cuentas a la Junta de Coordinación y Seguimiento. -Explicar como rinde cuentas la Dirección ejecutiva al Consejo. Mencionar los informes que presenta. -Explicar el mecanismo, la periodicidad y el porque se le rinde cuentas a la Junta de Coordinación y Seguimiento. -Como se divulgan los informes de rendición de cuentas, se hacen públicos?, de qué forma?. - Se debe definir cada cuanto debe evaluarse externamente el CCA tanto en el área de mejoramiento como en el de acreditación, qué órgano del Consejo coordina o decide cuándo debe realizarse la evaluación externa. Este órgano solicita a RIACES la evaluación externa. -El SIAC debe ser la herramienta que proporcione los datos necesarios de tal forma que permita la rendición de cuentas. -Pág. 81 Pauta 8: -Darle el enfoque de la misión actual del CCA (acreditación, capacitación y formación). -Incluir aquí a la Red RECCACCES. -El SIAC define un objetivo de calidad, unido al plan Evidencias Observaciones Componentes propuestos Estructura Fondo Evidencias Observaciones estratégico, esto permite la rendición de cuentas. -El SIAC debe brindar los insumos para la planificación estratégica. RECOMENDACIONES PARA EL PROCESO DE EVALUACIÓN EXTERNA CON RIACES Los técnicos de ANECA recomiendan NO INCLUIR el análisis FODA, en el documento de autoevaluación que se entregará a RIACES.