PROPUESTA DE BAREMO

CRITERIOS Y REFERENTES DE EVALUACIÓN
PROGRAMA DE APOYO A PROYECTOS DE INVESTIGACIÓN DE LA
CONSEJERÍA DE EDUCACIÓN DE LA JUNTA DE CASTILLA Y LEÓN
(a iniciar en 2013)
Objetivo de la evaluación:
La ORDEN EDU/134/2013, de 14 de marzo, de la Consejería de Educación de la Junta de
Castilla y León establece la convocatoria pública, en régimen de concurrencia competitiva,
de subvenciones del Programa de Apoyo a Proyectos de Investigación a iniciar en el año
2003, destinadas a financiar proyectos de investigación que se lleven a cabo en centros,
instituciones, departamentos, institutos u otras unidades de investigación situadas en
Castilla y León.
A fin de que la comisión de selección pueda valorar adecuadamente las solicitudes
presentadas a esta convocatoria, la Dirección General de Universidades e Investigación de
esta Comunidad ha recabado la colaboración de la Agencia para la Calidad del Sistema
Universitario de Castilla y León (ACSUCyL) para informar las solicitudes de acuerdo con
los criterios establecidos en el apartado 10.1 de la convocatoria, con la excepción del
criterio 10.1.e, relativo a la integración laboral de las personas con discapacidad.
La evaluación del criterio 10.1.a.4. (Evaluación expost positiva de los proyectos financiados
por el programa de apoyo a proyectos de investigación) ACSUCyL la realiza en un proceso
específico e independiente, en el que los proyectos financiados a partir de 2007, cuentan
con una evaluación expost donde se valora el “grado de consecución de los objetivos”
planteados inicialmente en los proyectos, “la relevancia científica de los resultados
obtenidos” y su “impacto socioeconómico”.
La elaboración de los informes se realiza de acuerdo con el “Manual de procedimiento de
evaluación de proyectos y programas de investigación” de ACSUCyL y de los presentes
subcriterios y referentes de evaluación aprobados por la Comisión de Evaluación de la
Investigación de la Agencia.
Avda. Reyes Católicos, 2. 47006 Valladolid. Tel. 983 411743. Fax. 983 414654
http://www.acsucyl.es
[email protected]
Criterios y referentes para la evaluación de Proyectos de Investigación a iniciar en 2013
CRITERIOS Y SUBCRITERIOS DE EVALUACIÓN
A. Evaluación del grupo investigador: máximo 44 puntos.
a.1. Calidad científica del investigador principal:
a.1.1. Historial científico:
máximo 15 puntos.
a.1.2. Capacidad para captar fondos:
máximo 7 puntos.
a.1.3. Dirección de un GIE de Castilla y León:
máximo 3 puntos.
a.2. Calidad científica del resto del grupo investigador:
máximo 16 puntos.
a.3. Adecuación del grupo investigador respecto del trabajo a realizar:
máximo 3 puntos.
B. Evaluación del proyecto: máximo 25 puntos.
b.1. Pertinencia y relevancia de la línea de trabajo del proyecto, de los objetivos
propuestos y de su contribución a la excelencia científica, al liderazgo
industrial y a dar respuesta a los retos sociales de acuerdo al Programa
“Horizonte 2020”:
máximo 10 puntos.
b.2. Eficiencia del presupuesto solicitado para los gastos previstos en el proyecto:
b.2.1. Utilización eficiente de los recursos disponibles :
máximo 3 puntos.
b.2.2. Complementariedad y/o sinergias con otros proyectos financiados:
máximo 2 puntos.
b.2.3. Adecuación de los conceptos de gasto a los objetivos del proyecto : máximo 3 puntos.
b.2.4. Adecuación de los importes de gasto presupuestados :
máximo 2 puntos.
b.3. Metodología y plan de trabajo:
máximo 5 puntos.
C. Colaboración empresarial y transferencia de resultados:
máximo 10 puntos.
D. Adecuación a los objetivos de la ERIDI 2011-2013 y a las prioridades del
Programa Marco de Investigación e Innovación (“Horizonte 2020”): máximo 13 puntos.
d.1. Contribución a la generación de conocimiento de excelencia y a la
integración de investigación, innovación y educación en sectores
estratégicos de Castilla y León:
máximo 3 puntos.
d.2. Contribución a impulsar la participación de equipos de investigación
en programas de I+D+i de carácter internacional dentro de las
prioridades sectoriales consideradas en el Programa “Horizonte 2020”:
máximo 6 puntos.
d.3. Interacción con otros agentes del sistema I+D+i en Castilla y León:
máximo 2 puntos.
d.4. Contribución al incremento del interés por la ciencia y la tecnología:
máximo 2 puntos.
TOTAL: máximo 92 puntos
El criterio 10.1.e de la convocatoria, relativo a la integración laboral de las personas con discapacidad, no
es objeto de evaluación por parte de ACSUCyL. Y la evaluación del criterio 10.1.a.4. (evaluación Expost
positiva de los proyectos financiados por el programa de apoyo a proyectos de investigación) ACSUCyL
la realiza en un proceso específico e independiente.
Página 2 de 8
Criterios y referentes para la evaluación de Proyectos de Investigación a iniciar en 2013
REFERENTES PARA LA EVALUACIÓN
A. Evaluación del grupo investigador
Valoración máxima del apartado A: 44 puntos.
a.1. La calidad científica del investigador principal (IP): máximo 25 puntos.
a.1.1. Historial científico: máximo 15 puntos.
Atendiendo a la relevancia de su trayectoria científica/tecnológica, y tomando como referencia
específica la calidad y la cantidad de la producción científica realizada durante los últimos 5 años, y
el contexto de su área de conocimiento o especialidad:
o
Una valoración de 7,5 puntos (o más) implica que el IP cuenta con una producción científica y/o
tecnológica equiparable a la media española.
o
Una valoración de 10,5 puntos (o más) implica que el IP cuenta con una producción científica
y/o tecnológica superior a la media española.
o
Una valoración de 13,5
internacional.
puntos (o más) implica que el IP es un referente en el ámbito
a.1.2. Capacidad para captar fondos: máximo 7 puntos
Atendiendo a la relevancia de su trayectoria científica/tecnológica, y tomando como referencia
específica los proyectos de investigación captados en convocatorias de concurrencia competitiva
durante los últimos 5 años, y las patentes registradas en este periodo:
o
Una valoración de 3,5 puntos (o más) implica que el IP ha dirigido al menos un proyecto de
investigación financiado por una convocatoria regional; o ha registrado una patente de ámbito
nacional.
o
Una valoración de 5 puntos (o más) implica que el IP ha dirigido al menos un proyecto de
investigación financiado por una convocatoria nacional; o ha registrado una patente de ámbito
supranacional.
o
Una valoración de 6,5 puntos (o más) implica que el IP ha participado además en un proyecto
de investigación financiado por el Programa Marco de Investigación de la Unión Europea; o ha
puesto en explotación una patente de ámbito supranacional.
a.1.3. Dirección de un Grupo de Investigación de Excelencia de Castilla y León: 3 puntos
a.2. La calidad científica del resto del grupo investigador: máximo 16 puntos.
Atendiendo a la relevancia de su trayectoria científica/tecnológica, y tomando como referencia
específica su actividad durante los últimos 5 años, y el contexto de su área de conocimiento o
especialidad:
o
Una valoración de 8 puntos (o más) implica que el grupo, en su conjunto, cuenta con una
producción científica y/o tecnológica equiparable a la media española.
o
Una valoración de 11 puntos (o más) implica que el grupo, en su conjunto, cuenta con una
producción científica y/o tecnológica superior a la media española.
o
Una valoración de 14,5 puntos (o más) implica que el grupo es un referente en el ámbito
internacional.
Página 3 de 8
Criterios y referentes para la evaluación de Proyectos de Investigación a iniciar en 2013
a.3. La adecuación del grupo investigador (tamaño, experiencia de trabajo conjunto,
experiencia en la línea de trabajo del proyecto, equilibrio en su composición,
capacidad formativa) respecto al trabajo a realizar: máximo 3 puntos.
Una valoración de 1,5 puntos (o más) implica que el grupo tiene (se han de cumplir los tres puntos):
o Un tamaño adecuado: suficiente número de investigadores, becarios y técnicos cualificados para
desarrollar el proyecto.
o Una composición equilibrada atendiendo a su perfil (investigadores sénior, noveles, becarios,
etc.) y su competencia en función de los objetivos del proyecto.
o Un grado de participación e implicación de todos los integrantes del grupo de investigación que
asegura la viabilidad del proyecto.
Una valoración de 2 puntos (o más) implica además que el grupo (se han de cumplir los tres
puntos):
o Ha trabajado, con anterioridad, conjuntamente en otros proyectos.
o Ha demostrado su capacidad formativa: número de tesis dirigidas o codirigidas
o Cuenta con experiencia previa en la línea del trabajo del proyecto o en líneas que puedan
aportar una innovación a la línea de trabajo habitual en el campo del proyecto
Una valoración de 2,5 puntos (o más) implica una larga y fructífera experiencia de trabajo conjunto
en el campo del proyecto y una elevada capacidad formativa.
B. Evaluación del Proyecto
Valoración máxima del apartado B: 25 puntos.
b.1. Pertinencia y relevancia de la línea de trabajo del proyecto, de los objetivos
propuestos y de su contribución a la excelencia científica, al liderazgo industrial y a
dar respuesta a los retos sociales de acuerdo al Programa “Horizonte 2020”: máximo
10 puntos.
Una valoración de 5 puntos (o más) implica que el proyecto es de interés y actualidad, está
correctamente fundamentado, y sus objetivos con claros y coherentes.
Una valoración de 7 puntos (o más) implica, además, que el proyecto se alinea claramente con las
prioridades del Programa “Horizonte 2020”.
Una valoración de 9 puntos (o más) implica, además, que el proyecto combina la excelencia
científica, la formación de nuevos investigadores y la innovación.
b.2. Eficiencia del presupuesto solicitado para los gastos previstos en el proyecto:
máximo 10 puntos.
b.2.1. Utilización eficiente de los recursos disponibles: máximo 3 puntos.
Una valoración de 1,5 puntos implica alguna de las situaciones siguientes:
la utilización compartida de equipos científicos por otros por otros departamentos del
organismo o por otro organismo de investigación de Castilla y León;
Página 4 de 8
Criterios y referentes para la evaluación de Proyectos de Investigación a iniciar en 2013
el uso compartido de los recurso bibliográficos empleados en las bibliotecas de
Castilla y León;
la imputación de gastos de personal técnico de laboratorio perteneciente a los
servicios centrales del organismo.
Una valoración de 3 puntos implica además la utilización eficiente de estos recursos.
Se valorará con 0 puntos la ausencia de recursos compartidos.
b.2.2. Complementariedad y/o sinergias con otros proyectos financiados: máximo 2 puntos.
Una valoración de 1 puntos implica que el proyecto se complementa y/o establece
sinergias con otro u otros proyectos financiados por convocatorias de carácter regional.
Una valoración de 2 puntos implica que esta complementariedad y/o sinergias se
establecen con proyectos financiados por convocatorias nacionales o internacionales.
Se valorará con 0 puntos la ausencia complementariedad y/o sinergias con otros proyectos
en vigor.
b.2.3. Adecuación de los conceptos de gasto a los objetivos del proyecto: máximo 3 puntos.
La valoración máxima de este apartado únicamente se otorgará cuando todos los gastos
contemplados sean estrictamente necesarios para la realización del proyecto (esto es,
cuando no se detecte la existencia de conceptos de gasto que a juicio de los evaluadores
no sean imprescindibles para la realización del proyecto).
En la justificación de la valoración asignada, los evaluadores especificarán los conceptos
de gasto que, a su juicio, no resultan estrictamente necesarios para el adecuado desarrollo
del proyecto.
b.2.4. Adecuación de los importes de gasto presupuestados: máximo 2 puntos.
La valoración máxima de este apartado únicamente se otorgará cuando las cuantías de todos los
gastos contemplados sean adecuadas a las necesidades del proyecto y se ajusten a precios de
mercado (esto es, cuando no se detecte la existencia de importes excesivos o sobrevalorados).
En la justificación de la valoración asignada, los evaluadores especificarán los importes de
gasto que, a su juicio, resulten excesivos y que podrían ajustarse sin menoscabo del
adecuado desarrollo del proyecto.
b.3. Metodología y plan de trabajo: máximo 5 puntos.
Una valoración de 2,5 puntos (o más) implica que (se han de cumplir los tres puntos):
o Se realiza un planteamiento metodológico adecuado y coherente.
o Existe un diagrama de tiempos y un desglose de actividades y tareas, donde se especifiquen los
participantes en cada una de ellas.
o Existen garantías de que se cuenta o dispone de las instalaciones, instrumentación o técnicas
necesarias o suficientes para desarrollar adecuadamente el proyecto.
Una valoración de 3,5 puntos (o más) implica además que (se han de cumplir los dos puntos):
o Se han definido los procesos de coordinación, seguimiento y evaluación de la ejecución del
proyecto.
o Se contemplan los posibles problemas éticos, de protección de datos, confidencialidad,
seguridad, medio ambiente, etc. que su ejecución pueda conllevar.
Página 5 de 8
Criterios y referentes para la evaluación de Proyectos de Investigación a iniciar en 2013
Una valoración de 4,5 puntos (o más) implica, además, que existe un plan de formación de los
investigadores (en el caso de que el grupo cuente con investigadores noveles), y/o que el
planteamiento metodológico es innovador.
C. Colaboración empresarial y transferencia de resultados
Valoración máxima del apartado C: 10 puntos.
Una valoración de 0 puntos implica que el proyecto no contempla la contribución de sus resultados a
la realización de algún tipo de transferencia.
Una valoración de 5 puntos (o más) implica que en el proyecto participa al menos una empresa u
organismo, y que aporta al mismo recursos humanos, económicos o materiales. Se valora, además,
la cuantía de estos recursos, el número y la relevancia las empresas u organismos y su grado de
implicación.
Una valoración de 7 puntos (o más) implica además que la transferencia de resultados que se
pretende realizar es viable e innovadora.
Una valoración de 9 puntos (o más) implica un elevado interés de la transferencia de resultados
(posibilidad de patentes que puedan explotarse, etc.).
D. Adecuación a los objetivos de la ERIDI 2011-2013 y a las
prioridades del Programa Marco de Investigación e Innovación
(“Horizonte 2020”)
Valoración máxima del apartado D: 13 puntos.
d.1. Contribución a la generación de conocimiento de excelencia y a la integración de
investigación, innovación y educación en sectores estratégicos de Castilla y León
(biotecnología, biomedicina, nanotecnología, aeroespacial, energías renovables,
tecnologías de la información y la comunicación, ocio, idioma y cultura,
agroalimentario, automoción, y el sector de servicios en la medida en la que dé
soporte a los sectores anteriores): máximo 3 puntos.
Una valoración de 1,5 puntos implica que el proyecto es factible que genere conocimiento
de excelencia en alguno de los sectores estratégicos de Castilla y León.
Una valoración superior implica además que el proyecto contribuye a la integración de la
investigación, la innovación y la educación.
d.2. Contribución a impulsar la participación de equipos de investigación en programas
de I+D+i de carácter internacional dentro de las siguientes prioridades sectoriales
consideradas en el Programa “Horizonte 2020”: tecnologías de la información y la
comunicación, nanotecnologías, materiales avanzados, biotecnología, fabricación y
transformación avanzadas, y espacio. Máximo 6 puntos.
Página 6 de 8
Criterios y referentes para la evaluación de Proyectos de Investigación a iniciar en 2013
Una valoración de 3 puntos implica que el proyecto contribuye de alguna manera a la
creación o afianzamiento de redes de colaboración con otros grupos de investigación cuya
actividad de I+D+i se enmarca dentro de las prioridades señaladas.
Una valoración superior implica además que estas redes de colaboración son
suficientemente competitivas para optar a financiación internacional.
d.3. Interacción con otros agentes del sistema I+D+i en Castilla y León: máximo 2
puntos.
Una valoración de 1 punto implica que el proyecto contempla:
la interacción con centros tecnológicos, institutos de investigación o agrupaciones
empresariales innovadoras (clusters); o
la utilización compartida de infraestructuras científico-técnicas especializadas.
Una valoración superior implica además una especial relevancia de estas interacciones, o
una contribución a la coordinación de diferentes infraestructuras entre sí.
d.4. Contribución al incremento del interés por la ciencia y la tecnología: máximo 2
puntos.
Una valoración de 1 punto implica que el proyecto contempla:
acciones a favor del reconocimiento del valor social y económico de la I+D+i; o
acciones que propicien el acercamiento de los contenidos científicos a la sociedad
en general; o
la divulgación de los resultados del proyecto mediante canales y publicaciones
electrónicas de acceso abierto (open data).
Una valoración superior implica además una especial relevancia de estas acciones, un
elevado impacto social o que tengan un carácter innovador.
VALORACIÓN GLOBAL
Valoración máxima: 92 puntos.
Esta puntuación es el resultado de la suma de las valoraciones de los apartados anteriores.
Referentes de la evaluación:
o
Cuestionable:
32 – 45 puntos.
o
Aceptable:
46 – 64 puntos.
o
Bueno:
65 – 77 puntos.
o
Muy bueno:
78 – 92 puntos.
Página 7 de 8
Criterios y referentes para la evaluación de Proyectos de Investigación a iniciar en 2013
La evaluación de cada proyecto irá acompañada de:
Un apartado donde se recogerán los puntos fuertes o destacables que presente el
proyecto.
Un apartado donde se recogerán sugerencias orientadas a la mejora del proyecto.
En la justificación del criterio b.2) Eficiencia del presupuesto solicitado, cuando
sea pertinente, se incorporará el detalle de conceptos o importes que habrían de
ser reformulados/ ajustados en el presupuesto para la obtención de la valoración
máxima en los apartados b.2.3 y b.2.4.
Página 8 de 8