PROGRAMA INTERNACIONAL PARA LA ERRADICACIÓN DEL TRABAJO INFANTIL - IPEC Guías de DED 1 IDENTIFICACIÓN Y USO DE INDICADORES DE LOGRO CONTENIDOS INTRODUCTION ............................................................................................................................ 1 1. BASIC CONCEPTS ........................................................................................................................ 2 1.1. Definition .................................................................................................................................. 2 1.2. Types ....................................................................................................................................... 4 1.3. Indicators and levels of objectives ........................................................................................... 5 1.4. Indicators and means of verifications ...................................................................................... 8 1.5. Indicators and targets ............................................................................................................ 10 1.6. A good indicator is SMART.................................................................................................... 11 2. PRACTICAL APPLICATION ......................................................................................................... 13 2.1. Selection of indicators............................................................................................................ 13 2.2. Revision of indicators............................................................................................................. 14 2.3. Indicators as a tool for monitoring.......................................................................................... 15 2.4. Indicators in evaluation .......................................................................................................... 16 3. INDICATORS COMMONLY USED IN IPEC (EXAMPLES).......................................................... 18 SELECTED REFERENCES ON INDICATORS................................................................................ 34 ANNEX: Matrix of objectives and indicators ..................................................................................... 35 Versión 1.0 (Abril 2001) Guías de DED 1 Indicadores de Logro INTRODUCCIÓN La programación de proyectos de cooperación técnica en el Programa Internacional para la Erradicación del Trabajo Infantil (IPEC) se enmarca en la gestión basada en resultados y objetivos. Una vez que se detecta un problema vinculado con el trabajo infantil, el primer paso en la planificación es la definición de la situación de llegada deseada, descrita a través de los objetivos inmediatos de un proyecto o programa. Posteriormente se determinan los productos, las actividades, los insumos y los supuestos necesarios para alcanzar esos objetivos. Uno de los ingredientes clave del diseño de un proyecto es la identificación de las señalas que permitirán que sus administradores —o, para el caso, cualquier observador externo— constaten que los objetivos han sido alcanzados. Estas señales son los indicadores de logro de los objetivos. La selección de indicadores debe ser entendida como una parte integral de la definición de los objetivos inmediatos, y por lo tanto como un elemento de la programación de cualquier intervención planificada de desarrollo, en este caso orientada hacia la erradicación del trabajo infantil. Durante y después de la ejecución de la intervención, los indicadores serán una herramienta esencial para el seguimiento y la evaluación. Este documento es el primero de una serie que pretende facilitar la tarea de diseñar y administrar proyectos y programas en el marco del IPEC. En este caso, la guía intenta servir de orientación para el personal vinculado con el programa en el proceso de identificar y utilizar indicadores de logro. El texto complementa las instrucciones incluidas en varios documentos oficiales y manuales de la OIT. Existe una diferencia de nivel y alcance entre los indicadores de logro a lo que se refieren estas páginas y los indicadores más generales sobre trabajo infantil, utilizados en encuestas de índole nacional, SIMPOC u otros instrumentos de investigación. Mientras estos últimos pueden ser empleados como herramientas generales para valorar la magnitud del problema, examinar factores y causas potenciales del trabajo infantil y para concienciar a la población o quienes tomas las decisiones, los primeros sólo resultan útiles en el contexto de las intervenciones específicas promovidas por el IPEC. Esta guía fue preparada por el Equipo de Diseño, Evaluación y Base de Datos con la colaboración de Aurelie Lassauniere y la participación activa de muchos colegas de IPEC en el terreno. Se trata de un documento vivo, y como tal se enriquecerá con el uso y la experiencia acumulada a través de la gestión y ejecución de los proyectos y programas del IPEC. 1 Guías de DED 1 Indicadores de Logro 1. CONCEPTOS BÁSICOS 1.1. Definición Los indicadores son mediciones que sirven para proporcionar una evidencia verificable acerca de la consecución de los propósitos de un proyecto o programa, añadiendo precisión a la formulación de los objetivos inmediatos. Los gestores de un proyecto deben ser capaces de identificar las pruebas que serán empleadas para determinar el éxito o fracaso de la intervención. En el caso de proyectos de acción directa, los indicadores revelarán la medida en que los beneficiarios se encuentran en una situación mejor como resultado de la intervención. En proyectos de desarrollo institucional, los indicadores se referirán a lo que las instituciones son capaces de hacer después de la ejecución de las actividades. Para reflejar las múltiples facetas de un objetivo, en general será necesario definir varios indicadores. En el recuadro 1 se presentan cuatro ejemplos de indicadores posibles para distintos tipos de objetivos inmediatos. 2 Guías de DED 1 Indicadores de Logro Recuadro 1: Ejemplos de indicadores 1.1. Tasa de matriculación de niños en escuelas de la comunidad X 1.2. Tasa de matriculación de niñas 1.3. Tasa de abandono de niños en las escuelas de la comunidad 1.4. Tasa de abandono de niñas La incidencia del trabajo infantil en la comunidad Y decrece de manera significativa 2.1. Proporción de niños /as trabajadores /as en el total de la fuerza de trabajo de la comunidad Y 2.2. Proporción de niños trabajando en ocupaciones peligrosas (sobre total de niños trabajadores) 2.3. Proporción de niñas trabajando en ocupaciones peligrosas (sobre total de niñas trabajadoras) El Ministerio de Trabajo es capaz de monitorear de manera sistemática el número de menores trabajadores en las empresas del sector minero. 3.1. Porcentaje de compañías mineras inspeccionadas por el Ministerio de Trabajo al menos una vez por año (sobre el total de las empresas registradas) 3.2. Porcentaje de denuncias procesadas y llevadas a término en el Ministerio de Trabajo 3.3. Número de inspectores de trabajo entrenados para monitorear la incidencia de trabajo infantil en el Ministerio La ONG X ha mejorado su capacidad para gestionar proyectos de trabajo infantil 4.1. Número de proyectos que benefician a (ex) niños /as trabajadores /as con financiación externa gestionados pro la ONG X 4.2. Número de (ex) niños / as trabajadores /as beneficiados por proyectos gestionados por la ONG X 4.3. Proporción de personal entrenado para gestionar eficazmente proyectos sobre trabajo infantil en la ONG EJEMPLO 2 EJEMPLO 1 Los niños y niñas de la comunidad X mejoran su acceso a la educación formal EJEMPLO 3 ACCIÓN DIRECTA INDICADORES EJEMPLO 4 OBJETIVO INMEDIATO DESARROLLO INSTITUCIONAL ¬ En el ejemplo 1, el “mejor acceso a la educación formal” se define a través de dos parámetros: la tasa de matriculación y la tasa de abandonos. Esto significa que el proyecto pretende alentar a las familias para que envíen a los niños y niñas a la escuela, por un lado, y mejorar la capacidad del sistema para retener a los niños y niñas, por el otro. Si las tasas de matriculación aumentan significativamente y las tasas de abandono se reducen, la conclusión lógica será que el proyecto ha sido exitoso en mejorar el acceso de los niños y niñas a las escuelas de la comunidad. La división de los indicadores por género puede mostrar si la intervención ha creado sesgos indeseados. ¬ El ejemplo 2 demuestra que la incidencia de trabajo infantil es calculada considerando los porcentajes de niños /as trabajadores /as en el total de la fuerza de trabajo de la comunidad. Los últimos dos indicadores reflejan la prioridad otorgada a la eliminación de las peores formas de trabajo infantil. Si el primer indicador permanece estable y los otros dos muestran una reducción, la estrategia habrá sido efectiva para atacar el trabajo peligroso pero no el problema del trabajo infantil como un todo. ¬ El ejemplo 3 define la capacidad del Ministerio para monitorear los lugares de trabajo en términos de la proporción de empresas inspeccionadas al menos una vez por año, las denuncias procesadas y llevadas a término y el número de inspectores entrenados. ¬ En el ejemplo 4, la capacidad de la ONG se mide a través del número de proyectos con financiación externa, el número total de niños /as beneficiados /as por estos proyectos y el porcentaje de personas entrenadas en temas vinculados con el trabajo infantil sobre el total del personal de la organización. 3 Guías de DED 1 Indicadores de Logro Los indicadores son entonces las señales que permiten a los administradores del proyecto realizar un seguimiento de la ejecución del programa y justificar las percepciones de éxito o fracaso. La definición de buenos indicadores es también clave para la evaluación, ya que el análisis del desempeño se realiza normalmente de acuerdo con los objetivos predefinidos, que a su vez son determinados con mayor precisión a través de los indicadores. 1.2. Tipos Existen diferentes tipos de indicadores. De las clasificaciones posibles, en esta guía haremos referencia a dos. La primera se refiere a la relación del indicador con el objetivo: en este caso, los indicadores pueden ser directos o indirectos (proxies.) La segunda tipología tiene que ver la información requerida para dar contenido a los indicadores: así, pueden ser clasificados como cuantitativos o cualitativos. A continuación, una breve definición de cada uno de estos tipos: Los indicadores directos tienen una relación evidente e inequívoca con el objetivo (por ejemplo, el porcentaje de menores en la fuerza de trabajo es un indicador directo del objetivo “eliminación del trabajo infantil”.) El uso de este tipo de indicadores es recomendable, aunque en muchos casos la obtención de la información pueda resultar una tarea difícil u onerosa. Los indicadores indirectos (proxies) tienen una relación oblicua con el objetivo (por ejemplo, el consumo es un indicador indirecto del ingreso familiar.) El uso de indicadores indirectos requiere una explicación clara de la relación entre esta medida y el objetivo. En el caso del ejemplo, se trataría de explicar por qué y en qué medida un incremento del consumo señala una mejora de los ingresos. Los indicadores cuantitativos reflejan datos que pueden ser expresados con números. El uso de este tipo de indicadores es recomendable porque son relativamente fáciles de medir y facilitan las comparaciones en el tiempo y con otros proyectos (por ejemplo, el número de niños y niñas retirados del trabajo puede ser un indicador del objetivo de reducción del trabajo infantil.) Los indicadores cualitativos reflejan información que debe ser expresadas mediante palabras o conceptos. Generalmente están relacionados con comportamientos o con la calidad de los servicios ofrecidos (por ejemplo, la percepción de los líderes comunitarios sobre los peligros derivados del trabajo infantil.) En muchos casos es posible realizar esfuerzos de cuantificación de indicadores cualitativos para facilitar las comparaciones y mostrar impacto (por ejemplo, porcentaje de líderes comunitarios que han modificado su percepción de los peligros derivados del trabajo infantil.) No existen reglas para determinar cuál es el tipo más apropiado de indicador en casos particulares. Siempre que sea posible, el uso de indicadores directos y cuantitativos es recomendable, aunque el análisis deberá ser realizado caso por caso de acuerdo con criterios establecidos, como las fuentes de información, el costo de recopilar la información necesaria, etc. Lo más importante es, siempre, que los indicadores deben ser verificables. Esto significa que la información necesaria tiene que ser accesible y que, con esta información, dos observadores distintos deberían ser capaces de llegar a la misma conclusión. En la sección 2.1 se presenta un método sencillo para la selección de indicadores. 4 Guías de DED 1 Indicadores de Logro 1.3. Indicadores y niveles de objetivos Como ya se ha mencionado, de acuerdo con la metodología de la OIT para la formulación, monitoreo y evaluación de programas y proyectos los indicadores sólo se necesitan en el nivel de los objetivos inmediatos. Esta es la razón por la que son denominados “indicadores de logro”. Generalmente, no es preciso definir indicadores para productos o para actividades. Estos elementos deben ser diseñados y formulados para que sea sencillo realizar el seguimiento y determinar si las actividades han sido realizadas y los productos producidos de acuerdo con lo planificado. Todos los indicadores deben estar ligados a algún objetivo inmediato. Al mismo tiempo, para cada objetivo será preciso definir al menos un indicador (y preferiblemente más de uno), proporcionando un medio para verificar su cumplimiento. Es importante recordar, sin embargo, que los indicadores no son objetivos, ni productos ni actividades (véase el recuadro 2); los administradores del proyectos deben en todo momento recordar que su tarea es alcanzar objetivos, y no indicadores. Recuadro 2: Indicadores, productos y actividades La confusión de indicadores con productos es un error frecuente durante el diseño de proyectos. Un “currículo mejorado para educación vocacional” podría ser un indicador del objetivo “el sistema educativo se adapta mejor a las necesidades de los niños y niñas trabajadoras,” sólo si el proyecto no pretende producir el currículo por sí mismo. En este caso, el currículo sería un producto, y evidentemente no podría ser empleado como indicador. Una comparación rápida de la lista de indicadores con los productos puede ser útil para no cometer esta equivocación. Otro error habitual es emplear actividades como indicadores, tal como “número de cursos de entrenamiento de profesores realizados” (para el objetivo utilizado en el ejemplo precedente.) En general, estos cursos serán actividades incluidas en el proyecto, por lo que emplear el número como indicador no nos dirá nada sobre el objetivo. Nuevamente, puede ser útil compara los indicadores con las actividades para identificar coincidencias y evitar este problema. En la programación estratégica de IPEC existen intervenciones que se sitúan a diferentes niveles, y por lo tanto hay distintos niveles de objetivos. En general, IPEC como programa global tiene un objetivo general —la eliminación del trabajo infantil, dando prioridad a las peores formas— que sirve como objetivo de desarrollo y la razón de ser de todos los Programas de Duración Determinada 1 (PDD), los Programas-país (PP) y los proyectos. Algunos de estos programas y proyectos están integrados por componentes discretos, de menor tamaño, denominados “programas de acción (PA.) Para que la estrategia sea consistente, la relación entre un PP y un PA debe ser tal que un producto 2 del PP (o del proyecto) sea equivalente al objetivo inmediato de un PA. La columna de la izquierda del gráfico de la página siguiente intenta ilustrar estas relaciones lógicas. Los indicadores globales del objetivo de IPEC han sido definidos tal como se demuestra en la sección superior de la columna derecha del gráfico. Los indicadores de logro en cada nivel deben estar en relación con los objetivos inmediatos del PDD, el PP, los proyectos o los PA. 1 IPEC como programa global posee una serie de metas definidas para cada bienio que pueden ser consultadas en el documento de Programación y Presupuesto del período. 2 El hecho de que algunos programas-país no hayan sido definidos a través de un documento de proyecto no invalida este marco de planificación estratégica. Todos los PP, con o sin documento de proyecto, deben definir objetivos estratégicos vinculados con las metas de IPEC. Estos objetivos serán alcanzados a través de la ejecución de programas de acción. 5 Guías de DED 1 Indicadores de Logro Como principio general, los indicadores en un nivel específico no pueden ser empleados por las intervenciones de un nivel superior. Sin embargo, en algunos casos pueden ser empleados como proxies, y en otros será preciso realizar un esfuerzo de agregación. Por ejemplo, la ratificación de uno de los convenios de la OIT puede ser un indicador de logro en un programa-país y el número agregado de ratificaciones es uno de los indicadores de logro de IPEC como un todo. Lo mismo puede afirmarse del número de niños y niñas retiradas del trabajo en un programa-país y en los programas de acción que lo conforman. Los indicadores de los objetivos superiores pueden ser utilizados como una referencia en programas o proyectos de un nivel inferios, o como una herramienta para medir los efectos de largo plazo y la sostenibilidad. Esto es sumamente útil en evaluaciones de impacto y ex post. En la mayoría de los casos, sin embargo, no deberán ser incluidos en el documento de proyecto. El recuadro 4, más adelante, incluye un ejemplo de indicadores seleccionados de acuerdo con el nivel de la planificación. 6 Guías de DED 1 Indicadores de Logro Programación estratégica OBJETIVO Contribuyen a OBJETIVOS INMEDIATOS / ESTRATÉGICOS Contribuyen a Productos Actividades Recursos Programas de acción Programas de Duración Determinada, Programas-país, proyectos IPEC El trabajo infantil es progresivamente eliminado, dando prioridad a la urgente erradicación de sus peores formas y a la provisión de alternativas para los niños y niñas y sus familias. OBJETIVOS INMEDIATOS Indicadores de logro • Estados miembro que ratifican el C. 138 • Estados miembro que ratifican el C. 182 • Estados miembro que realizan estudios cuantitativos y cualitativos sobre trabajo infantil • Estados miembro que formulan políticas y programas específicando metas y plazos para la eliminación de las peores formas • Niños y niñas que se benefician de la acción de la OIT Aggregation • Indicadores de logro específicos para los objetivos inmediatos de PDD, PP y proyectos Aggregation • Indicadores de logro específicos para los objetivos inmediatos de los PA Productos Actividades Recursos 7 Guías de DED 1 Indicadores de Logro 1.4. Indicadores y medios de verificación Los medios de verificación son las fuentes de información de donde es posible extraer la información necesaria para dotar de contenido a los indicadores, así como la metodología empleada para conseguir los datos. Durante la fase de diseño del proyecto es importante reflexionar acerca de los medios de verificación posibles, ya que la accesibilidad de la información es uno de los criterios centrales para incluir un indicador en la matriz del marco lógico. La determinación de medios de verificación en las primeras etapas del diseño es también esencial para una buena gestión basada en resultados. Recuadro 3. Medios de verificación (ejemplos) Primarios ¬ Sistema de monitoreo del proyecto ¬ Sistema de monitoreo de trabajo infantil establecido por el proyecto ¬ ¬ ¬ Cuestionarios de evaluación de cursos de entrenamiento Evaluaciones rápidas / encuestas organizadas por el proyecto Informantes clave (en la comunidad o en los hogares) Secundarios ¬ Datos estadísticos producidos pro autoridades nacionales o locales (ejemplo, encuestas de hogares) ¬ Datos estadísticos producidos por organizaciones internacionales ¬ Datos de registro de las unidades de inspección del trabajo o de sistemas de monitoreo externos al proyecto ¬ Dossier de prensa y recortes de medios ¬ Informes de la agencia implementadora Los medios de verificación pueden ser primarios (por ejemplo, producidos por el monitoreo del proyecto) o secundarios (por ejemplo, estadísticas nacionales o locales.) El origen de los datos tiene que ser cuidadosamente analizado para determinar su fiabilidad y el costo de conseguir la información. En general, las fuentes secundarias tienen ventajas de costo y facilidad de obtención, pero en muchos casos los datos no podrán vincularse con el indicador o no serán dignos de confianza. Por ejemplo, puede que la información sea relevante en el ámbito nacional pero irrelevante en el contexto local; o bien puede que no esté disponible en el momento necesario. En el otro extremo, la información producida por el proyecto es siempre relevante y, por definición, estará disponible cuando se necesita; sin embargo, el sistema para obtenerla de una manera sistemática consumirá abundantes recursos, monetarios y de tiempo. Un observador externo podrá asimismo cuestionar la objetividad de la información, ya que esta ha sido producida por el propio proyecto. El sistema de monitoreo, por lo tanto, debe ser transparente y estar diseñado de manera tal que los indicadores sean verificables. El recuadro 3 proporciona algunos ejemplos de medios de verificación. Un medio de verificación debe ser definido para cada indicador durante la fase de diseño. Es recomendable presentar la información de manera clara y fácil de leer utilizando una tabla sencilla con los objetivos inmediatos, los indicadores y los medios de verificación (un formato posible se presenta en el anexo.) 8 Guías de DED 1 Indicadores de logro Los medios de verificación deben asegurar la consistencia de la medicación del indicador durante toda la vida del proyecto, para que los cambios que se observen no se deban a diferencias metodológicas sino al desarrollo del proyecto. La información recopilada a través de estas fuentes debe respetar los siguientes criterios: - Validez. Los datos conseguidos deben ser mediciones correctas del indicador. La validez de los datos puede verse afectada por varios factores, siendo los más importantes los errores de medición, las muestras no representativas o simples errores de transcripción. - Fiabilidad. La fiabilidad de los datos se refiere a la estabilidad o consistencia en el proceso de recolección de la información. Asegurarse de que los datos sean fiables requieren, no sólo que el indicador sea objetiva y claramente definido, sino también que el proceso de recopilación de los datos sea consistente de período en período (un método consistente de muestro, los mismos instrumentos y procedimientos de medición, etc.) - Temporalidad. La temporalidad tiene dos elementos: la frecuencia y la actualidad. Frecuencia significa que la información empleada debe estar disponible de manera regular para informar las decisiones de los administradores del proyecto. Actualidad significa que los datos deben ser nuevos y vigentes para que sean útiles en el momento de decidir. Si la información sobre los medios de verificación es rica y amplia puede ser útil desarrollar una tabla más compleja que la que se incluye en anexo, identificando la frecuencia de recopilación de información, el formato de la información y el método de archivo, y el responsable de asegurar que el trabajo sea realizado (véase el recuadro 5.) Asignar responsabilidades para la recopilación de información a individuos o entidades asegura que la información sea actualizada regularmente. Esta tabla debería formar parte del plan de monitoreo del proyecto (y no necesariamente del documento de proyecto.) La definición de los medios de verificación es básica en la gestión del proyecto y tiene que ser realizada durante el diseño o como la primera actividad en la ejecución. Recuadro 5. Tabla de indicadores y medios de verificación OBJETIVO INMEDIATO 1: INDICADOR MEDIO DE VERIFICACIÓN FRECUENCIA FORMATO Y MEDIO DE ARCHIVO RESPONSABILIDAD FRECUENCIA FORMATO Y MEDIO DE ARCHIVO RESPONSABILIDAD OBJETIVO INMEDIATO 2: INDICADOR MEDIO DE VERIFICACIÓN 9 Guías de DED 1 Indicadores de logro 1.5. Indicadores y metas En ocasiones es difícil identificar las metas o los valores que el indicador debe medir en cada etapa del proyecto en el momento de la formulación y sin un estudio completo de línea de base. Por lo tanto, los indicadores deben ser considerados como señales neutras, mientras que las metas representan los valores que deben ser alcanzados en distintos momentos. La última meta de cada indicador debe reflejar la situación esperada al momento de finalización del proyecto, mientras que las metas intermedias reflejarán los cambios en la situación durante la ejecución. Siempre que sea posible, las metas últimas deben estar integradas en el enunciado de los objetivos inmediatos. Idealmente, las metas serán elaboradas durante el diseño del proyecto, una vez que la estrategia y la definición de los objetivos inmediatos las sugieran. La información de base para los indicadores será proporcionada por el análisis de situación para identificar qué es lo que se desea cambiar (el valor al inicio del proyecto), mientras que la estrategia identificará el punto de llegada deseable (particularmente, la meta última.) Si la información de base no está disponible en el momento de la formulación, una de las primeras actividades del proyecto será el establecimiento de una línea de base para los indicadores que permita revisar la meta final y fijar metas intermedias. Al reflejar la “capacidad” del proyecto en términos de recursos y probabilidad de alcanzar a los beneficiarios, la fijación de metas o valores intermedios para los indicadores puede ayudar a gestionar los recursos para generar los productos esperados, acelerando la ejecución de ciertas actividades o demorando otras, maximizando así el empleo de recursos. Las metas intermedias serán más fácilmente identificables en el caso de indicadores cuantitativos. Una vez que son identificadas, las metas pasan a formar parte del plan de monitoreo. Recuadro 6: Matriz de indicadores y metas OBJETIVO INMEDIATO 1: Periodo 1 INDICADOR Línea de base Planif.. Alcanzado TARGET Periodo 2… etc. Planif.. Alcanzado Final proyecto Planif.. Alcanzado Notas OBJETIVO INMEDIATO 2: Periodo 1 INDICADOR Línea de base Planif.. Alcanzado TARGET Periodo 2… etc. Planif.. Alcanzado Final proyecto Planif.. Alcanzado Notas Nota: en la fase de diseño, sólo es preciso incluir los datos planificador. La matriz incluye una columna para reflejar información sobre lo que se ha alcanzado, con el objetivo de que pueda ser utilizadas durante el seguimiento. En el recuadro 6 se presenta un ejemplo de matriz útil para la presentación de indicadores y metas. Es especialmente importante fijar metas con respecto al número de beneficiarios. Una de las metas de IPEC como programa global es beneficiar a un determinado número de niños y niñas a través de las intervenciones que promueve. Cada PDD, PP, proyecto o PA debe identificar sus beneficiarios, fijar el número que se quiere alcanzar y establecer los indicadores de logro necesarios.3 Los beneficiarios directos son los niños y niñas alcanzados por las medidas de prevención y aquellos retirados del trabajo a los que se proporciona asistencia social. Los beneficiarios indirectos son los niños y niñas alcanzados indirectamente a través del fortalecimiento institucional, la sensibilización y la movilización social. Las metas para beneficiarios indirectos se fijan estimando el número de 3 Actualmente existe una guía para la identificación de beneficiarios en preparación. 10 Guías de DED 1 Indicadores de logro menores que potencialmente serán beneficiados por la mayor capacidad de las instituciones fortalecidas, o gracias a la conciencia adquirida por sectores de la población con posterioridad a la sensibilización. 1.6. Un buen indicador es SMART En esta sección se presentan algunos criterios —conocidos por las siglas en inglés SMART, inteligente— para determinar si un indicador ha sido diseñado correctamente. Es importante destacar que sólo tiene sentido aplicar los criterios SMART a los indicadores si los objetivos inmediatos son SMART. Es importante fijar objetivos realistas y pertinentes, consensuados con los principales implicados y que pueden ser alcanzados en el momento de la finalización del proyecto. Por lo tanto, un buen indicador será... e pecífico, reflejando los cambios que el proyecto quiere provocar, sin ambigüedad y evitando medir las variaciones que se deben a otras influencias (factores externos.) A menudo esta especificidad se obtiene utilizando varios indicadores, por lo que si uno de ellos cambia siguiendo un patrón diferente al esperado la conclusión lógica será que está siendo afectado por factores externos. Algunos de estos indicadores pueden ser diseñados para monitorear los factores externos; normalmente, son denominados como indicadores de contexto (véase el recuadro 7 para un ejemplo.) Es siempre útil especificar claramente el grupo meta y la localización en el enunciado del indicador (por ejemplo, “tasa de abandono escolar entre los niños / as beneficiados /as en las escuelas existentes en el área cubierta por el proyecto.). ensurable, con la certeza de que información necesaria puede ser obtenida con los medios existentes. No tiene sentido emplear indicadores para los que no habrá datos en la línea de base o para los que la correspondiente información al final del proyecto será imposible de recopilar. cordados o consensuados por parte de todos los implicados. Los participantes esenciales en el proyecto, incluyendo donantes, instituciones asociadas, organizaciones relevantes y grupos de beneficiarios deben compartir la interpretación de las diferentes mediciones posibles del indicador y de los criterios de éxito. Esto es particularmente importante para los indicadores indirectos o proxies. elevantes con respecto al objetivo inmediato con el que están vinculados, para que el esfuerzo de conseguir la información no sea en vano. El coste y tiempo de obtener datos deben ser criterios esenciales a la hora de elegir entre dos indicadores igualmente pertinentes. emporalmente determinados para que un observador externo sepa en qué momento el cambio esperado debe producirse, de acuerdo con las metas fijadas. Hay otras características que definen a un buen indicador. Una de ellas, ya mencionada, es que todos los indicadores deben ser verificables. Otra es que deben ser simples: en ocasiones, dos o más de dos indicadores son incluidos en el mismo enunciado (por ejemplo, “tasa de matrícula y de abandono en educación formal”); en otros casos, los indicadores necesitan la definición de otros indicadores para ser verificables (por ejemplo, “condiciones de vida de los niños”, “percepción del trabajo infantil en la opinión pública” o “estado de salud”.) Esto puede afectar la especificidad del indicador y la capacidad del equipo de gestión del proyecto para obtener las mediciones. En estas circunstancias, es conveniente dividir los indicadores complejos en tantas partes como sea posible. 11 Guías de DED 1 Indicadores de logro Existe otra posibilidad: que lo que se haya diseñado sea realmente un índice, o sea una medida única que combina varios indicadores. El Índice de Desarrollo Humano del PNUD, por ejemplo, incluye tres indicadores diferentes —ingreso per cápita, esperanza de vida al nacer y nivel educativo—, reflejando así tres dimensiones esenciales del desarrollo. Los índices son herramientas poderosas, pero su construcción requiere importantes conocimientos técnicos. Como principio general, las intervenciones de IPEC no incluyen índices. Recuadro 7: El uso de indicadores de contexto para monitorear supuestos y reflejar causalidad Un proyecto orientado a la eliminación del trabajo infantil en una comunidad campesina ejecuta actividades de generación de ingresos para familias de ex niños trabajadores, suponiendo que los recursos generados son necesarios para compensar el dinero “perdido” al evitar que los menores trabajen. La teoría detrás del proyecto es la siguiente: se generan alternativas productivas en la comunidad Las familias aprovechan las nuevas oportunidades El ingreso de las familias beneficiadas por el proyecto se eleva (objetivo inmediato) los menores permanecen en la escuela y fuera del mercado laboral. Un indicador posible para el objetivo inmediato sería el “ingreso familiar”; un incremento de este indicador demostraría el éxito del proyecto. Pero el ingreso familiar puede varias debido a muchas razones además de las actividades ejecutadas por el proyecto (existencia de otros programas de generación de ingresos, subsidios otorgados a familias rurales, aumento en el precio de los cultivos producidos en la zona, etc.) Estos son factores externos —incluidos en el proyecto como supuestos— que están fuera del control del equipo de gestión. Para evitar el problema, en el diseño se establecen una serie de indicadores de contexto para los supuestos definidos: “existencia de nuevas fuentes de ingresos adicionales para familias pobres de la región” y “precios pagados a los agricultores por sus productos.” Al monitorear la evolución de estas variables, será más fácil establecer la relación de causalidad o atribución entre los cambios percibidos en el ingreso y las actividades del proyecto, suponiendo que el indicador del objetivo varía y los indicadores de contexto permanecen estables. Aunque por lo general el uso de indicadores de contexto está implícito en las actividades de seguimiento, es recomendable incluirlos en el plan de monitoreo para asegurarse de que un observador externo será capaz de llegar a la misma conclusión que los administradores del proyecto. Es importante recordar que de todas maneras es imposible tener todas las variables bajo control, por lo que una interpretación informada de los datos será siempre necesaria. 12 Guías de DED 1 Indicadores de logro 2. APLICACIÓN PRÁCTICA 2.1. Selección de indicadores La selección de indicadores de logro apropiados y útiles es un proceso relativamente simple, pero requiere reflexión, colaboración y un ejercicio de construcción de consensos. Es recomendable emplear una estrategia participativa en la selección de indicadores para que todos los implicados puedan acordar el alcance de los objetivos inmediatos. De hecho, la colaboración cercana con los principales implicados (aquellos que recogerán la información, los que la utilizarán y los que tienen la capacidad técnicas para comprender las fortalezas y limitaciones de indicadores específicos) y el aprovechamiento de su experiencia ayudará a identificar los indicadores más adecuados para un determinado proyecto. Para seleccionar indicadores, el equipo de diseño puede seguir estos cuatro sencillos pasos: 1. Clarificación de los objetivos. Los buenos indicadores de logro comienzan con buenos enunciados de objetivos, comprensibles y consensuados con los principales implicados. Una cuidadosa consideración de la situación que se desea alcanzar es muy necesaria. Es importante, por lo tanto, revisar la enunciación exacta de los objetivos inmediatos. 2. Clarificación del cambio esperado. ¿Qué cambiará? ¿Una situación, una condición, el nivel de conocimientos, un comportamiento? Hay diferentes tipos de indicador (ver el punto 1.2) para distintos tipos de cambio. En muchos casos es también necesario identificar la unidad de análisis (niños y niñas, familias, comunidades, regionales) en la que el cambio tendrá lugar. 3. Desarrollo de una lista de indicadores posibles. Habitualmente hay varios indicadores posibles para medir el alcance del objetivo inmediato, pero algunos son más adecuados y útiles que otros. Para la selección, es importante no quedarse solamente con los primeros indicadores que vienen a la mente. Una estrategia mejor es construir una lista de indicadores que pueden ser evaluados de acuerdo con criterios especificados. Para crear la lista de indicadores posibles es posible emplear las siguientes fuentes: - Tormenta de ideas con el equipo de formulación - Consultas con expertos en las áreas técnicas respectivas - Experiencia de otras unidades o proyectos en áreas similares - La lista de indicadores posibles incluida en esta Guía. La clave para crear una lista inicial útil de indicadores de logro es que ésta sea inclusiva. Es decir, es preciso contemplar el resultado esperado en todos sus aspectos y desde todas las perspectivas posibles. Debe dejarse espacio suficiente para la creatividad y el libre flujo de ideas. 4. Análisis de los posibles indicadores de acuerdo con una lista de criterios determinados, utilizando las reglas SMART y dando preferencias a los indicadores directos y cuantitativos. El costo y la oportunidad de conseguir la información necesaria, incluyendo los datos para la línea de base, deben formar parte de esas consideraciones. El resultado del proceso debe ser un conjunto óptimo de indicadores que satisfaga la necesidad de información adecuada a un costo razonable. Es importante ser selectivo, dados los costos asociados con los procesos de recolección y análisis de información. Aunque no existe una cantidad correcta de indicadores, parece necesario limitar su número. Pero al mismo tiempo es crucial proporcionar una visión cabal de las complejidades del propio proyecto, incluyendo todos sus 13 Guías de DED 1 Indicadores de logro componentes y propósitos. En otras palabras, hay que alcanzar un equilibrio entre el costo y la necesidad de cubrir todas las dimensiones del proyecto. Es importante evitar superposiciones y duplicación de indicadores que intentan medir el mismo fenómeno. Como se mencionaba más arriba, la selección de indicadores es una parte integral del diseño del proyecto, acompañando la definición de los objetivos inmediatos. La siguiente lista de comprobación puede ser útil para la verificación de la calidad del diseño del proyecto en lo que concierne a los indicadores de logro. Sí—No Sí—No Se han identificado indicadores para todos los objetivos inmediatos R R Todos los indicadores están vinculados a un objetivo inmediato R R Todos los indicadores identificados son SMART R R Todos los indicadores identificados son verificables R R Se ha definido una medio de verificación para cada indicador R R Los indicadores son presentados como medidas neutras R R Ninguno de los indicadores puede ser considerado como un producto R R Ninguno de los indicadores puede ser considerado como una actividad R R La relación entre los indicadores y los objetivos es lo suficientemente directa y clara R R Es posible conseguir la información necesaria para los indicadores a un costo razonable R R Si los indicadores no son específicos, o si las metas y medios de verificación no pueden ser definidas por falta de información pertinente, la sección de indicadores del documento de proyecto debe incluir un párrafo explicando esta situación, como por ejemplo: “Estos indicadores sugeridos serán refinados una vez que el proyecto haya comenzado y que la información se encuentre disponible. La definición de las metas y las medios de verificación será realizada como una de las primeras actividades / durante la reunión inicial de planificación, etc.” 2.2. Revisión de indicadores Una vez incluidos en el documento de proyecto, los indicadores pasan a formar parte del contrato de implementación implícito. Sin embargo, la falta de información de base en el momento del diseño hace que, muy frecuentemente, sea necesario revisar los indicadores cuando los datos se encuentran disponibles. Existe una relativa flexibilidad con respecto a la posible revisión de indicadores, metas y medios de verificación, aunque cada propuesta de cambio debe ser explicada suficientemente (generalmente como anexo a los informes técnicos de progreso), señalando las consecuencias sobre la ejecución y sobre la posibilidad de alcanzar los objetivos inmediatos del programa. Esto es válido para todos los niveles de gestión —desde las agencias implementadoras en el caso de Programas de acción hasta IPEC en el caso de PDD, PP o proyectos. En síntesis, la revisión puede significar: - Un cambio en los indicadores producto de la existencia de información nueva acerca de la manera en que es posible verificar el cumplimiento de los objetivos inmediatos. Es de suma importancia explicar qué significa el cambio en términos de la situación de llegada prevista. 14 Guías de DED 1 Indicadores de logro Es también esencial analizar si la información necesaria para el indicador se encuentra disponible, incluyendo información de base. - Un cambio en las metas. Una modificación de las metas finales implica una alteración de los objetivos inmediatos. La revisión de las metas intermedias, en cambio, afecta el proceso de implementación. En cualquier caso, siempre es necesario justificar suficientemente las razones de los cambios. - Un cambio en los medios de verificación. Esto puede producirse por la dificultad en conseguir los datos o porque nuevas fuentes de información o una metodología más precisa aumenta la fiabilidad. Es muy importante, nuevamente, asegurarse de que toda la información necesaria es accesible. 2.3. Los indicadores como herramienta para el monitoreo Durante la implementación, los indicadores pueden ser utilizados como una herramienta de monitoreo del proyecto.4 Esta actividad controla el empleo de recursos, la realización de las actividades y de los productos. Dado que la misión de un proyecto es alcanzar una situación mejorada, el monitoreo del proyecto debe también observar el progreso hacia el alcance de los objetivos inmediatos. El monitoreo de la evolución de los indicadores puede servir, en la práctica, como un sistema de alerta temprana. La identificación de metas intermedias, tal como se afirmaba en la sección 1.5, puede ser útil con este fin. Los indicadores pasan a formar parte, entonces, de un plan de monitoreo.5 Un plan de monitoreo debe incluir, por lo menos, las siguientes herramientas: - Un calendario de actividades, incluyendo fechas en las que los productos deben estar listos (plan de trabajo del proyecto.) - Una lista de factores clave, externos e internos al proyecto, que pueden afectar la implementación (supuestos); aquí es posible incluir indicadores de contexto. - Una tabla con indicadores y medios de verificación como la que se incluye en el anexo o en el recuadro 5. - Una tabla con indicadores y metas como la que se incluye en el recuadro 6. El análisis de la evolución de los indicadores es también parte de los requisitos de los informes de progreso en las actividades financiadas por IPEC. Un ejemplo se incluye en el recuadro 8. En el caso de los informes de avance de los Programas de Acción, las consideraciones sobre los indicadores deben ser incluidas en la sección “Progreso hacia la consecución de los objetivos.” En términos generales, las matrices que incluyen indicadores pueden ser presentadas como anexos en los Informes de Progreso de Programas-País o en los Informes Anuales de Progreso de Proyectos. 4 El monitoreo de proyecto (o de programa) se refiere a la supervisión continua y el seguimiento de la implementación, realizado como parte de los procesos de gestión. Es importante no confundir este concepto con el de “monitoreo en el lugar de trabajo”, o “monitoreo de trabajo infantil”, o cualquier otra actividad que pretenda verificar la existencia de niños y niñas trabajando en áreas o empresas específicas. Se recomienda emplear esta terminología de manera consistente. 5 En estos momentos se trabaja en la preparación de un documento de guías para la preparación de planes de monitoreo. 15 Guías de DED 1 Indicadores de logro 2.4. Los indicadores para la evaluación La evaluación comienza con una valoración del alcance de los objetivos inmediatos (éxito del proyecto), observando la evolución y los valores alcanzados por los indicadores de logro. Posteriormente explica las razones del éxito o el fracaso. Los indicadores son, por lo tanto, una pieza fundamental de cualquier evaluación. La metodología de la OIT para la evaluación de programas de cooperación técnica define varios propósitos (véase el recuadro 9.) La utilidad y calidad de los indicadores identificados en la fase de formulación serán valoradas como parte de la validez del diseño. Los evaluadores determinarán entonces si la relación entre indicadores y objetivos es pertinente y específica y si han sido empleados durante la gestión del proyecto. Los indicadores serán también esenciales para evaluar la eficacia, ya que este elemento del diseño (incluyendo las metas) determina los criterios de éxito o logro. El equipo de evaluación podrá preparar indicadores específicos adicionales, particularmente en estudios ex post o en evaluaciones de impacto. Generalmente, este proceso será realizado en colaboración y con la participación activa de los gestores del proyecto. Algunos de estos indicadores pueden ser: Indicadores de eficiencia, vinculando costos o recursos consumidos con “unidades” de producto (por ejemplo, costo por persona capacitada, número de horas por persona capacitada.) Recuadro 8: Tabla incluida en informes de progreso para el Departamento de Trabajo de EEUU (con ejemplo) Objetivo de desarrollo (Contribución a la eliminación del trabajo infantil mediante el fortalecimiento institucional) Objetivo inmediato 1: Indicador (es): Metas: Al finalizar el proyecto, la capacidad del gobierno para enfrentar el problema del trabajo infantil habrá sido fortalecida a través del desarrollo de planes nacionales y la revisión de la legislación de acuerdo con estándares internacionales. Iniciativas del gobierno en el marco del plan nacional de acción 3 iniciativas significativas comenzadas antes de la finalización del proyecto Objetivo inmediato 2: Indicador (es): Metas: Progreso hacia el alcance de la meta Progreso hacia el alcance de la meta Etc. Indicadores de efectividad, vinculando costos o recursos consumidos con “unidades” de objetivos (por ejemplo, costo por niño / a retirado / a del trabajo.) Indicadores de impacto, lógicamente relacionados con el objetivo de desarrollo del proyecto, con información obtenida a través del SIMPOC o de evaluaciones rápidas (por ejemplo, porcentaje de menores en la fuerza de trabajo del área Z.) Indicadores de sostenibilidad, útiles para determinar la probabilidad de duración de los beneficios generados por el programa (por ejemplo, recursos destinados a programas de lucha contra el trabajo infantil en presupuestos de determinadas instituciones.) 16 Guías de DED 1 Indicadores de logro Estos son sólo algunos ejemplos de indicadores que pueden ser empleados en una evaluación, sea realizada por consultores externos o por personal del programa (auto-evaluación.) Una gestión eficiente de proyectos será capaz de proveer toda la información necesaria a tiempo para que la evaluación pueda ser realizadas sin problemas. Recuadro 9: Propósitos de evaluación en la metodología OIT 17 Guías de DED 1 Indicadores de logro 3. INDICADORES FRECUENTEMENTE EMPLEADOS EN IPEC (EJEMPLOS) Las siguientes tablas incluyen 73 ejemplos de posibles indicadores genéricos para diferentes categorías de objetivos. La mayoría de ellos emerge de la experiencia acumulada por los programas y proyectos de IPEC durante los últimos años. Estos indicadores no deben ser adoptados mecánicamente para nuevas intervenciones: en la mayoría de los casos, un importante esfuerzo de adaptación será necesario. La división de los indicadores por género y edad (siempre que sea posible) es deseable, ya que esto puede ayudar a detectar sesgos indeseables. También es importante hacer que el indicador sea tan específico como sea posible, añadiendo el marco temporal (cuándo), la localización específica (dónde) y / o el grupo meta (para quién.) Las tablas también proporcionan ideas sobre medios de verificación. En este caso, “el sistema de monitoreo del proyecto” se refiere al seguimiento de las actividades por parte de sus gestores (en documentos de proyecto es conveniente describir los medios de verificación con más detalle.) El monitoreo de trabajo infantil en los lugares de trabajo o en la comunidad son incluidos en la rúbrica “sistemas de inspección nacionales o locales”. El “sistema de localización” (tracking system) es una herramienta específica de monitoreo que proporciona un seguimiento personalizado de cada niño o niña alcanzado por el proyecto. La columna final incluye algunos comentarios sobre el uso y las limitaciones de cada indicador. La tabla está organizada de acuerdo con diferentes categorías de objetivos empleados en intervenciones de IPEC; ya sea programas de acción (PA), programas país (PP), programas de duración determinada (PDD) o proyectos. Las categorías y sub-categorías (entre paréntesis) empleadas pueden cambiar o ser más específicas en futuras versiones de esta guía. Las que se incluyen en este documento son las siguientes: ¬ Retirada de menores del trabajo y prevención ¬ Provisión de medidas de protección social (general, educación y entrenamiento, salud, seguridad en el trabajo, nutrición, recreación, asesoramiento, generación de ingresos)I ¬ Desarrollo institucional y generación de capacidades (general, fortalecimiento de instituciones gubernamentales, fortalecimiento de agentes sociales y ONG, fortalecimiento del marco legislativo y la aplicación de las leyes, sistema de monitoreo y verificación) ¬ Sensibilización y movilización social ¬ Producción y diseminación de información sobre trabajo infantil La mayoría de los indicadores incluidos en la tabla son cuantitativos. Muchos de ellos pueden ser transformados en indicadores cualitativos. Esta operación es muchas veces necesaria, especialmente para objetivos vinculados con el desarrollo institucional o la sensibilización. Es importante recordar, sin embargo, que incluso cuando los menores son alcanzados de manera indirecta, los proyectos y programas deben reportar el número de beneficiarios (indirectos.) 18 Guías de DED 1 Indicadores de logro La tabla será revisada y actualizada de manera continua para asegurar que la experiencia acumulada por IPEC se recopila y se transmite dentro y fuera de la organización. La inclusión de nuevas categorías de objetivos, como “trabajo en redes” o “integración / replicación” está prevista. La revisión de la metodología de evaluación rápida y otros ejercicios de obtención de información proveerá también insumos para futuras versiones de la tabla. Es importante, por lo tanto, que todo aquel que utilice esta guía asuma una actitud activa para proveer al equipo de evaluación de IPEC las informaciones y sugerencias provenientes de su experiencia. 19 Guías de DED 1 Indicadores de logro Categorías de objetivos Retirada de menores del trabajo y prevención En la mayoría de las intervenciones de IPEC, en todos los niveles, es posible encontrar objetivos inmediatos vinculados con la retirada de niños y niñas del trabajo (o la prevención), ya que esta es la razón de ser del programa. Muchos de los donantes de IPEC deben informar regularmente a los mecanismos nacionales de control sobre el número de menores que se benefician de su contribución. Es muy importante, por lo tanto, usar indicadores que pueden ser agregados de un nivel al siguiente (de un programa de acción a un programa país, y de los programas país a IPEC como un todo.) Ejemplos de indicadores ¬ ¬ ¬ ¬ ¬ Medios de verificación posibles Número de menores trabajadores retirados del trabajo (en el sector o el área) ¬ Sistemas de inspección nacionales o locales ¬ Sistema de monitoreo del proyecto Número de menores trabajadores retirados del trabajo (en el sector o el área) y rehabilitados / beneficiados con servicios de protección social / integrados en la educación formal o no formal ¬ Sistema de monitoreo del proyecto Porcentaje de menores trabajadores el la fuerza de trabajo (del sector o área) ¬ Sistemas de inspección nacionales o locales ¬ Sistema de monitoreo del proyecto Número de menores trabajando en condiciones peligrosas (en el sector o el área) retirados del trabajo (y rehabilitados / beneficiados con medidas de protección social) ¬ Sistemas de inspección nacionales o locales ¬ Sistema de monitoreo del proyecto Porcentaje de menores trabajando en condiciones peligrosas sobre el total de la fuerza de trabajo (en el sector o área) ¬ Sistemas de inspección nacionales o locales ¬ Sistema de monitoreo del proyecto Comentarios Necesario in programas de duración determinada, programas país y proyectos. Útil también para PA con un componente de acción directa. Indicador para intervenciones que no sólo promueven el retiro de menores del trabajo sino que proporcionan educación, salud o recreación a los niños y niños. Esto se aplica a prácticamente todos los programas de IPEC. Nótese que el indicador incluye a menores retirados y beneficiados con servicios, y no a aquellos que sólo cumplen una de estas condiciones. Puede complementar los indicadores previos en PDD, PP o proyectos localizados en un sector o área específica. Este indicador es generalmente más útil para intervenciones de “nivel superior.” Puede ser una alternativa para los primeros indicadores en PDD, PP o proyectos sobre las peores formas de trabajo infantil en sectores o áreas específicos. Puede también ser empleado en PA con un componente de acción directa. Alternativa al tercer indicador (más arriba) en PDD, PP o proyectos sobre las peores formas de trabajo infantil en sectores o áreas específicos 20 Guías de DED 1 Indicadores de logro Categorías de objetivos Retirada de menores del trabajo y prevención (cont.) Ejemplos de indicadores ¬ ¬ Medios de verificación posibles Número de menores cuyas condiciones de trabajo han mejorado (duración de jornada, tipo de trabajo, etc.) ¬ Sistemas de inspección nacionales o locales ¬ Sistema de monitoreo del proyecto Número de menores en riesgo (según línea de base) participando en actividades del proyecto… ¬ Sistema de monitoreo del proyecto ¬ Sistema de localización establecido por el proyecto …que no han comenzado a trabajar …que no han sido víctimas de tráfico Comentarios Este indicador es útil para PA o proyectos que pretenden mejorar las condiciones de trabajo para adolescentes, como una medida de transición hacia la eliminación del trabajo infantil. Esta cuestión debe ser explicada en el capítulo de estrategia del documento de proyecto. El indicador debe ser tan específico como sea posible, explicando qué se entiende por mejora de las condiciones de trabajo. Indicador de prevención. Necesario en la mayoría de los programas de duración determinada, programas país y proyectos. Útil también para PA con un componente de acción directa. Este indicador puede ser utilizado para hermanos menores de (ex) niños trabajadores. ¬ Número de menores en riesgo (según línea de base) que no participan en las actividades del proyecto y que han comenzado a trabajar ¬ Sistema de monitoreo del proyecto (expandido) Este indicador puede complementar el anterior para neutralizar factores externos. Requiere un esfuerzo de monitoreo adicional. ¬ Porcentaje de familias participantes que se abstienen de... ¬ Sistema de monitoreo del proyecto Otro indicador de prevención. Útil si algunas de las actividades se dirigen a familias (generación de ingresos o sensibilización, por ejemplo.) ¬ Sistema de monitoreo del proyecto (expandido) Este indicador puede complementar los anteriores para neutralizar factores externos. Requiere un esfuerzo adicional de monitoreo. … enviar sus hijos / as a trabajar … traficar con sus hijos / as ¬ Porcentaje de familias no participantes que envían sus hijos / as a trabajar 21 Guías de DED 1 Indicadores de logro Categorías de objetivos Provisión de medidas de protección social Ejemplos de indicadores Medios de verificación posibles ¬ Porcentaje de empresas “libres de trabajo infantil” (en sector / área) ¬ Sistemas de inspección nacionales o locales Este indicador refleja el otro lado de la ecuación: la demanda de trabajo infantil. Puede ser empleado en distintos tipos de intervención. Puede ser también un indicador de la mayor capacidad de los sistemas de inspección o verificación (ver más abajo.) ¬ Número de menores beneficiados con medidas de protección social ¬ Sistema de monitoreo del proyecto Este indicador será construido, normalmente, sumando el número de menores beneficiarios de distintas medidas de protección (educación, salud, recreación u otros servicios.) Es particularmente útil si varios servicios son ofrecidos al mismo grupo de niños porque evita duplicaciones. ¬ Número de menores en la calle / traficados reunidos con sus familias o ubicados en sistemas de protección ¬ Sistema de monitoreo del proyecto ¬ Sistema de localización Indicador específico para programas (de cualquier nivel) que se dirijan a menores traficados o de la calle. Número de niños matriculados en educación formal por causa del proyecto ¬ Registros escolares ¬ Sistema de monitoreo del proyecto General IPEC promueve el establecimiento de diversos esquemas para garantizar la asistencia social a los niños y niñas, cubriendo varios aspectos (educación, salud, recreación, ingresos, etc.) Comentarios También es importante informar sobre el número total de niños y niñas que recibe este tipo de apoyo. Provisión de medidas de protección social Educación y entrenamiento ¬ Indicador que refleja la cobertura del proyecto. Muy útil para PA o proyectos de educación. En general, debe ser comparado con el grupo meta (en este caso, podría ser reformulado como “porcentaje del grupo meta matriculado en educación formal gracias al apoyo del proyecto.” 22 Guías de DED 1 Indicadores de logro Categorías de objetivos Ejemplos de indicadores ¬ ¬ Provisión de medidas de protección social ¬ ¬ Registros de cursos de educación no formal y listados de participación ¬ Sistema de monitoreo del proyecto Número de niños / as que reciben educación complementaria a través del proyecto ¬ Registros y listas de participantes de cursos ¬ Sistema de monitoreo del proyecto Tasas de alfabetización (en comunidad o grupo meta específico, etc.) ¬ Estadísticas producidas por autoridades nacionales o locales ¬ Sistema de monitoreo del proyecto (requiere un esfuerzo adicional de recolección de datos) Número de menores beneficiados por el proyecto capaces de leer, escribir y realizar tareas de aritmética básica ¬ Sistema de localización ¬ Registros escolares o de institución de educación no formal Tasas de abandono (en escuelas, comunidades, grupos meta, etc.) ¬ Registros escolares ¬ Consejo escolar local Porcentaje de menores beneficiados que completan el ciclo educativo ¬ Registros de escuelas ¬ Sistema de localización Porcentaje de beneficiarios que, de acuerdo con opiniones de sus maestros, han mejorado su rendimiento escolar ¬ Sistema de localización ¬ Sistema de monitoreo del proyecto (con opiniones de maestros) Número de niños matriculados en cursos de educación no formal / actividades promovidas por el proyecto Educación y entrenamiento (cont.) ¬ ¬ ¬ ¬ Medios de verificación posibles Comentarios Igual que el anterior. Otro indicador de cobertura. Muy útil para PA. En general, debe ser comparado con el grupo meta, en cuyo caso puede ser reformulado como el ejemplo anterior. Este indicador puede ser útil si existe buena información de base. La meta debería aproximarse al 100% de los niños y niñas. Este indicador es útil para objetivos de nivel superior (el proyecto intentaría mejorar la calidad de la enseñanza y no sólo matricular a los menores en la escuela.) Indicador que refleja los esfuerzos del proyecto para crear una escuela más adecuada a los grupos meta de IPEC. Este indicador permite valorar los efectos del proyecto en el desempeño educativo de los beneficiarios. Otro indicador de desempeño escolar, basado en opiniones de maestros. Podría ser reformulado para incluir las calificaciones conseguidas por los niños y niñas. 23 Guías de DED 1 Indicadores de logro Categorías de objetivos Ejemplos de indicadores ¬ El currículo de educación formal / no formal (en sector, área, país) se adapta mejor a las necesidades de los-(ex) menores trabajadores Medios de verificación posibles ¬ Documentos oficiales de autoridades educativas, incluyendo el currículo Comentarios Este indicador puede ser empleado en PP o proyectos de educación para reflejar la mejora en la educación para grupos meta de IPEC. Sólo tiene sentido si el currículo no es un producto del proyecto, sino un efecto de los esfuerzos de mejora del sistema. En muchos casos, el cambio de aplicación de un nuevo currículo lleva más tiempo que un proyecto convencional. En estas circunstancias el indicador no resulta útil, y será necesario uno menos ambicioso. El indicador también sirve para objetivos de desarrollo institucional o sensibilización. Provisión de medidas de protección social Salud, seguridad en el trabajo, nutrición, recreación, asesoramiento ¬ Número de niños / as que reciben servicios médicos / chequeos médicos periódicos / chequeos dentales / servicios de nutrición / asesoramiento, etc. a través del proyecto ¬ Registro del servicio médico local ¬ Sistema de monitoreo del proyecto ¬ Número de niños / as que participan en actividades recreativas o culturales establecidas por el proyecto ¬ Sistema de monitoreo del proyecto Igual que el anterior. ¬ Incidencia de [enfermedad o grupo de enfermedades específicas] en niños /as beneficiarios del proyecto ¬ Registro del servicio médico local ¬ Sistema de monitoreo del proyecto Este indicador debe ser tan preciso como sea posible. Una buena línea de base es esencial. ¬ Sistema de localización ¬ Registro del servicio médico local ¬ Sistema de monitoreo del proyecto ¬ Sistema de localización ¬ Incidencia de enfermedades vinculadas con el trabajo en el grupo meta Indicador que refleja la cobertura de la asistencia proporcionada. Es fácil de monitorear, aunque refleja más el esfuerzo del proyecto que sus resultados (por lo que debe ser considerado como un proxy.) Una variación del indicador anterior, especialmente útil para trabajo infantil. Puede ser reformulada como “número de niños /as que sufren enfermedades vinculadas con su trabajo.” 24 Guías de DED 1 Indicadores de logro Categorías de objetivos Provisión de medidas de protección social Ejemplos de indicadores Generación de ingresos (cont.) Comentarios ¬ Número de accidentes laborales sufridos por niños / as del grupo meta (en sector / área) ¬ Registro del servicio médico local Otra variación del indicador anterior, referido a las condiciones laborales y la seguridad en el trabajo. ¬ Número de familias que se benefician de micro-créditos / actividades de generación de ingresos (individualmente o a través de esquemas cooperativos) ¬ Lista de clientes del servicio financiero ¬ Sistema de monitoreo del proyecto Indicador útil en todos los niveles, especialmente para PA. Debería ser considerado como un proxy porque no provee información sobre el efecto de la participación en el ingreso familiar. ¬ Sistema de localización Generación de ingresos Provisión de medidas de protección social Medios de verificación posibles ¬ Número de padres / adolescentes que reciben entrenamiento específico para conseguir empleo o mejorar el ingreso familiar (especificar tipo de entrenamiento si es posible) ¬ Listas de participación en sesiones de entrenamiento El entrenamiento es una estrategia habitual de generación de ingresos, por lo que este indicador se encuentra frecuentemente. En realidad se trata de un proxy del objetivo de mejora de ingresos familiares. ¬ Número de grupos de crédito / ahorro formados en la comunidad ¬ Sistema de monitoreo del proyecto Este indicador es útil en todos los niveles, especialmente para PA. Puede incluir un elemento cualitativo sobre el estado de cada grupo en términos de cobertura y situación financiera y funcional, por ejemplo. ¬ Ingreso familiar de grupo meta ¬ Sistema de monitoreo del proyecto ¬ Sistema de localización De mayor nivel que indicadores anteriores. Medición directa de los efectos del programa en los ingresos de las familias. Puede ser difícil conseguir la información necesaria. Si el grupo meta del proyecto es numeroso, es conveniente utilizar muestreo al azar. ¬ Sistema de monitoreo del proyecto ¬ Cartera de clientes del fondo rotatorio ¬ Sistema de monitoreo del proyecto ¬ Sistema de localización ¬ ¬ Número de micro-empresas iniciadas como consecuencia del proyecto Porcentaje de familias que toman crédito y retiran todos sus hijos del trabajo Este indicador puede ser más interesante si se añade una valoración cualitativa de las empresas creadas, para analizar su sostenibilidad. Este indicador vincula a los beneficiarios del sistema de créditos con el objetivo superior de eliminación del trabajo infantil. 25 Guías de DED 1 Indicadores de logro Categorías de objetivos Desarrollo institucional y generación de capacidades General La mayoría de las intervenciones de IPEC, en todos los niveles, incluyen un componente de fortalecimiento institucional o desarrollo de capacidades para garantizar la sostenibilidad. Las instituciones y personas son destinatarios directos de los recursos, que indirectamente benefician a niños y familias. Desarrollo institucional y generación de capacidades Ejemplos de indicadores ¬ Medios de verificación posibles Porcentaje de personas entrenadas en posición de utilizar los conocimientos adquiridos ¬ Estudios de seguimiento de los participantes ¬ Encuestas institucionales ¬ Frecuencia de las reuniones del Comité Nacional ¬ Actas de reuniones del Comité Nacional Este indicador puede ser enriquecido añadiendo consideraciones cualitativas sobre las decisiones tomadas en las reuniones, la presencia de instituciones relevantes, etc. ¬ Número de propuestas revisadas y aprobadas por el Comité Nacional ¬ Actas de reuniones del Comité Nacional Igual que el anterior. ¬ El trabajo infantil es incluido en las agendas políticas de instituciones relevantes (especificar) ¬ Declaraciones, planes u otros documentos oficiales de las instituciones involucradas Este indicador puede ser útil en proyectos o PP (en el caso de instituciones de ámbito nacional) o en PA (para instituciones locales.) La integración del trabajo infantil es considerad, en este caso, como una consecuencia de los esfuerzos de generación de capacidades. El mismo indicador es incluido en la sección de objetivos de sensibilización, señalando que la integración puede también ser un efecto de la conciencia adquirida. ¬ Número de iniciativas públicas para combatir el trabajo infantil influenciadas por el proyecto (especificar instituciones) ¬ Documentos oficiales ¬ Sistema de monitoreo del proyecto Este indicador requiere una definición clara del concepto “iniciativa”, pero es útil como un reflejo de la capacidad de actuar. No debe incluir actividades financiadas p promovidas por IPEC dentro del proyecto o PA. Fortalecimiento de organizaciones gubernamentales En esta sección, y en las siguientes, es muy importante recordar que por causa de la generación de capacidades las instituciones deben ser capaces de realizar tareas directamente relacionadas con la eliminación del trabajo infantil. Los objetivos e indicadores idealmente reflejarán lo que las instituciones serán capaces de hacer después de la intervención de IPEC. Algunos de los ejemplos sugeridos (por ejemplo, número de personas formadas) son indicadores de desempeño y sólo pueden servir como proxies Comentarios Es importante verificar si las personas formadas permanecen en posiciones en las que pueden emplear los conocimientos adquiridos en la formación. 26 Guías de DED 1 Indicadores de logro Categorías de objetivos Ejemplos de indicadores ¬ Desarrollo institucional y generación de capacidades Medios de verificación posibles Comentarios Porcentaje de funcionarios formados capaces de emplear los conocimientos adquiridos de manera sistemática ¬ Estudios de seguimiento de los participantes ¬ Organigramas y declaraciones de misión de las instituciones ¬ Número de funcionarios formados en instituciones clave (especificar si es posible) ¬ Listas de participación en cursos de entrenamiento Indicador proxy útil para determinar la capacidad de instituciones para enfrentar el trabajo infantil. Puede reemplazase los funcionarios por las instituciones. ¬ Número de funcionarios clave de instituciones relevantes formados en temas relacionados con el trabajo infantil (especificar) ¬ Listas de participación en cursos de entrenamiento ¬ Sistema de monitoreo del proyecto Este indicador complementa al anterior especificando los contenidos de la formación. Se puede convertir en un indicador cualitativo si se incluyen consideraciones sobre la influencia de la formación sobre las actitudes de las personas entrenadas. ¬ El trabajo infantil es incluido en planes de acción y programas de agentes sociales relevantes (sindicatos, empleadores) y ONG (especificar) ¬ Declaraciones, planes de acción y programas de agentes sociales y ONG Similar al primer indicador de la sección precedente. Puede ser empleado si la integración es un efecto de los esfuerzos de construcción de capacidades. En la sección de sensibilización se establece otra posibilidad de uso para este indicador. ¬ Número de actividades específicas sobre trabajo infantil organizadas por los agentes sociales (especificar organizaciones) ¬ Informes anuales u otros documentos de agentes sociales Este indicador no debe incluir las actividades financiadas o promovidas por IPEC como parte del proyecto o PA. Un análisis cualitativo de cada actividad puede ser necesario para asegurarse de que es una consecuencia de la mayor capacidad creada por la intervención. ¬ Número de personas formadas en agentes sociales relevantes y ONG (especificar institución y tipo de formación, si es posible) ¬ Listas de participación en cursos de entrenamiento Proxy útil para determinar la capacidad de los agentes sociales y las ONG para combatir el trabajo infantil. Pueden reemplazase las personas por instituciones. Fortalecimiento de agentes sociales y ONG Indicador de desarrollo institucional muy útil, aunque puede ser difícil conseguir la información de seguimiento de las personas formadas. 27 Guías de DED 1 Indicadores de logro Categorías de objetivos Desarrollo institucional y generación de capacidades Fortalecimiento del marco legislativo y aplicación de las leyes Desarrollo institucional y generación de capacidades Fortalecimiento del marco legislativo y aplicación de las leyes (cont.) Desarrollo institucional y generación de capacidades Sistemas de monitoreo y verificación Ejemplos de indicadores Medios de verificación posibles Comentarios ¬ Porcentaje de personas formadas capaces de utilizar las capacidades adquiridas de manera sistemática. ¬ Organigramas y declaraciones de misión de las organizaciones Indicador de desarrollo institucional muy útil, aunque puede ser difícil conseguir la información de seguimiento de las personas formadas. ¬ Convenios fundamentales sobre trabajo infantil de la OIT ratificados ¬ Registro de ratificaciones de la OIT Este indicador sólo puede ser usado en PDD o PP en países que todavía no hayan ratificado los Convenios 138 y 182, y sólo si la ratificación no es en sí misma un objetivo o producto de la intervención. ¬ Instrumentos necesarios para la ratificación producidos gracias al apoyo de IPEC ¬ Sistema de monitoreo del proyecto La ratificación se encuentra en general fuera del alcance de IPEC, ya que es una responsabilidad de los gobiernos nacionales y es afectada por la política local. Este indicador, menos ambicioso que el anterior, puede ser útil en casos en los que la capacidad de influencia de IPEC sea menor. ¬ Planes nacionales / municipales / locales adoptados gracias al apoyo de IPEC ¬ Documentos oficiales de autoridades locales / municipales / nacionales Sólo puede ser usado si los planes no son productos del proyecto. Este indicador se enriquece con una valoración cualitativa. ¬ Número de nuevos instrumentos legislativos adecuados a los Convenios sobre trabajo infantil adoptados (y / o modificados) en el ámbito nacional / local ¬ Compendio legislativo nacional / local Indicador para medir el impacto sobre la legislación. En muchos casos será importante incluir un componente cualitativo para analizar los cambios realizados. ¬ Número de casos llevados a proceso y atendidos mediante servicios de rehabilitación ¬ Registros policiales Este indicador puede ser relevante para proyectos o programas de fortalecimiento de capacidades de instituciones públicas para asegurar la aplicación de la normativa. ¬ Número de visitas realizadas por inspectores comunitarios / de trabajo para monitorear la incidencia de trabajo infantil ¬ Sistemas de inspección nacionales o locales ¬ Sistema de monitoreo del proyecto Indicador sobre la capacidad de la inspección laboral Su interés es mayor si existe información precisa de línea de base. 28 Guías de DED 1 Indicadores de logro Categorías de objetivos Sensibilización y movilización social Las campañas y la diseminación del conocimiento acumulado sobre trabajo infantil es otro de los componentes principales de las intervenciones de IPEC. Esta es otra manera de beneficiar indirectamente a los grupos meta del programa, sobre todo los menores trabajadores. Es importante considerar que el objetivo de la sensibilización es promover un cambio en los comportamientos. Los indicadores referidos a personas alcanzadas por campañas, por lo tanto, sólo pueden servir como proxies para estos objetivos. Ejemplos de indicadores Medios de verificación posibles Comentarios ¬ Porcentaje de empresas / lugares de trabajo inspeccionados al menos dos veces por año (sobre el total de en el sector / área) ¬ Sistemas de inspección nacionales o locales El indicador puede ser especificado con más detalle (por ejemplo, clasificando a los lugares de trabajo según el número de visitas recibidas.) ¬ Número de grupos comunitarios / de padres formados para monitorear la incidencia de trabajo infantil ¬ Sistema de monitoreo del proyecto Este puede ser un indicador útil para reflejar el impacto de los esfuerzos de creación de capacidad en las comunidades. ¬ Número de zonas / empresas / sectores que son calificador por la inspección de trabajo como “libres de trabajo infantil” ¬ Sistemas de inspección nacionales o locales Indicador relacionado con los esfuerzos para retirar menores del trabajo (véase la primera sección de esta tabla), pero que también puede reflejar la capacidad del sistema de inspección para realizar esta tarea. ¬ Número de productores / exportadores que participan en el programa de monitoreo de trabajo infantil ¬ Sistemas de inspección nacionales o locales Indicador de cobertura del sistema de monitoreo. Es útil comparado con el número total de empresas en el área o región. ¬ Número de inspectores formados en trabajo infantil en ámbito nacional / local ¬ Listas de participación en cursos de entrenamiento Proxy para la capacidad de los sistemas de inspección (nacionales o locales.) ¬ Número de familias / menores / padres alcanzados por las actividades de sensibilización (en una zona específica) ¬ Sistema de monitoreo del proyecto con información de campañas Aunque este indicador puede dar una idea de la cobertura de una campaña, suele ser difícil de medir. Además, sólo puede ser considerado como un proxy porque no proporciona información sobre el efecto de la campaña en las actitudes de la gente. ¬ Número de familias / menores / padres que participan en las actividades de sensibilización (en una zona específica) ¬ Sistema de monitoreo del proyecto con información de campañas Otro proxy para los efectos de la sensibilización, más fácil de medir que el anterior. 29 Guías de DED 1 Indicadores de logro Categorías de objetivos Sensibilización y movilización social (cont.) Ejemplos de indicadores Medios de verificación posibles Comentarios ¬ Porcentaje de padres / familias en la comunidad con una percepción positiva acerca de la necesidad de eliminar el trabajo infantil ¬ Encuestas de opinión Este indicador es mucho más directo que los anteriores para medir los efectos de las campañas de sensibilización, pero generalmente requiere métodos caros de recolección de información. Sólo puede ser usado donde existe línea de base y la posibilidad de repetir encuestas de opinión. ¬ Número de familias (en área / comunidad específica) que solicitan asistencia para retirar a sus niños / as del trabajo (y matricularlos en la escuela) ¬ Sistema de monitoreo del proyecto Este indicador refleja los efectos del proyecto en las actitudes de las familias hacia el trabajo infantil. ¬ El trabajo infantil es incluido en las agendas políticas de instituciones relevantes (especificar) ¬ Declaraciones, planes u otros documentos oficiales de las instituciones involucradas Este indicador puede ser útil en proyectos o PP (en el caso de instituciones nacionales) o en PA (para instituciones locales.) La integración del trabajo infantil es, en este caso, una consecuencia de los esfuerzos de generación de capacidades. El mismo indicador es incluido en la sección de desarrollo institucional, aunque en aquel caso la integración será un efecto de las capacidades institucionales ampliadas. ¬ El trabajo infantil es incluido en planes de acción y programas de agentes sociales relevantes (sindicatos, empleadores) y ONG (especificar) ¬ Declaraciones, planes de acción y programas de agentes sociales Igual que el anterior. Puede ser empleado si la integración es efecto de la sensibilización. En la sección de desarrollo institucional se establece otra posibilidad de uso. ¬ Presupuesto dedicado a la lucha contra el trabajo infantil e instituciones relevantes (especificar) ¬ Presupuestos anuales de instituciones relevantes En general, el aumento en los presupuestos puede ser un efecto de la concienciación ola movilización social. En otros casos puede ser considerado como un indicador de desarrollo institucional El indicador puede ser usado en PP, PDD o proyectos sectoriales (educación, tráfico, etc.) 30 Guías de DED 1 Indicadores de logro Categorías de objetivos Ejemplos de indicadores ¬ Sensibilización y movilización social (cont.) Una red de organizaciones relevantes (especificar) operativa Medios de verificación posibles Comentarios ¬ Sistema de monitoreo del proyecto ¬ Documentos oficiales de organizaciones de la red La existencia de una red podría indicar el éxito de los esfuerzos de movilización. Este indicador es más útil si incluye un análisis cualitativo de la capacidad de la red (en términos de influencia política, presupuesto, frecuencia de reuniones, etc.) Este indicador puede usarse en PA (redes locales) o PP, PDD o proyectos (redes nacionales o regionales.) ¬ Número de instituciones relevantes que participan en la red ¬ Documentos oficiales producidos por la red / por instituciones clave Complementa el indicador anterior mostrando la cobertura institucional de la red. ¬ Organización de la comunidad en torno de la eliminación del trabajo infantil ¬ Sistema de monitoreo del proyecto Indicador cualitativo sobre los efectos de la movilización en la organización comunitaria. ¬ Número de acciones comunes / concertadas de organizaciones públicas y privadas en los ámbitos local, provincial, nacional y subregional ¬ Documentos de organizaciones clave (especificar) Este indicador debería contabilizar sólo las iniciativas atribuibles a la influencia de IPEC, pero no financiadas o promovidas directamente por el programa. Podría ser positivo añadir un elemento cualitativo. ¬ Número de empleadores que adoptan una política en contra del trabajo infantil (en sector / área) ¬ Sistema de monitoreo del proyecto Indicador cuantitativo que refleja los efectos de la sensibilización en los empleadores. ¬ Número de empleadores que adoptan una política de reducción de riesgos en el proceso de producción (en sector / área) ¬ Sistema de monitoreo del proyecto Igual que el anterior, pero específico para intervenciones en sectores peligrosos. ¬ Número de artículos de prensa relevantes ¬ Principales periódicos y revistas nacionales / locales Indicador muy útil para campañas. Indica el efecto de la sensibilización en la prensa. El indicador puede incluir un elemento cualitativo (análisis del discurso.) Es útil especificar este indicador tanto como sea posible (por ejemplo, incluyendo sólo artículos publicados en periódicos de distribución nacional.) 31 Guías de DED 1 Indicadores de logro Categorías de objetivos Producción, diseminación y uso de materiales sobre trabajo infantil IPEC genera información fiable y actualizada sobre trabajo infantil a través de diversos programas, especialmente SIMPOC. Ejemplos de indicadores Medios de verificación posibles Comentarios ¬ Número de reportajes emitidos en televisión / radio ¬ Principales cadenas nacionales / locales de radio y TV Igual que el anterior, pero para otro tipo de medios Nuevamente, la especificidad es deseable. ¬ Integración de módulos sobre trabajo infantil en encuestas estadísticas nacionales ¬ Oficina de Estadísticas Esto es normalmente un producto u objetivo inmediato, de las intervenciones de IPEC; aunque en ocasiones puede ser un indicador que refleja la disponibilidad de información sobre trabajo infantil en un país determinado. El indicador debe incluir un elemento cualitativo sobre el tipo de integración (frecuencia de recolección de datos, etc.) ¬ Número de instituciones relevantes públicas y privadas que utilizan información sobre trabajo infantil generada por el programa ¬ Documentos oficiales o no oficiales de instituciones clave Indicador sobre el uso de la información. Puede requerir un esfuerzo importante de monitoreo. ¬ Referencias en documentos de proyecto ajenos a IPEC ¬ Número de solicitudes de información de ONG / organizaciones de gobierno / sindicatos / organizaciones de empleadores / periodistas / otros) ¬ Sistema de monitoreo del proyecto Indicador cuantitativo que refleja la demanda de información (hacia IPEC o hacia sus asociados) sobre trabajo infantil. Es un proxy del objetivo “uso de información sobre trabajo infantil” ¬ Uso de información sobre trabajo infantil en publicaciones internacionales y artículos científicos ¬ Publicaciones internaciones e informes específicos Este indicador es mejor que el anterior porque refleja el uso de la información, pero es mucho más difícil de monitorear ya que requiere la revisión de múltiples fuentes. Las preguntas clave para definir indicadores de este tipo de objetivos son ¿para qué se produce la información? ¿Cómo será utilizada? 32 Guías de DED 1 Indicadores de logro REFERENCIAS SELECCIONADAS SOBRE INDICADORES Indicadores de trabajo infantil - BRAHAM, Mark and Matthew Braham (1999): Indicators of child labour. A report to the International Programme on the Elimination of Child Labour of the International Labour Organization, Geneva; mimeo; IPEC-ILO; Ginebra. - HOPKINS, Michael (1999): A synthesis of methodological practice in seven country studies and first steps toward a methodology to assess the measurement and impacts of IPEC country programmes; mimeo; IPEC-ILO; Ginebra (especialmente el capítulo 4: Toward an improved methodology using a set of indicators for M&E). - IPEC-ILO (2001): Methodological guide for the development of national Time Bound Programmes; mimeo; Ginebra (especiallmente los capítulos 2, Situation analysis and indicators, y 5, Monitoring and evaluation). - JENSEN, Robert (2000): Development of indicators on child labour. A report to the International Program on the Elimination of Child Labor at the International Labor Organization; mimeo, IPEC-ILO; Ginebra. Referencias específicas en documentos de la OIT - OIT: Pautas para integrar las cuestiones relacionadas con el género de las personas en el diseño, seguimiento y evaluación de los programas y proyectos de la OIT (especialmente la sección 2). Internet: http://www.ilo.org/public/spanish/bureau/program/eval/guides/gender/index.htm - OIT: Guía para la preparación de un esquema preliminar de proyecto para el financiamiento multibilateral. Internet: http://www.ilo.org/public/spanish/bureau/program/eval/guides/sprout/index.htm - OIT (1998): Design, monitoring and evaluation of technical cooperation projects and programmes: a training manual; Organización Internacional del Trabajo; Tercera Edición; Ginebra. Referencias específicas en formatos de IPEC - Del manual “Programme, Monitoring, Evaluation and Operations Manual for IPEC Field Offices” (en preparación): A guide to action programme design; Work plans. - Informe de Progreso de Programa Nacional 33 Guías de DED 1 - Informe Anual de Progreso de Proyecto - Project document preparation for US-DOL projects and programmes - Progress reporting guidelines for US-funded IPEC projects / programs Indicadores de logro 34 DED Guidelines 1 DRAFT Indicators of achievement ANEXO: Matriz de objetivos e indicadores OBJETIVO DE DESARROLLO OBJETIVOS INMEDIATOS INDICADORES MEDIOS DE VERIFICACIÓN (Si pueden ser determinados en la etapa de diseño) O/1 1 (Componente) O/1 2 (Componente) O/1 3 (Componente) 14.04.2003 35