Evaluación externa del “Programa 3x1 para migrantes 2007” Informe Final ANEXO XI REVISIÓN DE DISEÑO DE LA MATRIZ DE INDICADORES 2008 DEL PROGRAMA 3X1 PARA MIGRANTES (14 PREGUNTAS) 3. ¿El Fin y el Propósito del programa están claramente definidos? Sí. El Fin del programa es “Contribuir al mejoramiento de la calidad de vida de la población en condiciones de pobreza, marginación o rezago social que habita en localidades con alta migración, con la participación de la diáspora mexicana”. El cual refleja la incidencia que puede esperarse de la implementación del programa. Dado que las preferencias de los migrantes organizados determinan dónde se aplica el programa, es lógico que los recursos sean canalizados primordialmente en zonas de alta migración; por el tipo de obras y proyectos que apoya el programa, también puede esperarse que éste contribuya a mejorar la calidad de vida de los habitantes de dichas localidades. El Propósito del programa es “Promover la participación de los migrantes en el desarrollo social de las localidades en condiciones de marginación, rezago social o alta concentración de pobreza.” Esta concepción plantea la participación de los migrantes como objetivo primordial del Programa que como consecuencia traerá obras a las zonas que éstos elijan. Sin embargo, el Propósito plantea las localidades con rezago, pobreza y marginación como aquellas en las que los migrantes participaran, aun cuando no existe una estrecha correlación entre las localidades con éstas características y los altos índices de migración. La lógica del programa hace poco probable la canalización de recursos a zonas marginadas o con alta concentración de población en condiciones de pobreza en ausencia de altos niveles de migración. 24 de marzo de 2008 168 Evaluación externa del “Programa 3x1 para migrantes 2007” Informe Final 4. ¿El Fin y el Propósito corresponden a la solución del problema? Sí. Los elementos del programa contribuyen a la consecución del Fin y al cumplimiento del Propósito: la atención a localidades de alta marginación, rezago social o y concentración de pobreza. Sin embargo, se considera que como las localidades con mayores rezagos en infraestructuras productiva y social no serán aquellas hacia las cuales se canalicen los recursos. A menos de que se canalicen recursos de los migrantes a zonas distintas a las de su de origen (las de mayor rezago y marginación), es improbable que el programa pueda permanecer fiel a sus dos objetivos implícitos. 24 de marzo de 2008 169 Evaluación externa del “Programa 3x1 para migrantes 2007” Informe Final 8. ¿Las Actividades del programa son suficientes y necesarias para producir cada uno de los Componentes? Sí. Los Componentes del programa contemplan la ejecución de obras de suministro de agua, instalaciones para el saneamiento ambiental y la conservación de los recursos naturales, infraestructura para salud y educación, apertura o ampliación de obras de electrificación, centros públicos de computación con acceso a Internet, apertura o rehabilitación de caminos, obras de desarrollo urbanístico, cultural, deportivo y recreativo; así como acciones encaminadas a promover el desarrollo de proyectos productivos o de impulso a la actividad económica comunitaria, mejoramiento de la educación y la salud, y el mejoramiento de la vivienda. Dado que ambos son productos cualitativamente distintos se requiere de la realización de actividades específicas abocadas a lograr la sustentabilidad de cada uno, por lo que ambos componentes son suficientes y necesarios. Las actividades del programa son necesarias para producir los componentes porque contemplan el ciclo completo de implementación del programa, desde la fase de promoción de la organización y participación de los clubes en el extranjero hasta el seguimiento y el control de ejercicio presupuestal, pasando por la capacitación de todas las instancias participantes. Sin embargo, para que las actividades sean también suficientes, se sugiere incluir la provisión de los fondos como una actividad adicional, e incluir el indicador de ejercicio correspondiente (tasa de subejercicio, en su caso). La formulación actual da por sentado que los recursos se canalizan oportunamente en función de las propuestas autorizadas y que la demanda de participación de los clubes agota los recursos disponibles para un año fiscal, cuando este puede no ser el caso. En ese sentido, resulta pertinente incluir un indicador de consistencia entre lo presupuestado y lo efectivamente ejercido por entidad federativa. 24 de marzo de 2008 170 Evaluación externa del “Programa 3x1 para migrantes 2007” Informe Final 9. ¿Los Componentes son necesarios y suficientes para el logro del Propósito? Sí. El Propósito requiere de dos componentes: uno referente al apoyo a pobra social y otro al de proyectos sociales o productivos. Los Componentes del programa contemplan la ejecución de obras de suministro de agua, instalaciones para el saneamiento ambiental y la conservación de los recursos naturales, infraestructura para salud y educación, apertura o ampliación de obras de electrificación, centros públicos de computación con acceso a Internet, apertura o rehabilitación de caminos, obras de desarrollo urbanístico, cultural, deportivo y recreativo; así como acciones encaminadas a promover el desarrollo de proyectos productivos o de impulso a la actividad económica comunitaria, mejoramiento de la educación y la salud, y el mejoramiento de la vivienda. Dado que ambos son productos cualitativamente distintos se requiere de la realización de actividades específicas abocadas a lograr la sustentabilidad de cada uno, por lo que ambos componentes son suficientes y necesarios. 24 de marzo de 2008 171 Evaluación externa del “Programa 3x1 para migrantes 2007” Informe Final 10. ¿Es claro y lógico que el logro del Propósito contribuye al logro del Fin? Sí. El Propósito considera promover la participación de los migrantes en el desarrollo social de las localidades en condiciones de marginación, rezago social o alta concentración de pobreza; Dado que los migrantes elegirán las localidades de las que provienen, por ende, se contribuirá al mejoramiento de la calidad de vida de la población en condiciones de pobreza, marginación o rezago social que habita en localidades con alta migración 24 de marzo de 2008 172 Evaluación externa del “Programa 3x1 para migrantes 2007” Informe Final 11. Considerando el análisis y la evaluación realizados en este punto, ¿la lógica vertical de la matriz de indicadores del programa es clara y se valida en su totalidad? Es decir, ¿la lógica interna del programa es clara? Sí. Las actividades ayudan a lograr el fin. Aún así se recomienda agregar la provisión de los fondos como una actividad adicional. La formulación actual da por sentado que los recursos se canalizan oportunamente en función de las propuestas autorizadas y que la demanda de participación de los clubes agota los recursos disponibles para un año fiscal, cuando este puede no ser el caso. El componente ayuda a lograr el Propósito pues promover obras de infraestructura social así como proyectos sociales y productivos permite el desarrollo social de las localidades en condiciones de marginación, rezago social o alta concentración de pobreza. El propósito promueve el logró del fin pues al promover la participación de los migrantes en el desarrollo social, es probable que éstos también elijan sus comunidades de procedencia y por tanto así se contribuye al mejoramiento de la calidad de vida de la población en condiciones de pobreza, marginación o rezago social que habita en localidades con alta migración, con la participación de la diáspora mexicana. 24 de marzo de 2008 173 Evaluación externa del “Programa 3x1 para migrantes 2007” Informe Final 13. En términos de diseño, ¿existen indicadores para medir el desempeño del programa a nivel de Fin, Propósito, Componentes y Actividades e insumos? Sí. Cada uno de los niveles de diseño del Programa cuenta con indicadores que permiten medir de manera periódica el impacto de cada una de las acciones realizadas en los niveles de Actividades, Componentes, Propósito y Fin. La mayoría de estos indicadores provienen de fuentes externas al funcionamiento del Programa y cuentan con línea base. 24 de marzo de 2008 174 Evaluación externa del “Programa 3x1 para migrantes 2007” Informe Final 14. ¿Todos los indicadores son claros, relevantes, económicos, adecuados y monitoreables? Sí. Cada uno de los indicadores de todos los niveles del Programa (Actividades, Componentes, Propósito y Fin) son claros pues se entiende perfectamente que es lo que se quiere medir de manera inequívoca; son relevantes debido a que permiten obtener información acerca del cumplimiento o avance de las actividades de cada nivel; son económicos ya que provienen de fuentes de acceso público o generada por el Programa; son adecuados ya que brindan suficiente información para evaluar el desempeño desprograma y son monitoreables porque las fuentes públicas son independientes del funcionamiento del Programa y la información generada por el Programa pasa por distintos filtros lo que garantiza su certeza y calidad imparcial. 24 de marzo de 2008 175 Evaluación externa del “Programa 3x1 para migrantes 2007” Informe Final 16. ¿Los indicadores incluidos en la matriz de indicadores tienen identificada su línea de base y temporalidad en la medición? Sí. La mayoría de los indicadores tienen identificada su línea base y temporalidad de medición. El Fin tiene perfectamente establecida su línea base en 2005 y una periodicidad quinquenal. Sin embargo, no se cuenta con las fichas técnicas de los indicadores para poder establecer la línea base de cada indicador. En el caso de las Actividades, Componentes y Propósitos se supone que a principio de año será cero, debido a que su temporalidad es trimestral o anual. En este caso se considera justificable que carezcan de línea base. Véase tabla para el detalle de cada indicador. 24 de marzo de 2008 176 Evaluación externa del “Programa 3x1 para migrantes 2007” Informe Final 17. ¿El programa ha identificado los medios de verificación para obtener cada uno de los indicadores? Sí. La matriz establece cada uno de los medios de verificación de los cuales deben obtenerse los indicadores. 24 de marzo de 2008 177 Evaluación externa del “Programa 3x1 para migrantes 2007” Informe Final 20. ¿Se consideran válidos los supuestos del programa tal como figuran en la matriz de indicadores? No. La matriz de indicadores contiene supuestos válidos. Sin embargo, se recomienda reformular algunos a fin de facilitar su comprensión. En el nivel de Actividades se sugiere agregar el supuesto de que los migrantes en el extranjero siguen manteniendo lazos (consanguíneos, económicos, familiares, afectivos, sociales) con su país de origen, pues son estos lazos los que los motivan a actuar con responsabilidad social y ser partícipes del Programa. En el nivel de Componentes se debe modificar el supuesto “Los clubes de migrantes tienen disposición para apoyar obras orientadas a infraestructura social básica, para servicios esenciales infraestructura productiva”. Esta focalización en el tipo de obras apoyadas es uno de los objetivos centrales del programa y su consecución no se puede asumir ex ante ni considerarse como plenamente exógeno al mismo. 24 de marzo de 2008 178 Evaluación externa del “Programa 3x1 para migrantes 2007” Informe Final 21. Considerando el análisis y evaluación realizado en este punto, ¿la lógica horizontal de la matriz de indicadores se valida en su totalidad? Sí. La lógica horizontal del Programa se cumple. Sin embargo, es necesario corregir algunos supuestos. En el nivel de Actividades se sugiere agregar el supuesto de que los migrantes en el extranjero siguen manteniendo lazos (consanguíneos, económicos, familiares, afectivos, sociales) con su país de origen, pues son estos lazos los que los motivan a actuar con responsabilidad social y ser partícipes del Programa. En el nivel de Componentes eliminar el supuesto “Los clubes de migrantes tienen disposición para apoyar obras orientadas a infraestructura social básica, para servicios esenciales infraestructura productiva”, pues éste es el objetivo del Programa. 24 de marzo de 2008 179 Evaluación externa del “Programa 3x1 para migrantes 2007” Informe Final 30. ¿Existe congruencia entre las ROP o normatividad aplicable del programa y su lógica interna? Sí. Las ROP expresan adecuadamente la lógica del Programa tal y como se representa en la matriz de indicadores. Dado que se pretende promover la participación de los migrantes en el desarrollo, el que dejen que éstos elijan a qué localidad apoyar permite su inclusión en el proceso. 24 de marzo de 2008 180 Evaluación externa del “Programa 3x1 para migrantes 2007” Informe Final 31. Como resultado de la evaluación de diseño del programa, ¿el diseño del programa es el adecuado para alcanzar el Propósito antes definido y para atender a la población objetivo? Sí. La generación de obras de infraestructura social básica y de proyectos productivos o sociales ayudará al mejoramiento de la calidad de vida de la población en condiciones de pobreza, marginación o rezago social que habita en localidades con alta migración, con la participación de la diáspora mexicana. La inclusión de los migrantes y permitirles que estos elijan en qué comunidades invertir bajo un esquema de proyectos permite cumplir con la inclusión de los migrantes como participantes en el desarrollo social. 24 de marzo de 2008 181 Evaluación externa del “Programa 3x1 para migrantes 2007” Informe Final Calificación de los indicadores. Línea de Base y temporalidad (Pregunta 16) Para cada uno de los indicadores se indica si CUMPLE o NO CUMPLE con las siguientes características: Valor de la línea de base: señala el valor inicial del indicador. Fecha de la línea de base: señala año y periodo al que se refiere el valor inicial del indicador. Temporalidad: Es la frecuencia de medición o periodo de tiempo en el cual se calcula el indicador (bianual, anual, semestral, trimestral, mensual, etc.). Nivel en Resumen Narrativo Nombre del Indicador Valor de la línea de base Fecha de la línea de base Temporalidad Porcentaje de las localidades intervenidas por el programa que mejoraron sus Índices Absolutos de marginación por Localidad (1AML). “indicadores del índice de marginación” de Conapo a nivel localidad del 2005 2005 Quinquenal (2005-2010} Porcentaje de los recursos federales invertidos por el Programa 3x1 para Migrantes en localidades en condiciones de marginación, rezago social o alta concentración de pobreza Componentes Calidad normativa de los proyectos Porcentaje de los proyectos orientados a obras de impacto social. Porcentaje de proyectos productivos llevados a cabo con el Programa 3x1 para Migrantes Porcentaje de Actividades organizaciones de migrantes atendidas a través de talleres y asambleas informativas (TAI) Porcentaje de clubes que recibieron capacitación o asesoría sobre el programa y tienen proyectos aprobados 24 de marzo de 2008 “indicadores de rezago social” (se entiende que del índice de marginación” de Conapo a nivel localidad del 2005 1 de enero del año de gestión Anual 0 1 de enero del año de gestión 1 de enero del año de gestión Trimestral 0 1 de enero del año de gestión Trimestral 0 1 de enero del año de gestión Anual 0 1 de enero del año de gestión Anual Fin Propósito el 0 Trimestral 182 Evaluación externa del “Programa 3x1 para migrantes 2007” Informe Final Porcentaje de instancias ejecutoras que han sido capacitadas y que participan en algún proyecto (Eficacia). Porcentaje de clubes que por primera vez presentan proyectos. Promedio del tiempo entre aprobación del proyecto e inicio de obra. 0 1 de enero del año de gestión Anual 0 1 de enero del año de gestión Anual 0 1 de enero del año de gestión Anual Porcentaje del personal en las delegaciones que ha recibido capacitación. (Eficacia). Porcentaje de obras y acciones validadas por el COVAM respecto del total de las propuestas presentadas ante esa instancia. Porcentaje de cumplimiento físicofinanciero en las obras y acciones seleccionadas para seguimiento y verificación 0 1 de enero del año de gestión Anual 0 1 de enero del año de gestión Trimestral Al inicio de la obra valdrá 0, y cada trimestre valdrá el porcentaje máximo alcanzado al día anterior a comenzar el nuevo trimestre Al inicio de la obra valdrá 0 y a medio año valdrá el porcentaje alcanzado al día anterior a comenzar el nuevo semestre. Día, mes y año en que se comienza la obra. Trimestral Día, mes y año en que se comienza la obra. Trimestral Porcentaje de obras y acciones orientadas a localidades en de condiciones marginación, rezago social o alta concentración de pobreza apoyadas por un club de migrantes participante en un taller para reorientar inversiones. 24 de marzo de 2008 183