P J M I

Red para el Desarrollo Sostenible de México, A.C.
PROGRAMA JÓVENES POR MÉXICO
INFORME DE LA EVALUACIÓN EXTERNA 2006
SÍNTESIS EJECUTIVA
PRESENTACIÓN
Conforme a lo dispuesto en los Términos de Referencia (TDR) para la Evaluación Externa
del Programa Jóvenes por México 2006, el presente documento constituye el Informe de la
Evaluación Externa, el cuarto y último de los informes considerados como parte de la
evaluación.
El documento consta de las siguientes partes: inicia con una Presentación que puntualiza el
contenido del documento; le sigue una Síntesis Ejecutiva que resume los objetivos de la
evaluación externa, las conclusiones, fortalezas, retos y recomendaciones. En el Capítulo I.
Introducción se hace una breve referencia al papel de la evaluación de los programas
sociales, su sustento legal y los objetivos de la evaluación de Jóvenes por México. En el
Capítulo II. Evaluación del Diseño, se describen los principales aspectos que caracterizan al
programa, se revisan sus antecedentes históricos e institucionales y se da cuenta de los
resultados de la evaluación de su diseño, a la luz de su marco lógico y sus reglas de
operación. En el Capítulo III. Evaluación de Focalización y Cobertura se analizan los
resultados que en estos aspectos derivan de la operación del programa durante 2005 y
2006. En el Capítulo IV. Operación se analizan los procesos operativos, la verificación del
cumplimiento de metas físicas y financieras, y un análisis de costos. En el Capítulo V.
Resultados se presentan los hallazgos derivados del análisis de las encuestas a prestadores
de servicio social y directores de proyectos, de la revisión de expedientes técnicos de
Programas de Ordenamiento Urbano Local (POUL) y de proyectos de Atención Integral a la
Salud realizados por el IPN, de la revisión en campo de POUL y de proyectos de Atención
Integral a la Salud, de los costos comparativos de levantar banderas blancas con el
programa Jóvenes por México y con Microrregiones, de la verificación de los resultados del
programa a la luz de los indicadores del marco lógico, del bienestar, la equidad, la igualdad
y la no discriminación de las mujeres, jóvenes e indígenas. En el Capítulo VI. Percepciones y
_____________________________________________________________________________
Comercio y Administración No. 3 Local B. Colonia Copilco Universidad
Delegación Coyoacán, CP.4360. México, D.F.
Teléfono y Fax (55) 56-58-42-73; correo e: [email protected]
5
Red para el Desarrollo Sostenible de México, A.C.
Valoraciones se muestran las apreciaciones de los beneficiarios y otros actores clave sobre
diversos aspectos de la operación del Programa. En el Capítulo VII. Conclusiones se
resumen las conclusiones que derivan de cada tema de la evaluación. En el Capítulo VIII.
Fortalezas, Retos y Recomendaciones se presentan, asimismo, las fortalezas retos y
recomendaciones referidas a cada tema de la evaluación. Posteriormente, se enlista la
Bibliografía consultada, se incorpora el Anexo Metodológico de Gabinete y se señala en
Anexos los archivos que en versión electrónica respaldan y complementan los productos de
la evaluación.
Objetivo General
Analizar el diseño, focalización, cobertura, operación, y resultados (beneficios económicos y
sociales) del Programa, así como la percepción de los actores clave y de los beneficiarios, a
través de la identificación fortalezas y retos en cada área. Posteriormente se proponen
alternativas para mejorar el desempeño del Programa.
Objetivos Específicos
a. Evaluar el diseño del Programa, particularmente su lógica vertical y horizontal
conforme a lo establecido en el Marco Lógico del Programa.
b. Evaluar la cobertura y focalización del Programa en el periodo 2005-2006, utilizando
la información al cierre de los ejercicios correspondientes.
c. Evaluar la operación del Programa verificando el cumplimiento de las Reglas de
Operación 2005, Convocatorias y de las metas físicas, financieras y de resultados en
el 2006.
d. Evaluar los resultados (beneficios económicos y sociales) del Programa con base en
los indicadores identificados en el marco lógico del Programa.
e. Evaluar la percepción de los actores clave y los beneficiarios sobre la operación y los
resultados del Programa.
_____________________________________________________________________________
Comercio y Administración No. 3 Local B. Colonia Copilco Universidad
Delegación Coyoacán, CP.4360. México, D.F.
Teléfono y Fax (55) 56-58-42-73; correo e: [email protected]
6
Red para el Desarrollo Sostenible de México, A.C.
CONCLUSIONES
Diseño
El programa cuenta ya con un instrumento útil, su marco lógico (que aún es
perfectible) que refleja adecuadamente los aspectos, productos y metas del
programa. Del análisis del mismo se valida la lógica vertical y horizontal del marco
lógico.
Cobertura y focalización
El programa llevó a cabo acciones en 234 municipios en 2006. Los municipios de
muy alta y alta marginación atendidos fueron 73 y 138 respectivamente, los cuales
representaron el 90% de los municipios y el 60.4% de la población del total de
municipios a los que llegó el programa. Solamente 8 municipios, el 3.4% del total,
correspondió a municipios de muy baja o baja marginación, con el 36% de la
población.
La focalización a nivel de municipios, en términos de las inversiones realizadas, es
bastante aceptable, ya que el 74.9% de la inversión realizada en el 2005
correspondió a los municipios de muy alta y alta marginación (30% y 13.1%,
respectivamente), en tanto que en el 2006 el 89% llegó a este tipo de municipios
(60% a los de alta marginación y 30% a los de muy alta marginación).
La inversión per capita para ambos años representa un monto muy reducido de
recursos: 1.70 pesos en 2005 y 1.80 pesos en 2006.
_____________________________________________________________________________
Comercio y Administración No. 3 Local B. Colonia Copilco Universidad
Delegación Coyoacán, CP.4360. México, D.F.
Teléfono y Fax (55) 56-58-42-73; correo e: [email protected]
7
Red para el Desarrollo Sostenible de México, A.C.
Se llevaron a cabo acciones del programa en 234 localidades reportadas1 en 2006.
Las localidades de muy alta y alta marginación atendidas fueron 116 y 16,
respectivamente, las cuales representaron el 56.4% de las localidades atendidas y
sólo el 14.7% del total del conjunto poblacional de las localidades a las que llegó el
programa.
En cuanto a la focalización de las inversiones a nivel de localidad, se observa una
leve
disminución de la focalización en las localidades objetivo (alta y muy alta
marginación) de 2005 a 2006, ya que en el 2005 el 52.3% de la inversión se destinó
a acciones realizadas en localidades de alta y muy alta marginación (48.8% y 3.4%,
respectivamente), en tanto que en el 2006 el 55.4% de las inversiones fueron
destinadas a localidades de alta y muy alta marginación (45.3% y 8.2%,
respectivamente).
A su vez, la inversión per capita a nivel de localidades muestra también una
disminución significativa entre ambos años, ya que pasó de 13.1 pesos en 2005 a
7.1 pesos en 2006, lo cual se explica por los recursos adicionales que en 2005
ejerció el programa para atender la emergencia del huracán Stan en el estado de
Chiapas.
Operación
En general, los procesos operativos realizados por la UARP, promoción,
convocatoria, recepción y dictaminación de solicitudes, entrega de apoyos,
seguimiento al ejercicio y cierre del mismo se apegan en tiempo y forma a las reglas
de operación del programa y los lineamientos de Sedesol.
No obstante los beneficios sociales y académicos que el servicio social comunitario
representa para el país y para las IES, el programa otorga apoyos a una proporción
1
Cantidad que con seguridad es significativamente mayor, pues en la base de datos del programa aparece
reportada en numeras ocasiones: “localidades varias”, registrándose sólo como un caso o localidad. Además, en
su gran mayoría se trata de acciones realizadas en municipios de alta y muy alta marginación.
_____________________________________________________________________________
8
Comercio y Administración No. 3 Local B. Colonia Copilco Universidad
Delegación Coyoacán, CP.4360. México, D.F.
Teléfono y Fax (55) 56-58-42-73; correo e: [email protected]
Red para el Desarrollo Sostenible de México, A.C.
demasiado pequeña de la población objetivo para aprovechar el enorme potencial
que representan los jóvenes PSS para contribuir a superar el reto de la pobreza en el
país y mejorar su preparación profesional.
Resultados
Respecto al apoyo recibido por los prestadores de servicio social este tiende a variar
mucho según la IES en que se lleve a cabo el proyecto. Regularmente los montos
más bajos son percibidos por alumnos de provincia y los montos más altos se
otorgan a los PSS de las grandes universidades e institutos del centro del país (UAM
e IPN).
Considerando sólo el criterio de la media aritmética podría decirse que es más barato
realizar los POUL a través del programa de Microrregiones dónde el costo promedio
es de $110, 607 pesos contra $138,652 del programa JPM. Algo similar sucede si
consideramos otra medida de tendencia central como la mediana dónde el programa
de Microrregiones exhibe un costo de sólo 96,000 pesos y el programa JPM de 160
mil pesos. Al aplicar a ambos conjuntos (POUL de JPM y POUL de Microrregiones)
una medida como la moda, que elimina el efecto de los valores extremos, el costo
de los POUL resulta idéntico ($160,000) en ambos programas.
De 2005 a 2006 disminuyó levemente el número de banderas blancas, levantadas a
través de proyectos de POUL e Identidad Jurídica, en localidades CEC (7.14%, de
56 a 52 banderas). Esta disminución es comprensible considerando que en 2005 el
programa contó con mayores recursos debido a la emergencia generada por el
impacto de los huracanes Wilma y Stan.
El análisis desagregado por sexos revela que las mujeres aumentaron su
participación relativa del año 2005 al año 2006 ya que pasaron de un 47.3% de
participación al 50.6%. Sin embargo, no aumentaron su participación total, pues ella
disminuyó de 2066 a 675.
_____________________________________________________________________________
Comercio y Administración No. 3 Local B. Colonia Copilco Universidad
Delegación Coyoacán, CP.4360. México, D.F.
Teléfono y Fax (55) 56-58-42-73; correo e: [email protected]
9
Red para el Desarrollo Sostenible de México, A.C.
Percepciones y valoraciones
Los directores de proyecto encuestados consideran que la atención e información
recibida por parte de los operadores del programa fue “Muy buena” (11), “buena” (3),
“ni buena ni mala” (1) y 2 no respondieron. Conviene precisar, que algunos de los
encuestados distinguieron entre la muy buena atención recibida por parte de los
operadores del programa a nivel federal y una más deficiente atención por parte de
los operadores del programa a nivel estatal.
FORTALEZAS
Diseño
La versatilidad y buena acogida social e institucional que tiene el programa al
apoyar la realización de proyectos de impacto social y económico en las
microrregiones.
El contar
ya con un buen instrumento de planeación y monitoreo de sus
acciones que es el marco lógico alineado a las políticas de Sedesol y a las ROP.
Cobertura y focalización
La buena focalización de sus proyectos a nivel municipal, al ubicarse
fundamentalmente en municipios de alta y muy alta marginación.
_____________________________________________________________________________
Comercio y Administración No. 3 Local B. Colonia Copilco Universidad
Delegación Coyoacán, CP.4360. México, D.F.
Teléfono y Fax (55) 56-58-42-73; correo e: [email protected]
10
Red para el Desarrollo Sostenible de México, A.C.
Operación
La percepción de los responsables de servicio social en las IES sobre las
convocatorias, como un medio que define con claridad las condiciones y requisitos
para acceder a apoyos para sus proyectos de servicio social, es en general bueno;
no obstante, tienen numerosas sugerencias para mejorarlas,
Ninguno de los PSS conoció o fue objeto de alguna irregularidad en cuanto a presión
o condicionamientos políticos de ningún tipo, o que se le haya retenido su credencial
de elector o se le haya hecho firmar una carta de intención de voto a favor de algún
candidato o partido político a cambio de los apoyos.
Resultados
Nueve de cada diez PSS encuestados (89%) destaca el hecho de que el proyecto
les permitió vincularse y comprometerse con problemas sociales y que además
ayudaron en alguna medida a superarlo.
El 88% de los PSS encuestados dijeron que las actividades realizadas en el proyecto
tenían mucho que ver con su área de estudio y la profesión que estudiaron.
El impacto muy positivo y alta valoración social e institucional logrado por las
brigadas de Atención Integral a la Salud del IPN en los municipios y comunidades en
los que participa a través de los proyectos apoyados por JPM.
La gran utilidad que representan los Planes de Ordenamiento Urbano Local
apoyados por el programa, que constituyen un medio de gran potencialidad para
incidir en la planeación e implementación de un desarrollo urbano-rural más
ordenado y sustentable y en las posibilidades de modificar positivamente las
condiciones de vida de la población.
_____________________________________________________________________________
Comercio y Administración No. 3 Local B. Colonia Copilco Universidad
Delegación Coyoacán, CP.4360. México, D.F.
Teléfono y Fax (55) 56-58-42-73; correo e: [email protected]
11
Red para el Desarrollo Sostenible de México, A.C.
Percepciones y valoraciones
La percepción de los responsables de servicio social en las IES sobre las
convocatorias, como un medio que define con claridad las condiciones y requisitos
para acceder a apoyos para sus proyectos de servicio social, es en general bueno.
Resulta muy positivo para el programa que más de las cuatro quintas partes (82.6%)
de los encuestados consideró como muy buena o buena la información y atención
recibida por parte de los funcionarios de la DGPS.
RETOS
Diseño
La carencia de una estrategia y una instancia de coordinación interinstitucional
que involucre a la Sedesol, otras dependencias federales (SEP, Salud, Sagarpa,
Semarnat, SCT, CDI y otras), estatales y municipales, a las IES y a instancias
productivas y sociales para llevar a cabo un Programa de Servicio Social
Comunitario que pueda lograr mayores alcances e impactos en su contribución a
la superación de la pobreza y a la formación de profesionistas mejor preparados
y más comprometidos socialmente.
Mejorar la cantidad y calidad de indicadores que dan cuenta de las metas y
logros del programa
Lograr una mejor definición de Población Objetivo, pues la actual definición
coloca a los agentes del desarrollo social (prestadores de servicio social y
docentes) como el objeto de atención del programa y deja en un segundo plano a
los que deberían ser el centro de atención y fin último del programa: los
habitantes de las localidades en condiciones de pobreza de las microrregiones.
_____________________________________________________________________________
Comercio y Administración No. 3 Local B. Colonia Copilco Universidad
Delegación Coyoacán, CP.4360. México, D.F.
Teléfono y Fax (55) 56-58-42-73; correo e: [email protected]
12
Red para el Desarrollo Sostenible de México, A.C.
En la misma lógica, resulta inadecuado establecer como beneficiarios del
programa a las instancias ejecutoras.
Contar con un buen acervo documental a nivel de la UARP que permita dar
cuenta (informes y documentos técnicos) de los resultados obtenidos con los
proyectos apoyados, tanto para socializar experiencias exitosas o no como para
disponer de un soporte adecuado que posibilite la evaluación y mejora del
programa.
La ausencia del enfoque de género en el programa, tanto a nivel de las ROP,
como en su marco lógico.
La desaparición de la pluralidad y descentralización de los Comités Técnicos de
Validación y Comités Estatales en la elección de los proyectos apoyados, debido
fundamentalmente a la reducción presupuestal del programa.
Cobertura y focalización
Mejorar sustancialmente su focalización a nivel de localidad, ya que apenas la
mitad de sus proyectos se realizan en localidades de alta o muy alta marginación.
Mejorar sustancialmente la cobertura del programa, ya que el programa JPM está
teniendo una baja incidencia de IES participantes (una quinta parte) y
de
prestadores de servicio social (1 de cada 100, en promedio).
Operación
Muchos de los PSS encuestados dijeron
no haber recibieron información oficial
respecto a con quién y cómo denunciar si le hubieran condicionado el apoyo por
_____________________________________________________________________________
Comercio y Administración No. 3 Local B. Colonia Copilco Universidad
Delegación Coyoacán, CP.4360. México, D.F.
Teléfono y Fax (55) 56-58-42-73; correo e: [email protected]
13
Red para el Desarrollo Sostenible de México, A.C.
razones políticas y muy pocos tenían claridad ante quién pudieran presentar una
denuncia y a través de que medio.
Los resultados de los índices de contraloría social y transparencia (ICST) dan cuenta
de un menor conocimiento de los PSS sobre los objetivos del programa y los
requisitos para ser apoyados, así como considerables vacíos de información entre
los directores de proyecto en cuánto a la forma en que se deben integrar los comités
de contraloría social.
La falta de información puntual a las IES de las razones por las que, en su caso, sus
proyectos no fueron aprobados en la instancia de dictaminación.
Resultados
En el caso de los proyectos de identidad jurídica (Trámite de CURP, acta de
nacimiento, etc.) perciben cierta subutilización de los recursos humanos y consideran
que pudieron haber hecho más por la gente en lugar de sólo tramitar su CURP.
Percepciones y valoraciones
Prácticamente ninguno de los PSS encuestados sabía a qué área de la SEDESOL
acudir o a qué número telefónico llamar para presentar quejas o denuncias o solicitar
mayor información sobre la normatividad del programa en temas de transparencia.
Un segmento de directores o coordinadores de proyecto contrastó la muy buena
atención que recibieron de los operadores del programa a nivel central de la
proporcionada por las delegaciones de Sedesol, la cual fue considerada deficiente.
_____________________________________________________________________________
Comercio y Administración No. 3 Local B. Colonia Copilco Universidad
Delegación Coyoacán, CP.4360. México, D.F.
Teléfono y Fax (55) 56-58-42-73; correo e: [email protected]
14
Red para el Desarrollo Sostenible de México, A.C.
RECOMENDACIONES
Diseño
Impulsar una estrategia y una instancia de coordinación interinstitucional que
involucre a la Sedesol, otras dependencias federales (SEP, Salud, Sagarpa,
Semarnat, SCT, CDI y otras), estatales y municipales, a las IES y a instancias
productivas y sociales para llevar a cabo un Programa de Servicio Social
Comunitario que pueda lograr mayores alcances e impactos en su contribución a la
superación de la pobreza y a la formación de profesionistas mejor preparados y más
comprometidos socialmente.
Incorporar en las ROP 2007 los siguientes indicadores:
o
Proyectos en comunidades CEC.
o
Proyectos en microrregiones o municipios de muy alta o alta marginación.
o
Prestadores de servicio social de Universidad Contigo.
o
Proyectos que incorporan la equidad de género.
Reformular la definición de población objetivo del programa, la cual podría quedar de
la siguiente manera: Los habitantes de las localidades marginadas, preferentemente
de las microrregiones definidas por la Sedesol, beneficiados a través de proyectos
realizados por Instituciones de Educación Superior, prestadores de servicio social y
docentes, como agentes promotores del desarrollo social y humano.
Establecer con claridad dentro de las ROP, en el numeral correspondiente a
Obligaciones (3.5.2) la obligación de que las IES apoyadas con proyectos entreguen
a la UARP un informe completo y pormenorizado del proyecto realizado, al menos en
versión digital.
Incorporar diversas disposiciones para promover la equidad de género dentro de las
ROP del programa y sus lineamientos operativos.
_____________________________________________________________________________
Comercio y Administración No. 3 Local B. Colonia Copilco Universidad
Delegación Coyoacán, CP.4360. México, D.F.
Teléfono y Fax (55) 56-58-42-73; correo e: [email protected]
15
Red para el Desarrollo Sostenible de México, A.C.
Introducir en las ROP disposiciones que establezcan la obligatoriedad de las IES de
constituir instancias de contraloría social para sus proyectos e informar puntualmente
a la UARP con la documentación necesaria.
Focalización y cobertura
Establecer como parte de las convocatorias y criterios de selección del Comité
Técnico de Validación disposiciones que favorezcan la selección de proyectos que
atiendan más rigurosamente a localidades de alta y muy alta marginación en las
microrregiones.
Para mejorar la cobertura del programa se recomienda:
o
Proporcionarle un mayor presupuesto al programa, al menos del nivel que
tuvo en 2003.
o
Incluir en las ROP un monto mayor de apoyo a los gastos operativos de los
proyectos.
o
Promover más intensamente entre las IES su participación en el programa.
Operación
Difundir ampliamente la información de los medios y contactos para poner denuncias
o quejas en caso de que irregularidades en el otorgamiento de los apoyos o alguna
otra anomalía en la operación del programa.
Establecer en los lineamientos que regulan el Comité Técnico de Validación las
disposiciones para que el dictamen que emita señale las razones por las que los
proyectos fueron aprobados o no y darlas a conocer a las IES.
_____________________________________________________________________________
Comercio y Administración No. 3 Local B. Colonia Copilco Universidad
Delegación Coyoacán, CP.4360. México, D.F.
Teléfono y Fax (55) 56-58-42-73; correo e: [email protected]
16
Red para el Desarrollo Sostenible de México, A.C.
Establecer como un requisito el que deba presentarse un acta de conformación del
comité de contraloría social y transparencia por parte de las IES en un tiempo
perentorio una vez que se haya recibido el apoyo.
Restituir los Comités Técnicos de Validación y Comités Estatales en la elección de
los proyectos apoyados, una vez que se de la recuperación presupuestaria.
Resultados
Para que el proyecto en el que participen sea de mayor beneficio tanto para ellos
como para la comunidad en dónde se lleva a cabo, los jóvenes PSS sugirieron:
o
Darle seguimiento a los proyectos tanto por parte de SEDESOL como por
parte de la IES.
o
Aumentar el número de proyectos apoyados.
o
Mayor difusión de las convocatorias en las universidades.
o
Proporcionarles apoyo económico a los coordinadores.
o
Apoyo para materiales y equipos (equipo médico, suturas y sueros en las
actividades de atención veterinaria, apoyo en la compra de equipo de
ingeniería más ligero para facilitar su transporte).
o
Apoyo del municipio en la difusión de las actividades del proyecto entre la
comunidad (las actividades y fechas en que se llevarán a cabo).
o
Apoyar la participación de personal profesional, alumnos titulados y con
experiencia.
o
Apoyar proyectos de mediano plazo.
_____________________________________________________________________________
Comercio y Administración No. 3 Local B. Colonia Copilco Universidad
Delegación Coyoacán, CP.4360. México, D.F.
Teléfono y Fax (55) 56-58-42-73; correo e: [email protected]
17
Red para el Desarrollo Sostenible de México, A.C.
Percepciones y valoraciones
Llevar a cabo un proceso de mejora en las delegaciones para que puedan
proporcionar un mejor servicio a las IES.
En virtud de que los PSS tienen mucha confianza y contacto con el director del
proyecto en el que participan, se sugiere reforzar la información proporcionada al
mismo sobre transparencia y los teléfonos y medios a través de los cuales presentar
quejas y/o denuncias e invitarles a que la difundan entre los PSS.
_____________________________________________________________________________
Comercio y Administración No. 3 Local B. Colonia Copilco Universidad
Delegación Coyoacán, CP.4360. México, D.F.
Teléfono y Fax (55) 56-58-42-73; correo e: [email protected]
18