Anexo 7 Caracter sticas de los Indicadores

Evaluación externa del “Programa 3x1 para migrantes 2007”
Informe Final
Anexo VII: Calificación CREMA de los indicadores de la MML (Pregunta 14)
En la siguiente tabla se califican cada uno de los indicadores de la MML según las siguientes características:
C corresponde a Claridad: el indicador deberá ser preciso e inequívoco.
R corresponde a Relevancia: el indicador deberá reflejar una dimensión importante del logro del objetivo.
E corresponde a Economía: la información necesaria para generar el indicador deberá estar disponible a un costo razonable.
M corresponde a Monitoreable: el indicador debe poder sujetarse a una comprobación independiente
A corresponde a Adecuado: el indicador deberá aportar una base suficiente para evaluar el desempeño.
La calificación asignada corresponde a 1 si el indicador Cumple con la característica, 0.5 si Cumple parcialmente con la característica y 0 si No
Cumple con la característica. En caso de que la calificación sea 0.5 ó 0 se justifica la opinión del evaluador.
Nivel en
el
Resumen
Narrativo
Fin
Nombre
del
Indicador
C
Justificación
R
Justificación
E
Justificación
M
Justificación
A
Justificación
Porcentaje
de las
localidades
intervenidas
por el
programa
que
mejoraron
sus índices
de
Marginación
absoluta
(por
Localidad,
IML).
(Eficacia)
0.0
No se puede
hacer referencia
al Índice de
marginación
debido a que su
agregación
impediría captar
los resultados
precisos de las
obras realizadas
por el Programa
que son
esporádicas. En
cambio se tendrá
que enumerar los
componentes del
Índice.
0.5
Carece de
indicadores
para medir el
incremento en
la
infraestructura
productiva
1
Es obtenido de
Conapo, por lo
que el
Programa no
incurre no
costos
1
Tanto Inegi
como Conapo
son instituciones
independientes
del
funcionamiento
del Programa
0.5
Deja fuera los
logros en
infraestructura
social
24 de marzo de 2008
150
Evaluación externa del “Programa 3x1 para migrantes 2007”
Nivel en el
Resumen
Narrativo
Propósito
Informe Final
Nombre del
Indicador
C
Justificación
R
Justificación
E
Justificación
M
Justificación
A
Justificación
Variación de
las variables
de
infraestructura
social básica y
productiva que
componen los
índices de
marginación y
de rezago
social en las
localidades
atendidas por
el programa.
(Eficacia)
0.5
No se entiende a
que variables se
hace referencia.
Sólo se deberá
tomar en cuenta
los componentes
en los que el
Programa haya
tenido impacto
en la localidad
específica.
0.5
Dado que se
pretende
capturar el
cambio en la
infraestructura
social básica y
productiva se
considera
relevante. Sin
embargo, la
fórmula hace
sólo referencia
a la
infraestructura
básica.
1
Es obtenido de
Conapo, por lo
que el
Programa no
incurre no
costos
1
Tanto Inegi
como Conapo
son
instituciones
independientes
del
funcionamiento
del Programa
0.5
Deja fuera los
logros en
infraestructura
social y sólo se
deberá tomar
en cuenta los
componentes
en los que el
Programa haya
tenido impacto
en la localidad
específica.
24 de marzo de 2008
151
Evaluación externa del “Programa 3x1 para migrantes 2007”
Nivel en el
Resumen
Narrativo
Componentes
Informe Final
Nombre del
Indicador
C
Justificación
R
Justificación
E
Justificación
M
Justificación
A
Justificación
a)Tasa
de
aprobación de
proyectos
1
Se pretende
identificar cuál es
la tasa de
aprobación del
Programa.
0.5
El indicador no
permite
determinar si
los proyectos
aprobados o
rechazados
tienen alguna
relación con la
focalización
hacia las
localidades
objetivo del
Programa
1
La información
debe de ser
capturada en l
expediente
técnico de las
obras por lo
que la
institución no
incurre en
costos
adicionales
para
recolectarla
0
No se tiene
información
acerca de los
medios de
comprobación
independientes
1
b)Orientación
a obras de
impacto social
1
Se pretende
identificar cuál es
la proporción de
proyectos
enfocados a la
infraestructura
social
0.5
El indicador
deja fuera el
componente
de
infraestructura
productiva
1
0
No se tiene
información
acerca de los
medios de
comprobación
independientes
0.5
c) Orientación
a localidades
de alta y muy
alta
marginación
1
Se pretende
identificar cuál es
la proporción de
proyectos creado
en las
1
Dado que son
las localidades
objetivo del
programa, es
importante
1
La información
debe de ser
capturada en l
expediente
técnico de las
obras por lo
que la
institución no
incurre en
costos
adicionales
para
recolectarla
La información
debe de ser
capturada en l
expediente
técnico de las
Es importante
a fin de medir
la oferta de
proyectos y el
éxito del
programa. Sin
embargo,
dado que se
carece de
adjetivos de
focalización no
se aporta
información
sor el éxito del
Programa en
las localidades
objetivo
No existe
indicador para
capturar los
logros en la
creación de
infraestructura
social
0
No se tiene
información
acerca de los
medios de
comprobación
0.5
24 de marzo de 2008
Tal como está
funcionado el
Programa
actualmente,
este indicador
152
Evaluación externa del “Programa 3x1 para migrantes 2007”
localidades de
los municipios
objetivo del
Programa
d)Multiplicador
de la inversión
federal
24 de marzo de 2008
1
Se pretende
identificar cuál es
la proporción con
la que el
gobierno federal
contribuye del
costo de las
obras
Informe Final
averiguar el
impacto que
éste tiene en
ellas.
0
Las reglas de
operación
indican que la
aportación
será de 25%
obras por lo
que la
institución no
incurre en
costos
adicionales
para
recolectarla
1
La información
debe de ser
capturada en l
expediente
técnico de las
obras por lo
que la
institución no
incurre en
costos
adicionales
para
recolectarla
independientes
0
No se tiene
información
acerca de los
medios de
comprobación
independientes
0
sólo capta
características
probables de
las localidades
beneficiarias,
pero no hay
garantías de
que los
migrantes
elijan a
aquellas con
alta o muy alta
marginación
No se
encuentra la
utilidad de
este indicador
153
Evaluación externa del “Programa 3x1 para migrantes 2007”
Nivel en el
Resumen
Narrativo
Actividades
Informe Final
Nombre del
Indicador
C
Justificación
R
Justificación
E
Justificación
M
Justificación
A
Justificación
Atención
a
organizaciones
de migrantes a
través
de
talleres
y
asambleas
informáticas,
TAI (Eficacia)
1
0.5
Es importante
saber si la
demanda por
información del
Programa está
satisfecha,
pues es lo que
incentivará la
recepción de
propuestas
1
No existe
información
0
El indicador no
es adecuado
para medir
“organizar,
difundir y
coordinarlas
actividades del
programa en el
extranjero”
1
1
Es necesario
saber si los
talleres están
siendo bien
impartidos,
pues la
recepción de
proyectos y el
éxito del
Programa se
basarán en
ello.
1
La información
es obtenida de
las actas de
registro de las
representaciones
en el extranjero
del Programa
por lo que no
incurre en gastos
adicionales para
obtenerla
La información
es obtenida de
las actas de
registro de las
representaciones
en el extranjero
del Programa,
por lo que no
incurre en gastos
adicionales para
obtenerla
0
El porcentaje
de clubes que
recibieron
capacitación o
asesoría sobre
el
programa
CCapAs)
y
tienen
proyectos
aprobados
(CCapAs PA)
(Eficacia).
Se pretende
medir la
capacidad
administrativa
para satisfacer
la demanda de
talleres y
asambleas
informativas
sobre el
Programa
Pretende medir
cuál es la tasa
de éxito en la
aceptación de
los programas
de aquellos
grupos
migrantes que
tomaron un
curso
0
No existe
información
0.5
El indicador
sólo permite
medir una de
las actividades
enunciadas:
Recepción de
propuestas de
inversión. Las
“sesiones
informativas
sobre la
operación del
Programa”;
“Taller para la
elaboración de
proyectos”
carecen de
indicador. Es
necesario
recordar que la
metodología
utilizada
propone se
utilice un
24 de marzo de 2008
154
Evaluación externa del “Programa 3x1 para migrantes 2007”
Porcentaje de
clubes que por
primera
vez
presentan
proyectos
(CPP)
en
relación con el
total de clubes
(C)
en
el
periodo
(Eficacia)
1
Pretende medir
la captación de
nuevos
participantes en
el Programa.
1
Porcentaje de
instancias
ejecutoras
capacitadas
Eficacia).
1
Pretende medir
la proporción de
instancias
ejecutoras que
cuentas con la
preparación
para desarrollar
sus respectivas
tareas.
1
Porcentaje del
personal
capacitado
respecto
del
total
involucrado en
las
1
Pretende medir
la proporción del
personal que
cuenta con la
preparación
para desarrollar
sus respectivas
1
24 de marzo de 2008
Informe Final
Es importante
saber si se
están
integrando
nuevos grupos
de migrantes
al Programa,
pues esto
podría implicar
se están
atendiendo
diversas zonas
geográficas y
no sólo las
mismas.
Es importante
que las
instancias
ejecutoras
cuenten con la
capacidad
necesaria para
llevar acabo
cada proyecto,
pues sin ello el
éxito del
Programa
sería nulo
Es importante
que el
personal tenga
la capacitación
necesaria para
llevar acabo
cada proyecto,
indicador por
actividad a
realizar.
Sería un
indicador más
adecuado para
medir el éxito
en “organizar,
difundir y
coordinar
actividades” (la
primera
actividad
propuesta en
la matriz.
1
La información
es obtenida de
los nexos
técnicos de las
propuestas de
inversión, por lo
que no incurre
en gastos
adicionales para
obtenerla.
0
No existe
información
0.5
1
La información
es obtenidas de
la memoria de la
capacitación y
listas de
asistencia por lo
que el Programa
no incurre en
gastos
adicionales para
obtenerla
0
No existe
información
1
El indicador
mide de
manera
satisfactoria el
éxito en la
tarea a realizar
1
La información
es obtenidas de
la memoria de la
capacitación y
listas de
asistencia por lo
que el Programa
0
No existe
información
1
El indicador
mide de
manera
satisfactoria el
éxito en la
tarea a realizar
155
Evaluación externa del “Programa 3x1 para migrantes 2007”
delegaciones.
(Eficacia).
tareas.
Tiempo
promedio entre
aprobación del
proyecto
e
inicio de obra
(Eficacia)
0
No está claro
que actividad
pretende evaluar
este indicador o
qué tareas se
deben de
realizar en el
lapso a medir.
0
Porcentaje de
obras
y
acciones
validadas por
el
COVAM
respecto
del
total de las
propuestas
presentadas.
(Eficacia).
0.5
No está claro a
qué se refiere
con “acciones
validadas por el
COVAM”
0.5
Porcentaje de
cumplimiento
físicofinanciero en
las obras y
acciones
(Eficacia)
1
Como parte de
la contraloría
social, es
necesario vigilar
se de
cumplimiento de
la obra, de
acuerdo al
presupuesto y
tiempo
previamente
1
24 de marzo de 2008
Informe Final
pues sin ello el
éxito del
Programa
sería nulo
No se
establece que
actividades
pretende
medir.
Se considera
que la
validación del
COVAM es
necesaria, sin
embargo no
está claro a
que se refiere
con acciones y
por lo tanto no
se puede
determinar que
tan relevante
es medirlo.
Esta actividad
es de alta
relevancia
pues vigila se
ejerza el
presupuesto
en tiempo y
forma y se
satisfagan las
necesidades
de los
1
no incurre en
gastos
adicionales para
obtenerla
La información
es obtenidas de
las actas del
COVAM, por lo
que no se
incurre en gastos
adicionales para
obtenerla
0
No existe
información
0
1
La información
es obtenidas de
las actas del
COVAM, por lo
que no se
incurre en gastos
adicionales para
obtenerla
0
No existe
información
0.5
1
La información
es obtenidas del
Formato 3x1 C
por lo que no se
incurre en gastos
adicionales para
obtenerla
0
No existe
información
1
Dado que no
establece con
precisión la
actividad a
evaluar no se
puede
considerar sea
un indicador
adecuado.
Es importante
saber cuantas
obras valida el
COVAM. Sin
embargo no
está claro a
qué se refiere
con acciones
y, por lo tanto,
es difícil
determinar si
es un indicador
adecuado.
Dado que el
funcionamiento
del Programa
se basa en la
contraloría
social, es
importante
saber el éxito
de ésta
156
Evaluación externa del “Programa 3x1 para migrantes 2007”
establecido.
Porcentaje de
obras
y
acciones
monitoreadas
(Eficiencia)
24 de marzo de 2008
1
Como parte de
la contraloría
social, es
necesario vigilar
se de
cumplimiento de
la obra, de
acuerdo al
presupuesto y
tiempo
previamente
establecido.
1
Informe Final
beneficiarios y
los deseos de
los migrantes
Esta actividad
es de alta
relevancia
pues vigila se
ejerza el
presupuesto
en tiempo y
forma y se
satisfagan las
necesidades
de los
beneficiarios y
los deseos de
los migrantes
1
La información
es obtenidas de
los informes
trimestrales de la
DGS por lo que
no se incurre en
gastos
adicionales para
obtenerla
0
No existe
información
1
Dado que el
funcionamiento
del Programa
se basa en la
contraloría
social, es
importante
saber el éxito
de ésta
157