Sistema de Monitoreo y Valoración de Impacto

Editor
Programa PyMerural
Coordinadores de la experiencia
Johanna Sánchez Navarro, Asesora de PyMerural
Alma Iris Herrera, Soporte Técnico-Plataforma online del SMVI
Experiencia sistematizada por
Marissa Azmitia
Revisión Técnica del Documento
Johanna Sánchez, Nidia Pereira y Rudolf Krummenacher - PyMerural
Fotografías
Programa PyMerural
Copyright
Oficina de la Cooperación Suiza en América Central
Diseño Gráfico y Diagramación
Soluciones Creativas
Teléfono: (505) 2714 - 1105
E-mail: [email protected]
Para mayor información dirigirse a:
Oficina de Swisscontact en Nicaragua:
Bolonia, de Lugo Rent a Car
20 varas al sur, Managua, Nicaragua
Teléfono: (505) 2268-1147, 2268-2384
Fax: (505) 2264-0695
E-mail: [email protected]
Web: www.pymerural.org
Noviembre, 2012
Indice
Acrónimos ............................................................................................................ 3
I. Introducción ............................................................................................................. 4
II. Objetivos del Estudio de Caso .................................................................................. 6
III. Metodología ........................................................................................................... 7
IV. El Sistema de Monitoreo y Valoración de Impacto .....................................................
9
i. Objetivos y propósito del SMVI .........................................................................
10
ii. Cualidades del Sistema de Monitoreo y Valoración de Impacto .........................
11
V. Hallazgos ...............................................................................................................
14
i. ¿Cómo se percibe el Monitoreo en el Programa? .............................................
15
ii. La Responsabilidad Compartida en el SMVI entre Pymerural, Cofacilitadores,
15
Contraparte y Socios ......................................................................................
iii. Los indicadores del sistema ............................................................................
17
a. Indicadores que miden efectos de las acciones del proyecto ......................
17
b. Los Indicadores de Desempeño de los Cofacilitadores ..............................
18
iv. El Desarrollo de Capacidades en los Cofacilitadores y sus Resultados ............
21
a. Capacidades encontradas en los cofacilitadores .........................................
21
b.El proceso de desarrollo de capacidades ....................................................
21
VI. Aprendizajes y Lecciones aprendidas ......................................................................
23
Lecciones aprendidas .........................................................................................
25
VII. Conclusiones .......................................................................................................
27
Bibliografía ..........................................................................................................
30
Glosario ..............................................................................................................
31
Acrónimos
SMVI Sistema de Monitoreo y Valoración de Impacto
UNAG Madriz Unión Nacional de Agricultores y Ganaderos filial Madriz
UNAG NS Unión Nacional de Agricultores y Ganaderos filial Nueva Segovia
MIFIC Ministerio de Fomento de Industria y Comercio
MAGFOR Ministerio Agropecuario y Forestal
GERSON Cooperativa Multisectorial GERSON
GEPROLAM Grupo Empresarial de Productores Lácteos de Madriz
DGPSA- MAGFOR Dirección General de Protección y Sanidad Agropecuaria - MAGFOR
COOPROCA Cooperativa Multiservicios de Productores Cañeros de Cuidad Antigua R.L.
SWISSCONTACT Fundación Suiza de Cooperación para el Desarrollo Técnico
I. Introducción
Este documento contiene los aprendizajes sobre la implementación y ejecución del Sistema de Monitoreo
y Valoración de Impacto (SMVI), del Programa Pymerural. Este Sistema forma parte integral de la
estrategia de intervención y se incluye como una responsabilidad compartida en todos los convenios
que el Programa suscribe con su contraparte y organizaciones e instituciones cofacilitadoras. La tabla
a continuación describe, en términos generales, al Programa.
PyMerural
Programa del Gobierno de Nicaragua auspiciado por la
Cooperación Suiza en América Central y facilitado por
Swisscontact.
Fecha de inicio y finalización Septiembre 2008 - Abril 2013.
Objetivo superior: Contribuir a la generación de empleo e ingresos
para hombres y mujeres desfavorecidos en zonas rurales.
Objetivos
Objetivo de fase: Afianzar la sostenibilidad de la MIPYME
en cadenas agroindustriales alimentarias y no alimentarias, y
en conglomerados de turismo rural, en sectores y regiones
seleccionados en Honduras y Nicaragua
Enfoque sistémico para el crecimiento inclusivo, parte del
entendimiento del sistema económico, identificando cadenas de
valor importantes para la inclusión de poblaciones y territorios
menos favorecidos.
Estrategias
Promoción de Cadenas de Valor, cadenas con oportunidades
de mercado con potencial de crecimiento, que a su vez sean
compatibles con el potencial de desarrollo competitivo del grupo
meta.
Desarrollo Económico Local o Territorial, tendrá como punto de
partida aquellos territorios donde hay potencial productivo para
desarrollar uno o varios eslabones de una o varias cadenas de
valor o conglomerados seleccionados.
Ejes transversales
priorizados
Género, medio ambiente y gobernabilidad.
Grupo meta directo
Instituciones del sector público, organizaciones del sector privado
y proveedores de servicios.
Sector principal
Micro, pequeña y mediana empresa rural en cadenas
agroindustriales alimentarias y no alimentarias, y en
conglomerados de turismo rural, en sectores y regiones
seleccionados en Nicaragua.
Contraparte: MIFIC.
Cofacilitadores: INTUR, INTA, INPYME/MEFCCA, MAGFOR
Contrapartes Cofacilitadores
- DGPSA, UNAG Nueva Segovia, UNAG Madriz, Cooperativa
y Socios
Multisectorial GERSON, Alcaldía de Yalagüina.
Socios: VECOMA, CARE, ANF, CEP, ACDI, OIRSA, IICO, etc.
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
5
II. Objetivos del Estudio de Caso
Los objetivos que orientaron este estudio son:
Objetivo General
▪▪ Rescatar los aprendizajes que surgen de la implementación del Sistema de
Monitoreo en los proyectos de Pymerural a nivel institucional y personal.
Objetivos Específicos
Valorar la Responsabilidad compartida del Sistema de Monitoreo de Pymerural
y sus cofacilitadores.
▪▪ Identificar aportes de los Indicadores de Desempeño al monitoreo de los
proyectos.
▪▪ Rescatar la valoración sobre el desarrollo de capacidades en los
cofacilitadores.
III.Metodología
Recolección de datos de fuentes primarias y
participantes
La recolección de datos fue organizada a partir del rol desempeñado por la
organización y/o institución. Fueron hechas entrevistas y grupos de enfoque,
además, tres entrevistas exploratorias del tema con personal de Pymerural,
Alcaldía de Yalagüina y UNAG Nueva Segovia. Posteriormente, al definir los
objetivos del estudio, se realizaron entrevistas y dos grupos de enfoque. La
tabla a continuación expone nombres de participantes y la institución a que
pertenecen.
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
7
Organización
Institución
UNAG Filial
Madriz
Rol
Desempeñado
Cofacilitador
Participantes
Cargos
GE
Omar Jiménez
Técnico responsable
SMVI
x
Paula Antonia
Méndez
Directora
Departamental UNAG
x
UNAG Filial
Nueva Segovia
Cofacilitador
Orestes Herrera
Técnico responsable
SMVI
x
Alcaldía de
Yalagüina
Cofacilitador
Lesly Buezo
Técnico responsable
SMVI
x
Jaime Monjarretz
Planificación de la
Alcaldía
x
Miriam Cruz
Coordinadora de
Proyecto
x
MAGFOR-DGPSA
Cofacilitador
Sergio Herrera
Técnico responsable
SMVI
x
PyMerural
Unidad Ejecutora
Alma Iris
Herrera
Soporte Técnico del
SMVI
x
Johanna
Sánchez
Asesora Técnica del
SMVI
x
Nidia Pereira
Coordinadora
PyMerural
x
Maura Ligia
Zelaya
Equipo Técnico SMVI
x
MIFIC
Contraparte
Recopilación de datos en fuentes secundarias:
La bibliografía revisada fue suministrada por
Pymerural. Los documentos estudiados fueron:
Sistema de Monitoreo y Valoración de Impacto
(SMVI), Manual de Funcionamiento, Manual
del Usuario de SMVI, Informe de Indicadores
de Desempeño, sector público y privado;
Presentación Power Point SMVI y The DCED
Standard for Measuring Achievements in
Private Sector Development / Control Point and
Compliance Criteria Version V, 13 January 2010.
x
Análisis de los datos
Fueron transcritas las entrevistas individuales y
los grupos de enfoque, y organizados los datos en
matrices. Éstas fueron analizadas con el método
hermético, que se basa en la interpretación de
lo manifiesto y lo latente del tema, permitiendo
explicar las relaciones existentes entre un hecho
y el contexto en el cual acontece.
Instrumentos para la recolección de datos:
Fueron elaboradas las guías para entrevistas y
para grupos de enfoque, tomando en cuenta que
se entrevistó a personal técnico responsable
del SMVI y personal directivo. En este sentido
las entrevistas fueron diferentes en algunos
aspectos.
8
Entrevista
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
IV. El Sistema de Monitoreo y
Valoración de Impacto
El diseño del SMVI proviene del enfoque en que ha trabajado ProEmpresa y Agropyme, y responde
a la necesidad que tiene el Programa de acreditar el alcance, y medir e informar sobre los resultados
e impactos. El propósito es generar información cuantitativa y cualitativa actualizada, para apoyar la
gestión del conocimiento, y dar seguimiento al ciclo del proyecto. (PyMerural, 2010).
Diseño del SMVI
1.Los objetivos del SMVI están en función de los objetivos y estrategias del Programa.
2.Identificar las áreas de impacto o campos de observación: a) contrapartes, cofacilitadores y
socios; b) asociaciones gremios; c) empresas; d) empleados de las empresas; y e) entorno
social, económico y político.
3.Formulación de hipótesis de impacto.
4.Desarrollo del marco de desempeño: indicadores y metas.
5.Desarrollo del sistema de reportes de seguimiento y levantamiento de datos para la evaluación
de impacto.
6.Interpretación y retroalimentación de la información.
Manual del SMVI, 2012
i. Objetivos y propósitos del SMVI
Objetivo General del SMVI
▪▪ Medir la eficiencia y efectividad de las intervenciones del Programa PyMerural, específicamente lo
referente a empleo, ingresos y medios de vida, generando indicadores en cada uno de los niveles de
la lógica de impacto.
Objetivos Específicos
▪▪ Identificar impactos atribuibles al Programa PyMerural.
▪▪ Contribuir a la generación de información, para determinar si es necesario ajustar la estrategia, la
planificación y los procesos de los proyectos.
▪▪ Propiciar la participación y retroalimentación de la mayor cantidad de actores, para la gestión del
conocimiento y el aprendizaje continuo.
▪▪ Comunicar los resultados del monitoreo, utilizando un mismo estándar y marco conceptual que
facilita compartir y comprender la información.
▪▪ Generar información, para la toma de decisiones y el empoderamiento de cofacilitadores y
contrapartes.
▪▪ Contribuir a la determinación de buenas prácticas, y lecciones aprendidas.
▪▪ Demostrar la gestión responsable y transparente para la rendición de cuentas.
10
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
ii. Cualidades del Sistema de Monitoreo y Valoración de Impacto
El SMVI provee información periódica en apoyo
a la Gerencia
La información se obtiene mediante diferentes
mecanismos: estudios externos, el monitoreo
de indicadores de impacto, las visitas de campo
de los asesores, y los reportes que se extraen
de la plataforma online sobre el avance físico y
financiero de las actividades de cada una de las
intervenciones del Programa. De esta manera,
el Sistema sustenta las acciones gerenciales
relacionadas con: la planeación, seguimiento de
los proyectos, las líneas de base y la aplicación
de los instrumentos en apoyo a la MIPYME.
Contribuye a la gestión del conocimiento
Los informes que genera la plataforma online,
así como los que provienen de las visitas de
seguimiento, de la medición de indicadores,
de los estudios externos, totalizan los insumos
básicos para la generación de conocimiento.
La información de estos reportes se socializa
en diferentes ámbitos: con los cofacilitadores,
donde interviene personal directivo y técnico, y
en la Unidad Facilitadora, en la que contribuye a
la construcción de lecciones aprendidas.
Las partes interesadas participan en el SMVI y
comparten responsabilidades
Contrapartes y cofacilitadores desempeñan
un papel en la implementación y el desarrollo
de las actividades de monitoreo, y participan
desde el diseño de los proyectos donde se
acuerdan los indicadores a medir, así como en la
implementación del Sistema, es una elaboración
conjunta. Este enfoque contribuye al desarrollo
de habilidades y capacidades de las partes
interesadas.
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
11
Es un Sistema definido para medir las intervenciones dirigidas al fomento empresarial
Esta cualidad está asociada a la norma DCED ¹,
que persigue mejorar la capacidad de establecer
indicadores globales y atribuir resultados. El
sistema responde a las estrategias de trabajo de
Pymerural y a sus ejes transversales. En lo que
se refiere a las estrategias, vale exponer, como
ejemplo, que desde el enfoque de cadena, se
propone la mejora y adaptación de los sistemas
de monitoreo y evaluación de la UF, de los socios
y de la contraparte.
La ilustración siguiente muestra cómo el SMVI
está integrado en las estrategias del Programa.
El diagrama presenta varios procesos, el color
celeste representa la dinámica que sigue el
Programa para decidir la selección de una
cadena; el color morado indica el desarrollo de
capacidades/gestión del conocimiento; en rojo
se expone el rol del SMVI observándose que
desde la selección de la cadena éste empieza a
proveer información para la toma de decisiones.
¹ DCED Comité de Donantes para el Desarrollo Empresarial (por sus siglas en inglés)
Desarrollo de
Capacidades
GC
CDE
Género
RRNN
Selección de la
Gobernabilidad
cadena
Prospección
Análisis de
cadena
2
1
Pre
Selección de
la cadena
Acuerdo de
competitividad
CDE
Decisores
Monitoreo y
Valoración de Impacto
COP
Aprobación
de intrvenciones
sistémicas
12
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
1
Elaboración/definición
2
Actualización
Posee Indicadores de Desempeño del cofacilitador
El propósito de estos indicadores es medir el
efecto producido en los cofacilitadores por la
relación de acompañamiento y asesoramiento que
Pymerural les brinda en el marco de la ejecución de
los proyectos y con el fin de dar un mejor servicio
a la MIPYME. Basado en las cuatro dimensiones
del desarrollo de capacidades ²: recurso
humano, organizacional, redes y marco normativo
institucional, fueron definidos indicadores para
medir aspectos específicos promovidos por
Pymerural: manejo de marco lógico, lógica de
impacto, rol facilitador, uso del SMVI, liderazgo/
participación en redes, captación de proyectos e
incidencia en marco regulatorio.
Mide resultados y evalúa el impacto a nivel de las
empresas
Evalúa el impacto producido en las empresas por
las intervenciones de los proyectos. Se realizan
mediciones periódicas a partir de los datos de
las Líneas de Base elaboradas al inicio de cada
proyecto, en ambos casos se trata de la medición
de indicadores estrechamente relacionados con
el nivel de cambios previstos para el proyecto,
recurriéndose a diferentes métodos para su
medición. La tabla siguiente expresa este vínculo.
² Desarrollo de la Capacidad, El concepto Mariposa - http://www.odcpconsult.com/archivos/file34_
Desarrollo%20de%20la%20Capacidad.pdf
Nivel de Cambio
Tipo de Indicadores
Método de Medición- Atribución
Reducción de pobreza
Mejora el nivel de vida,
incremento del ingreso neto y
del empleo equivalente
Estudios de caso, encuestas
cuasi - experimentales
Crecimiento económico
inclusivo
Incremento en ventas,
Productividad, Producción,
Clientes
Estudios de caso
Opinión de actores del sector,
Encuestas cuasi- experimentales,
Análisis de tendencias
Cambios en el sistema y/o
cadena de valor
Adopción de nuevas/mejores
prácticas de producción
Intervenciones
Resultados directos de las
actividades
Grupo de actividades del
proyecto
Estudios de caso
Opinión de actores del sector
Seguimiento a actividades y sus
resultados
(SMVI Online)
Los instrumentos de recolección de información planteados son:
plataforma informática, encuestas, estados financieros, estudios de mercado,
fotografías y estudios de casos, y sistematizaciones
Los objetos de observación a los que está orientado el SMVI son:
• Las empresas beneficiarias.
• Los cofacilitadores o socios estratégicos.
• Los empleados de las empresas.
• Las asociaciones o gremios.
• El entorno social, económico y político.
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
13
Plataforma online es accesible, confiable/segura y disponible
Está diseñada de tal forma que pueden
acceder a ella todos los participantes en el
Programa: la contraparte, la unidad ejecutora y
los cofacilitadores. La confiabilidad/seguridad
está protegida, porque cada usuario tiene una
contraseña para ingresar, limitando a cero
las posibilidades de que la información de un
proyecto se utilice en otro. Ejemplo de ello es
que durante toda la experiencia de PyMerural
nunca se perdieron datos de los proyectos. La
plataforma está disponible 24 horas al día, 365
días al año, y solamente se requiere de internet.
En ella se concentra aproximadamente el 50%
de la información de monitoreo. Pymerural utiliza
esta información para identificar logros a nivel de
actividades.
Los aspectos que orientan el funcionamiento de
la plataforma online del SMVI son:
▪▪ La importancia de asignar desde su diseño
un peso, un porcentaje, que valore la
trascendencia de la actividad con respecto al
resultado esperado de la misma.
▪▪ El ingreso de datos veraces. Debe proveerse
soporte físico de cada una de las actividades
reportadas y los comprobantes financieros de
la ejecución.
▪▪ Para la ejecución de la Línea de Base,
se deben aplicar todos los pasos de una
investigación, desde el protocolo hasta el
informe y la validación de los hallazgos.
6
Procesa información
y emite reportes
Usuario
5
Ingresa
información
Internet
1
4
Obtiene información
Seleccione
una opción
Registro Instrumentos Proyectos
3
Escribe su
nombre y contraseña
Instituciones
Empresas
Oferentes
Linea de Base
Usuario:
2 Se conecta
con el sitio web
a través de internet
14
Contraseña:
Ingresar
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
V.Hallazgos
i. ¿Cómo se percibe el Monitoreo en el Programa?
Pymerural ha introducido el Sistema de
Monitoreo y Valoración del Impacto [evaluación],
como un componente rutinario en cada uno de
los diseños de proyectos. Desde la experiencia
vivida por los participantes, y tomando en cuenta
la definición que exponen sobre el mismo, se
concluye que el SMVI se concibe como un
instrumento que permite: “Llevar el registro para
un control y seguimiento de la ejecución física
y financiera del proyecto; valorar los aciertos y
fallas, y, finalmente, apreciar el impacto logrado”.
“Es un sistema para medir el impacto del proyecto, el propósito es tomar
decisiones y visualizar en lo que estamos fallando y lo que hemos logrado”.
Omar Jiménez, UNAG Madriz
“El sistema es una forma de darle seguimiento y control, es ir midiendo el
avance del proyecto, a través del reporte de las actividades y de la parte
financiera”.
Mirian Cruz Peralta - Alcaldía de Yalagüina
“Es un sistema estructurado de componentes, actividades, resultados y otros
instrumentos donde se registra a los beneficiarios, las lecciones aprendidas,
los datos de Línea de Base”.
Sergio Herrera, MAGFOR
De igual manera, los cofacilitadores y la
contraparte del Programa consideran que el
monitoreo tiene las siguientes aplicaciones en la
vida de los proyectos:
▪▪ Ayuda a todos los actores en la toma de
decisiones, mediante los informes y reportes
de líneas de base, visitas de campo y de
ejecución de actividades.
▪▪ Colabora con la administración y planeación
de los proyectos, mediante el informe
financiero, el cual contiene los soportes físicos
de cada acción.
▪▪ Asiste a todos los actores para una mejor
rendición de cuentas de la ejecución técnica
y financiera de los proyectos.
▪▪ Ayuda a comprender cómo las intervenciones
del Programa/proyecto generan impactos
en los territorios y sectores empresariales
seleccionados.
ii. La Responsabilidad Compartida en el SMVI entre Pymerural,
Cofacilitadores, Contraparte y Socios
Compartir la responsabilidad del monitoreo,
desde la perspectiva de los usuarios, tiene una
connotación estrechamente relacionada con
la participación de los cofacilitadores públicos
y privados en la implementación del SMVI,
y rompe con el esquema tradicional de que
“generalmente son los donantes quienes deciden
qué se debe lograr y cómo se hará para lograrlo
16
en la intervención”. En esta experiencia, se
entiende como “participación” el involucramiento
“directo” de la organización cofacilitadora en
todo el proceso de monitoreo y valoración del
impacto, que implica una coordinación basada
en el cumplimiento de las responsabilidades
que cada parte interesada debe desempeñar.
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
Responsabilidades de las Organizaciones
Cofacilitadoras
▪▪ Construye, junto con el Programa la lógica de
impacto, expresada en el Marco Lógico de las
intervenciones. Esto se vincula con el SMVI,
porque es en esta etapa que son establecidas
las metas, expresadas en indicadores, que
luego el cofacilitador presenta ante el Comité
Operativo de Pymerural para la aprobación
del proyecto, metas que posteriormente serán
medidas por el SMVI.
▪▪ Dispone, y/o responsabiliza a una persona,
para que específicamente se dedique al SMVI.
▪▪ Con asesoría y acompañamiento de Pymerural
ejecuta los procesos de monitoreo y/o de
verificación de impacto en sus proyectos.
Algunas veces participan consultores externos,
en este caso, forman equipo de trabajo con
este consultor y generalmente se comparten
– aprenden nuevas habilidades. Participan en
la recolección de datos, sesiones de reflexión,
revisión y aprobación de documentos.
▪▪ Ofrece asistencia técnica y asesoramiento
sobre el uso y manejo de la plataforma online.
(Debe tomarse en cuenta que durante la
experiencia hubo rotación de personal en
las instituciones públicas, lo que conllevó
a desarrollar procesos de capacitación y
fortalecimiento en varias ocasiones).
▪▪ Promueve espacios de reflexión colectiva a
lo interno del cofacilitador y con los grupos
metas, para analizar los datos que arroja el
monitoreo.
▪▪ Informa a la gerencia de Pymerural sobre
la ejecución de los proyectos a nivel de
resultados o logros e impactos.
Responsabilidades
Programa
de
la
contraparte
del
▪▪ Verifica la ejecución física y financiera de los
proyectos.
▪▪ Rinde cuentas a las autoridades nacionales.
▪▪ Utiliza los resultados de los estudios que se
realizan como parte de la implementación
del SMVI, en la toma de decisiones en los
proyectos – Programa.
Responsabilidad de los sectores empresariales
beneficiarios del Programa
▪▪ Asume la responsabilidad de disponer de
manera oportuna de los datos del SMVI, tanto
los de las acciones de levantamiento de datos,
como los de las actividades de seguimiento.
▪▪ Utiliza la información que genera el Sistema,
para crear oportunidades de gestión y
aprendizaje. Algunas empresas, a partir de su
participación en el proyecto, se interesaron
por implementar contabilidad a fin de manejar
mejor los ingresos y gastos.
▪▪ Reporta a nivel de actividades, la ejecución
física y financiera.
▪▪ Provee información veraz relacionada con los
indicadores del Programa.
▪▪ Soporta la ejecución financiera con la
documentación adecuada.
Responsabilidades de PyMerural o Unidad
Ejecutora
▪▪ Asegura que el personal que está involucrado
en la implementación del SMVI entienda muy
bien la lógica de impacto y su implementación.
▪▪ Brinda asistencia técnica y asesoramiento
para la implementación del Monitoreo de
Impacto, esto implica la determinación de la
muestra, diseño de instrumentos, análisis, y
devolución de los datos.
▪▪ Asegura el funcionamiento técnico de la
plataforma online del SMVI.
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
17
iii. Los Indicadores del Sistema
El SMVI tiene dos tipos de indicadores: primero, los que miden los efectos de las acciones del proyecto
en el grupo meta, que a su vez están divididos en indicadores globales, entre ellos: empleo, escala,
ingreso neto y los indicadores específicos, que calculan: productividad, adopción de Buenas Prácticas
Agrícolas y Buenas Prácticas de Manufactura; segundo, los que miden los efectos del acompañamiento
de la Unidad Facilitadora hacia el cofacilitador, llamados Indicadores de Desempeño.
Programa
Unidad Facilitadora
Contraparte y
cofacilitadores
Empresas
Generamos capacidades para el desarrollo sostenible
Indicadores que miden
el efecto del
acompañamiento de la
Unidad Ejecutora hacia
el Cofacilitador
Indicadores que miden efectos
de las acciones del proyecto en
el grupo meta: empresas según
la cadena o rubro
Indicadores de desempeño
Indicadores globales y específicos
a. Indicadores que miden efectos de las acciones del proyecto
Los indicadores globales
Pymerural ha adoptado la Norma DCED,³ para medir los logros en el Desarrollo del Sector Privado (The
DCED Standard for Measuring Achievements in Private Sector Development). Esta Norma contempla
tres indicadores de impacto, generalmente llamados “globales”. Éstos son: Empleo, Ingreso Neto
Adicional y Alcance o Escala. Se mide el empleo: permanente, temporal y el equivalente del temporal.
Este último se obtiene dividiendo las horas de trabajo de varios trabajadores a tiempo parcial por la
cantidad de horas de un período laboral completo. Antes de adoptar la Norma, se medía el empleo
temporal y permanente en número de personas, no se calculaba el equivalente.
“…Si 200 productores de caña han recibido asistencia técnica y capacitación,
por ejemplo, en Buenas Prácticas Agrícolas, luego tengo que ver cuántas de
esos 200 aplican BPA, y esos son los que contabilizo como mi escala”.
Asesora PyMerural
El indicador del ingreso, antes de emplear la Norma DCED, se medía ingreso por venta; con la Norma
se mide Ingreso Neto Adicional, que es la cantidad total de ganancias adicionales que una empresa
ha obtenido desde el inicio del proyecto. El alcance o escala es el número de empresas o productores
que se están beneficiando; no son las que reciben un servicio del proyecto, sino aquéllas que logran
implementar cambios en sus empresas a partir de los servicios. Los indicadores globales se miden en
la Línea de Base, que se hace al inicio de cada intervención y en las mediciones posteriores se valoran
los cambios.
Cabe observar en la tabla siguiente el Objetivo Superior de Pymerural y cómo se expresan en el
ejemplo del proyecto de la Cadena de Dulce de Panela los indicadores globales, antes y después de
la adecuación a la Norma del DCED.
18
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
Nivel
Indicador
Indicador ajustado con la Norma DCED
• Al final del proyecto se observan
mejoras en el nivel de vida del grupo
meta.
15% de beneficiarios
manifiestan mejoras en su
nivel de vida, respecto a
mejoras de sus viviendas,
alimentación y educación de
sus hijos(as).
Contribuir a la
reducción de la
pobreza rural
mediante el
incremento de
ingresos y empleos en
la Cadena de Valor de
Dulce de Panela.
• Al final del proyecto se atendieron
a 112 productores de caña, 45
procesadores de dulce de panela
y 51 comercializadores, para un
total de 208 beneficiarios con la
ejecución del proyecto.
20% de crecimiento en
empleos permanentes al final
del proyecto.
20% de crecimiento en
empleos temporales al final
del proyecto,
15% del empleo permanente
y temporal son mujeres y/o
jóvenes.
10% de incremento en los
ingresos económicos de los
actores de la cadena.
Al final del proyecto se generan 563
empleos temporales, que equivalen
a 104 empleos fijos, para un total de
55 empleos equivalentes adicionales
respecto a LB
• Al final del proyecto 28 empleos
temporales son ocupados por
mujeres, que equivalen a 4 empleos
fijos.
• Al final del proyecto al menos 56
empleos temporales son ocupados
por jóvenes, que equivalen a 8
empleos fijos.
Al final del proyecto se incrementa
en 64% el ingreso neto adicional
para toda la cadena, en un total de
U$196,812 respecto a LB.
Los indicadores específicos
Se ubican en el ámbito del crecimiento
económico y cambios de las cadenas y pueden
diferir, según la naturaleza del proyecto, por
ejemplo: el SMVI “mide”, como parte de los
cambios en las cadenas, la implementación de las
Buenas Prácticas de Manufacturas, en cadenas
de alimentos, como rosquilla somoteña, queso
y panela. En cadenas productivas, como la de
frijol, bambú, y caña, “mide” el cumplimiento de
las Buenas Prácticas Agrícolas.
Como puede observarse, los indicadores
globales y específicos de los proyectos, se
centran en “apreciar los cambios” acordados
entre el Programa y el Cofacilitador cuando
aprueban la lógica del impacto, es decir,
representan los intereses de ambos. Estas
aseveraciones sustentan que la responsabilidad
compartida del SMVI desarrollado por Pymerural
tiene una característica: fomenta la participación.
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
19
b. Los Indicadores de Desempeño de los Cofacilitadores
A finales del año 2010, Pymerural fue objeto de
una evaluación intermedia de parte de COSUDE.
La evaluación recomendó “definir indicadores
para monitorear el efecto directo sobre el desarrollo
de capacidades de los cofacilitadores”. Esta
sugerencia hace ver una particularidad del
diseño del Programa, donde su concepto y
enfoque de trabajo dice que trabajará mediante
actores locales y que es primordial desarrollar
en ellos, capacidades para la atención de las
cadenas productivas. La evaluación consideró
que Pymerural debía formular indicadores que
le contribuyeran a “medir” precisamente el
desarrollo de capacidades en los cofacilitadores
y no solamente en determinar el alcance a nivel
de las empresas.
Para crear estos indicadores, Pymerural se basó
en las cuatro dimensiones del desarrollo de
capacidades (Teoría de la Mariposa), para valorar
el fortalecimiento de los cofacilitadores públicos
y privados producto de su acompañamiento
técnico. Los indicadores se miden a partir
de la percepción de y por los cofacilitadores,
utilizando para ello una escala de Likert con
valoración alto, medio y bajo. Un aspecto clave
de estos indicadores es que en los ámbitos de
desarrollo del recurso humano y organizaciones
se incluye aspectos relacionados con el SMVI,
como la capacidad de explicar el marco lógico,
así como el manejo del Sistema de Monitoreo.
Tabla 1. Indicadores de Desempeño de los Cofacilitadores
Ámbito /Alcance
Indicadores
Desarrollo
de Recursos
Humanos
Capacidad de explicar Marco Lógico del proyecto y la
(s) lógica (s) de impacto de cada intervención.
Desarrollo
Organizacional
Desarrollo de
capacidades
Marco Regulatorio
Redes
Funciones/actividades de co-facilitación incluidos en
el organigrama institucional, presupuesto regular y
capacidad de incidencia en decisiones estratégicas de
otros departamentos.
El co-facilitador maneja el SMVI de manera correcta
(cualitativo y cuantitativo), y puede explicar la pertinencia
de los indicadores
Capacidad del co-facilitador de diseñar y liderar
procesos o establecer relaciones relevantes con
instituciones (lobbying), para la formulación de política/
estrategia a nivel nacional /local y/o introducir normas
o reglamentos.
El co-facilitador asume de manera eficiente el liderazgo
en convocatorias de cadena o en ausencia de un
Comité: El cofacilitador participa de manera activa
en redes relacionadas con la actividad del proyecto,
logrando incidir en el diálogo público-privado.
Capacidad de la institución de captar otros recursos
y/o firmar convenios de colaboración con otras
instituciones destinados al fomento de la Mipyme.
20
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
El informe de la segunda medición, realizada en noviembre de 2012, refleja cómo en su conjunto los
cofacilitadores fortalecieron sus capacidades a partir de su participación en los proyectos, y expresan
cambios en la gestión del mismo. El gráfico siguiente muestra el avance de los cofacilitadores en estos
indicadores, se observa que se lograron buenos resultados en el 83% de los indicadores, siendo
precisamente el uso del SMVI el indicador que presenta debilidad en cuanto a que su uso aún no logra
instaurarse de forma sólida en las entidades, no obstante, se logró a nivel personal un buen manejo de
este tema.
Valoración de los Indicadores de Desempeño
”Los indicadores de desempeño nos muestran en qué línea vamos como
cofacilitador…ayuda a abandonar costumbres que se tienen, no siempre
tenemos la costumbre de planificar, de cumplir, de monitorear, éstos [se refiere
a los indicadores] son una herramienta para el personal, para la institución”.
Planificación Alcaldía de Yalagüina.
“En Yalagüina, un tema serio era el uso del suelo para la producción de
ladrillos; la necesidad era cómo regularlos y se mejoró con una Normativa
del Uso del Suelo para la producción de ladrillos, es un ejemplo de cambios
en el tema de marco regulatorio, que a su vez generan capacidades en el
cofacilitador cuando impulsa estos procesos”.
Asesora PyMerural.
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
21
iv. El Desarrollo de Capacidades en los Cofacilitadores y sus
Resultados
a. Capacidades encontradas en
los cofacilitadores
Para rescatar esta valoración, primeramente es
necesario conocer las capacidades desarrolladas
por los cofacilitadores antes de su participación
en esta experiencia con Pymerural. En general,
los cofacilitadores comparten casi los mismos
niveles de desarrollo, en lo que se refiere a la
capacidad de monitoreo; expresaron que: “No
contaban con experiencia en monitoreo de
impacto, no poseían un sistema para administrar
información de monitoreo y tampoco contaban
con instrumentos para recopilar información de
monitoreo”. De igual manera, UNAG Madriz
y la Cooperativa Multisectorial GERSON,
expresaron en el análisis de sus debilidades:
“Desconocimiento de los instrumentos y el tema
del sistema de monitoreo” y “Sin experiencia
en Sistema de Monitoreo”, respectivamente.
Sin embargo, ambas organizaciones contaban
con procedimientos para la toma de decisiones
e involucraron a sus asociados a través de
asambleas ordinarias y extraordinarias, plenarias
y de junta directiva.
b. El proceso de desarrollo de
capacidades
El desarrollo de capacidades constituyó un
proceso de enseñanza aprendizaje, que abarcó
varias temáticas para garantizar la ejecución
e implementación del SMVI. El personal de
Pymerural, -asesor y responsable del soporte
técnico- con el apoyo de los asesores temáticos,
desarrollaron la capacitación; algunas de esas
sesiones fueron en grupo, otras individuales,
bajo un enfoque de formación continua que,
sobre todo, exigió tiempo y dedicación. La
tabla a continuación expone las temáticas y sus
contenidos.
Los aspectos anteriores no quieren decir que los
cofacilitadores no han acumulado experiencia,
conocimiento y aprendizaje en la ejecución de
proyectos, en realidad lo que significa es que han
ejecutado proyectos, en los cuales, los sistemas
de monitoreo y evaluación han sido ejecutados
desde los Programas y/o agencias donantes y
no han sido partícipes de los aprendizajes, ni
de los insumos generados por los mismos. Esta
situación, incide directamente en la población
meta ya que generalmente son consultados para
obtener información, pero no son convocados
para conocer los resultados. En este sentido, a
veces hay desánimo, desconfianza y una actitud
a no proveer o proveer a medias datos sobre sus
empresas.
Ejecutamos un proyecto, que el financiador traía contratado un consultor
desde Managua que hacía la línea de base y la medición, organizaba los
trabajos de campo, pero ellos, llegaban y se iban.
UNAG - MADRIZ
22
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
Temáticas y/o instrumentos
Contenidos
Uso del módulo de proyectos de la
plataforma web
Diseño de la plataforma, estructura del módulo de
proyecto, y el contenido de cada una de las ventanas
que conforman el módulo, cómo se calcula y reporta el
avance físico y financiero del proyecto
Uso del módulo de instrumentos de la
plataforma online
Registro de las empresas beneficiadas por las acciones
del proyecto con la finalidad de determinar el aporte de
las partes involucradas.
Módulo de Línea de Base de la plataforma
Digitación de encuestas y emisión de reportes para
interpretar la información.
Medición del efecto de las actividades de
los proyectos a través de: diagnósticos,
Líneas de Base y mediciones posteriores.
Diseño de instrumentos para levantar información en
campo, diseño de muestra, validación de instrumentos,
interpretación y análisis de la información, devolución de
la información ante el sector empresarial, elaboración
de informes de Líneas de Base y mediciones,
conceptualización del estándar del Comité de
Donantes, cadenas de resultados, cambios sistémicos,
crecimiento económico y reducción de pobreza.
La capacitación fue realizada en el territorio del
cofacilitador. Los procedimientos de Línea de
Base y de diagnóstico fueron utilizados como
instrumentos para consolidar los aprendizajes.
Una dificultad que se presentó y que requirió
de acompañamiento fue la redacción de logros
y la elaboración de criterios para ponderar el
valor numérico de 0 a 100 del avance de cada
actividad, para cumplir con el indicador, y así
valorar si se está cumpliendo en tiempo y forma,
caso contrario, podría resultar un dato importante
para analizar las causas y tomar decisiones para
su cumplimiento.
Los resultados de ese proceso fueron:
• El responsable del SMVI, los técnicos y en el
personal de finanzas en los cofacilitadores,
desarrollaron capacidades para un mejor
control,
seguimiento,
apropiación
y/o
comprensión de la dinámica del proyecto..
• Se crearon las capacidades para que el
personal a cargo del SMVI, oriente y participe
en los procesos de investigación que requiere
la ejecución de Línea de Base y los estudios
de medición.
• Los técnicos capacitados desarrollaron
habilidades para observar cómo se alcanza el
cambio que se proyectó en el marco lógico del
proyecto; y cómo se presenta en la dinámica
del sector empresarial y de las empresas.
• A medida que utilizaron los diferentes
instrumentos de monitoreo y de mediciones,
el personal técnico fortaleció sus habilidades
para trabajar en equipo, incidiendo en la toma
de decisiones en el ámbito del proyecto.
• Respecto al uso de la plataforma online, el
personal a cargo perfiló una meta común:
lograr introducir una descripción adecuada de
los logros alcanzados y aplicar acertadamente
una ponderación del alcance de la actividad,
generando con ello credibilidad en los
reportes.
• Mediante las actividades se desarrollaron
habilidades para conocer y distinguir los
cambios cualitativos y cuantitativos de la
intervención.
La capacitación fue para mí una experiencia nueva como técnico, muy valiosa,
en temas de desarrollo de capacidades locales, la parte de encuestas, de
manejar sistemas de base de datos, manejar aportes de personas, aspectos
financieros, la parte de comunicar, de elaborar informes y cosas que estén
adecuadas al requerimiento de quienes lo piden.
Lesly Buezo
Técnico de monitoreo, Alcaldía de Yalagüina
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
23
VI. Aprendizajes y
Lecciones aprendidas
Los aprendizajes que se presentan a partir de hallazgos, constituyen una visión de las cualidades del SMVI.
Hallazgos
Aprendizaje individual
Todas las herramientas que posee la plataforma son fáciles
de utilizar y aplicar, no es algo sofisticado; en el proceso de
capacitación y aprendizaje ha sido una nueva experiencia de
gran valor en este campo. UNAG Nueva Segovia
La plataforma online
del SMVI tiene un
manejo sencillo,
accesible y seguro.
Es confiable…es adaptativo, es un sistema que se puede
implementar en cualquier institución pública o privada, va a
estar en dependencia de cómo lo quiera ver la institución o
para programas específicos. MAGFOR
La plataforma online permite llevar el seguimiento a todos los
proyectos de una forma homologada, para diferentes tipos de
proyectos en cuanto al concepto de monitoreo de impacto.
Asesora de Pymerural
Pymerural promueve
en los cofacilitadores
la apropiación del
SMVI, mediante
el desarrollo de
capacidades
en monitoreo y
verificación del
impacto
El SMVI, como
instrumento para
conocer el avance
y el alcance de la
implementación del
proyecto
Aprendizaje organizacional
Se aprendió a tomar
decisiones oportunas
a medida que se
implementaba el proyecto.
UNAG Madriz
Aprendí a levantar líneas de base, levantamiento de
mediciones, análisis de resultados, elaboración y redacción de
logros, de informes. UNAG Madriz
Se han adquirido nuevos
conocimientos sobre
monitoreo y sobre su uso,
manejo y utilización en la
A saber formular los logros y a analizar los resultados de una
toma de decisiones en la
actividad, al principio no sabíamos, pero nos capacitaron y
comprendimos que las actividades deben estar soportadas con ejecución del proyecto.
memorias, fotos, listas de asistencia, facturas. UNAG Madriz. UNAG Nueva Segovia
Monitorear el Impacto es un sistema completo de información
donde día a día vamos analizando los datos para ver en
qué estamos mal y en qué estamos bien y de esta manera
tomar algunas decisiones para el beneficio de la ejecución
del proyecto, todo esto según un estándar al que estamos
adecuándonos como proyecto. Alcaldía de Yalagüina
El Sistema nos ha
ayudado a valorar como
institución, que podemos
ejecutar más proyectos
en menos tiempo. Quizás
no lo hacíamos porque no
teníamos esta herramienta,
es decir, el Sistema de
Monitoreo. Alcaldía
Yalagüina
Es un sistema confiable, específico y bien dirigido, que
refleja los logros, los impactos generados por cada actividad
ejecutada y lo dicen los informes de medición, los de línea de
base y los de medición de impacto intermedia. De esa forma
hemos medido el impacto y los cambios. MAGFOR
El Sistema de Monitoreo
permite revaluar
inmediatamente, planificar
actividades, hacer reajustes
de presupuesto, hacer
evaluación de eficiencia,
hacer las evaluaciones
de rendimiento de los
proyectos, de acuerdo a
cómo van avanzando en
las actividades y con el
presupuesto ejecutado.
Pymerural
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
25
Hallazgos
Aprendizaje individual
Aprendizaje organizacional
El SMVI, como instrumento
para conocer el avance y el
alcance de la implementación
del proyecto
El sistema de monitoreo sirve para la toma
de decisiones y para llevar el control de las
actividades y de lo financiero de cualquier
proyecto. Omar Jiménez, Técnico de monitoreo,
UNAG Madriz
El SMVI contribuye a valorar
el impacto mediante las Líneas
de Base y sus mediciones
La Línea de Base y sus diferentes mediciones a
lo largo de la vida del Programa, proporcionan
una valoración acerca del efecto de las acciones
del Programa y/o proyecto en la población meta,
en las empresas.El avance del proyecto y/o
Programa se hace visible en el tiempo
El avance del proyecto y/o
Programa se hace visible en el
tiempo
El SMVI es un mecanismo
para sustentar la credibilidad
ante la población meta
Con el SMVI, los cofacilitadores han
experimentado una nueva experiencia. Consiste
en el monitoreo de actividades y la valoración
del impacto, incluida la acción de compartir
la información con las empresas; superando
la práctica de enfocarse solamente en el
seguimiento a las actividades.
Compartir los resultados de
las Líneas de Base y de las
mediciones de impacto sustenta la
credibilidad de los cofacilitadores
ante las empresas participantes en
los proyectos.
De la lectura de los aprendizajes expresados
por participantes en esta experiencia, surge la
pregunta: ¿Cuál es la trascendencia de estos
aprendizajes?
En primer lugar, de manera individual se ha
logrado:
• La utilización y manejo del SMVI mejora
sustancialmente las capacidades técnicas
para
ejecutar,
apropiadamente,
las
actividades a realizar, desarrollar el sentido
de responsabilidad, para cumplir en tiempo
y forma la ejecución del proyecto, lo que se
visualiza en la calidad del trabajo en cada
responsable del Sistema.
• Manejar una plataforma online, que permite
ingresar y actualizar la información con
herramientas fáciles de utilizar y aplicar,
caracterizándose como confiable, dinámica y
flexible, que favorece reflejar los logros y el
impacto en la ejecución de cada proyecto;
mostrando la información en tiempo real,
apoyando la toma de decisiones oportunas
en pro del cumplimiento de los indicadores.
Proporciona confianza en la información
que ingresan en el Sistema debidamente
soportadas por los medios de verificación.
26
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
Lecciones aprendidas
De manera individual
En el plano Institucional
El SMVI es una herramienta de trabajo para
medir indicadores, y con ello el impacto del
proyecto.
Para el personal técnico responsable del SMVI,
esta fue su primera experiencia a cargo de un
sistema de monitoreo y valoración de impacto.
Factor clave de su experiencia es que en la
práctica se constató el rol de los indicadores y
cómo éstos pueden ser medidos a partir de la
ejecución de las actividades planificadas.
La Institución se posiciona del SMVI. La
experiencia ha permitido observar cómo se
posicionan los cofacilitadores de este tipo de
sistema, por ejemplo, cómo se asimila el rol, la
importancia y conceptos de los indicadores.
El SMVI permite aprender cómo funcionan
los proyectos.
La experiencia de estar a cargo de un SMVI ha
sido enriquecedora, porque se conoce cómo
funcionan los proyectos en los territorios. La
explicación de este aprendizaje es que se expone
el avance de las actividades, y es a través de su
cumplimiento que se alcanzan los resultados.
La plataforma online puede ser utilizada con
éxito por personal que no es informático.
Capacitar en el manejo de la plataforma online
no fue fácil, porque muchos de ellos no eran
informáticos y para algunos de ellos fue difícil,
sin embargo, se logró que ésta fuese usada
adecuadamente.
Los cofacilitadores tienen dificultades para
adoptar sistemas complejos como el SMVI,
que es un sistema completo. La mayor limitante
para asumir un sistema, como el utilizado por
PyMerural -monitoreo y valoración del impacto-,
tiene que ver con los propios requerimientos
institucionales de cada cofacilitador y la falta de
información secundaria estadística, que pueda
ser usada para analizar el comportamiento de
los sectores o rubros económicos.
El SMVI es un instrumento que fortalece
la gestión del Programa. Provee información
constante de las actividades que ejecutan los
proyectos -a través de la plataforma online- y
del impacto que estas actividades generan
en los grupos metas a través de líneas de
base y mediciones. A partir de ello es posible
tomar decisiones para ajustar la estrategia y la
ejecución; también provee datos importantes
sobre resultados del Programa en términos de
su aporte a la reducción de la pobreza.
El SMVI permite aprender lo importante
que es compartir información y tener acceso
a ella. Para algunos participantes esto es lo más
importante en su aprendizaje.
“…El mecanismo de trabajo te lo da el proyecto que es cuantificado en el
Sistema, te dice los aportes que van recibiendo los beneficiarios…la alcaldía
ha cambiado mucho, hay empresarios que han aprendido que deben regresarle
a la Alcaldía a través de los impuestos”.
Alcaldía Yalagüina
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
27
VII.Conclusiones
El SMVI es un instrumento que contribuye
a lograr mayor comprensión de la
implementación de las intervenciones del
Programa y sus proyectos.
Los equipos técnicos de los proyectos
lograron visualizar cómo la lógica del impacto
o marco lógico y las inversiones financieras van
generando cambios en el sector empresarial;
han logrado apreciar la importancia de la Línea
de Base, como punto de partida para valorar el
impacto. Se comprende que son los elementos
que sustentan la obtención de una comprensión
de cómo en la práctica diaria se aplica lo
propuesto en un marco lógico.
El SMVI provoca cambios en la cultura
organizacional.
La UNAG filial Madriz y Nueva Segovia, la Alcaldía
de Yalagüina y la DGPSA del MAGFOR, han
ajustado su cultura organizacional relacionada
con el monitoreo y valoración del impacto.
Habitualmente son los donantes los únicos
responsables de la ejecución del monitoreo de
proyectos, y casi siempre, los procesos de línea
de base y mediciones son realizados por equipos
externos y sólo se comparte la información
generada. Por lo general, en los Consejos
Técnicos no es costumbre utilizar un informe de
monitoreo. No fue fácil para Pymerural, introducir
el SMVI, y se requirió de tiempo para que las
organizaciones entendieran su objetivo y dejaran
de verlo como una “condición” del proyecto.
Los indicadores de construcción de
capacidades en los cofacilitadores
Se conocen como “indicadores de desempeño”.
Durante la reflexión de la experiencia,
desempeño fue entendido como: el desarrollo de
capacidades en los cofacilitadores. Su propósito
es medir “el asesoramiento que hace Pymerural
al cofacilitador, en términos de desarrollo del
recurso humano y desarrollo organizacional
en temas transversales importantes para el
Programa”.
Desde la perspectiva de los cofacilitadores,
estos indicadores han contribuido a poner
la mirada en el “impacto” de los proyectos y
progresar en la apropiación de la necesidad de
darle seguimiento a los proyectos a través de un
sistema de monitoreo. Desde la perspectiva de
la coordinación de Pymerural, los cofacilitadores
han logrado avances en sus acciones de manejo
del proyecto, y cambios en: el concepto de
sistema de cadenas, en su percepción de la
reducción de la pobreza, y en sus capacidades
para gestionar fondos. El análisis de los
datos, deja en claro que en su conjunto estos
indicadores mejoran el vínculo de la entidad
cofacilitadora con el grupo meta del proyecto.
El SMVI como instrumento de aprendizaje
La responsabilidad compartida hace que el
SMVI sea considerado como un instrumento de
aprendizaje, de toma de decisiones, de vigilancia
constante de las actividades del proyecto y sus
efectos. El personal a cargo del SMVI en los
cofacilitadores, ha entendido la responsabilidad
compartida como una delegación de tareas a lo
interno de cada organización, y como un vínculo
estrecho con el Programa. La información es
compartida, y es la base de un diálogo constante
entre la Unidad Facilitadora y los cofacilitadores.
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
29
La construcción de capacidades para el
monitoreo y valoración de impacto
Para un cofacilitador, al principio el SMVI es un
requisito básico para la implementación de un
proyecto, pero durante el proceso, la idea de
que esto es “una obligación” va quedando atrás.
La construcción de capacidades, realizada
por Pymerural, ayudó a generar cualidades
institucionales, entre ellas, la comunicación
y el flujo de información acerca del desarrollo
del proyecto entre: a) El personal técnico del
proyecto, b) El personal técnico del proyecto
y los asesores de Pymerural, c) El personal
técnico del proyecto y la MIPYME.
Institucionalmente, se comprende la importancia
de delegar en una persona la responsabilidad
del monitoreo; los Consejos Técnicos mejoran,
porque se toman decisiones informadas y
se comparte el conocimiento de logros y
cumplimiento de actividades; la información sobre
el proyecto fluye en diferentes niveles, y cambia
el liderazgo institucional. Estas aseveraciones
son percibidas principalmente por el personal de
los proyectos, que valoran la experiencia como
una ventaja para la organización.
En el personal a cargo del monitoreo, la
satisfacción específica más frecuente es: “poder
ver el desarrollo de las actividades a través de
su cumplimiento y, sobre todo, sus efectos”.
La experiencia ha creado valores, entre ellos:
confianza, trabajo en equipo, calidad en lo que
se reporta, responsabilidad. En las relaciones
interpersonales e institucionales, se cohesiona
el equipo de trabajo y mejora el ambiente para
aprender.
El SMVI no acumula dificultades, las ajusta
en la marcha.
A lo largo de la vida del Programa, el sistema
ha enfrentado diferentes “cuellos de botellas”.
Con la plataforma online fueron referidos al
no cumplimiento de las fechas establecidas
para introducir los datos. Esto implicó revisar
y determinar una fecha para los públicos y otra
para los privados.
En los técnicos a cargo del Sistema, la mayor
dificultad fue la de redactar logros y estimar el
porcentaje de avance.
La contraparte del Programa considera su
mayor dificultad los criterios para determinar el
porcentaje de avance, y que muchas veces los
datos financieros no estaban paralelos con la
ejecución física.
El monitoreo de impacto enfrentó retos que
también fueron subsanados. Un ejemplo
de ello es que la mayoría de la información
para medir los efectos de las intervenciones
en las empresas se toma de las unidades
empresariales/productivas, y éstas, además
de no llevar registros, tienen un alto nivel de
informalidad. Esto incide de manera negativa
en la calidad de los datos obtenidos. Por ello,
el Programa asesoró a los cofacilitadores, para
que se desarrollaran instrumentos de medición
con secciones bien detalladas en ventas, costos,
producción y otros.
Una cualidad del desarrollo de capacidades, es
que éste ha sido un proceso constante, dirigido,
con metas y propósitos definidos, mediante
el cual se fortalecieron las competencias
requeridas para la implementación del SMVI.
30
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
Bibliografía
Morra, L., & Amy, F. (2001). Evaluaciones con Estudios de Caso. n.d.: n.d.
PyMerural. (2010). Sistema de Monitoreo y Verificación de Impacto, Manual de Funcionamiento. n.d.:
n.d.
PyMerural. (2012). Informe de Medición de Indicadores de Desempeño. Managua: n.d.
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua
31
Glosario
Actividad: Una pieza discreta de trabajo,
típicamente representados por un contrato entre
el Programa y un contratista, socio o consultor.
Cofacilitador: Entidad pública o privada
(dependencias
ministeriales,
organismos
descentralizados, asociaciones empresariales,
centros de negocios, ONG, y otros), que
se hace responsable, según su facultad, de
la ejecución de las acciones apoyadas por
PyMerural y reciben capacitación y asesoría
para su fortalecimiento. (PyMerural, 2010).
Contraparte: Entidad oficial de Gobierno,
que actúa como interlocutor para los asuntos
de adecuación de estrategias y mecanismos
de intervención. En Nicaragua, la principal
contraparte es el Ministerio de Fomento, Industria
y Comercio (MIFIC). (PyMerural, 2010).
Empresas: Unidades empresariales incluidas en
la cadena de valor, que puede incluir productores
primarios, transformadores, comercializadores,
empresas asociativas o de otra naturaleza
jurídica. (PyMerural, 2010).
Encuesta: Recopilación de información de
un número específico de encuestados en una
población general determinada, utilizando un
conjunto de preguntas, para las cuales las
respuestas pueden ser cuantificadas.
Indicadores: Factor cuantitativo o cualitativo
o variable, que proporciona una forma sencilla
y fiable para reflejar los cambios vinculados
con una intervención, o ayudar a evaluar el
rendimiento de un sector de desarrollo; medios
para medir logros,.
Intervención:
Conjunto
coherente
de
actividades que comparten una cadena de
resultados individuales, y están diseñados para
lograr un cambio específico y limitado.
Línea de base: Es el análisis que describe la
situación antes de una intervención para el
desarrollo. Esto debe incluir el estado de los
indicadores antes de una intervención, que tiene
como resultado cambios en el nivel que se está
midiendo.
Programa: Un Programa es la unidad típica de
análisis para un donante, a menudo contratados
para un socio general o empresa.
Socio: Es toda aquella entidad de la cooperación,
pública, privada, Programa o proyecto con
el/la cual PyMerural establece acuerdos de
coordinación para la realización de actividades
conjuntas, principalmente vinculadas con las
intervenciones implementadas por las entidades
cofacilitadoras. (PyMerural, 2010)
Impacto: Positivos y negativos, primarios y
secundarios a largo plazo; efectos producidos
por una intervención de desarrollo, directa o
indirectamente, intencional o no intencional.
32
Sistema de Monitoreo y Valoración de Impacto
Experiencia y aprendizaje del Programa PyMerural en Nicaragua