Nombre de Proyecto de Emprendimiento Social Nota Conceptual Tu logo Nota Conceptual 1 Índice Contenido Índice ......................................................................................................................................................... 2 1. Introducción ................................................................................................................................... 3 2. Antecedentes relevantes............................................................................................................ 3 3. Teoría de cambio .......................................................................................................................... 4 4. Indicadores y Medición .............................................................................................................. 7 5. ¿Por qué evaluar? ....................................................................................................................... 10 6. Preguntas de la investigación ................................................................................................ 10 7. Metodología de la evaluación ................................................................................................. 10 8. Potenciales desafíos ................................................................................................................. 11 9. Resultados..................................................................................................................................... 11 10. Calendario de actividades ................................................................................................... 11 11. Bibliografía ............................................................................................................................... 11 Nota Conceptual 2 1. Introducción En esta sección se describen: - el proyecto de emprendimiento social y quién lo operará, la motivación y el contexto de la intervención, el objetivo principal y los objetivos específicos del proyecto, la estructura del documento. 2. Antecedentes relevantes 2.1. Evaluación de necesidades Entender el contexto y las necesidades de la población objetivo es fundamental para diseñar una intervención de alto impacto y una evaluación de calidad. En esta sección se describen el problema o la necesidad que busca cubrir la intervención, tratando de responder las preguntas siguientes: - - ¿Cuál es la población objetivo? ¿Cuáles son los grupos con mayor necesidad y que se beneficiarían más de la intervención? ¿Cuáles son los problemas y las oportunidades que enfrenta la población objetivo? ¿Cuáles son las posibles explicaciones de por qué la población objetivo enfrenta esos problemas? ¿Qué desafíos quedan por enfrentar? Sea claro en las fuentes de la información que usa. 2.2. Revisión de evidencia En la sección anterior detectamos el problema, y las necesidades que queremos enfrentar. En esta sección revisaremos evidencia utilizada en el diseño del proyecto / intervención. 2.2.1. Evidencia entregada por la Experiencia Detalle aquí la evidencia basada en la experiencia profesional, el entendimiento del problema, vivencias, habilidades, etc. tanto de uno mismo como de los demás, conocido como conocimiento intuitivo o tácito. Detalle porqué, a través de su experiencia o la de otros, la solución propuesta resultará efectiva. Nota Conceptual 3 2.2.2. Evidencia sobre el Contexto Considerando el proyecto / intervención propuesto, detalle la evidencia relevante sobre el contexto. Detalle aquí la evidencia basada en la información que podemos recolectar sobre la comunidad, el marco regulatorio del país, la competencia (considere actores sociales, estatales, comerciales, etc), el contexto socio-político, etc, y como el proyecto se hace cargo del mismo. 2.2.3. Evidencia Científica-Causal. Detalle aquí la mejor evidencia rigurosa disponible relevante para el problema en cuestión. En esta sección vamos a revisar la evidencia científica-causal existente sobre el problema que estamos enfrentando. Utilice la guía entregada en el curso para buscar evidencia relevante. En esta sección esperamos que trate de encontrar al menos cuatro estudios relacionados con el problema que enfrenta tu emprendimiento, que cumplan con los requisitos de calidad revisados durante el curso. - ¿Los estudios revisados son relevantes para el proyecto? ¿Por qué? ¿En qué se diferencian el contexto de la evaluación con el contexto del proyecto? ¿En que se parecen? ¿Se puede usar los resultados para ajustar el diseño? ¿Qué lecciones generales emergen de la evidencia existente? (Tip: Revise la introducción y la revisión de literatura del estudio.) Considere ahora los aspectos más cruciales de la intervención. - ¿Hay evidencia acerca de intervenciones similares? - ¿Qué preguntas continúan abiertas? ¿Qué información se puede usar para afinar el diseño de estos componentes? 3. Teoría de cambio La Teoría de Cambio identifica la cadena de causalidad entre la intervención y el resultado final. Es decir, muestra la sucesión lógica de eventos que tienen que ocurrir para que un programa social alcance sus resultados deseados. Realizar este ejercicio es fundamental para el diseño y la evaluación de programas. Aunque existen maneras más complejas para el análisis de identificación causal, la cadena de resultados en la figura 1, es una manera simple, intuitiva y extremadamente útil para visualizar la teoría de cambio. Nota Conceptual 4 En la figura 1 se detallara los componentes de la teoría de cambio. Puede seguir el modelo propuesto o acomodar el diagrama para que refleje de la mejor manera la complejidad de su proyecto: - - - - - Necesidades: son los problemas identificados en la sección anterior que motivan una intervención y sobre los cuales se desea realizar un impacto. Pueden ser normativas, relativas, expresadas o percibidas. Intervención: Es la suma de insumos utilizados y actividades emprendidas para producir los bienes y servicios que constituyen la intervención a entregar al grupo de interés. Productos: son los bienes y servicios que resultan de la combinación de insumos y actividades. Resultados Intermedios: son las actividades o uso que la población de interés da al producto. Son los cambios en conocimientos, actitudes, capacidades y comportamientos que resulta de los productos. Se dan normalmente en el corto y mediano plazo. Resultados Finales: son los objetivos y resultados finales del proyecto. Pueden estar influidos por múltiples factores y se alcanzan normalmente después de un largo período. Riesgos y supuestos: Son los riesgos que pueden afectar a la consecución de los resultados esperados y las condiciones externas y necesarias que se deben cumplir para que la lógica de la cadena causal se mantenga intacta. Recuerde que idealmente, el diseño de una Teoría de Cambio se elabora hacia atrás: Empieza con la evaluación de necesidades (ver sección 1.1). Salta al impacto deseado o resultados finales. Identifica las precondiciones necesarias, es decir los cambios en Actitudes, Conocimientos, Capacidades y Comportamientos, y la relación entre ellos (resultados intermedios). Define los productos, insumos y actividades del proyecto. Explicite los supuestos entre cada etapa de la cadena causal. La figura debe acompañarse de un breve párrafo explicativo en el que se exprese la hipótesis causal y se describe la teoría de cambio de la intervención de la forma siguiente: “Si [insumos] y [actividades] producen [productos] esto debería conducir a [resultados intermediarios] que al final contribuirán al [resultados finales].” Nota Conceptual 5 Figura. 1. Ejemplo de diagrama de Teoría de cambio Necesidades Insumos / Actividades Productos Riesgos y Supuestos Nota Conceptual 6 Resultados Intermedios Resultados Finales 4. Indicadores y Medición 4.1. Indicadores En esta sección, se detallarán los indicadores tanto para seguir la implementación del proyecto como los resultados que se quiere evaluar. Los indicadores son métricas usadas para cuantificar o medir las dimensiones que un programa busca afectar, así como la forma en que se implementa un programa. Deben ser Específicos, Medibles, Atribuibles, Realistas y Focalizados (EMARF). En la Figura 2, se detallarán los indicadores de desempeño del proyecto, es decir los indicadores asociados a los insumos y actividades necesarios para realizar el proyecto (componentes “insumos/actividades” de la teoría de cambio), y los indicadores asociados a los productos resultantes de la transformación de insumos e actividades en bienes y servicios tangibles (componentes “productos” de la teoría de cambio). Los indicadores de desempeño permiten verificar que el proyecto se esté implementando tal como fue diseñado. A continuación se muestra un ejemplo de cómo completar esta tabla. Figura 2: Indicadores de desempeño del programa. Ejemplo: Programa de mejora de la educación para la prevención de VIH en Kenia Insumos, Actividades y Productos Insumos Indicadores Insumos 1: pósters pedagógicos sobre el VIH Gasto en impresión de pósters Insumos 2: Capacitadores Número de capacitadores disponibles Número de pósters impresos Actividades Actividad 1: formación para profesores sobre cómo enseñar acerca del VIH Número de capacitaciones realizadas Productos Número de profesores que asisten a los cursos Producto1: profesores formados Resultados de los profesores en pruebas de conocimiento sobre VIH Producto 2: los profesores formados Número de charlas sobre llevan a cabo charlas sobre VIH en realizadas en las escuelas las escuelas Producto 3: los pósters son utilizados en las aulas de clase Nota Conceptual 7 VIH Número de pósters expuestos en aulas de clase Para definir los indicadores de resultados (los asociados a los componentes “Resultados Intermedios” y “Resultados Finales” de la teoría de cambio), se deberá especificar claramente la operacionalización de conceptos, es decir el proceso deductivo que permite definir, delimitar e identificar las dimensiones de un concepto con el fin de reflejar sus propiedades a través de indicadores empíricos. Este proceso conlleva cuatro etapas: a) Definición teórica del concepto b) Descomposición del concepto en dimensiones c) Construcción de indicadores para cada una de las dimensiones d) En ocasiones, síntesis de indicadores (en forma de índices) En la Figura 3 se presenta un ejemplo de este ejercicio. La tarea que debe realizarse consiste en completar esta misma tabla de operacionalización de conceptos usando conceptos de la Teoría de Cambio de su propio emprendimiento. Además de la definición, las dimensiones y los indicadores, en la tabla también se ha incluido una columna sobre “Método de recogida de datos”. En caso de que el método de recogida de datos sea mediante un cuestionario diseñado para la evaluación de su emprendimiento, se pide que se formule la pregunta que se utilizaría para construir el indicador. Nota Conceptual 8 Figura 3: Indicadores de resultados del programa (operacionalización de conceptos) Ejemplo de operacionalización de un concepto sencillo (Edad) y de un concepto multidimensional (Acessibilidad a los servicios de salud) en una encuesta sobre uso de servicios sanitarios. Concepto Definición Dimensión Indicadores / Definición operacional Método de recogida de datos (defina la pregunta si la recogida es mediante cuestionario) Posible índice Edad Años cumplidos Ninguna De 1 a 99 años o más Pregunta de cuestionario: “Por favor, indique su edad”. No aplica Accesibilidad a los servicios de salud Mayor o menor posibilidad de tomar contacto con los servicios de salud para recibir asistencia Accesibilidad geográfica Tiempo medido en horas y minutos que se demora una persona en trasladarse desde su domicilio al centro de atención Datos administrativos del hospital: se emplea la dirección particular para calcular la distancia y el tiempo. Accesibilidad económica Nivel de ingresos del hogar Accesibilidad cultural Puntuación en una prueba de conocimiento sobre los servicios de salud disponibles Puntuación en una prueba de percepción de la importancia de los problemas de salud Nota Conceptual 9 Índice de accesibilidad a los servicios de salud que combina los Pregunta de cuestionario: “En el indicadores de último mes, ¿a cuánto ascendieron los accesibilidad ingresos totales en su hogar? Incluya geográfica, ingresos del trabajo, rentas de capital económica y o ayudas”. cultural. Test estandarizado Test estandarizado 4.2. Frecuencia del levantamiento de datos En esta sección, se explicará cuándo y con qué frecuencia se pretende levantar los datos, es decir si se van a levantar líneas base y de seguimiento durante la implementación del proyecto. En el caso que se realice la evaluación de impacto, también se debe especificar cuánto tiempo se debería esperar para observar los impactos y levantar los datos para medirlos. Las secciones 5 a 8 sólo aplicarán para los proyectos que contemplan una evaluación de impacto. 5. ¿Por qué evaluar? En esta sección se debe justificar las razones por las cuales evaluar el impacto del programa es útil o necesario. 6. Preguntas de la investigación En esta sección se definirán las preguntas de investigación más importantes para los operadores del proyecto. Se pueden definir otras preguntas secundarias que la evaluación debería responder. Para cada una de estas preguntas, se deberá formular claramente una hipótesis de trabajo. 7. Metodología de la evaluación En esta sección se deberá describir el método seleccionado para evaluar impacto. Por ejemplo, si se selecciona el método experimental se deberá desarrollar la idea de que la evaluación aleatoria elimina el sesgo. De seguido se debe de identificar el universo de elegibilidad: ¿a quién/qué estamos evaluando? Esta sección debe identificar grupos de tratamiento y comparación, el nivel de aleatorización así como una justificación del diseño. Se adjuntará un gráfico para explicar la metodología elegida. Nota Conceptual 10 8. Potenciales desafíos En esta sección se señalan algunos potenciales desafíos para que se realice la evaluación de impacto. 9. Resultados En esta sección se debe mencionar cómo se incorporarán los resultados de la evaluación a la toma de decisiones. A su vez, se deberá discutir cómo se difundirán los resultados de la evaluación. 10. Calendario de actividades En esta sección se debe desarrollar una línea de tiempo adonde se señale el calendario de actividades a desarrollar, tanto de la intervención como la evaluación (si aplica). 11. Bibliografía En esta sección final, se presentará la bibliografía de referencia (en particular de la evidencia relevante para el proyecto). Nota Conceptual 11