Evaluación de impacto ACTITUD Programa preventivo de consumo

Evaluación de impacto
ACTITUD
Programa preventivo de consumo de alcohol
y drogas en la población escolar
María Elena Alvarado
Sergio Muñoz
Juan José Orellana
Mirza Retamal
Loreto Villanueva
1
Introducción
Contexto:
15% de los escolares en Chile, de 8º básico a 4º
medio han consumido marihuana en el último
año*.
59% de los escolares en Chile, de 8º básico a 4º
medio han consumido alcohol en el último año
ENFOQUE: la adquisición de competencias de autocuidado
durante la infancia y adolescencia, previenen conductas de
riesgo de consumo de sustancias.
* SENDA, Noveno Estudio de Consumo de Drogas en Población Escolar, Chile 2011.
2
Intervención diseñada
PROGRAMA:
ACTITUD “Activa tu desarrollo”
Es un programa de prevención universal de
alcohol y drogas cuyo propósito es:
Reducir consumo de alcohol y drogas en la
población escolar en Chile
A través de la formación de competencias para
la autogestión de riesgo en los escolares
3
Características del
Programa Actitud
• Programa se aplica de 1º básico a 4º medio.
– Capacitación a profesores
– 1 Manual de trabajo para cada profesor que aplica el
programa.
– 6 sesiones durante el año a ser aplicadas en hora de
orientación.
– 1 Cuaderno de actividades para cada alumno, diferenciado
según nivel.
4
Etapas del programa Actitud
• Diseño: abril a noviembre 2011
• Implementación:
– 1º año: marzo 2012 a diciembre 2012
– 2º año: marzo 2013 a diciembre 2013
• Al 2013 cubre el 73% del total de escuelas
municipales y subvencionadas del país.
5
Implementación
Capacitación On-line
capacitación
Nivel
central
Nivel
regional
Nivel
comunal
Escuela
Entrega de cuadernos y manuales
6
Pregunta de evaluación
• ¿Cuál es el impacto del Programa Actitud en el
desarrollo de competencias de autogestión de
riesgo de consumo de alcohol y drogas ilícitas?
• ¿Cuál es el impacto del Programa Actitud en la
reducción de la prevalencia del consumo de
alcohol y drogas ilícitas?
7
Teoría del Cambio
Insumos
Actividades
Productos
Resultados
Impactos
Recursos Humanos,
Financieros, otros
movilizados para apoyar
actividades
Acciones tomadas o
trabajo realizado para
convertir insumos en
productos especificos
Bienes y servicios
producidos y
entregados bajo control
del implementador
Uso de productos por
parte de poblacion de
interes
Objetivos finales del
programa o metas de
largo plazo
RRHH:
Oficina regional
Coordinador
comunal
Capacitadores
Educación para
estudiantes
6 sesiones educativas
al año a escolares de
1º básico a 4º medio
Nº de sesiones
desarrolladas en cada
curso al año.
Desarrollo de
competencias
para la
autogentión del
riesgo
FINANCIAMIENTO:
Impresión y
Distribución del
material
otros
Entrega de
material educativo
para el profesores
y alumnos
Capacitación anual
de los profesores
Manual del profesor
y cuaderno del
alumno
Capacitación local de
los profesores
Curso E-learning para
profesores
Implementación (Oferta)
Nº de niños intervenidos
Nº de profesores
capacitados localmente
Nº de profesores con
cursos e-learning.
Nº de manuales
distribuidos para
profesores y alumnos por
colegio intervenido.
Disminución del
consumo de
alcohol y drogas
en la población
escolar de Chile
8
Resultados (Oferta + Demanda)
Propósito de la evaluación
Medir el impacto del programa en el consumo
de alcohol y drogas en la población escolar
adolescente.
Aspectos del proyecto a evaluarse
1. Sub-competencia adquiridas por los alumnos,
diferenciadas por nivel
2. Competencia adquiridas por los alumnos,
diferenciadas por ciclo
3. Prevalencia de consumo de alcohol y drogas
9
Indicadores de resultado claves
1. Impacto en la adquisición de sub-competencias por nivel escolar.
Diferencia en el porcentaje de alumnos que adquieren la
subcompetencia en cada nivel entre las escuelas intervenidas y no
intervenidas.
2. Impacto en la adquisición de competencias por ciclo escolar.
Diferencia en el porcentaje de alumnos que adquieren la
competencia en cada ciclo entre las escuelas intervenidas y no
intervenidas.
3. Disminución de la prevalencia de consumo de alcohol y drogas
Diferencia en la prevalecia de consumo de último año de alcohol y
drogas en alumnos de 8º básico a 4º medio en las escuelas
intervenidas y no intervenidas.
10
Diseño de la evaluación
Diseño experimental: grupo tratamiento (inicio programa marzo
2014), grupo control (sin intervención)
Niveles de evaluación
Colegio
Nivel o ciclo
Unidad de aleatorización:
Escuelas
Evaluación de competencias
son por nivel y ciclo escolar:
1º a 4º básico
5º a 8º básico
1º a 4º medio
Alumno
Medición a nivel de alumno
Diseño Muestral
Diseño estratificado, multietapico
Universo
2000 escuelas
Región
RM
Tipo de
escuela
Municipa
l
subvenci
onado
Araucanía
Municipa
l
subvenci
onado
Iquique
Municipa
l
Subvenci
onado
12
Mínimo Efecto Detectable
13
Diseño de evaluación
Línea de
base 1
1º Medición
Marzo
2014
noviembre
2º Medición
2015
Año 1
Año 2
3º Medición
2016
Año 3
4º Medición
2017
Año 4
150 Control
150 experimental
• Seguimiento: En noviembre 2014-2015-2016-2017
14
Cronograma de Actividades
2013
Cronograma
Diseño de la
implementación
2014
2T
3T
4T
X
X
X
Diseño y selección de
la muestra
X
Preparación trabajo
terreno
X
1T
2T
2016
2017
20
18
3T
4T
1T
2T
3T
4T
1T
2T
3T
4T
1T
2T
3T
4T
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
X
1T
X
Trabajo de terreno
(línea base)
X
X
Monitoreo de la
implementación
X
X
Análisis de resultados
e informe de línea de
base
X
Seguimiento
X
Análisis y entrega de
informes parciales de
seguimiento e informe
final
2015
X
X
X
X
X
15
Presupuesto
Ítems
Diseño, Análisis y
Aseguramiento de
calidad
Trabajo de terreno
Costos US$
Equipo de
evaluación
%
$ 100.000
11,7
$ 12.000
1,4
$ 10.000
1,2
Encuestadores /
Supervisores
$ 375.000
43,9
Digitadores
$ 200.000
23,4
$ 80.000
9,4
$ 77.700
9,1
Especialistas
Monitoreo
Programa
Papel (Impresión)
Imprevistos 10%
Total
$ 854.700 100,016
Evaluación de impacto
ACTITUD
Programa preventivo de consumo de alcohol
y drogas en la población escolar
María Elena Alvarado
Sergio Muñoz
Juan José Orellana
Mirza Retamal
Loreto Villanueva
17