1.2_Notas del facilitador_EvaluaciondeNecesidades

Slide 1
(1 min.)
• Presente la sesión
Evaluación de Necesidades, la
Importancia de M&E
Sesión 2: Taller de Habilidades
Pedagógicas
Slide 2
Monitoreo y Evaluación
Assess
Design
Develop
Implement
Evaluate
Evaluación
Kevin Chen2003, Wikimedia
Diapositivas 2-3 (5 min.)
• La evaluación cubre aquellas
actividades que el instructor
emprende con el fin de evaluar si
la capacitación fue comprendida
por el estudiante y para identificar
aspectos de la capacitación que se
deben modificar o mejorar para el
éxito de la misma. Durante este
proceso los instructores recolectan
información sobre las necesidades
de los estudiantes y usan esta
información para guiar (canalizar
como en un embudo) sus ideas
sobre el diseño de la capacitación.
• Destaque los objetivos de
aprendizaje de esta sesión y
comente que en esta sesión los
términos “evaluación” y “M&E” se
utilizarán indistintamente.
Slide 3
Objetivos de Aprendizaje
• Para el término de esta sesión, usted:
– Sabrá por qué es importante llevar a cabo una
evaluación de M&E (evaluación del
aprendizaje)
– Conocerá la diferencia entre las técnicas de
evaluación formativa y sumativa
– Reconocerá que la capacitación es un proceso
iterativo y será capaz de ajustar su enfoque de
acuerdo a la retroalimentación de los
participantes
Slide 4
¿Qué es la Evaluación?
Slide 5
¿Qué es la Evaluación?
• “son aquellas actividades que lleva a cabo un
instructor— y los participantes en caso de autoevaluación— que entregan información para ser
utilizada como retroalimentación y modificar las
actividades de enseñanza y aprendizaje.”
Esta es una definición general que aplica a los
instructores, pero el énfasis en el elemento iterativo de
esta hace que pueda aplicarse también, en un sentido
más amplio, a otras actividades y profesiones.
Black, P. & Wiliam, D. 1998. Inside the Black Box: Raising standards through classroom assessment, King’s College, London
(5 min.)
• Pídale a los participantes definir lo
que entienden por “evaluación” y por
qué es un proceso importante.
5 min.
• Muestre la definición de
“evaluación” que ha sido extraída
del artículo académico ‘Inside the
Black Box: Raising Standards
Through Classroom Asessment’.
• Pregunte cómo esta definición se
podría aplicar a los contextos de
capacitación de los participantes.
Slide 6
Formativa
Sumativa
Evaluación
L.Miguel Bugallo Sánchez, Wikimedia
(3 min.)
• Existen dos tipos de evaluación, la
formativa y la sumativa.
• La formativa surge durante
el diseño, desarrollo y
entrega de la capacitación.
Durante la capacitación, la
evaluación formativa le
informa al instructor sobre
cualquier modificación que
debiera hacer al contenido
o al estilo de enseñanza
mientras la capacitación
ocurre, es decir, en tiempo
real.
• La sumativa ocurre al final
de la sesión de
capacitación y le informa al
instructor qué tan
exitosamente los
participantes han
alcanzado los
objetivos/resultados de
aprendizaje.
• Muestre la diapositiva número 6 y
cuéntele a los participantes que
existen dos tipos de método de
evaluación.
• Muestre la diapositiva número 7 y
defina los dos métodos.
Slide 7
¿Cuándo evaluar el aprendizaje?
• Dos categorías principales:
– Formativa: Ocurre mientras la
capacitación está siendo diseñada,
desarrollada y entregada.
– Sumativa: Usualmente se completa
inmediatamente después de finalizada la
capacitación.
• También puede llevarse a cabo semanas o meses
después de terminada la capacitación.
Slide 8
Ciclo de M&E
Evaluación precapacitación
Durante la
capacitación
Evaluación formativa
Post-capacitación
Evaluación
sumativa
(5 min.)
• El monitoreo y la evaluación es
todo un viaje. Comienza antes de
que la capacitación sea diseñada y
llevada a cabo, a partir de una
investigación sobre el
conocimiento actual, las
habilidades y actitudes de los
participantes del taller.
• Esta primera etapa determina las
necesidades de capacitación de los
participantes y alimenta el diseño
y la entrega de los contenidos del
taller.
• Durante el taller, el instructor
continúa haciendo evaluaciones
sobre las necesidades de los
participantes y sus habilidades
para alcanzar los objetivos del
curso. Esto puede redundar en
cambios de último minuto al
contenido del mismo con el fin de
mejorar el proceso de aprendizaje
de los participantes. También
demuestra que el instructor está
continuamente respondiendo a las
necesidades de la capacitación (y
se enfoca en construir a partir de
su conocimiento pre-existente).
• Al término de la capacitación, el
instructor evaluará la efectividad
de la capacitación, usualmente
inmediatamente cuando termina
el curso, pero en algunos casos el
instructor puede hacer un
seguimiento 3 meses después
para ver el impacto que la
capacitación ha tenido en el
trabajo de los participantes y su
habilidad de retener o construir
habilidades/conocimiento por sí
mismos.
• M&E es un continuo. Cada etapa
se alimenta de la otra y alimenta
las decisiones que se toman en
cada etapa. M&E es importante
porque entrega evidencia al
instructor sobre la efectividad de
su capacitación y ¡puede ayudarle
a hacer lobby para obtener más
recursos en su institución!.
Slide 9
Diapositivas 9-10 (5 min.)
¿Pre- Evaluación?
Evaluación de
Necesidades
“una ventana de
oportunidades”
• La evaluación de necesidades es
un paso esencial para entender las
“necesidades” y vacíos de
conocimiento de los participantes.
Ofrece al instructor “una ventana
de oportunidades” para conocer lo
que los participantes esperan
aprender antes de asistir a la
capacitación, lo que a la vez
informa sus decisiones sobre
diseño y entrega del contenido del
curso. Sin embargo, las
herramientas para la evaluación
de necesidades deben ser
utilizadas con precaución. Si bien
ellas nos entregan un panorama
de las necesidades actuales, el
instructor debe volver a probar
sus “evaluaciones” durante el
curso de la capacitación para
corroborar si su evaluación de las
“necesidades” está correcta.
• Antes de mostrar la diapositiva
número 9, pídale a los
participantes dar ejemplos de
métodos, herramientas, etc., para
la evaluación de necesidades.
Slide 10
Métodos de pre-evaluación
• Cuestionario o encuesta para el análisis de
necesidades
• Encuestas de pre-diagnóstico
• Tareas de pre-capacitación
• Ejercicios de identificación
– Análisis de contenido
– Análisis de audiencia
– Análisis de actitudes
• Grupos de enfoque
• Entrevistas Uno a Uno
Slide 11
Evaluación durante la
capacitación
• Existen muchas formas de evaluar la
efectividad de la capacitación mientras
se lleva a cabo
• ... Por ejemplo...
5 min.
• [Diapositiva número 10] Discuta
los distintos tipos de herramientas
para la evaluación de necesidades.
Pídale a uno o dos participantes
compartir ejemplos de
herramientas o técnicas que
utilicen en sus capacitaciones.
Diapositivas 11 - 12 (3 min.)
• Existen muchas formas de evaluar a
los participantes durante la
capacitación. Dos ejemplos son: las
herramientas de pregunta y
respuesta inmediata. Una forma
inmediata de evaluar el aprendizaje
es preguntarle al participante sobre
su comprensión de algún concepto
del aprendizaje. Esta es una técnica
formativa que requiere que los
participantes elaboren puntos claves
del aprendizaje o expliquen su
entendimiento mediante preguntas
abiertas y clarificadoras.
Slide 12
Preguntas
Cerradas
Abierta
Clarificadora
5 min.
• Pídale a los participantes dar
ejemplos de preguntas abiertas,
cerradas y clarificadoras.
• Pídale a uno o dos participantes
comentar por qué las preguntas
cerradas no son un tipo de pregunta
informativa.
Solomon203, Wikimedia
Slide 13
Herramienta de respuesta
inmediata
Sistema del semáforo
¡No entiendo,
necesito ayuda!
Entiendo
parcialmente y
necesito que se me
clarifiquen algunos
puntos
Tengo confianza y
estoy listo para
intentarlo en forma
independiente.
(3 min.)
• Es todo un desafío encontrar
formas no intimidantes y anónimas
de obtener retroalimentación de
parte de los participantes sobre su
comprensión o confianza para aplicar
algún concepto nuevo. El sistema del
semáforo puede ayudar al instructor
a superar este desafío al pedirle a los
participantes indicar cómo se sienten
con una tarea o concepto de
aprendizaje utilizando los colores
rojo (no entienden), amarillo
(entienden parcialmente) y verde
(confianza y comprensión completa).
• Invite a los participantes a
comentar si creen que este sistema
funcionaría o no en sus contextos
particulares o que sugieran alguna
variación que lo haga funcionar
mejor.
Slide 14
Métodos durante la
capacitación
• Mini pruebas/mini cuestionarios
• Demostraciones/presentaciones de los
participantes
• Indicadores del estado de ánimo/confianza
• Actividades prácticas/grupales
• Juegos
• Preguntas indagatorias
• Discusiones enfocadas
• Ejercicios de reflexión
Slide 15
Evaluación sumativa
• Existen muchas formas de evaluar la
efectividad de la capacitación después de
que esta se llevó a cabo:
–
–
–
–
–
–
Cuestionario post-capacitación
Interrogatorio post-capacitación
Tarea/actividad post-capacitación
Entrevistas
Diarios de reflexión
Observaciones registradas
(3 min.)
• Muestre la diapositiva. Discuta los
otros métodos de evaluación que
ocurren durante el curso de una
capacitación.
• Invite a los participantes a
comentar si ellos usan estos métodos
en sus contextos particulares o que
sugieran alguna variación que los
haga funcionar mejor.
(5 min.)
• La evaluación sumativa ocurre al
final de la sesión o programa de
capacitación. Le dice al instructor
hasta dónde los objetivos (y
resultados) del aprendizaje se
alcanzaron o cuál fue el impacto
general de la capacitación. Los
resultados son fijos y no pueden
ser alterados a diferencia de lo
que ocurre con los métodos de
evaluación formativa, donde el
resultado puede mejorarse si el
instructor responde a la
retroalimentación. Estos son
algunos ejemplos de las formas en
que se puede evaluar la
efectividad de una capacitación.
• Discuta como grupo los métodos
comunes que los participantes
utilizan para evaluar una
capacitación y su impacto a largo
plazo.
Slide 16
Tarea
¿Qué tipo de evaluación
de capacitación hace
usted?
Discusión en grupos - 30 minutos
Evaluación= Monitoreo & Evaluación
Diapositivas 16-19 (30 min.)
• Esta tarea está diseñada para
ayudar a los participantes a pensar
en los diferentes tipos de
monitoreo y evaluación que
utilizan en sus capacitaciones.
• El objetivo de la tarea es que los
participantes sean capaces de
identificar qué métodos de
evaluación son formativos (que
ocurren antes y durante la
capacitación) y cuáles son
sumativos.
• Además, los participantes deben
comenzar a explorar la
importancia de M&E a nivel
individual, organizacional y social.
Por ejemplo, a nivel individual, ya
hemos discutido sobre cómo la
retroalimentación puede mejorar
la entrega de los contenidos de la
capacitación; así mismo, le puede
indicar a los participantes qué tan
bien lo están haciendo. A nivel
organizacional, M&E puede
ayudar al instructor a demostrar el
éxito de su capacitación y
competir de mejor forma por los
recursos que siempre son
limitados. En la sociedad, se
podría argumentar que M&E es
útil para demostrar la apropiada
rendición de cuentas ante los
financiadores (que pueden haber
apoyado la capacitación) y para
entregar habilidades de
empleabilidad a futuros
empleadores.
• Presente la tarea y responda
preguntas clarificadoras.
•La tarea debe ser completada en
grupos y dará como resultado un
recurso grupal que será discutido en
el grupo. Este recurso se muestra en
la diapositiva número 19 y se ha
sacado del siguiente material: Kit
de Herramientas para
Capacitaciones: monitoreo y
evaluación de iniciativas de
capacitación en alfabetización
informacional en África, un enfoque
de viaje [Training Toolkit: Monitoring
and Evaluation for Information
Literacy Training Initiatives in Africa,
a Journey Approach]
http://opendocs.ids.ac.uk/opendocs/
bitstream/handle/123456789/2893/
6758_IDS_toolkit_Interactive.pdf?se
quence=1 disponible en inglés.
• Apunten rápidamente en papeles
adhesivos lo que M&E les ayuda a
alcanzar, identificar o
implementar. Por ejemplo, ¿le
ayudan los datos de M&E a
planificar sus sesiones de
capacitación (alcanzar)? O, ¿le
dicen algo los datos de M&E sobre
los vacios de habilidades de su
cohorte a capacitar (identificar)?, y
¿utiliza datos de M&E para hacer
lobby y conseguir recursos
adicionales u ofrecer un servicio
determinado en base a la
demanda de los usuarios
(implementar)?.
• Escriba un resultado en cada
papel adhesivo y luego trate de
identificar grupos de información.
Puede crear sus propias
agrupaciones, pero como ayuda,
le puede parecer más fácil
comenzar por grupos de temas
como “aprendizaje” o “lobby”.
• Pase algo de tiempo discutiendo
sobre los beneficios y resultados
de llevar a cabo M&E a nivel
individual, organizacional y social.
• Informe a los participantes que
una copia de este material puede
ser descargado desde el link que
se encuentra más arriba.
Slide 17
Tarea
• Clasifique las estrategias y las junte en grupos
grupos formativos/sumativos
Ejemplo 1
La M&E que utilizo
es….
Ejemplo 2
Ejemplo 4
Ejemplo 3
10 min.
Comparta las definiciones con el
grupo y los encabezados bajo los
cuales ha agrupado los tipos de
evaluación, repasando las siguientes
preguntas:
•
Discuta por qué lleva a cabo las
evaluaciones...
•
•
¿Qué le ayudan a
identificar, alcanzar o
implementar las
evaluaciones?
¿Qué encabezados de
grupo ha identificado?
Slide 18
Tarea
Evaluación sumativa
M&E después de una
intervención de
capacitación
M&E durante e inmediatamente después la capacitación
Comience aquí
Evaluación
formativa
M&E durante una
intervención de
capacitación
Por ejemplo:
Considere:
¿Necesita cambiar su
estilo de enseñanza?
Por ejemplo
¿Necesita repasar algún
concepto?
Conversaciones
enfocadas
¿Están las personas
entendiendo?
¿Ha capturado
evidencia sobre hasta
dónde están
aprendiendo?
Tareas de estudio de
caso
Diarios de reflexión
Herramientas de
diagnóstico
Considere el peso
respectivo que le da a los
métodos/herramientas
cuantitativos y
cualitativos
Ejercicios hipotéticos
Portafolios de evidencia
Registros del instructor
Rúbrica de evaluación
Discuta y escriba ejemplos bajo el respectivo
encabezado
Slide 19
Tarea
Slide 20
Tarea
A qué nivel se alcanzarán
resultados con estos
métodos:
A nivel del instructor
 A nivel individual
 A nivel institucional/organizacional
 A nivel social
5 min.
Muestre la diapositiva y,
dependiendo del tiempo, pídale a los
participantes 3 ó 4 ejemplos de
métodos de pre- evaluación y de
post-evaluación.
Por ejemplo, las encuestas precapacitación son un ejemplo de
método de pre-evaluación, mientras
que un método de post-evaluación
podría constituirlo la evidencia
tomada de un diario de aprendizaje.
Muestre la diapositiva y subraye los
ejemplos que aparecieron en la
conversación.
5 min.
Finalmente, pídale a los participantes
pensar en los beneficios de
recolectar los datos de M&E a nivel
organizacional, individual y social.
Pase algunos momentos pensando
en esto como debate grupal.
Posibles respuestas incluyen: una
mejor comprensión de las actuales
habilidades del grupo al que
capacitará (nivel del instructor); la
habilidad de identificar áreas
temáticas sobre las que necesito
aprender más (nivel individual);
aumento de los logros académicos de
nuestros estudiantes (nivel
institucional); y empleados con
mejores habilidades basadas en el
trabajo (nivel social).
Slide 21
La importancia de M&E
• El M&E debe ir hilado al diseño, desarrollo y
entrega del curso
• La evaluación sumativa entrega evidencia del
impacto, calidad de la capacitación y
aprendizaje
• La evidencia puede producir cambios positivos
– para la institución (influencia en recursos, apoyo...)
– para los individuos (mejor comprensión de conceptos)
– para la sociedad (rendición de cuentas,
empleabilidad)
Slide 22
Kit de Herramientas para
Capacitaciones
Monitoreo y evaluación de
iniciativas de capacitación en
alfabetización informacional en
África: un enfoque de viaje .
Disponible en inglés.
http://opendocs.ids.ac.uk/opendocs/bitstream/handle/123456789/2893/6758_IDS_
toolkit_Interactive.pdf?sequence=1
Diapositivas 21 - 23 (3 min.)
• Concluya la sesión repasando la
importancia de M&E y compartiendo
el link al Kit de Herramientas de
M&E, disponible en inglés, el que
profundiza en este tema (si bien este
material aborda específicamente la
capacitación en alfabetización
informacional, M&E es un tema
genérico, por lo que los métodos,
herramientas y técnicas se pueden
aplicar a cualquier disciplina)
Comparta el link al Kit de
Herramientas de M&E, disponible en
inglés, el que profundiza en este
tema (si bien este material aborda
específicamente la capacitación en
alfabetización informacional, M&E es
un tema genérico, por lo que los
métodos, herramientas y técnicas se
pueden aplicar a cualquier disciplina)
Slide 23
Finalmente, comparta los resultados
de la clase.
• ¿Es posible lograrlos?, ¿quisieran
los participantes agregar otros
resultados a esta lista?
Resultados del Aprendizaje
Para el término de esta sesión, usted:
• Será capaz de identificar métodos de evaluación
formativa y sumativa
• Comprenderá por qué utiliza diversas técnicas
para evaluar el conocimiento y llenar vacíos de
aprendizaje
• Comenzará a enfocarse más en la evaluación en
sus propias capacitaciones
Slide 24
Los materiales para este curso
fueron desarrollados por Siobhan
Duvigneau
Information Literacy manager, IDS
[email protected]
Este trabajo está registrado por Creative Commons AttributionShareAlike 3.0 Unported License.
04/02/2015
24
Este trabajo usted lo puede:
Compartir: copiar, distribuir y
transmitir este trabajo.
Mezclar: adaptarlo para hacer uso
comercial del trabajo
Bajo las siguientes condiciones:
Reconocimiento: Debe citar el
trabajo en la forma especificada por
el autor o dueño de la licencia (pero
de ninguna forma que sugiera que
ellos lo respaldan a usted o su propio
uso del trabajo).
Compartir igual o similar: Si usted
altera, transforma o usa este trabajo
de base para otro, puede distribuir el
resultado de dicho trabajo sólo bajo
la misma licencia de este trabajo o
una similar.
http://creativecommons.org/licenses
/by-sa/3.0/