Cómo definir y medir la calidad educativa hoy

Cómo definir y medir la calidad
educativa hoy
Reflexiones a partir de la experiencia internacional
El bienestar de un país y sus perspectivas de
crecimiento dependen de la calidad de sus
ciudadanos
De las habilidades y creatividad de
su fuerza de trabajo
De la capacidad de sus líderes para
gobernar y manejar sus recursos
y de la habilidad de sus adultos para criar
futuras generaciones, saludables,
educadas y felices.
El aprendizaje se realiza a lo largo de toda la vida,
no empieza ni termina en el salón de clase
Edad:
0
1
2
3
4
5
EDU. TEMPRANA
Necesidad de comienzo
correcto, con impactos
dinámicos posteriores.
Intervención en salud,
nutrición y pre-escolar.
Gran potencial para
reducir inequidades y
propiciar crecimiento.
6
7
8
9
10
11
12
13
14
15
EDUCACION BASICA
Base de las habilidades para el éxito
futuro en el mercado laboral y como
ciudadano. Sistemas exitosos brindan
recursos y cuentan con mecanismos
adecuados de aseguramiento de la
calidad.
Los maestros son la clave del
proceso.
16
17
18
19
20
EDU. SUPERIOR
Clave para brindar
los habilidades que
el mercado laboral
demanda.
Necesidad de
recoger señales del
mercado de trabajo.
Perú ha mejorado el acceso a la educación en
todos sus niveles
100
% de 13 años que acabo
% de 18 años que acabo secundaria
Matriculado a los 6 años
Matriculado a los 12 años
90
80
70
60
50
40
30
20
10
Cajamarca
Loreto
San Martín
Huánuco
La Libertad
Ancash
Cusco
Amazonas
Huancavelica
Ayacucho
Tumbes
Ucayali
Piura
Pasco
Lambayeque
Apurímac
Madre de Dios
Puno
Junín
Callao
Ica
Moquegua
Arequipa
Lima
Tacna
0
Crecimiento económico
Pero la calidad educativa contribuye al crecimiento
económico más que los años de escolaridad
Habilidades
Crecimiento y desempeño en pruebas de aprendizaje PISA, 1960-2000 (Hanushek y Woessman 2007)
Entonces…
¿Qué es calidad educativa?
PARTE I
Dimensiones de la calidad educativa
“Conocimientos,
habilidades y actitudes
para una participación
positiva en la sociedad”
Estudiantes
Resultados
“Docentes
capacitados
usan enfoques
centrados en el
estudiante para
facilitar el
aprendizaje”
Fuente: UNICEF (2000)
Procesos
Político
Cultural
Económico
“Niños saludables, bien nutridos y
listos para participar y aprender, y
apoyados por sus familias y
comunidades para aprender”
Entorno
Contenido
“Ambiente
saludable,
seguro, protector
y sensible a la
diversidad, con
adecuados
recursos e
infraestructura”
“Currícula y materiales
para adquirir habilidades:
comunicación,
matemáticas y habilidades
para la vida”
Dimensiones de la calidad educativa
Estudiantes
“Niños saludables, bien nutridos y
listos para participar y aprender, y
apoyados por sus familias y
comunidades para aprender”
REFLEXIÓN
¿El sistema pierde calidad cuando
sus estudiantes no son de
“calidad”?
¿Un sistema educativo de buena
calidad debe ser capaz de
responder a los desafíos que
impone la realidad de sus
estudiantes?
Pero qué pasa cuando un sistema
educativo recibe niños de
familias pobres,
mal nutridos,
con poco soporte familiar…
Centrémonos entonces en lo que PUEDE hacer el
sistema educativo
(porque sobre eso se le debe evaluar)
•Docentes
capacitados
•Recursos,
infraestructura
•Currículo,
materiales
Calidad de los
recursos del
sistema
Calidad de los
procesos y
entornos de
aprendizaje
•Un ambiente
saludable,
seguro, protector
•Sensible a la
diversidad
•Centrados en el
estudiante
•Habilidades
cognitivas
•Habilidades no
cognitivas
Calidad de los
resultados
¿Qué habilidades debe desarrollar un sistema
educativo de calidad?
Cognitivas




Desarrollo del lenguaje
Lectura, escritura
Matemáticas
Científicas
No cognitivas



Motivación, persistencia
Autocontrol
Adaptabilidad social
Estas son las habilidades básicas, pero…
¿Qué pasa con sistemas educativos que forman a sus
ciudadanos solamente en estas áreas? O peor aún, a
algunos de sus ciudadanos

Pensamiento crítico



Liderazgo, autonomía
Iniciativa
Sociabilidad
¿Cómo se mide la calidad educativa?
PARTE II
Propósitos de la evaluación de la calidad

¿Por qué evaluar?



Para mejorar la calidad educativa
Para tomar decisiones
La evaluación carece de sentido si sus
resultados no se incorporan a la toma de
decisiones en materia de política educativa.
¿Qué se evalúa?
•Docentes
capacitados
•Recursos,
infraestructura
•Currículo,
materiales
Calidad de los
recursos del
sistema
Calidad de los
procesos y
entornos de
aprendizaje
•Un ambiente
saludable,
seguro, protector
•Sensible a la
diversidad
•Centrados en el
estudiante
•Habilidades
cognitivas
•Habilidades no
cognitivas
Calidad de los
resultados
Evaluación de la calidad de los recursos

El principal y más valioso recurso del
sistema educativo es el docente

•Docentes
capacitados
•Recursos,
infraestructura
•Currículo,
materiales
Calidad de los
recursos del
sistema

Excepto Nicaragua y Paraguay, en todos
los países de América Latina hay un
sistema de evaluación docente externo.
La evaluación docente es un tema
político



Por qué se evalúa, para qué, qué, cuándo
y cómo y a quién se comunican los
resultados está cargado de ideología.
La evaluación docente es parte de una
visión del docente, de la educación, de
un modelo de país y de sistema
educativo.
No puede ser asumida como un tema
exclusivamente técnico sin explicitar el
modelo en el que se asienta.
Modelos
comunes
de
evaluación
docente
Centrado en la
profesionalización y en la
práctica
reflexiva
Centrado en
los resultados
de los alumnos
Centrado en
los rasgos o
factores
Centrado en
las habilidades
Basado
en las
conductas
manifiestas del
profesor en el
aula
Centrado en el
desarrollo de
las tareas
Métodos
más
utilizados
Observación de
clases
Portafolio del
docente
Encuesta,
informes,
testimonios o
entrevistas a
terceros
Ejercicios de
rendimiento
profesional
Pruebas de
rendimiento de
los alumnos
Autoevaluación,
auto-reportes
Comparación de aspectos evaluados
CHILE
CUBA
COLOMBIA
MÉXICO
Preparación
(conocimientos,
competencias
pedagógicas)
Enseñanza
Capacidades
pedagógicas
Responsabilidad
Competencias
académicas,
administrativas,
comunitarias
Preparación
profesional (examen)
Planeamiento y
ejecución de clase
Creación de
ambiente propicio
Relaciones con
sus alumnos
Emocionalidad
Liderazgo, iniciativa
Relaciones interp.
Compromiso
Orientación al logro
Participación en la
interacción escuelacomunidad
Responsabilidad
profesional
Responsabilidad
Participación en la
escuela
Resultados de su
labor
Aprovechamiento
escolar
Fuente: CNE
Actualización y
capacitación
Antigüedad
Grado de estudios
Evaluación de la calidad de los procesos y
entornos de aprendizaje
Calidad de los
procesos y
entornos de
aprendizaje
•Un ambiente
saludable,
seguro, protector
•Sensible a la
diversidad
•Centrados en el
estudiante

Algunos sistemas de evaluación del
desempeño docente evalúan también estos
aspectos
Además
existen
sistemas de
evaluación de
la calidad de
la Institución
Educativa
Rendimiento
de los
estudiantes
Apoyo externo
Conformidad
con normas
técnicas
Salvaguardas
para los
estudiantes
Otros
resultados de
los alumnos
Calidad de la
provisión
Efectividad del
liderazgo y
gestión
escolar
CONDUCIDA POR LA ESCUELA
Finlandia
BAJO
RIESGO
Korea
Holanda
UK
NZ
CONDUCIDA POR EL ESTADO
ALTO
RIESGO
Sólo si no
mejora
Medidas para el aseguramiento de la calidad
Estándares de calidad,
metas de desempeño,
evaluación del
desempeño escolar,
exámenes nacionales
Se presta mayor
atención a las escuelas
en riesgo: más apoyo,
recursos, planes de
mejora
Se toman medidas si las
escuelas no logran
mejorar (cierre,
disolución de junta
escolar)
Se genera, publica y usa
la información sobre
calidad (pero
reconociendo las
diferencias entre sus
alumnos)
Evaluación de la calidad de los resultados

Evaluación del desempeño de
los estudiantes


Sistemas internacionales
Sistemas nacionales
•Habilidades
cognitivas
•Habilidades no
cognitivas
Calidad de los
resultados
¿Qué desempeño se evalúa?

Dos enfoques predominantes en la evaluación
internacional



La mayoría de evaluaciones nacionales en LAC están
basadas en el plan de estudios (EBC)




PISA: destrezas esenciales para la vida futura
Timss: conocimiento de materias
Hay planes de estudio más específicos que otros
La calidad de una Evaluación Basada en Competencias
(EBC) depende en parte de la claridad del plan
Competencias más comúnmente evaluadas: lenguaje y
matemáticas
Las habilidades no-cognitivas no son evaluadas
sistemáticamente
Evaluación de los resultados de aprendizaje: más
oportunidades que nunca antes

Aprendizaje del estudiante medido a través de pruebas
internacionales estandarizadas
MLA
PASEC
PIAAC
325
Finland
Canada
New Zealand
Australia
Ireland
Hong KongKorea
United
Japan
Sweden
Austria
Belgium
Iceland
Norway
France
United States
Denmark
Switzerland
Spain
Czech Republic
Italy
Germany
Liechtenstein
Hungary
Poland
Greece
Portugal
Russian
Latvia
Israel
Luxembourg
Thailand
Bulgaria
Romania
Mexico
Argentina
Chile
Brazil
FYR Macedonia
Indonesia
Albania
Peru
Las pruebas internacionales permiten comparar la
competitividad de nuestros alumnos en el mundo
de hoy
600
575
550
525
500
475
450
425
400
375
350
Fuente: OECD, UNESCO (2003) Literacy skills for the world of tomorrow, Fig. 2.5, p.76
Y también nos permiten ver cuál si la calidad
del sistema educativo corresponde a lo que se
esperaría para el nivel económico del país
.4
Independientemente de la edad, los estudiantes
peruanos no aprenden al nivel de sus pares en
otros países
MEXICO
ARGENTINA
MEXICO
CHILE
DESV_ESTANDAR_REGIONAL
-.4
-.2
0
.2
MEXICO
CHILE
CHILE
ARGENTINA
COLOMBIA
ARGENTINA
BRASIL
COLOMBIA
BRASIL
COLOMBIA
PERU
BRASIL
PERU
-.6
PERU
8
14
10
12
EDAD_EXAMEN_INTERNACIONAL
RESULTADOS INTERNACIONALES EN CONTEXTO REGIONAL
Fuente: Base de datos SERCE y PISA
16
Tasa bruta de “educación de calidad”
Relación del número de estudiantes en 8vo. grado que logra el nivel
intermedio en TIMSS y número de personas en edad para el 8vo. grado
100
75
Matrícula en
el 8vo grado
(2do de
Media)
50
25
Logro de
aprendizaje
en el 8vo
grado
0
Hong Kong
SAR
Indonesia
Japan
Korea, Rep.
of
Malaysia
Philippines
Singapore
Thailand
¿En qué grados se evalúa el desempeño?
País
Evaluación
Ecuador
Aprendo (96-97)
Argentina
ONE
Guatemala
Pronere
Honduras
UMCE
Nicaragua
SNE
México
Enlace
El Salvador
Sinea
Panamá
Sinece
Paraguay
Snepe
Cuba
SECE
Costa Rica
Pruebas Nacionales
Colombia
Saber
Bolivia
Simecal (h. 2000)
R. Dominicana
Pruebas Nacionales
Brazil
SAEB
Chile
Simce
Perú
ECE
Uruguay, Venezuela
PEA, Sinea
1
2
3
4
5
6
7
8
9
10
11
12
¿Con cuánto riesgo para los estudiantes?

Riesgo alto

Riesgo bajo

Bolivia

Argentina

Brasil

Colombia

Chile

Ecuador

Costa Rica

El Salvador

Cuba

Guatemala

República Dominicana

Honduras

El Salvador (sólo para egreso de
secundaria)

México

Nicaragua

Panamá

Paraguay

Perú

USA (NCLB)
Los resultados tienen implicancias
directas para los estudiantes en
aprobación de grado, admisión al
siguiente nivel, o elegibilidad a
beneficios
Bajo para los estudiantes pero
alto para los maestros:
reemplaza pruebas de logros
de la Carrera Magisterial
¿Qué críticas son las más frecuentes?



Los maestros desconocen cómo se construyó la prueba
y cuál es su objetivo
La prueba genera presión en los niños pues se sienten
“exhibidos” cuando se dan a conocer los resultados.
Los ítemes no toman en cuenta los
intereses/realidades de los niños de distintos sectores
sociales



Contenido
Formato (opción múltiple)
Hay objetivos pedagógicos muy difíciles de medir con
pruebas estandarizadas:




Pensamiento crítico
Habilidades no cognitivas
Valores
Creatividad
Beneficios y problemas de la evaluación del
aprendizaje

Beneficios







Tener información sobre el desempeño del sistema como todo y
de las brechas en su interior (diagnóstico)
Visibilizar a los que están por “caerse entre las grietas” del
sistema (tamizaje)
Medir los avances (monitoreo)
Evaluar el impacto de medidas/políticas específicas (evaluación)
Rendición de cuentas en los niveles de gestión
Concentrar la atención en el aprendizaje (movilización)
Problemas



Uso de medición del aprendizaje como único dato de calidad
educativa
Medición del aprendizaje sólo en los primeros grados
 No permite seguimiento de cohortes (progreso de los niños)
 Descuido de los grados siguientes
Responsabilizar a las escuelas del desempeño estudiantil
La evaluación del aprendizaje en Perú hoy
Comprensión de textos escritos

Los procesos de construcción de
significados que se desarrollan al leer
diferentes tipos de texto.
Matemática
 El uso de los números, sus propiedades y
operaciones para resolver diversos
problemas de contexto real y
matemático.
Fuente: UMC, MINEDU
Informes de resultados


Dirigido a los distintos agentes
educativos para que puedan tomar
decisiones para la mejora de los
aprendizajes.
Informes dirigidos a la IE:

Guía de análisis de las pruebas



Informe por IE


Matemática y Comprensión de textos escritos
Dirigido a los docentes de aula
Dirigido al director y comunidad de la IE
Reporte individual de resultados

Dirigido a los padres de familia
34
Fuente: UMC, MINEDU
Fuente: UMC, MINEDU
Resultados
en la IE
Resultados generales
Resultados por sexo
Resultados por
sección
Fuente: UMC, MINEDU
Recomendaciones
para el director
Fuente: UMC, MINEDU
Recomendaciones
para el docente
Ámbito de
aplicación de las
recomendaciones
Fuente: UMC, MINEDU
Secuencia
didáctica
Texto
propuesto
Estrategia
sugerida
Fuente: UMC, MINEDU
Descripción breve
de los niveles de
logro
Resultados del
estudiante
Fuente: UMC, MINEDU
Recomendaciones para los padres
Fuente: UMC, MINEDU
Pero…
¿cómo promover el uso de esta información?
Vea el video en YouTube