“El debate actual sobre evaluación y acreditación en América Latina”

Pedro Montt L

Chile

3er Congreso de Directores SM Editores

24 de septiembre Lima – Perú

Agenda de Temas

• El por qué de las evaluaciones.

• La creación de capacidades, la tarea central. El diseño de estas reformas…

• Cómo se crean capacidades y una cultura evaluativa. Balances: Exigencias/Apoyos; Prescripción/Profesionalismo.

• La agenda evaluativa de algunos países de LA. El caso brasilero.

• Posible tendencia.

• Conclusiones.

El por qué y para qué de las evaluaciones… (1)

• “Es imposible hablar de calidad sin medir” (McKinsey, 2007)

• La evaluación debe permitir en lo fundamental establecer comparaciones “validas” y “confiables” entre agentes, instituciones e incluso países.

• En general estos dispositivos han sido precedidos o se han dado en sistemas educativos descentralizados.

• Una ola de reformas de ese cuño, han dado origen en las últimas décadas, progresivamente a sistemas de evaluación (medición y acreditación)

• Detrás de este tipo de Reformas está el hecho de que es necesario crear capacidades en la base del sistema y para ello se debe tener un claro diagnóstico respecto de esas capacidades a la partida. Se afirma que las capacidades del sistema, entendidas como la existencia masiva de docentes y equipos directivos altamente competentes en el logro de los aprendizajes de los alumnos en todas y cada una de las instituciones educativas del sistema escolar, son la clave para lograr un sistema escolar exitoso.

• Dicho de otra forma, las capacidades de los docentes son directamente proporcionales a los resultados de aprendizaje que obtienen los países en las pruebas internacionales que buscan medir la calidad de los sistemas.

El por qué y para qué de las evaluaciones…(2)

El diseño detrás las reformas que instalan la evaluación y rendición de cuentas: tendencias Internacionales Hopkins, Schleicher

Rol Clave de Actores Locales

Rol Clave de Ministerio

Hacia una reforma : Todas las escuelas son efectivas sustentable

Alta Excelencia

Alta Equidad

Prescripción Prescripción

Nacional

Escuelas liderando La Reforma

Construyendo capacidades Prescripción Prescripción Profesionalismo Profesionalismo

Liderazgo a nivel de sistema

Prescripción detallada de lo que deben hacer las escuelas

Construyendo capacidades

Fuerte rol Ministerio Fuerte rol

Escuelas

La creación de capacidades la tarea central.

Cómo se crean capacidades y una cultura evaluativa… (1) Balances: Exigencias/apoyos

Escasos apoyos

Grandes apoyos

Escasa exigencia

Gran exigencia

Mejoramiento Rápido

Mejora sistemática

Progreso lento y disparejo

Mejoras de carácter particular

Dispersión

Conflicto

Desmoralización

Resistencia

Bajos resultados

Estancamiento

Abandono

Fuente: Schleicher, 2005

Tradición: Sistemas educativos

Pobres en conocimientos

El futuro de los sistemas educativos

Debe ser rico en conocimiento

Prescripción

Nacional

Criterio

Profesional

Criterio profesional informado; el profesor es un “trabajador del

conocimiento”

Prescripción informada

Criterio profesional no informado

Prescripción no informada; el profesor

se limita a implementar el curriculum

Fuente: Schleicher, 2005

Cómo se crean capacidades y una cultura evaluativa… (2) Balances: Prescripción/Profesionalismo

La agenda evaluativa de algunos países de LA

Brasil

• Sistema de evaluación del desempeño de los establecimientos a través de un índice: IDEB. Horizonte de logro al 2022.

Colombia

• Estándares básicos de competencias de aprendizaje a partir del año 2001.

• Se independiza el instituto evaluativo (ICFES)

Chile

• Establecimiento de estándares de aprendizaje, de desempeño docente, sistemas de evaluación referidos a esos estándares.

• Creación de una institucionalidad para el aseguramiento de la calidad educativa.

Ecuador

• Se encuentran en experimentación y validación estándares para los centros escolares, docentes, directivos y de aprendizaje de los estudiantes.

• Creación de institucionalidad para la evaluación (autonomía del ministerio)

Guatemala

• Se dan a conocer los estándares de preprimaria y primaria en la década del 2000, actualmente se trabaja en los del nivel medio.

Perú

• Se informan los resultados de las pruebas nacionales usando estándares de desempeño, ello hace algunos años.

IDEB – BRASIL

Brasil 2009 Brasil 2007

Primeros años del enseñanza fundamental - Red Pública

Brasil 2005

Hasta 3,7

De 3,8 a 5,9

6,0 o más

Sin IDEB

•El Índice de Desarrollo de la Educación (Ideb) es el indicador nacional brasileño que mide la calidad de la Educación, considerando indicadores de flujo escolar (aprobación y reprobación escolar) y medias de rendimiento en las evaluaciones nacionales (Saeb e Prova Brasil) •El Ideb fue creado en una escala que va de cero a diez. Fueron establecidas metas de rendimiento a cada dos años para cada escuela y cada red de enseñanza , partió en 2005 y se proyecta con una meta de calidad país a alcanzar el 2022 .

¿Qué pueden hacer los gestores educativos con los resultados de

la PROVA BRASIL?

• Comparar la media de la escuela con aquella lograda anteriormente y verificar si fue

obtenida sin afectar variables de equidad (cobertura y retención ).

• Identificar cuantos estudiantes de la escuela están en cada uno de los niveles evaluados

y desarrollar acciones pedagógicas para estudiantes según sus niveles diversos de

aprendizaje.

• Dirigir el soporte técnico y financiero ministerial para:

La formación continua de los profesores, coordinadores pedagógicos y otro

personal de apoyo;

Reducir las desigualdades existentes en el sistema educacional.

Posible Tendencia: Un posible Camino crítico…

Evaluaciones del Aprendizaje Nacionales

Avances de las evaluaciones en teorías de la medición

(IRT); Referencia a Estandares

Evaluaciones del Desempeño Docentes

Aumentos del número de pruebas y su frecuencia

Evaluaciones del desempeño institucional

Participación en Evaluaciones del Aprendizaje Internacionales

Constitución de sistemas de aseguramiento de la calidad Institucionalidad Evaluación, rendición de cuentas, consecuencias Diversos instrumentos y dimensiones evaluadas Creación de capacidades

Inicio década de los 80

P R E S E N T e

¿Futuro ?

Proto-sistemas y desarrollo de instrumentos para su operación

Estos procesos, en pleno desarrollo a la fecha, con seguridad y tal como

Los componentes de dispositivos evaluativos de carácter sistémico

Alumnos Docentes Directores Establecimientos educativos

Municipios Provincias Regiones Nación

Estándares de desempeño

Evaluación de desempeño

Notificación/ comunicación de resultados

Evaluación de impacto de políticas

Requisitos de operación

Distribución equitativa de recursos

Autonomía, apoyo e intervención

Rendición de cuentas y consecuencias

Fuente: El diseño institucional de un sistema efectivo de aseguramiento de la calidad de la educación en Chile, Banco Mundial, 2007

Conclusiones Los nudos políticos que deben enfrentar las evaluaciones …

• Los métodos para construir la comunicación de resultados, el diálogo entre

técnicos y políticos que llegó a ser central y a quedarse.

• La comunicación de resultados: la tensión técnico política en la comunicación de resultados, los énfasis y acentos que se trasmiten a la sociedad (construcción de relato)

• La compleja relación con los medios de comunicación: ¿Cómo estos interpretan los resultados luego de entregados?. La trampa del morbo (todo debe ser negativo)

• Las tensiones en las evaluaciones fruto de presiones corporativas: ¿La evaluación docente como un valor o como una forma de derrotar a los sindicatos?

• La evaluación con consecuencias que se convierten en centrales para los políticos y sus diseños.

Conclusiones Riesgos de una moda…

• La excesiva visibilización de estos dispositivos genera enconados adversarios, así como partidarios de estos sistemas de evaluación .

• Se observan riesgos, del tipo de los que criticó muy recientemente la importante historiadora educativa Diane Ravith (*), los cuales ocurren al sacralizar estos sistemas (No Child Left Behind).

– Mala política, el garrote y la zanahoria no funcionan.

– Los sistemas que logran resultados apuestan más al desarrollo de capacidades: mejores mallas curriculares y materiales para las clases, entrenamiento y mejores sueldos docentes, más que a una lógica economicista de incentivos (incluidos los punitivos)

– Las consecuencias punitivas, entre ellas el cierre de las escuelas, hace que las autoridades políticas pongan metas alcanzables por todos para no tener que enfrentar problemas

– Es un error importante amenazar a los docentes a través de pruebas estandarizadas. Vieja evidencia respecto del “estrechamiento curricular”

– Estas políticas pueden agudizar la segregación y la desigualdad.

• También el Nobel de economía Eric Hanushek señala que este tipo de reforma basada en evaluaciones con consecuencias para los docentes y establecimientos se arriesga pervertir y desnaturalizar el sentido del trabajo pedagógico (la lógica de incentivos como la entienden los economistas no funcionaría)

(*) The Death and Life of the Great American School System: How Testing and Choice Are Undermining Education (New York: Basic Books, 2010)