Upload
others
View
4
Download
0
Embed Size (px)
Citation preview
1HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
Hacia un Nuevo Paradigma para la Evaluación Educativa
La Perspectiva del INEE
2
CONTENIDO
Introducción 3
El Modelo de Calidad del INEEEstándares técnicos para las evaluaciones educativas 11
Difusión de Resultados para la Mejora y Rendición de CuentasLa política nacional de evaluación educativa 25
Visión Integral: El sistema nacional de evaluación educativa 41
Plan Maestro de Desarrollo 2004-2012Resumen ejecutivo 55
Conclusión 67
3HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
INTRODUCCIÓN
4
5HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
Desde sus inicios en las décadas de los años sesenta y setenta del siglo pa-sado, hasta 2003, la evaluación educativa en México incluyó gran número de acciones valiosas; éstas son la base imprescindible de lo que puede hacerse en el futuro.
En educación básica sobresalen las actividades de la Secretaría de Educación Pública (SEP), en particular a través de su Dirección General de Evaluación. Otras áreas de la SEP, como la Dirección General de Planea-ción, Programación y Presupuesto o la Subsecretaría de Educación Básica y Normal desarrollan indicadores educativos y evalúan diversos aspectos del magisterio y las escuelas normales. Las autoridades educativas locales realizan también acciones de evaluación, sobre todo en algunas entida-des federativas y a partir de la firma del Acuerdo Nacional para la Moder-nización de la Educación Básica y Normal de mayo de 1992.
En educación media superior no hay acciones de alcance general, pero sí numerosas actividades evaluativas de los subsistemas más importantes de este tipo educativo, como la Escuela Nacional Preparatoria y el Colegio de Ciencias y Humanidades de la Universidad Nacional Autónoma de Méxi-co; el Colegio de Bachilleres; los planteles que dependen de las Direcciones Generales de Bachillerato, Educación Técnica Industrial o Agropecuaria de la SEP; o el Colegio Nacional de Educación Profesional (Conalep). En los estados hay, aunque en forma excepcional, actividades de las Comisiones Estatales de Planeación de la Educación Media Superior. El Centro Nacional de Evalua-ción para la Educación Superior (Ceneval) realiza acciones en este nivel, en especial los exámenes de ingreso a bachillerato y licenciatura.
Por lo que se refiere a educación superior, las Subsecretarías de Edu-cación Superior e Investigación Científica y de Educación e Investiga-
6
ción Tecnológica de la SEP, han impulsado acciones de autoevaluación y evaluación externa de instituciones y programas, tanto en forma directa como a través de los Comités Interinstitucionales de Evaluación de la Edu-cación Superior. Con el Consejo Nacional de Ciencia y Tecnología (Cona-cyt), la SEP desarrolló también un importante sistema de evaluación de programas de posgrado.
Las Comisiones Estatales de Planeación de la Educación Superior de las entidades federativas tienen una actividad débil. Muy importante es, en cambio, la del Ceneval y, cada vez más, la de una quincena de agencias surgidas en la última década para la acreditación de programas. El Consejo Nacional para la Acreditación de la Educación Superior (Copaes), creado a fines de 2000, es el organismo cúpula que regula al conjunto. La Asociación Nacional de Universidades e Instituciones de Educación Superior (ANUIES) y la Federación de Instituciones Mexicanas Particulares de Educación Su-perior (FIMPES) tienen también acciones de evaluación propias.
El conjunto de acciones de evaluación educativa existentes en Méxi-co es importante, pero tiene también limitaciones innegables, las cuales pueden sistematizarse en tres puntos:♦ Desarticulación. Las evaluaciones son múltiples, tal vez excesivas en
unos casos; sus propósitos son heterogéneos y no siempre comple-mentarios o congruentes.
♦ No difusión. El manejo confidencial de resultados tiene implicacio-nes negativas en al menos tres sentidos: no se usan para sustentar decisiones de mejora de la calidad; la cultura de la evaluación no se consolida, ya que no se desarrolla la capacidad para entender resul-tados de manera inteligente y crítica; la calidad sufre: ni siquiera se detectan las fallas para corregirlas.
♦ Deficiencias técnicas. Estas ocurren tanto en la planeación como en la implementación de las evaluaciones, lo cual impide que se puedan extraer conclusiones sólidas.La evaluación puede ser una herramienta valiosa para que el siste-
ma educativo de México alcance los niveles de calidad necesarios para un mayor y mejor desarrollo económico y social, pero para ello deberá caracterizarse por rasgos contrastantes con los anteriores.
En sus dos primeros años de existencia, el Instituto Nacional para la Evaluación de la Educación (INEE) ha comenzado a desarrollar un conjun-
7HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
to de acciones que son avances en dirección a la mejora cualitativa de la evaluación educativa en México. Esas acciones se resumen como sigue:♦ Indicadores
✓ Desarrollo conceptual de un sistema de indicadores dinámico y de gran cobertura.
✓ Producción de un primer anuario de indicadores, que, además de abundante información, presenta de manera explícita la me-todología utilizada.
♦ Pruebas nacionales✓ Diez estudios de análisis de resultados de las pruebas aplicadas
de 1998 a 2002.✓ Informe de Resultados 2003 con análisis nuevos.✓ Inicio de desarrollo de nueva generación de pruebas.
♦ Pruebas internacionales✓ Aplicación de pruebas PISA-2003 a muestra de grandes propor-
ciones, para análisis por entidad.✓ Calificación y análisis de resultados.✓ Participación activa en la planeación y desarrollo de las pruebas
PISA a aplicar en 2006.♦ Evaluación de escuelas
✓ Desarrollo de instrumentos para evaluar distintos aspectos de la vida escolar.
✓ Capacitación de las áreas de evaluación de las 32 entidades de la República, para elaborar informes estatales con los resultados de las evaluaciones 2003.
♦ Relaciones nacionales✓ Formalización de relación con las 32 entidades federativas en el
Consejo Consultivo.✓ Sistematización y mejora de calidad de aplicaciones de pruebas
y lectura de resultados.✓ Constitución de una biblioteca especializada.
♦ Comunicación y difusión✓ Publicación de Informe anual, con síntesis de resultados de las
evaluaciones de 2003.✓ Puesta en línea de productos, en especial bases de datos de re-
sultados de evaluaciones.
8
✓ Difusión de resultados por escuela: apoyo a la Subsecretaría de Servicios Escolares del Distrito Federal (SSEDF) para el Sistema de Información para la Mejora Escolar (SIME).
✓ Cursos de capacitación para periodistas.✓ Programa de difusión por medios impresos (libros, cuadernos,
folletos) y electrónicos. Además, el INEE promueve una nueva visión de la evaluación
educativa que se caracteriza por tres rasgos básicos, los cuales corrigen las deficiencias anteriores.
♦ Calidad técnica de las evaluaciones, para que sean sustento sólido para la mejora✓ Mediante la explicitación previa de criterios de calidad que de-
berán cumplirse.✓ Con procedimientos claros a seguir para que se cumplan los cri-
terios establecidos.✓ A través de un conjunto estructurado de instancias internas y
externas que supervisen la operación de los procedimientos y el cumplimiento de los estándares.
♦ Difusión de resultados como medio valioso para la mejora✓ Entre legisladores, autoridades educativas, directores, super-
visores y maestros, de manera que utilicen los resultados para sustentar acciones de mejora.
✓ Entre padres de familia, empresarios, medios de comunicación y toda la sociedad, desarrollando la cultura de la evaluación para apoyar la rendición de cuentas.
✓ De acuerdo con una política nacional de evaluación educativa, global y coherente.
♦ Articulación: visión integral de la evaluación✓ Evaluación de resultados de la educación pero también recursos
y procesos, además de elementos del contexto de los planteles escolares, que den sentido a los resultados.
✓ Acciones a cargo del INEE, SEP, autoridades estatales y agencias como Ceneval, CIEES, Copaes, agencias acreditadoras, evalua-ción de posgrados de Conacyt, etcétera.
9HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
✓ Mecanismo que asegure la coordinación de las diversas instan-cias para garantizar que funcionen en forma articulada, en un auténtico sistema nacional.
Los tres apartados siguientes desarrollan estos tres rasgos del nuevo para-digma de evaluación que el INEE promueve, con base en el Plan Maestro de Desarrollo 2004-2012, aprobado por su Junta Directiva el 13 de julio de 2004.
Felipe Martínez RizoDirector General
10
11HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
EL MODELO DE CALIDAD DEL INEE
ESTÁNDARES TÉCNICOS PARA LAS EVALUACIONES
EDUCATIVAS
12
13HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
El propósito fundamental que subyace el trabajo de delinear estándares técnicos es el de sintetizar lo esencial de las me-jores prácticas en el campo de los trabajos de la IEA, para ofrecer un referente contra el cual pueda valorarse la calidad de los estudios que se hagan bajo los auspicios de la Aso-ciación… La búsqueda de estándares cada vez más altos y explícitos, si bien laudable, trae consigo el riesgo de plantear exigencias poco realistas a los proyectos que deban seguir-los. Es importante que cualquier conjunto de estándares para estudios futuros centre la atención en asegurar la exce-lencia técnica y metodológica de dichos estudios, cuidando que no se impida el desarrollo de innovaciones por definir lo que debe hacerse de manera demasiado estrecha.
Technical Standards for IEA Studies, pp. 7-8
Los propósitos de los Estándares son apoyar al personal del ETS en el diseño, desarrollo y aplicación de productos y servicios de buena calidad técnica, justos y útiles, así como apoyar a los auditores en la evaluación de productos y servi-cios… La aplicación de los estándares dependerá del juicio del personal del ETS y de los evaluadores externos. El ETS pre-tende que los estándares ofrezcan un contexto para el juicio profesional, y NO que substituyan a tales juicios. Ninguna recopilación de estándares puede prever todas las circuns-tancias posibles ni ser aplicable universalmente sin interpre-taciones. El ETS no pretende que el uso de ninguno de estos estándares impida su adaptación a nuevos entornos, ni que se reduzca la adopción de nuevas tecnologías útiles para la evaluación, o que se inhiba la mejora. Si un consenso de juicios profesionales calificados encuentra que la aplicación literal de algún estándar es inapropiada en circunstancias particulares, los juicios deberán prevalecer sobre los están-dares.
ETS Standards for Quality and Fairness, p. 1
14
15HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
INTRODUCCIÓN
El nuevo enfoque de evaluación educativa en gran escala que el Instituto Nacional para la Evaluación de la Educación promueve, pretende consti-tuir un salto cualitativo con respecto a lo hecho previamente en México. Este nuevo enfoque se caracteriza por una visión de la evaluación que la considera como un medio valioso para la mejora de la calidad educativa. Esta visión tiene entre sus implicaciones que: ♦ La evaluación deba ser desarrollada por instancias que actúen en for-
ma articulada, formando un verdadero sistema nacional.♦ Sus resultados se difundan de manera oportuna y transparente, para
que sean utilizados para apoyar la toma de decisiones de política edu-cativa y las prácticas pedagógicas y de gestión de escuelas y maes-tros.
♦ Las evaluaciones sean plenamente confiables, por realizarse de acuer-do con los más altos estándares técnicos.Esta tercera implicación es fundamental, ya que es un prerrequisito in-
dispensable para que el propósito clave se cumpla: si las evaluaciones no se hacen bien, sus resultados no podrán ser una base sólida para las deci-siones de política, ni para retroalimentar a las escuelas y los maestros.
La buena calidad de las evaluaciones no puede ser el resultado de un buen propósito, sin que se pongan los medios necesarios para alcanzarlo. Para que la pretensión de alcanzar los más altos niveles de calidad sea creíble, el INEE debe precisar la manera como pretende llevar a cabo tan compleja tarea. En estas páginas se explicita el procedimiento de trabajo que el Instituto debe seguir en sus acciones de evaluación, un conjunto de estándares que constituye el modelo de calidad del INEE.
16
Este modelo tiene tres componentes que deben definirse explícita-mente:♦ Criterios de calidad precisos, los cuales deberán cumplirse en cada paso
de las evaluaciones.♦ Procedimientos claros, los cuales deberán seguirse para asegurar se
cumplan los estándares establecidos.♦ Instancias internas y externas, integradas por personas calificadas con
un perfil adecuado, quienes supervisarán la operación de procedi-mientos y el cumplimiento de los estándares. La experiencia de la evaluación educativa en los países de mayor tradi-
ción en el tema ha permitido identificar las mejores prácticas en el campo, que han dado lugar a definiciones precisas de los tres elementos ante-riores. Por ello el INEE no parte de cero, sino que se basa en el trabajo y experiencia de muchos especialistas, que se plasman en documentos importantes en los cuales se apoya el planteamiento del INEE.
En los Estados Unidos sobresalen los trabajos del Educational Testing Service (ETS) de Princeton, seguramente la institución de evaluación más grande e importante del mundo, así como los de las organizaciones pro-fesionales relacionadas con evaluación educativa: la American Educational Research Association (AERA), la American Psychological Association (APA) y el National Council on Measurement in Education (NCME).
De los Estados Unidos debe mencionarse también el trabajo del Joint Committee on Standards for Educational Evaluation, así como los Standards for Education Data Collection and Reporting del National Center for Educa-tion Statistics. En México y, en general en los países de habla hispana no hay materiales comparables, con la excepción de una publicación del Ce-neval.
En el plano internacional destaca el trabajo de la International Asso-ciation for the Evaluation of Educational Achievement (IEA), que comenzó a gestarse en 1958 y es conocida sobre todo como responsable de las pruebas TIMSS. Recientemente sobresale el trabajo de la OCDE en el Pro-gramme for International Student Assessment (PISA).
Alcanzar altos niveles de calidad técnica no puede ser el resultado de un esfuerzo lleno de buena voluntad sin guías precisas; tampoco es el producto mágico de ingredientes misteriosos, los cuales no pueden de-finirse. La calidad sólo puede ser el fruto de un trabajo intenso y disci-
17HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
plinado, el cual se apegue estrictamente a estándares decantados por la experiencia de las mejores prácticas en el campo.
Para que un trabajo de tales características pueda organizarse se nece-sitan dos tipos de instrumentos:♦ Manuales Técnicos (MT) en donde se describan con detalle los criterios
de calidad que deberán respetarse y los procedimientos que deberán seguirse, así como los controles internos y externos que vigilarán que los procedimientos se sigan, y los criterios de calidad se respeten.
♦ Reportes Técnicos (RT) que den cuenta de la manera y medida en cómo se cumplieron los criterios y se siguieron los procedimientos, de manera que las instancias internas y externas de control puedan verificarlo.Conviene señalar que los cuerpos colegiados que integran la estruc-
tura del INEE, se organizan de una manera relacionada con la idea de que el cumplimiento de criterios y procedimientos de calidad deberá ser su-pervisado por instancias externas e internas. La composición plural de la Junta Directiva asegura la independencia de criterio del Instituto; la repre-sentación de las 32 entidades federativas en el Consejo Consultivo cuida la presencia de las autoridades educativas y las escuelas para determinar los planes de trabajo. Por su parte, el Consejo Técnico, con sus especialis-tas nacionales y extranjeros en indicadores, pruebas y evaluación de es-cuelas, constituye la instancia fundamental para el cuidado de la calidad técnica del trabajo del INEE en conjunto, la variedad y especificidad de las acciones de evaluación a cargo del Instituto ha hecho necesario que el Consejo Técnico complemente su trabajo con el de múltiples grupos especializados, para aspectos particulares.
Lo que el INEE pretende aportar a la evaluación de la educación en México no es completamente novedoso, ya que se basa en las mejores prácticas de los sistemas de evaluación de mayor experiencia en el mun-do; tampoco es trivial, ya que introduce niveles de rigor, los cuales cons-tituyen avances cualitativos en el medio nacional. Es, simplemente, el paso de un trabajo menos sistemático a otro más organizado, que toma en cuenta las mejores prácticas internacionales y pone los medios para apegarse a ellas. El producto serán evaluaciones de gran calidad técnica, con lo que implica, tanto para sustentar decisiones y acciones de mejora, como para apoyar la rendición de cuentas.
18
ESTÁNDARES DE CALIDAD: CRITERIOS, PROCEDIMIENTOS E INSTANCIAS DE CONTROL
Los estándares generales de calidad que todas las evaluaciones del INEE deberán cubrir incluyen la riqueza de la conceptualización, la calidad de las mediciones la adecuación de los referentes seleccionados; la objeti-vidad de los juicios de valor y la oportunidad y amplitud de la difusión de los resultados. Los aspectos técnicos se aplican de manera distinta a los diversos tipos de evaluaciones, como pruebas de rendimiento, indicado-res o evaluaciones de procesos. Para que se cumplan los estándares gene-rales deben cuidarse muchos aspectos particulares, a lo largo del proceso de construcción de pruebas, indicadores u otras evaluaciones, así como durante su aplicación y en el análisis de los resultados.
En el primero de los cuadros siguientes se presentan los cuatro están-dares generales, explicando su sentido e importancia. Los cuadros subsi-guientes presentan los estándares a respetar en los diversos aspectos de pruebas, cuestionarios de contexto, evaluaciones de recursos, procesos y programas, y en cuanto a indicadores. Obviamente, los cuadros deben entenderse como esquemas ha desarrollarse con detalle en los Manuales Técnicos respectivos.
Los cuadros que se refieren a tipos particulares de evaluación presen-tan, en forma esquemática, estándares de calidad que el INEE utilizará en cada caso, precisando criterios aplicables y productos en que se reflejarán. Se presentan procedimientos a seguir e instancias internas y externas de control, las cuales vigilarán que los criterios y procedimientos se cum-plan.
19HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
Está
nd
ares
gen
eral
es: c
ual
idad
es d
e u
na
bu
ena
eval
uac
ión
ASP
ECTO
SD
EFIN
ICIÓ
ND
EFIN
ICIO
NES
BÁ
SIC
AS
NEC
ESA
RIA
SC
RIT
ERIO
S D
E V
ALO
RA
CIÓ
N
Riq
uez
a d
e la
C
on
cep
tual
izac
ión
Co
ber
tura
su
ficie
nte
de
los
asp
ecto
s d
e la
real
idad
a e
valu
ar,
po
r lo
s co
nce
pto
s en
qu
e se
su
sten
te la
eva
luac
ión
Ob
jeto
de
eval
uac
ión
: per
son
as, g
rup
os,
inst
itu
cio
nes
, su
bsi
stem
as o
sis
tem
asD
imen
sio
nes
de
la c
alid
ad a
co
nsi
der
ar e
n la
eva
luac
ión
Los
con
cep
tos
qu
e su
sten
ten
la
eval
uac
ión
deb
erán
incl
uir
las
dim
ensi
on
es re
leva
nte
s d
e la
cal
idad
de
los
ob
jeto
s a
eval
uar
Cal
idad
téc
nic
a d
e la
s m
edic
ion
es
Va
lidez
Co
ng
ruen
cia
entr
e el
co
nte
nid
o re
al
de
la e
valu
ació
n y
el p
lan
ead
oSu
sten
to d
e la
s in
fere
nci
as y
juic
ios
hec
ho
s co
n b
ase
en lo
s re
sult
ado
s
Pro
pó
sito
s, u
sos
pre
vist
os,
dec
isio
nes
a to
mar
co
n b
ase
en
los
resu
ltad
os
de
la e
valu
ació
nC
on
ten
ido
s, co
nst
ruct
os
y d
om
inio
s a
eval
uar
Ref
eren
tes
(cu
rric
ula
res
u o
tro
s) p
ara
la e
spec
ifica
ció
n d
e co
nte
nid
os
y d
om
inio
s
Cla
rid
ad y
pre
cisi
ón
de
pro
pó
sito
s y
uso
sC
lari
dad
de
defi
nic
ión
de
con
ten
ido
sPr
ecis
ión
de
defi
nic
ión
de
refe
ren
tes
C
on
fiab
ilid
ad
Co
nsi
sten
cia
de
los
resu
ltad
os
de
un
a ev
alu
ació
n d
e m
od
o q
ue
sus
dife
ren
cias
o c
oin
cid
enci
as re
fleje
n
cara
cter
ísti
cas
real
es d
e lo
s su
jeto
s o
las
po
bla
cio
nes
eva
luad
as
Dis
eño
gen
eral
del
est
ud
io; m
od
elo
psi
com
étri
co u
otr
oC
arac
terí
stic
as m
eto
do
lóg
icas
de
los
inst
rum
ento
s y
pro
ced
imie
nto
s d
e m
edic
ión
o re
cole
cció
n d
e d
ato
sId
em d
e lo
s p
roce
dim
ien
tos
de
anál
isis
de
resu
ltad
os
Si p
roce
de,
de
técn
icas
y p
roce
dim
ien
tos
de
mu
estr
eo
Co
ng
ruen
cia
del
dis
eño
gen
eral
co
n lo
s m
od
elo
s, in
stru
men
tos
y p
roce
dim
ien
tos
Cal
idad
téc
nic
a d
e ca
da
inst
rum
ento
Cal
idad
y u
nifo
rmid
ad d
e p
roce
dim
ien
tos
Rep
rese
nta
tivi
dad
de
las
mu
estr
as
C
om
par
abili
dad
Co
nsi
sten
cia
de
los
resu
ltad
os
de
las
eval
uac
ion
es e
n e
l tie
mp
o, d
e m
aner
a q
ue
los
cam
bio
s en
los
resu
ltad
os
refle
jen
cam
bio
s re
ales
Dis
eño
s y
mét
od
os
de
equ
ipar
ació
n a
uti
lizar
Peri
od
icid
ad y
met
od
olo
gía
de
con
tro
les
de
esta
bili
dad
de
las
esca
las
Cri
teri
os
técn
ico
s es
pec
ífico
s d
e la
ca
lidad
de
las
equ
ipar
acio
nes
Idem
de
los
con
tro
les
de
esta
bili
dad
Eq
uid
ad
Imp
arci
alid
ad d
e la
eva
luac
ión
, d
e m
od
o q
ue
resu
ltad
os
dis
tin
tos
refle
jen
dife
ren
cias
real
es e
n la
co
mp
eten
cia
de
los
suje
tos
en e
l co
nst
ruct
o e
valu
ado
y n
o e
n o
tro
s ca
mp
os
no
rele
van
tes
Posi
ble
s fu
ente
s re
leva
nte
s d
e se
sgo,
seg
ún
los
pro
pó
sito
s y
el c
on
text
o d
e la
eva
luac
ión
, v. g
r. g
éner
o, le
ng
ua,
etn
iaC
rite
rio
s d
e va
lidez
cu
ltu
ral
A p
rior
i: ex
iste
nci
a d
e ad
apta
cio
nes
en
la
s ap
licac
ion
es y
de
cuid
ado
par
a ev
itar
se
sgo
en
el d
iseñ
o d
e ít
ems
y o
tro
s in
stru
men
tos
A p
oste
rior
i: au
sen
cia
de
sesg
os
po
r fu
ente
rele
van
te, s
egú
n a
nál
isis
es
pec
iale
s
Ad
ecu
ació
n d
e lo
s re
fere
nte
s
Pun
tos
de
refe
ren
cia
par
a va
lora
r la
adec
uac
ión
o in
adec
uac
ión
de
las
real
idad
es a
eva
luar
Pará
met
ros
de
refe
ren
cia
de
tod
as la
s d
imen
sio
nes
a
eval
uar
. Po
drá
n s
er ó
pti
mo
s, m
edio
s o
mín
imo
s.
Pert
inen
cia
de
los
par
ámet
ros,
qu
e n
o s
ean
dem
asia
do
acc
esib
les
ni
inal
can
zab
les
Ob
jeti
vid
ad d
e lo
s ju
icio
s d
e va
lor
Gra
do
en
qu
e la
val
ora
ció
n d
e ca
lidad
del
ob
jeto
a e
valu
ar t
ien
e su
sten
to re
al e
n la
info
rmac
ión
d
isp
on
ible
No
se
req
uie
ren
defi
nic
ion
es a
dic
ion
ales
, ya
qu
e lo
s ju
icio
s d
e va
lor r
esu
ltan
de
con
tras
tar l
os
resu
ltad
os
de
las
med
icio
nes
real
izad
as c
on
los
par
ámet
ros
defi
nid
os
Los
juic
ios
de
valo
r ser
án m
esu
rad
os,
evit
and
o e
xces
os
triu
nfa
lista
s o
d
erro
tist
as, y
ten
drá
n e
n c
uen
ta e
l va
lor d
e eq
uid
ad, s
egú
n e
l co
nte
xto
de
alu
mn
os
y es
cuel
as
Op
ort
un
idad
y
amp
litu
d d
e la
d
ifu
sió
n
Gra
do
en
qu
e la
info
rmac
ión
lleg
ue
a su
s d
esti
nat
ario
s en
tie
mp
o
razo
nab
le y
en
form
a in
telig
ible
a
cad
a p
úb
lico
Púb
lico
s o
bje
tivo
: nú
mer
o, u
bic
ació
n, c
arac
terí
stic
asC
anal
es d
e d
ifusi
ón
de
la in
form
ació
n
Am
plit
ud
de
la in
form
ació
n d
ifun
did
a C
lari
dad
en
fun
ció
n d
e ca
da
des
tin
atar
ioO
po
rtu
nid
ad d
e la
difu
sió
n
20Es
tán
dar
es d
e ca
lidad
par
a p
rueb
as d
e re
nd
imie
nto
ASP
ECTO
SP
RO
DU
CTO
SC
RIT
ERIO
SP
RO
CED
IMIE
NTO
SC
ON
TRO
LES
INTE
RN
OS
CO
NTR
OLE
SEX
TER
NO
S
Defi
nic
ion
es b
ásic
as:
� Pr
op
ósi
to y
po
bla
ció
n�
con
stru
cto
s: d
om
inio
s y
refe
ren
tes
Dis
eño
de
pru
ebas
: cic
los,
per
iod
icid
ad d
e m
edic
ion
es
mo
del
o p
sico
mét
rico
, tip
os
de
inst
rum
ento
s, fo
rmas
, etc
éter
a.
Man
ual
Téc
nic
o (M
T) d
e d
iseñ
o d
e p
rueb
asTe
xto
co
n d
efin
icio
nes
Ju
stifi
caci
ón
del
do
min
ioM
apa
curr
icu
lar
Tab
la d
e co
nte
nid
os
Cla
rid
ad d
e d
efin
icio
nes
Co
nsi
sten
cia
de
just
ifica
ció
nC
lari
dad
y c
on
gru
enci
a d
e m
apa
curr
icu
lar;
apeg
o a
MT
Just
ifica
ció
n d
e ta
bla
A
dec
uac
ión
de
cicl
os,
mo
del
o
e in
stru
men
tos
en re
laci
ón
co
n
pro
pó
sito
s y
con
stru
cto
r
An
ális
is d
ocu
men
tal
po
r esp
ecia
lista
s
Esp
ecia
lista
s d
el IN
EEC
on
sejo
Té
cnic
oA
seso
res
Co
nse
jo A
cad
émic
o
de
cad
a p
rueb
a
Esp
ecia
lista
s ex
tern
os
Esp
ecifi
caci
ón
de
reac
tivo
s
MT
de
esp
ecifi
caci
ón
Text
o d
e es
pec
ifica
cio
nes
d
e re
acti
vos
de
cad
a p
arte
d
e la
tab
la d
e co
nte
nid
os
Ap
ego
a li
nea
mie
nto
s d
e M
T d
el
text
o d
e es
pec
ifica
cio
nes
Co
ng
ruen
cia
con
la t
abla
de
con
ten
ido
s
An
ális
is d
ocu
men
tal
Co
nse
jo A
cad
émic
oC
om
ité
de
esp
ecifi
caci
ón
Esp
ecia
lista
s ex
tern
os
Co
nst
rucc
ión
de
reac
tivo
s: el
abo
raci
ón
y re
visi
ón
MT
de
con
stru
cció
n
Rea
ctiv
os
revi
sad
os
Ap
ego
a li
nea
mie
nto
s d
e M
TR
esp
eto
de
esp
ecifi
caci
on
esC
on
gru
enci
a ta
bla
co
nte
nid
os
Elab
ora
ció
n y
revi
sió
n
po
r co
mit
és d
ifere
nte
sA
nál
isis
do
cum
enta
l
Co
mit
és re
dac
tore
s y
revi
sore
s
Pru
eba
pilo
to d
e re
acti
vos
MT
pilo
taje
de
reac
tivo
sR
epo
rte
Técn
ico
(RT
) de
pilo
toR
eact
ivo
s p
ilote
ado
s
Ap
ego
a li
nea
mie
nto
s d
e M
TTa
mañ
o y
car
acte
ríst
icas
de
mu
estr
as y
del
pilo
taje
mis
mo
Ind
icad
ore
s p
sico
mét
rico
s
An
ális
is d
e in
dic
ado
res
psi
com
étri
cos
An
ális
is d
el R
T.
Co
nse
jo A
cad
émic
oEs
pec
ialis
tas
exte
rno
s
Valid
ació
n d
e re
acti
vos
MT
de
valid
ació
nR
eact
ivo
s va
lidad
os
Ap
ego
a li
nea
mie
nto
s d
e M
TA
nál
isis
do
cum
enta
lC
on
sejo
Aca
dém
ico
Esp
ecia
lista
s ex
tern
os
Arm
ado
de
las
pru
ebas
MT
de
arm
ado
de
pru
ebas
Pru
ebas
arm
adas
Ap
ego
a li
nea
mie
nto
s d
e M
TC
on
gru
enci
a co
n p
lan
eaci
ón
An
ális
is d
ocu
men
tal
Co
nse
jo A
cad
émic
oEs
pec
ialis
tas
exte
rno
s
Imp
resi
ón
de
cuad
ern
illo
sM
T y
RT
de
imp
resi
ón
Cu
ader
nill
os
imp
reso
sA
peg
o a
lin
eam
ien
tos
de
MT
Erro
res
en c
uad
ern
illo
s
Mo
nit
ore
o im
pre
sió
nA
nál
isis
del
RT
Rev
isió
n c
uad
ern
illo
s
Co
nse
jo A
cad
émic
oEs
pec
ialis
tas
exte
rno
s
Mu
estr
eo
MT
de
mu
estr
eoPl
an m
ues
treo
, defi
nic
ión
d
e p
ob
laci
ón
, car
act.
de
mu
estr
a, c
ob
ertu
ra y
tas
a p
lan
ead
a d
e p
arti
cip
ació
n,
crit
erio
s d
e re
mp
lazo
, m
arg
en d
e er
ror a
cep
tab
le
y co
nfia
bili
dad
esp
erad
aM
ues
tras
cal
cula
das
Ap
ego
a li
nea
mie
nto
s d
e M
TTa
mañ
o y
car
acte
ríst
icas
par
a re
pre
sen
tati
vid
ad d
el u
niv
erso
y
los
estr
ato
s y
po
sib
ilita
r an
ális
is
pla
nea
do
s
Valid
ació
n a
pri
ori d
el
pla
n d
e m
ues
treo
Co
nse
jo A
cad
émic
oEs
pec
ialis
tas
exte
rno
s
21HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEEA
SPEC
TOS
PR
OD
UC
TOS
CR
ITER
IOS
PR
OC
EDIM
IEN
TOS
CO
NTR
OLE
SIN
TER
NO
SC
ON
TRO
LES
EXTE
RN
OS
Ad
min
istr
ació
n d
e la
p
rueb
aM
T d
e ad
min
istr
ació
nR
T d
e ad
min
istr
ació
n
Ap
ego
a li
nea
mie
nto
s d
el M
TU
nifo
rmid
ad a
plic
acio
nes
N° y
tip
o d
e in
cid
enci
as
Mo
nit
ore
o p
or m
ues
tra
An
ális
is d
el R
T
Esp
ecia
lista
s d
el I
NEE
Co
nse
jo
Técn
ico
Ase
sore
s
Co
nse
jo
Aca
dém
ico
Esp
ecia
lista
s ex
tern
os
Cap
tura
, lec
tura
y
califi
caci
ón
de
resu
ltad
os
MT
y R
T d
e le
ctu
raB
ase
de
dat
os
dep
ura
da
y d
ocu
men
tad
a
Ap
ego
a li
nea
mie
nto
s d
el M
TN
° y t
ipo
de
erro
res
de
la b
ase
Mo
nit
ore
o d
e p
roce
soC
on
tro
les
ad h
ocA
nál
isis
del
RT
y b
ase
An
ális
is p
rim
ario
s d
e re
sult
ado
s
MT
de
anál
isis
pri
mar
ios
RT
de
mu
estr
eoD
ato
s es
cala
do
sVa
lore
s p
on
der
ado
sIn
form
e d
e eq
uip
arac
ión
An
ális
is d
escr
ipti
vos
Esta
dís
tica
s d
e co
nfia
bili
dad
Cal
idad
de
esca
las
Cal
idad
de
mu
estr
a ef
ecti
vaC
alid
ad d
e eq
uip
arac
ión
Cal
idad
de
anál
isis
An
ális
is d
e va
lidez
An
ális
is d
e se
sgo
An
ális
is a
d ho
c
An
ális
is s
ecu
nd
ario
s d
e re
sult
ado
s y
rep
ort
es
MT
de
anál
isis
sec
un
dar
ios
y re
po
rtes
Plan
de
anál
isis
seg
ún
pro
pó
sito
s-ca
ract
erís
tica
s d
e la
pru
eba,
co
n
técn
icas
a u
tiliz
ar, t
abla
s du
mm
y a
incl
uir
en
rep
ort
e, e
tc.
An
ális
is re
aliz
ado
sR
epo
rte
final
Co
ber
tura
de
con
ten
ido
Prec
isió
n d
e an
ális
is
Ob
jeti
vid
ad d
e ju
icio
s
Cla
rid
ad d
e ex
pre
sió
n
Rev
isio
nes
esp
ecia
les
Difu
sió
n d
e re
sult
ado
s
Bas
es d
e d
ato
s p
ub
licad
as
Rep
ort
e co
mp
leto
pu
blic
ado
(en
lín
ea-p
apel
)
Mat
eria
les
de
div
ulg
ació
n p
ara
div
ersa
s au
die
nci
as
Acc
eso
a in
form
ació
n d
e:
Au
tori
dad
es
Mae
stro
s y
dir
ecto
res
Pa
dre
s d
e fa
mili
a
Soci
edad
en
gen
eral
In
vest
igad
ore
sU
so d
e re
sult
ado
s
An
ális
is a
d ho
c
22Es
tán
dar
es d
e ca
lidad
par
a cu
esti
onar
ios
de
con
text
oA
SPEC
TOS
PR
OD
UC
TOS
CR
ITER
IOS
PR
OC
EDIM
IEN
TOS
CO
NTR
OL
INTE
RN
OC
ON
TRO
LEX
TER
NO
Defi
nic
ión
de
cues
tio
nar
ios
a u
tiliz
ar: d
e al
um
no
s, m
aest
ros,
dir
ecto
res,
etcé
tera
.
MT
cues
tio
nar
ios
Do
cum
ento
co
n d
efin
icio
nes
Ad
ecu
ació
n a
pro
pó
sito
sA
nál
isis
do
cum
enta
l po
r es
pec
ialis
tas
Esp
ecia
lista
s d
el IN
EEC
on
sejo
Té
cnic
oA
seso
res
Esp
ecia
lista
s ex
tern
os
Defi
nic
ión
de
dim
ensi
on
es
y va
riab
les
a in
clu
ir e
n c
ada
cues
tio
nar
io
Do
cum
ento
de
pla
nea
ció
n d
e lo
s cu
esti
on
ario
s
Rel
evan
cia
teó
rica
Via
bili
dad
prá
ctic
aPa
rsim
on
iaA
nál
isis
do
cum
enta
l
Op
erac
ion
aliz
ació
n d
e va
riab
les
Do
cum
ento
co
n
op
erac
ion
aliz
ació
nC
on
gru
enci
a en
tre
vari
able
s e
ind
icad
ore
sA
nál
isis
do
cum
enta
l
Elab
ora
ció
n y
pru
ebas
de
pre
gu
nta
sPr
egu
nta
s p
ilote
adas
Valid
ez y
co
nfia
bili
dad
An
ális
is d
ocu
men
tal
pre
vio
; pru
eba
pilo
to;
anál
isis
resu
ltad
os
Dis
eño
de
cues
tio
nar
ioC
ues
tio
nar
io d
iseñ
ado
Co
rres
po
nd
enci
a co
n p
lan
An
ális
is d
ocu
men
tal
Imp
resi
ón
de
cues
tio
nar
ioC
ues
tio
nar
io im
pre
soN
úm
ero
y t
ipo
de
erro
res
Mo
nit
ore
o im
pre
sió
nR
evis
ión
a p
oste
rior
i
Mu
estr
eo (c
om
o p
rueb
as)
Plan
y M
T d
el m
ues
treo
Mu
estr
as c
alcu
lad
as-v
alid
adas
Tam
año
y c
arac
terí
stic
as p
ara
rep
rese
nta
tivi
dad
del
un
iver
so y
lo
s es
trat
os
par
a p
osi
bili
tar a
nál
isis
Valid
acio
nes
a p
rior
i y a
po
ster
iori
Ap
licac
ión
(co
n p
rueb
as)
MT
de
aplic
acio
nes
RT
de
aplic
acio
nes
Ap
ego
a li
nea
mie
nto
s d
el M
TN
úm
ero
y t
ipo
de
inci
den
cias
Mo
nit
ore
o m
ues
tral
An
ális
is d
el R
T
Lect
ura
de
resu
ltad
os
(co
n
pru
ebas
)
MT
de
lect
ura
RT
de
lect
ura
Bas
e d
e d
ato
s d
e le
ctu
ra
dep
ura
da
y d
ocu
men
tad
a
Ap
ego
a li
nea
mie
nto
s d
el M
TN
úm
ero
y t
ipo
de
erro
res
de
bas
e
Mo
nit
ore
o d
e p
roce
soC
on
tro
les
ad h
ocA
nál
isis
del
RT
y b
ase
An
ális
is d
e re
sult
ado
s y
rep
ort
es
MT
de
anál
isis
y re
po
rtes
Cu
adro
s p
ara
anál
isis
d
escr
ipti
vos
y ex
plic
ativ
os
Rep
ort
es te
rmin
ado
s
Co
ber
tura
de
con
ten
ido
Prec
isió
n d
e an
ális
isO
bje
tivi
dad
de
juic
ios
Cla
rid
ad d
e ex
pre
sió
n
An
ális
is d
ocu
men
tal
Difu
sió
n d
e re
sult
ado
sR
epo
rtes
pu
blic
ado
s (e
n lí
nea
-p
apel
)M
ater
iale
s d
e d
ivu
lgac
ión
par
a d
iver
sas
aud
ien
cias
Acc
eso
a in
form
ació
n d
e:
Au
tori
dad
es
Mae
stro
s y
dir
ecto
res
Pa
dre
s d
e fa
mili
a
Soci
edad
en
gen
eral
In
vest
igad
ore
sU
so d
e re
sult
ado
s p
or e
llos
An
ális
is d
ocu
men
tal
23HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEEEs
tán
dar
es d
e ca
lidad
par
a ev
alu
acio
nes
de
recu
rsos
, pro
ceso
s y
pro
gra
mas
ed
uca
tivo
sA
SPEC
TOS
PR
OD
UC
TOS
CR
ITER
IOS
PR
OC
EDIM
IEN
TOS
CO
NTR
OL
INTE
RN
OC
ON
TRO
LEX
TER
NO
Co
nce
ptu
aliz
ació
n d
el e
lem
ento
a
eval
uar
Man
ual
Téc
nic
o p
arti
cula
rD
ocu
men
to c
on
defi
nic
ion
es
qu
e su
sten
ten
el m
od
elo
Ad
ecu
ació
n a
pro
pó
sito
sC
lari
dad
, su
ficie
nci
a y
per
tin
enci
a d
e te
orí
a
An
ális
is d
ocu
men
tal
po
r esp
ecia
lista
s in
tern
os
y ex
tern
os
Esp
ecia
lista
s d
el IN
EEC
on
sejo
Té
cnic
oA
seso
res
Esp
ecia
lista
s ex
tern
os
Defi
nic
ión
de
met
od
olo
gía
e
inst
rum
ento
s a
uti
lizar
Do
cum
ento
de
pla
nea
ció
n
Co
ng
ruen
cia
con
ob
jeto
Co
ng
ruen
cia
de
teo
ría
con
m
eto
do
log
ía y
téc
nic
asV
iab
ilid
ad p
ráct
ica
Pars
imo
nia
An
ális
is d
ocu
men
tal
Op
erac
ion
aliz
ació
nD
ocu
men
to o
per
acio
nal
izac
ión
Co
ng
ruen
cia
entr
e va
riab
les
e in
dic
ado
res
An
ális
is d
ocu
men
tal
Des
arro
llo d
e in
stru
men
tos
Inst
rum
ento
s d
esar
rolla
do
sVa
lidez
y c
on
fiab
ilid
adA
nál
isis
do
cum
enta
l p
revi
o; p
rueb
a p
iloto
; an
ális
is d
e re
sult
ado
s
Defi
nic
ión
de
mu
estr
asPl
an y
MT
de
mu
estr
eoM
ues
tras
cal
cula
das
y
valid
adas
Tam
año
y c
arac
terí
stic
as p
ara
rep
rese
nta
tivi
dad
del
un
iver
so y
los
estr
ato
s y
po
sib
ilita
r an
ális
is
Valid
acio
nes
a p
rior
i y a
po
ster
iori
Org
aniz
ació
n d
e tr
abaj
o d
e ca
mp
oM
T d
e tr
abaj
o d
e ca
mp
oPl
an d
e tr
abaj
o d
e ca
mp
oA
peg
o a
lin
eam
ien
tos
MT
Co
nsi
sten
cia,
via
bili
dad
An
ális
is d
ocu
men
tal
Rea
lizac
ión
de
trab
ajo
de
cam
po
Rep
ort
e Té
cnic
o d
el t
rab
ajo
Ap
ego
a li
nea
mie
nto
s M
TN
úm
ero
y t
ipo
de
inci
den
cias
Mo
nit
ore
o m
ues
tral
An
ális
is d
el R
T
Pro
cesa
mie
nto
de
resu
ltad
os
MT
de
pro
cesa
mie
nto
RT
de
pro
cesa
mie
nto
Bas
e d
e d
ato
s d
e le
ctu
ra
dep
ura
da
y d
ocu
men
tad
a
Ap
ego
a li
nea
mie
nto
s M
TN
úm
ero
y t
ipo
de
erro
res
de
bas
eM
on
ito
reo
de
pro
ceso
Co
ntr
ole
s ad
hoc
An
ális
is d
e R
T y
bas
e
An
ális
is d
e re
sult
ado
s y
rep
ort
esM
T d
e re
po
rtes
Rep
ort
es te
rmin
ado
s
Co
ber
tura
de
con
ten
ido
Prec
isió
n d
e an
ális
isO
bje
tivi
dad
de
juic
ios
Cla
rid
ad d
e ex
pre
sió
n
An
ális
is d
ocu
men
tal
Difu
sió
n d
e re
sult
ado
s
Rep
ort
es p
ub
licad
os
(en
lín
ea-
pap
el)
Mat
eria
les
de
div
ulg
ació
n p
ara
div
ersa
s au
die
nci
as
Acc
eso
a in
form
ació
n d
e:
Au
tori
dad
es
Mae
stro
s y
dir
ecto
res
Pa
dre
s d
e fa
mili
a
Soci
edad
en
gen
eral
In
vest
igad
ore
sU
so d
e re
sult
ado
s p
or e
llos
An
ális
is d
ocu
men
tal
24Es
tán
dar
es d
e ca
lidad
par
a si
stem
as d
e in
dic
ador
es
ASP
ECTO
SPR
OD
UC
TOS
CRI
TERI
OS
PRO
CED
IMIE
NTO
SC
ON
TRO
LIN
TERN
OC
ON
TRO
LEX
TERN
O
Plan
eaci
ón
y
con
cep
tual
izac
ión
; d
efin
ició
n d
e d
imen
sio
nes
d
el s
iste
ma
Do
cum
ento
co
n d
efin
ició
n d
el
sist
ema
Co
ber
tura
Bal
ance
Pars
imo
nia
An
ális
is d
ocu
men
tal p
or
esp
ecia
lista
s
Esp
ecia
lista
s d
el IN
EEC
on
sejo
Té
cnic
oA
seso
res
Esp
ecia
lista
s ex
tern
os
Dis
eño
de
ind
icad
ore
s in
div
idu
ales
MT
de
ind
icad
ore
s D
ocu
men
tos
con
: In
dic
ado
res
inic
iale
s (fi
chas
téc
nic
as)
Res
ult
ado
de
juec
eo In
dic
ado
res
mo
difi
cad
os
(fich
a té
cnic
a m
od
ifica
da)
Valid
ezC
on
fiab
ilid
adC
om
par
abili
dad
Sen
sib
ilid
ad y
cal
idad
de
la
esti
mac
ión
Fact
ibili
dad
Imp
ort
anci
aU
tilid
ad
Valid
ació
n in
icia
l a p
rio
ri
med
ian
te ju
eceo
co
n
esp
ecia
lista
s y
usu
ario
s
Juec
es
exte
rno
s d
e tr
es t
ipo
s:Es
pec
ialis
tas
Usu
ario
s ca
lifica
do
sU
suar
ios
de
bas
e
Juec
eo in
icia
l de
ind
icad
ore
s
Pru
eba
pilo
to d
e in
dic
ado
res
o a
plic
ació
n
inic
ial
Do
cum
ento
co
n a
nál
isis
a
po
ster
iori
de
dat
os
Ind
icad
ore
s aj
ust
ado
s
Los
ante
rio
res
más
:A
ctu
alid
ad, e
stab
ilid
ad te
mp
ora
l y
clar
idad
Valid
acio
nes
a p
ost
erio
riA
nál
isis
de
seri
es d
e d
ato
sJu
eceo
s p
erió
dic
os
Esp
ecia
lista
s ex
tern
os
Juec
es
exte
rno
s
Ob
ten
ció
n, c
erti
ficac
ión
y
gen
erac
ión
de
info
rmac
ión
MT
de
ob
ten
ció
n in
fo.
RT
de
ob
ten
ció
n in
fo.
Cal
idad
de
inst
rum
ento
s y
pro
ceso
s;
Co
nfia
bili
dad
resu
ltad
os
Mo
nit
ore
o d
e p
roce
sos
An
ális
is d
e R
TEs
tud
ios
po
ster
iore
s ad
h
oc
Esp
ecia
lista
s ex
tern
os
Inte
gra
ció
n d
e in
form
ació
n,
crea
ció
n y
man
ten
imie
nto
d
e b
ases
de
dat
os
MT
inte
gra
ció
n y
bas
esB
ases
de
dat
os
Ap
ego
lin
eam
ien
tos
MT
Nú
mer
o y
tip
o e
rro
res
de
bas
esM
on
ito
reo
de
pro
ceso
sC
on
tro
les
ad h
oc
An
ális
is d
e R
T y
bas
e
Esp
ecia
lista
s ex
tern
os
Co
nst
rucc
ión
de
seri
es d
e d
ato
s Se
ries
co
nst
ruid
asC
on
sist
enci
a re
sult
ado
sA
nál
isis
do
cum
enta
les
Esp
ecia
lista
s ex
tern
os
Pro
du
cció
n d
e in
form
e an
ual
MT
de
info
rmes
Info
rmes
term
inad
os
Co
ber
tura
co
nte
nid
oPr
ecis
ión
an
ális
isO
bje
tivi
dad
juic
ios
Cla
rid
ad d
e ex
pre
sió
n
An
ális
is d
ocu
men
tale
sEs
pec
ialis
tas
exte
rno
s
Difu
sió
n d
e in
form
ació
n
Rep
ort
es p
ub
licad
os
(en
lín
ea-
pap
el)
Mat
eria
les
de
div
ulg
ació
n p
ara
div
ersa
s au
die
nci
as
Acc
eso
a in
form
ació
n d
e:
Au
tori
dad
es
Mae
stro
s y
dir
ecto
res
Pa
dre
s d
e fa
mili
a
Soci
edad
en
gen
eral
In
vest
igad
ore
sU
so d
e re
sult
ado
s p
or e
llos
An
ális
is d
ocu
men
tal
Esp
ecia
lista
s ex
tern
os
Des
arro
llo, a
ctu
aliz
ació
n y
m
ante
nim
ien
to d
el s
iste
ma
Do
cum
ento
co
n d
efin
icio
nes
ac
tual
izad
asC
ob
ertu
ra, b
alan
ce y
par
sim
on
ia
del
sis
tem
aA
nál
isis
do
cum
enta
l po
r es
pec
ialis
tas
Esp
ecia
lista
s ex
tern
os
25HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
DIFUSIÓN DE RESULTADOS PARA LA MEJORA Y
RENDICIÓN DE CUENTAS
LA POLÍTICA NACIONAL DE
EVALUACIÓN EDUCATIVA
26
27HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
En cumplimiento de la atribución que proporciona al INEE su Decreto de Creación, la versión inicial de la propuesta de Política Nacional de Evalua-ción Educativa (PNEE) fue preparada por la Dirección General en diciem-bre de 2002. El Consejo Técnico del Instituto la discutió en marzo de 2003. Una nueva versión se presentó a la Junta Directiva en abril, y se entregó a los secretarios estatales de educación, a los titulares de las áreas de eva-luación de las entidades y a funcionarios de la SEP. En junio se recibieron observaciones de la Junta Directiva del INEE en sesión extraordinaria; lue-go el Consejo Consultivo del Instituto aportó opiniones adicionales.
Con esos elementos se formuló una nueva versión, que se entregó a la Junta Directiva y se difundió entre los sectores mencionados. Se celebra-ron reuniones de análisis con participantes del INEE, la Coordinación de Asesores del Secretario, las Subsecretarías de Planeación y Coordinación, Educación Básica y Normal y de Servicios Educativos del Distrito Federal, el INEA y el Conafe. El documento se envió además a una treintena de especialistas, que aportaron sus opiniones por escrito y en una reunión con el Secretario de Educación. Tras otra reunión extraordinaria de la Jun-ta Directiva del INEE celebrada en agosto, se preparó una versión más, la cual se envió por correo electrónico a los miembros.
Con las observaciones recibidas se elaboró la penúltima versión, que se expuso a la Junta en la sesión ordinaria del 14 de octubre de 2003, en la que se aprobó como instrumento normativo para el propio Instituto. El alcance del documento no incluye a otras instancias de evaluación. Lo relativo al sistema nacional de evaluación educativa en particular (1.6) es sólo una propuesta que deberá ser asumida, en su caso, por las autorida-des correspondientes.
28
INTRODUCCIÓN
La fracción primera del Artículo Quinto del Decreto de Creación del Instituto Nacional para la Evaluación de la Educación (INEE), señala la atri-bución del nuevo organismo de definir e instrumentar, de manera conjunta con la SEP, una política nacional de evaluación, que contribuya a la elevación de la calidad de la educación. La propuesta que contiene este documento se hace en cumplimiento de esa disposición.
Las orientaciones sobre la evaluación educativa deben ser parte inte-gral de una política educativa de Estado: debe haber directrices de largo plazo para orientar el quehacer educativo y su evaluación, ya que la cali-dad educativa es una realidad en constante evolución y su logro trascien-de el lapso de un periodo gubernamental en particular.
La necesidad de que haya buenos sistemas de evaluación se deriva de la importancia indiscutible de que México brinde una educación de muy buena calidad a todos los alumnos de su sistema educativo. Pero es necesario también que la evaluación reúna determinadas características, ya que una evaluación inapropiada no contribuirá al propósito central de mejora y superación continua que se pretende.
México necesita contar con sistemas de evaluación confiables, cuyos resultados se difundan de manera transparente para que den sustento firme a las decisiones de mejora educativa que se deriven de los mismos.
Por otra parte, la evaluación es una tarea diversificada y compleja:♦ Se refiere a varios tipos, niveles y modalidades educativos, como la
educación básica, media superior, superior, de adultos o comunitaria.♦ Debe incluir a diferentes actores y componentes del Sistema Educati-
vo, como los alumnos, maestros, planes y programas, recursos, méto-dos de enseñanza, procesos pedagógicos o la gestión.
♦ Puede realizarse de diversas maneras, con enfoques y metodologías cuantitativas o cualitativas, en pequeña o gran escala, con énfasis en contenidos curriculares o en habilidades, incluyendo solamente algu-nas áreas o materias.
♦ Puede estar a cargo de los mismos maestros, las escuelas o diversas autoridades, pero también de organismos especializados nacionales y aun de agencias internacionales.
29HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
Para que las muchas formas de evaluación contribuyan efectiva-mente a sustentar acciones, las cuales eleven la calidad educativa, es necesario que compartan tal propósito y se desarrollen siguiendo li-neamientos comunes, de manera que constituyan un todo coherente y articulado. El conjunto de lineamientos que deberán seguir las evalua-ciones llevadas a cabo en el Sistema Educativo Mexicano constituye la Política Nacional de Evaluación Educativa.
La política de evaluación es una pieza importante de la política edu-cativa nacional. En consecuencia, deberá contribuir a que se cumplan los mandatos del Artículo Tercero de la Constitución y la Ley General de Edu-cación y a que el Sistema Educativo Nacional alcance las metas que le fija el programa sectorial correspondiente. En consecuencia, todos los tipos, niveles y modalidades educativos deberán tender a una operación dirigi-da a la formación integral de los alumnos, la cual alcance altos niveles de calidad con equidad, pues un sistema educativo que brinde buena edu-cación solamente a una parte de la población, no puede ser considerado de calidad. La calidad se entiende en forma amplia, y para alcanzarla se pretende que:♦ Los objetivos de la educación en cada nivel, tipo y modalidad sean
relevantes para la sociedad y pertinentes a las circunstancias de vida de los alumnos.
♦ Las personas tengan acceso a los diversos tipos, niveles y modalida-des del sistema educativo, de acuerdo con los criterios establecidos; permanezcan en ellos y los terminen, de preferencia en los tiempos estipulados; y lo hagan alcanzando los objetivos educativos. Lo ante-rior supone se logre la igualdad de oportunidades, y no se limite al ac-ceso a la escuela, sino incluir la permanencia, el aprendizaje y el egreso oportuno de los alumnos, esto implica brindar apoyos diferenciados a los educandos según sus necesidades.
♦ La calidad se logre mediante una utilización racional y eficiente de los recursos.La evaluación educativa se entenderá como el conjunto de juicios de
valor, producto de contrastar los resultados de los estudios sobre la calidad de la educación, en sus diversas dimensiones, y sobre otros aspectos del sistema educativo y sus procesos, con parámetros previamente definidos.
30
Todas las evaluaciones que se realicen en el Sistema Educativo Nacional de México se apegarán a los lineamientos siguientes, con la adecuación requerida en función de las circunstancias propias del tipo, nivel o moda-lidad de que se trate.
1. Principios generales1.1. PropósitosLa evaluación tendrá dos propósitos fundamentales:
♦ Contribuir a elevar la calidad educativa con equidad, mediante la aportación de información amplia, clara, precisa y confiable sobre el estado que guarda el Sistema Educativo Nacional, y así contar con ba-ses sólidas que sustenten el diseño y la implementación de estrategias efectivas de mejora.
♦ En función de lo anterior, aportar elementos para que los diversos agentes educativos rindan cuentas a la sociedad sobre el estado de la educación. Como medio para apoyar la mejora de la calidad edu-cativa, las evaluaciones deberán subordinarse a las actividades de en-señanza y no predominar sobre ellas. Teniendo presente un principio de parsimonia, se evitará que haya un número excesivo de evaluacio-nes así como cualquier duplicación innecesaria; deberán articularse los procesos de evaluación de escuelas, los de zonas y entidades y los nacionales, para que se optimice su eficiencia. Los momentos de apli-cación se escogerán de manera que perturben lo menos posible a la enseñanza. Deberá buscarse que la evaluación sea en sí misma una experiencia de aprendizaje. Los intervalos entre una evaluación y otra, y entre difusión de resultados y toma de decisiones, serán suficien-tes para que puedan tomarse medidas para mejorar la calidad en los aspectos en que se hayan detectado deficiencias, y permitir que las medidas tengan impacto.
1.2. Cobertura y ámbito de la evaluaciónLa evaluación comprenderá una amplia gama de actividades, para
atender los diversos elementos del sistema educativo:♦ Será integral, ya que buscará cubrir todas las dimensiones de la calidad;
tipos, niveles y modalidades, y los elementos y agentes relevantes del sistema educativo. Deberá tener en cuenta las entidades federativas y
31HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
otros subconjuntos importantes, como las escuelas urbanas y rurales, públicas y privadas, comunitarias e indígenas.
♦ Serán objetos de evaluación el aprendizaje de los alumnos; desempe-ño de maestros, directivos escolares e institucionales, autoridades y otros agentes que participen en los procesos educativos; el currículo y los materiales que apoyan la instrucción; las instituciones, políticas y programas educativos, incluyendo a la Secretaría de Educación Públi-ca; y, desde luego, el Sistema Educativo Nacional en su conjunto.
♦ La evaluación educativa dará especial importancia a la medición del aprendizaje de los alumnos, pero no se reducirá a ella. Dada la mul-tidimensionalidad de la noción de calidad educativa, deberán mane-jarse indicadores compuestos, que incluyan variables del contexto de las escuelas y las familias de los alumnos, con variables propias de las escuelas, incluyendo insumos, procesos y productos. Se evitará reducir la evaluación a temas sobre los que haya información disponible; se buscará en cambio cubrir aspectos más complejos y difíciles de valorar, explorando en forma creativa acercamientos innovadores.
♦ Se pretende que existan procedimientos mediante los cuales los agen-tes con funciones de diverso nivel de responsabilidad en el sistema, participen en la evaluación del desempeño de niveles superiores. En particular, los docentes podrán evaluar a sus directivos y aquellos se-rán evaluados por sus alumnos.
♦ Sin descuidar el principio de parsimonia, la evaluación será permanen-te, para que ayude a formar una visión longitudinal de la evolución de la educación nacional.
♦ Se participará en proyectos internacionales para contrastar la situación del sistema nacional con la de otros países, en especial los más relevan-tes para México.
♦ Habrá mecanismos de metaevaluación, gracias a los cuales se valore en forma permanente la pertinencia y adecuación de las evaluaciones educativas, así como el impacto de las evaluaciones sobre el sistema educativo, para asegurar que cumplan con su función para contribuir a elevar la calidad de la educación y poder hacer en forma oportuna las modificaciones que procedan en los sistemas de evaluación.
32
1.3. Metodologías y procedimientosLas evaluaciones deberán mantener rigurosos estándares técnicos,
para garantizar su validez y confiabilidad. En particular:♦ Los acercamientos metodológicos, instrumentos y análisis que se utili-
cen, se apegarán a criterios técnicos de calidad, aplicables con base en el juicio de especialistas calificados.
♦ Los aspectos metodológicos y técnicos estarán sujetos al escrutinio público. Las instancias responsables tendrán la obligación de permi-tir el acceso a la información sobre la justificación de las evaluaciones, características de instrumentos, muestras de reactivos y, en general, sobre los elementos técnicos que sustenten las acciones evaluativas, señalando los alcances y las limitaciones de las mismas.
♦ Se promoverá que organismos especializados y agrupaciones de pro-fesionales de evaluación adopten y difundan códigos de ética a los cuales se sujete su trabajo.
♦ Para llegar a los juicios valorativos en que consiste centralmente toda evaluación, los resultados empíricos de mediciones y estudios se con-trastarán con referentes diversos, los cuales ofrezcan perspectivas complementarias sobre el aspecto que se evalúe: mínimos o de base; promedios presentes o históricos; y referentes ideales, nacionales o in-ternacionales.
♦ Cada proceso de evaluación, según su propósito, deberá establecer una periodicidad que haga posible la comparación de resultados a lo largo del tiempo y a la vez, permita a maestros, escuelas y al propio sistema educativo procesar los resultados e implementar mecanismos de mejora. Tal periodicidad se hará del dominio público.
1.4. Difusión de resultadosLa información que resulte de las evaluaciones de la educación nacio-
nal deberá hacerse pública de manera transparente y oportuna, en be-neficio de la sociedad en general y de los sectores con especial interés en ella: maestros, padres de familia, empresarios, autoridades educativas, legisladores y estudiosos, entre otros. Para tal cometido:♦ Los resultados de la evaluación estarán disponibles en formatos diri-
gidos a diversos públicos usuarios de la misma, con el propósito de facilitar su aprovechamiento y su adecuada interpretación. La informa-
33HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
ción tendrá niveles de complejidad, agregación y especificidad según el público al que vaya dirigida. Se promoverá el desarrollo de una cul-tura de la evaluación en todos los sectores de la sociedad.
♦ Para propiciar una correcta interpretación, la difusión de las evaluaciones deberá incluir información del contexto que corresponda, facilitando la formulación de juicios ponderados y permitiendo un trato justo y equita-tivo a los diversos sectores sociales, en particular de los grupos vulnera-bles o en situación de desventaja.
♦ Las instancias responsables de llevar a cabo las evaluaciones proce-derán a su difusión en los tiempos más cercanos que técnicamente sea posible, para asegurar el adecuado aprovechamiento, tanto en el mejoramiento de la calidad de la educación como en la rendición de cuentas.
♦ La difusión de resultados de las evaluaciones educativas respetará el principio de protección de la privacidad de las personas que establece la Ley Federal de Transparencia y Acceso a la Información Pública Gu-bernamental.
♦ Se promoverá la realización de estudios de opinión, los cuales permi-tan contrastar los resultados de evaluaciones objetivas de la calidad educativa, con la percepción que tengan de ella los diferentes sectores de la sociedad.
♦ Asimismo, se difundirá la información suficiente sobre los criterios y procedimientos metodológicos que sustenten las evaluaciones, para que especialistas independientes puedan valorar su consistencia.
♦ Las bases de datos derivadas de las evaluaciones estarán a disposición de investigadores y analistas, en formatos que faciliten su análisis y manejo, y al mismo tiempo aseguren la privacidad de los evaluados.
1.5. Usos y consecuencias de la evaluaciónLos resultados de las evaluaciones se utilizarán básicamente para to-
mar decisiones que lleven a la mejora de la calidad educativa. Por ese mo-tivo: ♦ Las decisiones derivadas de la evaluación se sustentarán en un con-
junto suficiente de evidencias, obtenidas a partir de metodologías e instrumentos que aseguren la solvencia técnica de los resultados.
♦ Las evaluaciones deberán implicar procesos de participación amplios
34
y consistentes, que refuercen la credibilidad y legitimidad de las deci-siones derivadas de ellas.
♦ Las decisiones adoptadas a partir de los resultados de las evaluaciones tomarán en cuenta el contexto en que se ubican alumnos, maestros, escuelas o sistemas.
♦ Las evaluaciones de escuelas, instituciones o programas que se usen para asignar estímulos o apoyos compensatorios tendrán en cuenta las condiciones particulares, para asegurar un trato equitativo, en es-pecial si se trata de escuelas o instituciones que atienden a grupos de población en desventaja o programas dirigidos a ésta. Se evitará esta-blecer criterios de rendimiento diferentes para distintos grupos socia-les, lo que llevaría a profundizar las diferencias en vez de contribuir a reducirlas.
♦ En lo referente a evaluaciones, que pudieran tener consecuencias para las personas en lo individual, deberán establecerse procedimientos de revisión para que los interesados puedan solicitar la reconsideración de decisiones que los afecten.
♦ La Secretaría de Educación Pública establecerá los procesos de eva-luación que considere pertinentes para acreditar y certificar los cono-cimientos y habilidades adquiridos en el Sistema Educativo, comuni-cando oportunamente los respectivos criterios, parámetros, instancias participantes y trámites.
1.6. El sistema nacional de evaluación educativaDe conformidad con lo establecido en la Ley General de Educación
(Artículo 29), es responsabilidad de la Secretaría de Educación Pública la evaluación del Sistema Educativo Nacional de manera sistemática y permanente, sin perjuicio de las evaluaciones que las autoridades edu-cativas locales realicen en sus ámbitos de competencia y de la que los maestros hacen en forma cotidiana. La Secretaría de Educación Pública promoverá la participación de autoridades educativas locales, institu-ciones autónomas de educación superior, organismos especializados y personas idóneas, en un sistema nacional de evaluación educativa que in-tegre, en forma articulada y coordinada, las múltiples tareas que conlleva la evaluación de los diversos componentes del Sistema Educativo Nacio-nal. Para asegurar esa coordinación se seguirán estos lineamientos:
35HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
♦ El sistema nacional de evaluación educativa estará integrado por las áreas de evaluación de la SEP y las Secretarías de Educación de las en-tidades federativas u organismos equivalentes, así como por los or-ganismos especializados públicos y los de carácter privado que sean autorizados para ello, en virtud de sus métodos, procedimientos, crite-rios técnicos, códigos de ética, calificación y experiencia de su perso-nal y demás elementos que abonen en favor de su idoneidad.
♦ Para asegurar la coordinación y el funcionamiento articulado de los organismos que integren el sistema nacional de evaluación educati-va se establecerá un consejo nacional de evaluación educativa, cuya función será asesorar al titular de la SEP en la toma de decisiones relativas a las actividades de evaluación.
♦ El consejo nacional de evaluación educativa será presidido por el Se-cretario de Educación Pública. Estará integrado por autoridades edu-cativas federales y estatales, titulares de organismos especializados en evaluación, representantes del magisterio, padres de familia y exper-tos en evaluación. Su integración, funciones y atribuciones específicas se definirán en su reglamento.
♦ El consejo nacional de evaluación educativa será una instancia de co-ordinación, no tendrá personal propio y no duplicará las acciones de las instancias que integren el sistema nacional de evaluación edu-cativa.
♦ Respetando los lineamientos de la Política Nacional de Evaluación Educativa y las demás disposiciones aplicables, los organismos es-pecializados gozarán de plena independencia para la realización de las evaluaciones que les correspondan y para la difusión de sus re-sultados.
♦ El consejo nacional de evaluación educativa recibirá reportes de las instancias que formen parte del sistema nacional de evaluación edu-cativa, cuya información permita verificar el respeto de las directrices establecidas en la Política Nacional de Evaluación Educativa.
♦ El Director General de Evaluación de la Secretaría de Educación Pú-blica y el Director General del Instituto Nacional para la Evaluación de la Educación, fungirán conjuntamente como Secretariado Técnico del Consejo Nacional de Evaluación Educativa.
36
2. Evaluación de la educación básicaEn educación básica las evaluaciones seguirán estos lineamientos, que
se adaptarán a las circunstancias propias de cada nivel (preescolar, prima-ria y secundaria), así como a las de los diversos servicios, como la educa-ción comunitaria, indígena y de adultos.
2.1. Evaluación del aprendizaje de los alumnosLa valoración del aprendizaje alcanzado por los alumnos es esencial
para una evaluación integral de cualquier sistema educativo. La que rea-liza cada maestro en forma cotidiana es fundamental, pero debe refor-zarse con el trabajo del equipo docente y el de directores y supervisores, además de complementarse con evaluaciones externas, para asegurar la comparabilidad de los resultados. Por ello: ♦ Los maestros evaluarán sistemáticamente el progreso de sus alumnos
hacia el logro de las competencias que definan los estándares curricu-lares, con el fin de apoyarlos para que todos alcancen los objetivos de aprendizaje, identificando oportunamente las dificultades que enfren-ten y valorando sus esfuerzos y logros.
♦ La apreciación de los maestros se complementará con evaluaciones externas, muestrales o censales, que utilicen instrumentos válidos y confiables, alineados al currículo. Se buscará llegar a la evaluación censal de alumnos de grados clave, de manera que sea posible tener resultados por escuela.
♦ Se ofrecerá a los maestros la capacitación, los materiales y los apoyos necesarios para el desarrollo de sus competencias para la evaluación. Se procurará que los docentes aprovechen los instrumentos de las eva-luaciones aplicadas en gran escala y sus resultados para enriquecer sus propias evaluaciones, comparando unas y otras.
♦ Se evitará utilizar las evaluaciones para agrupar a los alumnos en fun-ción del nivel de rendimiento que hayan tenido en ellas.
♦ La evaluación vinculada con decisiones de acreditación de niveles y, en su caso, de asignaturas y grados, deberá combinar la apreciación del maes-tro sobre el trabajo y el esfuerzo de cada alumno con la valoración de sus logros, mediante instrumentos aprobados por la autoridad educativa.
♦ Maestros y autoridades escolares informarán regularmente a los pa-dres de familia sobre el progreso de sus hijos, de forma tal que se per-
37HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
mita apreciar con claridad el nivel de logro alcanzado respecto de las capacidades y estándares curriculares.
♦ Los resultados de las evaluaciones realizadas en gran escala se darán a conocer a las autoridades educativas, consejos de participación social, escuelas, maestros, padres de familia y sociedad en general. La informa-ción se desagregará en la forma que permitan sus características técni-cas, respetando el principio de privacidad de los datos individuales.
2.2. Evaluación de docentes y directivosLa evaluación de docentes, directores, supervisores y otras autoridades
del sistema educativo tendrá diversos propósitos: formativo, dirigido a ofre-cer orientación al profesional para que pueda mejorar su desempeño; de ca-rácter laboral o escalafonario, vinculado con los procesos de selección para el ingreso a plazas docentes y directivas, o la asignación de estímulos en re-lación con el desarrollo profesional. Los lineamientos que deberán seguirse en estas evaluaciones son:♦ Asegurar que los instrumentos para la evaluación de docentes y di-
rectivos midan efectivamente sus competencias como tales (válidos); evalúen con parámetros y en condiciones iguales (confiables); y se apliquen en intervalos crecientes, en función de la antigüedad y la ex-periencia adquirida.
♦ Toda evaluación que se practique a docentes y directivos con propó-sitos laborales o escalafonarios deberá contar con su aprobación y la información de resultados individuales será confidencial.
2.3. Evaluación de escuelasLa evaluación de escuelas tendrá tres propósitos: mejorar procesos re-
lacionados con el aprendizaje de los alumnos, funcionamiento del equipo docente, el ambiente escolar y la participación de los padres de familia; mejorar resultados en términos de logros educativos de los alumnos, aprobación y retención; y ofrecer información a la autoridad sobre las ne-cesidades de los planteles. Por ello:♦ La evaluación de escuelas incluirá la del aprendizaje de los alumnos,
pero también indicadores de contexto, insumos y procesos, incluyen-do selectividad, cobertura, repetición, deserción, eficiencia terminal, entre otros.
38
♦ Respecto a insumos se incluirá lo relativo a infraestructura, habitabili-dad y equipamiento básico y complementario de las escuelas, tenien-do en cuenta su estado de conservación y uso.
♦ En cuanto a los procesos, además de los pedagógicos y administrativos que tienen lugar en el seno de los planteles, se considerará también la participación de los padres de familia.
♦ Los resultados se comunicarán a las escuelas mismas, para que profun-dicen el análisis de su situación y elaboren planes de mejora que atien-dan sus principales debilidades; a las autoridades educativas, para que puedan poner en marcha acciones de apoyo, como programas de in-centivos o de provisión de insumos a escuelas con carencias; y a toda la sociedad, para la rendición de cuentas y para fomentar la conciencia de la necesidad de apoyar a la educación.
♦ Los resultados de las evaluaciones en gran escala que lleguen al nivel de la escuela singular deberán difundirse masivamente; y cada escue-la comunicar los resultados de esas evaluaciones a las familias de sus alumnos, junto con los planes de mejora, con propósitos de rendición de cuentas, seguimiento y apoyo.
♦ Se impulsará el desarrollo de procesos de autoevaluación y coevalua-ción en los planteles de educación básica, con el fin de impulsar el for-talecimiento de los colectivos escolares y alentar la toma de decisiones de los mismos en asuntos relacionados con el funcionamiento de la escuela; de igual forma, se buscará con ello propiciar la generación de una cultura de la evaluación entre alumnos, profesores, directivos y pa-dres de familia.
2.4. Evaluación de planes, programas y materiales educativosLos objetivos curriculares constituyen el referente indispensable de
toda evaluación educativa. Por otra parte, los materiales educativos, en especial los libros de texto, dan concreción al currículo y contribuyen de manera fundamental a orientar la enseñanza. Su revisión regular deberá ser parte integral de la evaluación. Por ello:♦ Deberá practicarse una evaluación permanente del currículo, así como
de los programas y materiales educativos de la educación básica. ♦ La evaluación de libros de texto y materiales didácticos atenderá a la
consistencia de sus contenidos y enfoques pedagógicos, pero tam-
39HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
bién al uso que los maestros hagan de ellos. Las evaluaciones deberán hacerse en forma regular, para que textos y materiales incorporen en tiempos razonables los avances en contenidos y enfoques con bases sólidas, con procesos de prueba y experimentación cuidadosos, y te-niendo en cuenta el tiempo necesario para que los maestros asimilen los nuevos enfoques.
♦ La evaluación curricular deberá tener un componente interno y otro externo. El primero estará a cargo de la autoridad educativa federal, a quien la Ley General de Educación asigna la responsabilidad de ela-borar planes y programas de educación básica. El segundo implicará el concurso de maestros, especialistas en las diversas áreas o materias, especialistas en métodos de enseñanza y representantes de los padres de familia y la sociedad en general.
♦ La evaluación curricular buscará explicar y no sólo describir aprendiza-jes y logros, para dar sustento a la toma de decisiones correspondien-te. El análisis de prácticas pedagógicas será clave para alcanzar este propósito.
♦ Se distinguirá la evaluación del currículo prescrito, el implementado y el logrado. En cuanto al currículo prescrito deberá valorarse su rele-vancia, nivel de exigencia y consistencia interna. En cuanto al currículo implementado y el logrado, se buscará información sobre los insumos necesarios, su disponibilidad en cada escuela y su uso efectivo en el aula, como condiciones generales para la implementación y el logro. El aprendizaje alcanzado por los alumnos se analizará en relación con el currículo implementado y las condiciones de su proceso, para poder solicitar cuentas a directores y docentes.
40
41HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
VISIÓN INTEGRAL:
EL SISTEMA NACIONAL DE
EVALUACIÓN EDUCATIVA
42
43HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
Para la integración de un verdadero sistema nacional de evaluación edu-cativa, en especial en lo referente a la evaluación de la educación básica, es necesario que se precise el papel del INEE y la SEP en este campo, ya que a primera vista parecería haber duplicidad de funciones entre ambas instancias.
En seguida se presenta una delimitación de las funciones de evalua-ción del INEE y la SEP, así como las de las Áreas de Evaluación de los Esta-dos (AEEs), que se consensuó entre las partes implicadas, la cual fue san-cionada por la Junta Directiva del INEE, en el marco del Plan Maestro de Desarrollo de éste. El planteamiento se basa en consideraciones sobre la complejidad de la evaluación educativa, sus diversos tipos, según el pro-pósito que persigan, y las decisiones que deban sustentar.♦ Evaluaciones a cargo de las autoridades educativas. La evaluación a car-
go de la autoridad educativa, federal y estatal, tendrá dos propósitos: retroalimentación directa para maestros, alumnos y padres; y toma de decisiones de alto impacto sobre personas e instituciones en lo individual. En el caso de los alumnos, las decisiones de alto impacto incluyen la certificación de conocimientos (aprobación-reprobación). Para los maestros, incluyen las decisiones sobre ingreso, permanencia, promoción y estímulos. En el caso de las escuelas, públicas o privadas, comprenden las decisiones de acreditación o incorporación. Lo ante-rior no implica que la autoridad educativa federal o las estatales deban evaluar directamente a todos los alumnos o a todos los docentes, pero sí que proporcionen orientaciones precisas y herramientas adecuadas para que tales evaluaciones se realicen de manera apropiada.
♦ Evaluaciones a cargo de instancias externas. Las evaluaciones a cargo de instancias externas como el INEE, tendrán el propósito básico de ofrecer
44
a las autoridades información suficiente para que cuenten con diagnós-ticos precisos sobre la situación de la calidad educativa en el conjunto del sistema, o en subconjuntos importantes del mismo, para sustentar decisiones en el campo de las políticas públicas. Un propósito comple-mentario será el de certificar la calidad de los sistemas de evaluación a cargo de las autoridades mismas, para garantizar así, su confiabilidad y comparabilidad con las evaluaciones externas.
DELIMITACIÓN DE FUNCIONES EN EVALUACIÓN DE APRENDIZAJES (PRUEBAS)
Las evaluaciones de aprendizajes a cargo de las autoridades educati-vas federales y estatales serán masivas, tendiendo a ser censales, y no ne-cesariamente controladas. Podrá así haber resultados por escuela, y aún por grupo, con las ventajas que implican para la retroalimentación con fines de mejora y para la participación de los padres de familia en apoyo a sus hijos, y también para la rendición de cuentas en cada plantel. Si bien nada impide a las autoridades educativas estatales desarrollar sus propios operativos de evaluación, la característica abierta de las pruebas masivas con propósitos de mejora, que no requiere de controles externos, facilita-rá la colaboración entre autoridades federales y estatales para optimizar recursos.
Las entidades tienen, desde luego, la facultad de desarrollar instru-mentos de evaluación de aprendizaje propios, cuyo nivel de dificultad o exigencia podría calibrarse gracias a las aplicaciones a muestras naciona-les del INEE. Por razones de costo y comparabilidad no parece prioritario, sin embargo, en el corto plazo, que cada entidad desarrolle instrumentos propios; es preferible que se aprovechen instrumentos desarrollados cen-tralmente, precisando que esto no quiere decir que el papel de las AEEs deba reducirse a su aplicación mecánica. Por el contrario, deberá haber participación de personal de las entidades federativas en la planeación de las pruebas, en la definición de los contenidos a evaluar, en la formulación de reactivos, en la definición de los niveles de competencia y en todos los aspectos. La calificación de respuestas se hará en cada entidad e, incluso, cada escuela, para retroalimentación inmediata. Será necesario que la SEP apoye a las autoridades educativas de las entidades para que cuenten con
45HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
los recursos técnicos y el personal calificado necesario para llevar a cabo lo anterior.
Las autoridades educativas podrán también aplicar censalmente prue-bas estandarizadas para apoyar decisiones de certificación de conoci-mientos al final de los grados terminales de primaria y secundaria. En este caso las aplicaciones deberán ser controladas, pero ello deberá hacerse estatalmente.
Por su propósito de diagnóstico del conjunto del sistema, las pruebas del INEE no tendrán que aplicarse a todos los alumnos, en todos los gra-dos y todos los años. Se utilizarán muestras cuidadosamente calculadas para asegurar su representatividad, así como ciclos de aplicación basados en diseños robustos que permitan hacer análisis ricos con el uso más efi-ciente de los recursos. El muestreo de contenidos podrá optimizarse me-diante el empleo de diseños de bloques incompletos o muestreo matricial. No se excluye la posibilidad de aplicaciones censales en algunos grados, materias y momentos, pero no será el objetivo fundamental, al menos a corto plazo.
Las evaluaciones del INEE deberán hacerse con rigurosos controles ex-ternos para asegurar su confiabilidad. Deberá haber una cuidadosa coor-dinación entre el INEE y las instancias federales o estatales que elaboren otros instrumentos de evaluación, para que tengan los mismos referentes y estándares de calidad igualmente rigurosos, de manera que sus resulta-dos sean complementarios y congruentes. Estas evaluaciones permitirán establecer parámetros de comparación para la interpretación de los resul-tados que se obtengan en las evaluaciones a cargo de la autoridad educa-tiva, tanto entre entidades en un mismo año, como a lo largo del tiempo para todo el país y cada entidad. El INEE, además, certificará la calidad de los instrumentos y procesos aplicados por las autoridades, para su mayor credibilidad.
DELIMITACIÓN DE FUNCIONES EN EVALUACIÓN DE ESCUELAS
De acuerdo con sus funciones, las autoridades educativas serán las res-ponsables de la evaluación de las escuelas en lo individual, como organi-zaciones singulares, teniendo en cuenta los resultados obtenidos por sus
46
alumnos en las pruebas de aprendizaje, y los demás elementos relevantes, incluyendo datos sobre el entorno socioeconómico y cultural, insumos con que cuenta la escuela, características del alumnado, su selectividad, eficiencia terminal del plantel y procesos pedagógicos y de gestión que tiene lugar en su seno.
La complejidad de estas evaluaciones hace indispensable que se ma-nejen a escala estatal y local, con una importante participación del equipo docente y de los padres de familia, y con la intervención debida de direc-tores y supervisores. Estas evaluaciones llevarán a decisiones sobre las es-cuelas en lo individual, autorización de incorporación de planteles parti-culares, o de algún tipo de acreditación para escuelas públicas, en ambos casos con base en la satisfacción de estándares mínimos de calidad.
La función de instancias externas como el INEE en la evaluación de es-cuelas, será similar a la que deberán desarrollar en el caso de la evaluación de aprendizajes: ♦ Elaborar modelos e instrumentos para dicho tipo de evaluación; ♦ Evaluar directamente muestras de escuelas con representatividad al
menos nacional, para dar información diagnóstica a la autoridad, diri-gida a la formulación de políticas;
♦ Establecer parámetros nacionales de referencia para las evaluaciones que hagan las autoridades estatales;
♦ Certificar validez y confiabilidad de dichas evaluaciones, verificando la calidad de los instrumentos y procesos utilizados en ellas.Las grandes diferencias de contexto e internas que hay entre las escue-
las de las diversas modalidades y regiones del sistema educativo, hacen deseable tener diversos modelos de evaluación de escuelas. Por ello la función de una instancia externa como el INEE, en lo relativo a evaluación de escuelas, no deberá entenderse en el sentido de establecer un modelo único para ello. Parece preferible, por el contrario, que se aliente el desa-rrollo de modelos varios, adecuados a las circunstancias de los diversos tipos de planteles.
El papel de la SEP y el INEE en este terreno deberá incluir también la función de desarrollo de las capacidades locales. El trabajo del INEE, en éste y otros ámbitos, se realizará en estrecha colaboración con la autori-dad educativa federal y con las estatales. Los modelos utilizados para las evaluaciones nacionales, además de diversos incluirán elementos básicos
47HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
para cada tipo de servicio o modalidad, como comunes denominadores aplicables en cada caso.
DELIMITACIÓN DE FUNCIONES EN EVALUACIÓN DE DOCENTES
Una evaluación de especial relevancia es la que se refiere al desempe-ño de los maestros. El papel central del docente en la calidad educativa hace que la importancia de estas evaluaciones no pueda minimizarse. De manera congruente con su función, y en el ámbito correspondiente a cada una, las autoridades educativas federales y estatales serán también responsables de la evaluación de docentes en lo individual.
Estas evaluaciones podrán incluir aspectos relativos a la preparación profesional de los evaluados, que se prestan al uso de instrumentos de papel y lápiz, pero deberán atender al desempeño efectivo, lo cual im-plica necesariamente la observación directa del trabajo de los maestros dentro y fuera del aula. Por ello, estas observaciones implican también la participación de directores y supervisores. La función del INEE, en forma análoga a lo establecido para la evaluación de escuelas, en lo relativo a maestros considera: ♦ Apoyar el desarrollo de instrumentos; ♦ Evaluar muestras de maestros con representatividad al menos nacio-
nal, para dar información diagnóstica a la autoridad para la formula-ción de políticas;
♦ Establecer parámetros nacionales de referencia para las evaluaciones que hagan las autoridades estatales;
♦ Certificar la validez y confiabilidad de dichas evaluaciones, verificando la calidad de los instrumentos y procesos utilizados en ellas.
DELIMITACIÓN DE FUNCIONES EN EL DESARROLLO DE SISTEMAS DE INDICADORES
La evaluación del sistema educativo nacional y los subsistemas estata-les no se reduce a la aplicación de pruebas de aprendizaje y de modelos de evaluación de escuelas. Implica la construcción de sistemas de indica-
48
dores que atiendan todas las dimensiones de una noción rica de calidad educativa, y todos los componentes del sistema: insumos, procesos y pro-ductos, además de elementos del contexto.
Los resultados de la aplicación de pruebas de aprendizaje, y los deriva-dos del uso de modelos de evaluación de escuelas deberán alimentar el sistema de indicadores, junto con otros datos derivados de las estadísti-cas educativas o de otras fuentes.
La responsabilidad primordial del desarrollo de un sistema de indica-dores educativos recae, como en el caso de los otros tipos de evaluación, en la SEP para el conjunto del sistema educativo nacional, y en las autori-dades educativas locales en lo que se refiere al sistema educativo de cada una de las entidades federativas.
El papel de un agente externo como el INEE, en lo relativo a indicado-res, será también complementario, correspondiéndole:♦ Desarrollar indicadores adicionales a los que se manejen tradicional-
mente, para complementar el sistema atendiendo aspectos no cubier-tos anteriormente;
♦ Monitorear la calidad de la información ofrecida por el sistema de indi-cadores y certificar la consistencia metodológica de los instrumentos y procedimientos utilizados, para avalar su credibilidad.
♦ Elaborar periódicamente informes sobre la situación de la educación a nivel nacional y de las entidades, con base en un conjunto básico de indicadores.
LA DIMENSIÓN INTERNACIONAL
Las tendencias educativas prevalecientes en el mundo incluyen, sobre todo en las dos últimas décadas, el desarrollo de proyectos de evaluación en escala internacional. Los más conocidos pertenecen al campo de la eva-luación de aprendizajes, con proyectos como el PISA de la OCDE, el TIMSS de la IEA o, en América Latina, el LLECE. Pero también en otros campos de la evaluación educativa hay esfuerzos internacionales de importancia; en lo relativo a indicadores destaca el proyecto INES de la OCDE, el WEI de la UNESCO y a nivel latinoamericano el PRIE. En lo que se refiere a evaluación de escuelas, hay también proyectos internacionales significativos.
49HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
Es importante que las acciones evaluativas de un país no estén desconecta-das de tales esfuerzos, para aprovechar las mejores experiencias en el campo, y para efectos de comparabilidad. Es también necesario que las acciones en uno u otro de estos campos especializados estén igualmente relacionadas, dadas las obvias interconexiones que hay entre evaluaciones de aprendizajes o de escue-las e indicadores educativos.
Tanto la SEP como las instancias de evaluación de las entidades federati-vas, y agencias especializadas como el INEE, podrán participar en las accio-nes internacionales en este campo, y será deseable que todas lo hagan. Para evitar duplicidades innecesarias y optimizar los esfuerzos, es obviamente deseable una buena coordinación y articulación de los esfuerzos. De acuer-do con los términos de su Decreto de Creación, el INEE es la instancia res-ponsable de asumir tal coordinación, lo cual no deberá implicar una visión monopolizadora sino, por el contrario, una que fomente la participación en los esfuerzos internacionales tanto de la SEP como de las entidades federa-tivas.
La delimitación de funciones de evaluación a desarrollar por la SEP, las áreas de evaluación de las entidades federativas y el INEE, se resume en el cuadro siguiente.
Delimitación de funciones de evaluación
SEP ÁREAS ESTATALES INEE
EVALUACIÓN DE APRENDIZAJES
Diseñar pruebas de aplicación masiva para apoyo de la labor de los docentes
Participar en diseño de pruebas de SEP e INEE
Diseñar pruebas de aplicación muestral controlada con fines de diagnóstico del sistema
Coordinar aplicación masiva
Realizar aplicación masiva y apoyar aplicaciones INEE
Coordinar y controlar aplicaciones muestrales
Concentrar resultados de aplicaciones masivas
Leer y calificar resultados de aplicaciones masivas
Leer y calificar resultados de aplicaciones muestrales
Realizar análisis nacionales de resultados de pruebas masivas
Analizar resultados propios
Analizar resultados de sus pruebas
50
Retroalimentar a autoridades
Retrolimentar la práctica docente y la gestión escolar
Retroalimentar a autoridades
Orientar para la información a las familias
Implementar la información a las familias sobre los alumnos
Difundir resultados propios y apoyar difusión de nacionales
Difundir resultados propios
Certificación individual: Certificación individual
Tomar decisiones de política nacional
Tomar decisiones de política estatal
Certificar calidad pruebas SEP y, en su caso, de estados
EVALUACIÓN DE ESCUELAS
Diseñar modelos propios y apoyar los de los estados de la Federación
Diseñar modelos propios y participar en nacionales
Diseñar modelo básico propio con mínimos de calidad para las escuelas de cualquier modalidad
Aplicar modelos en proyectos especiales, como el PEC
Aplicar masivamente otros modelos y apoyar al INEE
Coordinar y controlar aplicación muestral de modelo básico
Procesar resultados de sus modelos
Procesar resultados masivos
Procesar resultados muestrales
Analizar resultadosAnalizar resultados masivos
Analizar sus resultados
Retroalimentar sus proyectos
Retroalimentar gestión escolar
Retroalimentar a autoridades
Orientar para la información a las familias
Implementar la información a las familias sobre las esuelas
Difundir resultados de sus proyectos
Difundir resultados propios y apoyar difusión de nacionales
Difundir resultados propios
Tomar decisiones de política nacional
Tomar decisiones de política estatal y sobre escuelas
51HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
Certificar calidad de modelos SEP y, en su caso, de estados
INDICADORES
Diseñar sistema y formas de obtención de datos (911)
Participar en diseño nacional y diseño de sistema propio
Participar en forma 911; diseñar procesos propios de obtención de datos
Integrar estadística básica
Aportar datos para estadística básica
Recibir datos de SEP y estados
Construir indicadores básicos, mantener series
Construir indicadores y mantener series propias
Construir indicadores nuevos, hacer síntesis propia
Analizar datos nacionalesParticipar en análisis nacional y hacer análisis propios
Hacer análisis propios
Retroalimentar autoridades
Retroalimentar autoridad local
Retroalimentar autoridades
Difundir indicadores propios
Difundir resultados propios y apoyar difusión de nacionales
Difundir resultados propios
Decisiones de política nacional
Tomar decisiones de política estatal
Certificar calidad de indicadores SEP y, en su caso, de estados
EVALUACIÓN DE MAESTROS
Manejar evaluación con propósitos laborales, con los estados
Manejar evaluación con propósitos laborales con la SEP
Apoyar técnicamente calidad de instrumentos
Promover evaluación para la mejora
Manejar evaluación para mejora
Apoyar técnicamente
Apoyar evaluación muestral
Diseñar y aplicar evaluación muestral a nivel nacional
Certificar calidad de las evaluaciones de la SEP y, en su caso, de los estados
52
EVALUACIÓN INTERNACIONAL
Participar en todos los proyectos internacionales relevantes
Participar en algunos proyectos internacionales
Participar en algunos proyectos
Coordinar la participación de la SEP, INEE y AEEs
EL SISTEMA NACIONAL DE EVALUACIÓN EDUCATIVA
El Programa de Desarrollo Educativo 1995-2000 establecía como un reto de la educación mexicana consolidar los esfuerzos de evaluación, y propo-nía crear un sistema nacional de evaluación educativa. Durante el sexenio referido ese Sistema se puso en marcha, específicamente con el Programa de Instalación y Fortalecimiento de las Áreas Estatales de Evaluación de los 31 estados de la Federación.
La concepción inicial del SNEE consideraba como elementos estruc-turales a la Subsecretaría de Planeación y Coordinación y su Dirección General de Evaluación, así como las áreas de evaluación de los estados de la República. Dos años después, la SEP identificaba tres niveles a ser considerados por el Sistema: la evaluación en el aula, la del cen-tro escolar y del sistema educativo. La estructura se seguía definiendo como encabezada por la Subsecretaría de Planeación y Coordinación, pero además de la DGE se integraban otras dos direcciones generales, la DGPPP y la DGAIR; de manera similar, además del área de evaluación de cada estado se añadían dos áreas más de cada entidad, planeación y control escolar.
Tras la creación del INEE, y para avanzar en la articulación de las instan-cias concernientes a esta tarea, para que conformen un verdadero siste-ma nacional de evaluación educativa, es necesario definir una estructura más completa de tal sistema, como se contempla en el Programa Nacional de Educación 2001-2006. Una posible estructura es la que se plasma en el cuadro siguiente.
53HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
Estructura del sistema nacional de evaluación educativa
AUTORIDAD FEDERAL
AUTORIDADES ESTATALES
INSTANCIAS EXTERNAS
Visión estratégica del sistema
Sistema de Indicadores Educativos
SPyC AEEsLos de la columna
Educación básica
Visión estratégica: indicadores
SPyC, SEByN AEEs INEE
Evaluación de aprendizajes
SPyC, SEByN AEEs INEE
Evaluación de escuelas SPyC, SEByN AEEs INEE
Otros: maestros, etcétera
SPyC, SEByN AEEs INEE
Educación Media Superior
Visión estratégica: indicadores
SPyC, CGEMS CoepemsINEE,
Organismo Nuevo
Evaluación de aprendizajes
AEEsINEE,
Organismo Nuevo, Ceneval
Evaluación de escuelas CGEMS AEEsINEE,
Organismo Nuevo
Otros: maestros, etcétera
CGEMS AEEs
Educación Superior
Visión estratégica: indicadores
SPyC, SESIC, SEIT Coepes
Evaluación de aprendizajes
Ceneval
Evaluación de instituciones y
programasSESIC-SEIT Coepes CIEES, Copaes
Otros: maestros, etcétera
SESIC-SEIT VV, Copaes
54
Siglas
SPyC Subsecretaría de Planeación y Coordinación
SEByN Subsecretaría de Educación Básica y Normal
AEEs Áreas de Evaluación de las Entidades
CGEMS Coordinación General de Educación Media Superior
SESIC Subsecretaría de Educación Superior e Investigación Científica
SEIT Subsecretaría de Educación e Investigación Tecnológica
Coepes Comisión Estatal para la Planeación de la Educación Superior
Ceneval Centro Nacional para la Evaluación de la Educación Superior
CIEES Comités Interinstitucionales de Evaluación de la Educación Superior
Copaes Consejo para la Acreditación de la Educación Superior
Coepems Comisión Estatal para la Planeación de la Educación Media Superior
55HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
PLAN MAESTRO DE DESARROLLO 2004-2012
RESUMEN EJECUTIVO
56
57HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
INTRODUCCIÓN
El Instituto Nacional para la Evaluación de la Educación (INEE), fue creado por Decreto Presidencial publicado en el Diario Oficial de la Federación el 8 de agosto de 2002.
El desarrollo del Instituto debe basarse en directrices que orienten su trabajo en una perspectiva de largo plazo. Esta es la finalidad de un Plan Maestro.
Tras un proceso de elaboración que duró un año, a cargo de los direc-tores y el Consejo Técnico del INEE, el 13 de julio de 2004 el documento fue analizado por el Órgano de Gobierno del INEE en sesión extraordinaria celebrada con participación del Consejo Técnico. Por unanimidad, la Junta Directiva decidió aprobar el Plan Maestro de Desarrollo con los anexos A, B, C y D, como el instrumento que guiará el trabajo del Instituto en el media-no y largo plazo. Los anexos E, F, G y H serán revisados y mejorados.
1. Contexto y antecedentesSe describe brevemente el sistema educativo mexicano y se presen-
tan las acciones de evaluación educativa desarrolladas en México, distin-guiendo la etapa anterior a la creación del INEE, hasta 2002, y los desarro-llos ocurridos después de esa fecha, incluyendo la creación del Instituto y sus primeros pasos.
2. Marco normativo, principios y orientacionesSe sintetizan los textos legislativos y ordenamientos del ejecutivo que
constituyen el marco normativo del INEE, comenzando con el Artículo 3°
Nota: El texto íntegro del Plan Maestro de Desarrollo 2004-2012 puede ser consultado en la página web: www.inee.edu.mx
58
de la Constitución y la Ley General de Educación, así como varios acuer-dos del Secretario de Educación, en especial el N° 200, que contiene las normas para la evaluación del aprendizaje en educación primaria, secun-daria y normal. Se incluyen también elementos de la Ley Federal de Ac-ceso a la Información Pública Gubernamental y de la Ley de Información Estadística y Geográfica. Luego se resumen las disposiciones del Progra-ma Nacional de Educación 2001-2006. El anexo A presenta in extenso los artículos relevantes de los ordenamientos mencionados.
Se trata luego del documento Política Nacional de Evaluación Educati-va, que el INEE elaboró en cumplimiento de la atribución que le confiere su Decreto de Creación. Ante la insuficiencia de la normatividad sobre evaluación educativa, y dada la creciente importancia de esta actividad en las políticas públicas, este documento complementa el marco jurídico vigente con directrices que orientan de manera clara tan delicada fun-ción. El documento fue aprobado con valor normativo para el INEE por su Junta Directiva en octubre de 2003. Además de las disposiciones apli-cables a la evaluación educativa que contiene el marco jurídico nacional, el trabajo del INEE deberá guiarse por principios y orientaciones propios. Algunos de ellos están contenidos en el Decreto de Creación y otros se desprenden de la naturaleza del Instituto. Unos y otros se presentan en este apartado.
Principios definitorios♦ Autonomía: El INEE deberá tener gran independencia respecto de las
autoridades educativas y cualquier otra instancia, en todo lo que se re-fiera a aspectos técnicos de su trabajo y a la difusión de resultados del mismo. Los juicios del INEE se distinguirán por su independencia como instancia evaluadora externa, que deberá mantenerse al máximo libre de influencias ajenas a su tarea. Si los resultados de la evaluación del sistema escolar son imparciales y objetivos, pueden desempeñar un importante papel para que la selección de prioridades en materia de educación se haga sobre bases sólidas, aceptadas por las diversas partes interesadas en la educación, más allá de diferencias de puntos de vista. El INEE será reconocido como autoridad técnica en el desarrollo del proceso evalua-tivo, garantizando el apego a normas y prácticas reconocidas internacio-nalmente en el diseño y aplicación de instrumentos y metodologías de
59HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
medición y evaluación, para mantener la confianza de la sociedad en la evaluación. La composición plural de la Junta Directiva y la calidad aca-démica del Consejo Técnico son la garantía de la autonomía y deberá vi-gilarse celosamente que así siga siendo.
♦ Cercanía: La autonomía no deberá traducirse en distanciamiento. Como instancia que tendrá sentido en la medida en que contribuya a la mejora de la calidad educativa, el INEE deberá tener una relación permanente y estrecha con las autoridades educativas federales y es-tatales y, en especial, con las áreas de evaluación correspondientes, para asegurar que los resultados de las evaluaciones se utilicen para sustentar decisiones de mejora. El Consejo Consultivo es la instancia apropiada para asegurar esa relación. En relación con la sociedad en general y, en particular, con los padres de familia, la cercanía implica el compromiso del INEE de dar a conocer los resultados de su traba-jo de manera transparente, oportuna y comprensible, para evitar las repercusiones negativas que puede traer consigo una interpretación inadecuada de las evaluaciones.
Orientaciones generalesEl proyecto del INEE y su Decreto de Creación contienen orientaciones
generales para el desarrollo de las funciones del Instituto, que deberán guiar el trabajo de largo plazo que delinea este Plan Maestro. Esas orien-taciones establecen que el INEE: a) Buscará alcanzar la mayor calidad en el desarrollo de modelos e instru-
mentos de evaluación, atendiendo la confiabilidad y validez, en todas sus dimensiones.
b) Señalará con claridad los usos aceptables y deseados de cada evalua-ción.
c) Devolverá la información, procesada, a quienes contribuyeron a su ge-neración.
d) Reconocerá la importancia de la función evaluativa de centros escola-res, zonas de supervisión y autoridades educativas locales, orientando su trabajo a complementar, apoyar y alimentar la realización de esta función.
e) Cuidará que los resultados de las evaluaciones que haga no sean uti-lizados por sí solos para tomar decisiones sobre individuos, y menos
60
de carácter punitivo, entendiendo que su propósito es el de retroa-limentar al sistema educativo nacional y a los subsistemas estatales, en cuanto tales, para que mejoren su operación y resultados, como elemento de estímulo y apoyo.
f ) Tendrá en cuenta las diferentes circunstancias que puedan afectar a personas, escuelas o subsistemas, evitando comparaciones que no consideren tales posibles diferencias y teniendo siempre presente el principio de búsqueda de la equidad en el análisis de resultados de la evaluación.
g) Procurará que en todas sus líneas de actividad exista un componente de innovación que genere nuevos instrumentos y nuevas formas de enfrentar la evaluación, en función de las necesidades del sistema edu-cativo.
h) Tratará siempre de realizar sus funciones con la mayor eficiencia posi-ble, evitando el desperdicio de tiempo y recursos.
i) Procurará que los resultados de sus evaluaciones permitan comparar en el tiempo.
j) Se esforzará por participar en todos los esfuerzos pertinentes de eva-luación internacional. (Decreto de Creación, artículo 9).
Criterios para la difusión de resultados por escuelaEn el marco de una política de transparencia y de búsqueda de una
participación más importante y comprometida de los padres de familia y la sociedad entera en los esfuerzos de mejora, no puede minimizarse la importancia de las razones a favor de difundir los resultados en las evaluaciones por escuela. Tampoco se puede ignorar el peso de las expe-riencias que muestran los efectos negativos de una difusión descontex-tualizada de los resultados de las pruebas, ni la fuerza en los argumentos, los cuales llaman la atención sobre el cuidado que debemos tener para no usar las evaluaciones en una forma que no corresponda a sus carac-terísticas técnicas.
Además de asegurar la calidad técnica de sus evaluaciones, el INEE deberá cuidar también la forma de difundir y usar los resultados, evitan-do atentar contra la equidad y buscando maximizar el efecto positivo de las evaluaciones para la mejora de la calidad educativa. De manera con-gruente con los principios previamente expuestos, el INEE no dará resul-
61HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
tados por escuela de sus evaluaciones muestrales. Las autoridades educa-tivas podrán hacerlo, y el INEE las apoyará para ello, siempre y cuando las evaluaciones a difundir reúnan al menos tres condiciones: sean censales; incluyan información del contexto socioeconómico; y se basen en resul-tados de al menos tres ciclos escolares.
3. Diagnóstico: situación de la evaluación educativaEl apartado contiene un amplio diagnóstico de la situación que guar-
dan las acciones de evaluación, incluyendo lo relativo a elaboración y aplicación de pruebas de aprendizaje, las estadísticas e indicadores edu-cativos, la participación de México en evaluaciones internacionales y la evaluación de las escuelas como instituciones.
En términos cuantitativos el trabajo ha sido enorme; cualitativamente hay fallas técnicas, a más de una deficiencia fundamental, la cual ha sido la ausencia de difusión, ésta impide que los resultados sean aprovecha-dos para mejorar la calidad e incide en la calidad técnica misma, ya que no se logran detectar las deficiencias y corregirlas.
Una apreciación global de la situación de la evaluación educativa pue-de formularse diciendo que en México hay muchas actividades relacionadas con la evaluación educativa (estadísticas y pruebas numerosas, las cuales en ocasiones llegan a parecer excesivas y de elevado costo, y diversas ini-ciativas de evaluación de escuelas), pero no hay una verdadera evaluación, en el sentido de un conjunto de juicios de valor objetivos y mesurados sobre el estado del sistema educativo, el cual integre los datos derivados de mediciones y estadísticas, los contraste con parámetros pertinentes, explore explicaciones y utilice ampliamente los resultados para sustentar decisiones de mejora en todos los niveles del sistema.
4. Perspectivas: desarrollo del país y el sistema educativo y evaluación deseable
El cuarto apartado esboza una perspectiva del desarrollo previsible en el país y su sistema educativo, así como del considerado deseable para la evaluación educativa. Se precisa el papel del INEE en el conjunto de las ac-tividades de evaluación, teniendo en cuenta las dimensiones del sistema educativo, así como la amplitud y complejidad de las evaluaciones que tienen lugar en él, que no pueden estar a cargo de una sola instancia, sino
62
de varias, las cuales deberán funcionar de manera articulada, constituyen-do un gran sistema. El papel del INEE se precisa estableciendo que: ♦ Las evaluaciones a su cargo tendrán el propósito de ofrecer a las autori-
dades educativas, escuelas, maestros, alumnos y sus padres y sociedad en general, información válida, confiable y clara sobre lo que los alumnos saben y son capaces de hacer, en las asignaturas centrales del currículo, en diversos contextos socioculturales de todas las entidades de la Repú-blica. Esta información, referida al conjunto del sistema educativo nacio-nal y a los subsistemas estatales, apoyará las decisiones sobre políticas educativas y permitirá también enriquecer las evaluaciones de los maes-tros y su perspectiva sobre el trabajo docente.
♦ Un propósito complementario será certificar la calidad de las evalua-ciones a cargo de la SEP o de las autoridades educativas de las entida-des federativas, para garantizar su confiabilidad y su comparabilidad con las externas.
♦ No corresponderán al Instituto las evaluaciones para retroalimenta-ción inmediata de maestros, alumnos y padres, así como la que deba sustentar decisiones de alto impacto sobre personas e instituciones en lo individual. El anexo C del Plan se presenta la manera en que el INEE, la SEP y las
autoridades educativas de los estados de la República han acordado dis-tribuirse las tareas evaluativas, para formar un verdadero sistema nacional de evaluación educativa.
Este apartado establece, además: es fundamental que el trabajo del INEE sea de la más alta calidad técnica, de modo que supere las deficien-cias de evaluaciones anteriores. En el apartado se resumen algunos ele-mentos del Modelo de Calidad del INEE, que se presentan con mayor am-plitud en el anexo D.
El apartado termina señalando: dado que debe servir para la mejora de la calidad, la perspectiva deseable de la evaluación educativa tiene que incluir lo relativo a la difusión y uso de los resultados. Las limitaciones de las evaluaciones pasadas en este terreno deberán superarse también, dejando lugar a una sólida cultura de la evaluación en todos los sectores relacionados con la educación, desde las autoridades federales y estatales hasta los padres de familia y sociedad, pasando por maestros y directores de escuela.
63HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
5. Misión del INEEPara contribuir a que el sistema educativo ofrezca una educación de
buena calidad, con equidad, a todos sus alumnos, como requiere el mun-do de hoy y reclama la sociedad mexicana, el Instituto Nacional para la Evaluación de la Educación: ♦ Hará diagnósticos integrales y permanentes que reflejen, de la manera
más confiable y objetiva, la situación del sistema educativo nacional y sus grandes subsistemas, y ayuden a explicar los factores que la deter-minan.
♦ Difundirá los resultados de las evaluaciones de la manera más transpa-rente, con el fin de que sean aprovechados por las autoridades, edu-cadores y sociedad, y para que se desarrolle una sólida cultura de la evaluación.
♦ Promoverá el uso de la evaluación para apoyar la mejora de la calidad educativa y la rendición de cuentas, y monitoreará el impacto de la evaluación en la calidad; monitoreará también, la calidad de las eva-luaciones mismas, buscando su mejora.
6. Visión: el INEE en el futuroLos esfuerzos por alcanzar niveles superiores de calidad educativa con
equidad, tendrán sustento sólido gracias a las evaluaciones y diagnósticos integrales que llevará a cabo el INEE, los cuales permitirán que la sociedad mexicana tenga una visión objetiva de la situación del sistema educativo, anualmente y en forma comparativa a lo largo del tiempo, en beneficio de la rendición de cuentas. Las actividades del INEE, en particular:♦ Complementarán, con su enfoque externo y macro, a las evaluaciones
internas que hagan las autoridades educativas federales o locales, los directores, supervisores y maestros, para apoyar el desarrollo de estra-tegias de mejora. Con ello enriquecerán la visión de la sociedad sobre los alcances y límites del trabajo de las escuelas y apoyarán el trabajo de los maestros y la rendición de cuentas.
♦ Cubrirán las dimensiones de la calidad del sistema educativo -resul-tados, recursos, procesos y contexto- con instrumentos y metodolo-gías que permitan mediciones válidas, confiables y comparables en el tiempo.
♦ Utilizarán referentes pertinentes, que tendrán en cuenta el entorno del
64
sistema y los subsistemas a evaluar, lo que permitirá la formulación de juicios de valor mesurados y contextualizados. Serán, además, parsi-moniosas y eficientes.
♦ Permitirán comparar la calidad del sistema educativo mexicano con los de otros países, gracias a la participación en proyectos internacio-nales.
♦ Enriquecerán el conocimiento existente sobre la educación mexicana y fortalecerán a la comunidad académica, gracias a los trabajos de in-vestigación y formación de especialistas en evaluación.Esta visión genérica se precisa en dos horizontes temporales: 2012 y
2006. El más lejano es necesario para la maduración de una actividad tan compleja; el más próximo se ve como etapa intermedia. Ambos horizon-tes están contemplados ya en el proyecto de creación del INEE, elaborado desde 2001, y se expresan como sigue: En 2012 el INEE habrá alcanzado su plena consolidación, de modo que
la calidad e imparcialidad de su trabajo lo habrán hecho referencia obligada y creíble sobre la situación del sistema educativo mexicano.
En 2006, el INEE habrá establecido bases sólidas en lo jurídico, lo or-ganizacional, lo académico y lo técnico, que sustentarán el desarrollo del organismo en la etapa siguiente; el Instituto estará dando ya fru-tos precisos de gran valor para el sistema educativo y para la sociedad mexicana.Las visiones al 2012 y 2006 se desarrollan en una serie de incisos parti-
culares que detallan la situación que se espera alcance el INEE en esos dos horizontes temporales.
7. Líneas de trabajoEste punto, parte central del Plan, presenta en detalle las acciones a
realizar por el INEE, agrupadas en cuatro líneas: las tres primeras son las sustantivas, comenzando por la de evaluación misma, con la de difusión de resultados y la de investigación y formación de recursos humanos. La cuarta contiene las acciones de apoyo. Las líneas y sublíneas son:♦ Evaluación del sistema educativo
o Evaluación de resultadoso Evaluación de recursos, procesos y programas.o Evaluación de factores del contexto e integración de elementos
65HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
♦ Difusión de resultados de la evaluacióno Fomento del uso de la evaluación para la mejora de la calidado Promoción de la cultura de la evaluación
♦ Investigación y formación de recursos humanoso Investigacióno Formación de recursos humanos para la evaluación
♦ Infraestructura y actividades de apoyo
8. Metas. Visión cronológicaEl punto retoma las principales acciones y productos de cada línea y
sublínea del apartado 7, precisando la visión en la forma de metas anua-les, del año 2004 al 2012.
9.Indicadores de impacto y gestiónEl punto de referencia para el establecimiento de indicadores del tra-
bajo de cualquier institución lo constituyen, justamente, las metas de sus planes de corto, mediano y largo plazos. En el caso del INEE, este Plan Maestro y los Programas Anuales de Trabajo.
No es fácil definir indicadores de un conjunto tan complejo de activi-dades. Habrá que evitar la pretensión de reducir los ambiciosos propósi-tos del INEE a un número reducido de indicadores simples. En particular, conviene distinguir los indicadores que se expresan en términos de resul-tados (que se refieren al cumplimiento de las actividades planeadas y a la obtención de los productos esperados); los que se refieren al impacto de las actividades y productos de un organismo fuera del mismo; y los que tratan de la gestión del propio organismo. Teniendo en cuenta lo anterior, el Plan Maestro establece tres tipos de indicadores: unos de resultados, otros de impacto y unos más de gestión.
10. Perspectiva estratégicaLa amplitud del Plan Maestro puede traer la consecuencia negativa de
que se pierdan de vista aspectos fundamentales, que se retoman en cua-tro puntos:♦ La necesidad de no perder de vista el propósito final del trabajo de
evaluación, el cual es incidir en la mejora de la calidad educativa.
66
♦ La importancia, para lo anterior, asegurar la calidad técnica de las eva-luaciones que se lleven a cabo.
♦ La atención que debe darse a las demandas de la sociedad, incluyendo la necesidad de formar opinión para educar la demanda misma.
♦ Las exigencias sociales y legales de transparencia, así como las legales y administrativas que implica la estabilidad institucional del Instituto.Estos puntos coinciden con los rasgos clave de la misión del INEE, ex-
presada en el apartado 5: hacer evaluación confiable; difundir los resultados de manera oportuna y transparente; y promover su utilización para la mejora de la calidad educativa.
Como ejercicio de prospectiva, toda planeación tiene una dosis de in-certidumbre, tanto mayor cuanto más lejano sea el horizonte que con-templa. Por ello, y ante la imposibilidad de conocer con certeza las cir-cunstancias que se presentarán a lo largo de la década que cubre el Plan Maestro, se plantea una perspectiva estratégica, que define los aspectos prioritarios a alcanzar en caso de que deban reducirse las actividades del Instituto.
CONCLUSIÓN
Las líneas de trabajo deberán ser desarrolladas por el INEE a través de sus áreas. Cada línea tiene relación especial con alguna de las direcciones que tiene la estructura actual del Instituto, pero no hay una coincidencia exacta entre líneas y áreas. La estructura, por otra parte, podrá modificar-se a partir de lo que indique la experiencia, en tanto que las líneas de ac-ción son permanentes. El Plan Maestro se entiende como un instrumento flexible, el cual deberá actualizarse cada año, cuando se elabore el Pro-grama Operativo, de manera que se articule la planeación de mediano y largo plazo con la de corto plazo. Visto así, como instrumento vivo, el Plan Maestro podrá ser fundamental para orientar el desarrollo del INEE, en forma ambiciosa y realista.
67HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
CONCLUSIÓN
68
69HACIA UN NUEVO PARADIGMA PARA LA EVALUACIÓN EDUCATIVA. LA PERSPECTIVA DEL INEE
La visión de la evaluación educativa que el INEE presenta en estas páginas pretende ser un avance cualitativo con respecto a lo realizado antes en este campo, y se concreta en avances en tres puntos precisos:♦ Pasar de una evaluación cuyas fallas técnicas impiden que sea un so-
porte sólido de las decisiones de mejora, a una que constituya un refe-rente indiscutible en el cual puedan confiar todos los actores educati-vos, independientemente de su postura.
♦ Avanzar de una situación en la cual los resultados de las evaluaciones sólo llegan a pocas personas, a otra en que se difundan oportuna y ampliamente, y puedan usarse para apoyar la mejora educativa y de-sarrollar la cultura de la evaluación.
♦ Transitar de una gran cantidad de acciones desarticuladas a un verda-dero sistema nacional, en el que diversas instancias realicen evaluacio-nes de propósito específico y enfoque complementario que, en con-junto, ofrezcan una visión completa de la situación educativa, desde el nivel nacional hasta el de cada escuela y aula.El proyecto del INEE contemplaba tres horizontes temporales: 2002:
nacimiento del Instituto; 2006: consolidación inicial; 2012: consolidación plena.
Cumplida la primera meta, con el decreto presidencial del 8 de agosto de 2002 que lo estableció, el INEE llega a su segundo aniversario avanzan-do firmemente hacia su consolidación.
El Plan Maestro de Desarrollo es el instrumento que guiará el trabajo del Instituto para alcanzar sus metas de mediano y largo plazo.
El Plan establece metas anuales a alcanzar de 2004 a 2012 y precisa la manera en cómo se hará el trabajo.
Siguiendo las directrices del Plan, el INEE podrá cumplir su misión, de hacer evaluación confiable y difundirla de manera oportuna y transparen-te, para apoyar los esfuerzos de ofrecer una educación de buena calidad a todos los niños de México.