18
UNIVERSIDAD NACIONAL ABIERTA UNIVERSIDAD NACIONAL ABIERTA VICERRECTORADO ACADÉMICO VICERRECTORADO ACADÉMICO ÁREA EDUCACIÓN ÁREA EDUCACIÓN Profa. Ana Gudiño: Evaluadora Universidad Nacional Abierta (UNA) Caracas, 23 de enero de 2015 Mecanismos de Control de la Evaluación Sumativa en la UNA Observaciones a ítemes de las pruebas como mecanismo de Metaevaluación

Observaciones a los ítemes de las pruebas

  • Upload
    elsana

  • View
    41

  • Download
    1

Embed Size (px)

Citation preview

Page 1: Observaciones a los ítemes de las pruebas

UNIVERSIDAD NACIONAL ABIERTAUNIVERSIDAD NACIONAL ABIERTAVICERRECTORADO ACADÉMICOVICERRECTORADO ACADÉMICOÁREA EDUCACIÓN ÁREA EDUCACIÓN

Profa. Ana Gudiño: EvaluadoraUniversidad Nacional Abierta (UNA)

Caracas, 23 de enero de 2015

Mecanismos de Control de la Evaluación Sumativa en la UNA

Observaciones a ítemes de las pruebas como mecanismo de Metaevaluación

Page 2: Observaciones a los ítemes de las pruebas

La UNA está organizada para impartir enseñanza en la modalidad de educación a distancia.

Un rasgo particular de esta modalidad es la separación física entre estudiantes y profesores.

El elemento “interacción” juega un papel relevante en el intercambio que debe existir entre los tres componentes básicos en este tipo de modalidad: estudiante, docente y material instruccional.

El sistema de evaluación esta centrado en el estudiante y se desarrolla por cursos, utilizando variados instrumentos de evaluación principalmente las PRUEBAS.

Tancredi y Figueroa (2003)

Observaciones a ítemes de las pruebas

Preámbulo

Page 3: Observaciones a los ítemes de las pruebas

Las pruebas tienen carácter presencial: son instrumentos de evaluación con un número de ítemes de diferentes tipos, adecuados al nivel de complejidad de cada objetivo del curso, pasan por un control de calidad y deben cumplir con un conjunto de pautas o recomendaciones para su construcción.

El seguimiento y control técnico de los instrumentos es llevado conjuntamente por el Evaluador y el Especialista en Contenido, quienes tienen la responsabilidad de validar la calidad de los mismo.

Se pueden presentar una variedad de elementos una vez que el estudiante tiene acceso a la Clave de Corrección correspondiente a la prueba y manifieste desacuerdo con las repuestas, entre otros.

Preámbulo

Page 4: Observaciones a los ítemes de las pruebas

En consecuencia, se generan observaciones a las preguntas de las pruebas, en la mayoría de los casos producen un impacto debido a las decisiones que se toman al responderlas.

Las respuestas a las observaciones van dirigidas al estudiante que la remite en los formatos correspondientes.

Estas observaciones se rigen por lo pautado en el documento: Procesamiento de Observaciones Relacionada con la Evaluación Estudiantil, emanado por el Vicerrectorado Académico a través de la Coordinación de la Unidad de Evaluación Académica.

Preámbulo

Arandia (2006)

Page 5: Observaciones a los ítemes de las pruebas

Observaciones a ítemes de las pruebasEl estudiante tiene la posibilidad por la vía de las

observaciones a los ítemes de las pruebas solicitar aclaratoria de cualquier situación que considere irregular generando la interacción docente-estudiante y evidenciando el carácter bidireccional de la comunicación.

Representan la vía a través del cual el estudiante puede consultar e informar a los Especialistas en Contenidos sus dudas y posiciones en cuanto a una pregunta en específico o más preguntas, en el cual no está de acuerdo.

La observación respecto a cada ítem de prueba u otro documento, es formulada o solicitada por los mismos estudiantes, en el respectivo centro local, en un tiempo máximo permitido por la UNA.

Page 6: Observaciones a los ítemes de las pruebas

El estudiante debe registrar en el “Formato” correspondiente, la fecha en que hace entrega de su observación al Centro Local o Unidad de Apoyo.

Los estudiantes argumentan una variedad de aspectos relacionados con los ítemes:

a) Fallas en el ítem que impiden responder la alternativa correcta, redacción, omisión de información, error en la información presentada en la base del ítem.

b) Ausencia de la respuesta correcta.c) Más de una opción de la respuesta correcta.d) El ítem no se corresponde con el objetivo.e) Se repiten preguntas en un mismo objetivo.f) El ítem no se se relaciona con el material instruccional.g) Las claves de respuestas liberadas no se corresponden con

las respuestas correctas de la prueba. Entre otros.

Observaciones a ítemes de las pruebas

Page 7: Observaciones a los ítemes de las pruebas

No. C.E.AUniversidad Nacional Abierta Vicerrectorado AcadémicoCoordinación Evaluación Académica LAPSO 2015-1

Para: Coordinación de Evaluación AcadémicaAsunto: Observaciones a Ítemes de Selección / Claves de Corrección

Centro Local /COD Oficina de Apoyo / COD

Asignatura COD Área

Momento de Evaluación Tipo de Prueba

Fecha de Aplicación

VP

1P 2P 3P 4P 1I 2I OBJ

MIX

No Ítem No. Objetivo Clave Rectificación Propuesta

Argumentos

Nombre del Estudiante Asesor Jefe Unidad Académica o Unidad Logística

CI. CI CIFirma: Firma: Firma:Fecha: Fecha: Fecha: Fecha Recepción Área F. Respuesta No. Memo Área

VP: Versión de la Prueba

Page 8: Observaciones a los ítemes de las pruebas

Universidad Nacional Abierta Vicerrectorado AcadémicoCoordinación Evaluación Académica LAPSO 2015-1

No. C.E.A

Centro Local /COD Oficina de Apoyo / COD

Asignatura COD ÁreaMomento de Evaluación T. P Fecha de

Aplicación VP1P 2P 3P 4P 1I 2I OBJ

DES MIX

No. Ítem________ No. Objetivo:____________Argumentos:

(Si lo estima necesario anexe Hojas identificadas con su nombre, CI, Centro Local)Nombre del Estudiante

CI.

Asesor

CI

Jefe Unidad Académica o Unidad Logística

CIFirma Firma FirmaFecha: Fecha: Fecha:Fecha de Recepción C.E.A:VP: Versión de la Prueba

Para: Coordinación de Evaluación AcadémicaAsunto: Observaciones a Ítemes de Desarrollo / Modelo Respuesta

Page 9: Observaciones a los ítemes de las pruebas

Tipos de respuesta emitida por los Especialistas en Contenido

Observaciones Procedentes: Cuando el Especialista en Contenido examina que el planteamiento presentado por el estudiante es correcto y verifica que la opción de respuesta presentada en la clave de corrección no es la correcta. Se modifica la clave de corrección, (se cambia la opción de

respuesta). Se elimina la pregunta, (se reduce el Criterio de Dominio). Se sustituye la clave de corrección, (completa). Se Modifica el Modelo de respuesta. Presentar una explicación didáctica que refuerce la decisión y le

deje una orientación pedagógica y formativa al estudiante. La respuesta con la decisión se presenta en el formato

correspondiente, se remite para todos los Centros Locales.

Page 10: Observaciones a los ítemes de las pruebas

Asignatura: Cód:Momento de Prueba: Aplicación: Número Versión

PruebaObjetivo(s): Ítem(es):

RESPUESTA

Se modifica la clave de corrección, (se cambia la opción de respuesta).Se elimina la pregunta, (se reduce el Criterio de Dominio).Se sustituye la clave de corrección, (completa).Presentar una explicación didáctica que refuerce la decisión y le deje una orientación pedagógica y formativa al estudiante.

UNIVERSIDAD NACIONAL ABIERTAVICERRECTORADO ACADEMICOCARRERAS EDUCACION INTEGRAL

OBSERVACIÓN PROCEDENTE Nº CEA: 000 Nº NP: ______ PARA: Coordinación de Evaluación Académica

ATENCIÓN: TODOS LOS CENTROS LOCALESDE: Carreras de Educación IntegralASUNTO: Respuesta a ObservaciónFECHA:

Coordinador: _____________________ 29/06/09 Especialista:_______________________ 29/06/09 Evaluador:________________________ 29/06/09 Coordinación Evaluación Académica: __________________ 29/06/09

Page 11: Observaciones a los ítemes de las pruebas

Tipos de respuesta emitida por los Especialistas en Contenido

Observaciones No Procedentes: Cuando el Especialista en Contenido examina que el planteamiento presentado por el estudiante no procede y considera que la opción de respuesta presentada en la clave de corrección es la correcta.

Se ratifica la opción correcta presentada en la Clave de Corrección.

Presentar una explicación didáctica argumentada que refuerce la decisión y le deje una orientación pedagógica y formativa al estudiante.

Se sugiere al estudiante revisar de nuevo la Unidad y el tema relacionado con el ítem y objetivo.

Page 12: Observaciones a los ítemes de las pruebas

UNIVERSIDAD NACIONAL ABIERTAVICERRECTORADO ACADEMICOCARRERAS EDUCACION INTEGRAL

OBSERVACIÓN NO PROCEDENTE

PARA: Coordinación de Evaluación AcadémicaATENCIÓN: Centro Local DE: Nivel Central-Carrera: Mención:ASUNTO: Respuesta a ObservaciónFECHA: 00/00/0000

Nº CEA: 000 Nº NP: ______

Asignatura: Cód:

Momento de Prueba: Fecha de Aplicación:

Número Versión Prueba

Objetivo(s): Ítem(es):

RESPUESTASe ratifica la opción correcta presentada en la Clave de Corrección.Presentar una explicación didáctica argumentada que refuerce la decisión y le deje una orientación pedagógica y formativa al estudiante.Se sugiere al estudiante revisar de nuevo la Unidad y el tema relacionado con el ítem y objetivo.

Coordinador: _____________________ 29/06/09 Especialista:_______________________ 29/06/09 Evaluador:________________________ 29/06/09 Coordinación Evaluación Académica: __________________ 29/06/09

Page 13: Observaciones a los ítemes de las pruebas

Las Observaciones a los instrumentos de pruebas representan un mecanismo de la Metaevaluación; la oportunidad de analizar y revisar los ítemes de los instrumentos, detectar si cumplen con los requisitos y el fin para el cual fueron elaborados y corregir los problemas presentados.

Pueden considerarse un procedimiento de revalidación que implica volver a la revisión del ítem (su estructura, distractores, respuesta correcta, Clave de Corrección, pertinencia con el objetivo, con el material instruccional, la Selección de Lecturas) permitiendo considerar la utilización del mismo a futuro o si deberá ser eliminado del banco de ítemes de la asignatura.

Observaciones a ítemes de las pruebas como mecanismo de Metaevaluación

Page 14: Observaciones a los ítemes de las pruebas

UNIVERSIDAD NACIONAL ABIERTA VICERRECTORADO ACADÉMICO ÁREA DE EDUCACIÓN

CARRERAS DE EDUCACIÓN INTEGRAL ASIGNATURA:______________ Prof. (a) Especialista en Contenido:__________ LICENCIATURA (CÓDIGO 440) CÓDIGO:____________________________LAPSO:________________Profesor (a) Evaluador (a):_________

TÉCNICO SUPERIOR UNIVERSITARIO (CÓDIGO 430)

REGISTRO DE OBSERVACIÓN A ÍTEMES

LEYENDA:

CEA: COORDINACIÓN EVALUACIÓN ACADÉMICA, RECEP: RECEPCIÓN, 1º I: 1º INTEGRAL, 2º I: 2º INTEGRAL, V1: VERSIÓN 1, V2: VERSIÓN 2, CONT: CONTENIDO DEL ÍTEM S.R.C: SIN RESPUESTA CORRECTA, S.J.: SIN JUSTIFICACIÓN, MÁS R.C.: MÁS DE UNA RESPUESTA CORRECTA, R.N.I: LA RESPUESTANO ES LA INDICADA, MC: SE MODIFICÓ LA CLAVE, EI: SE ELIMINÓ EL ÍTEM, CC: CLAVE CORRECTA, EX: EXTEMPORÁNEO, PROC.: PROCEDENTE, NO PROC.: NO PROCEDENTE, U.E.A.: UNIDAD DE EVALUACIÓN ACADÉMICA, EI: EDUCACIÓN INTEGRAL, O: OBJETIVA, M: MIXTA

Page 15: Observaciones a los ítemes de las pruebas

Código de la

AsignaturaNº Ítemes Pruebas Integrales

NºÍtemes

S.S.

Nº Ítemes Des.

Total de

Ítemes

Totalpruebas

Asignaturas1I 2I I A IE FEUNA - - - -

V1 V2 V1 V2 - - 1I 2I - - - -120 32 - 32 - - - - - 64 - 64 2423 36 - 36 - - - - - 72 - 72 2476 32 - 32 - - - - - 64 - 64 2477 20 - 20 - - 20 20 20 100 - 100 5

478/430 28 - 28 - - 28 - - 84 - 84 3479 12 - 12 - - - 12 12 48 - 48 4

480/432 28 - 28 - - - - - 56 - 56 2481/436 24 - 24 - - - 24 24 56 - 56 4

484 40 - 40 - - - - - 80 - 80 2485/418 16 - 16 - - 16 16 16 64 - 64 5

487 24 - 24 - - - - - 48 - 48 2488/422 24 - 24 - - 24 - - 72 - 72 3489/424 24 - 24 - - 24 - - 72 - 72 3

490 22 - 22 - - - - - 32 12 44 2491/459 36 - 36 - - - - - 72 - 72 2492/438 20 - 20 - - - - - 40 - 40 2

493 8 - 8 - - - - - 16 - 16 2498 16 - 16 - - - - - 32 - 32 2

TOTAL DE ÍTEMES

418 - 418 - 112 72 72 1080 12 1092 49

Para las pruebas de las asignaturas de la Carrera del TSU en Educación Integral (430) lapso 2008 – 2 se elaboraron un total de 1092 ítemes de los cuales 1080 son de selección simple y 12 son ítemes de desarrollo distribuidos en un total de 49 pruebas.

Nº DE ÍTEMES PRODUCIDOS PARA LAS PRUEBAS DE LAS ASIGNATURAS DE LA CARRERA DE TSU (430) Y TOTAL DE PRUEBAS ELABORADAS DURANTE EL LAPSO 2008 – 2

Page 16: Observaciones a los ítemes de las pruebas

CÓD. ASIGNATURAS OBSERVACIONES

PROCEDENTES OBSERVACIONES

NO PROCEDENTES

1º IN 2º IN TOTALESTOTAL OB

P 1º IN 2º INTOTAL OB

NO PTOTAL

OBSEI MC EI MC EI MC CC CC

120 LENGUA Y COMUNICACIÓN EN EDUCACIÓN - - - - - - - - - - -423 DISEÑO Y ELABORACIÓN DE PUBLICACIONES

PERIÓDICAS - - - 1 - 1 1 - - - 1476 MATEMÁTICA 1 - - - 1 - 1 - - - 1477 FUNDAMENTOS DE LA EDUCACIÓN - - - - - - - 1 - 1 1

478/430

LECTO-ESCRITURA- - 1 3 1 3 4 - 1 1 5

479 ENSEÑANZA DE LA MATEMÁTICA - - - 1 - 1 1 - - - 1480 EDUCACIÓN AMBIENTAL - - - - - - - 4 - 4 4481 LITERATURA INFANTIL Y JUVENIL - 1 - 3 - 4 4 - - - 4484 GEOGRAFÍA GENERAL Y DE VENEZUELA - - - - - - - - - - -485 CIENCIAS NATURALES I - - - - - - - 2 3 5 5487 DIDÁCTICA PARA EL DOCENTE INTEGRADOR - - - - - - - 1 - 1 1488 HISTORIA DE VENEZUELA - - - - - - - - - - -489 CIENCIAS NATURALES II 1 3 1 - 2 3 5 2 1 3 8490 COMUNICACIÓN EFICAZ - - - - - - - - - - -491 ENSEÑANZA DE LA LENGUA - - 1 - 1 - 1 2 3 5 6492 SEMINARIO PRACTICO DE EDUCACIÓN PARA

EL TRABAJO - - - - - - - - - - -493 EVALUACIÓN - - - - - - - 1 - 1 1498 LIDERAZGO UNA ESTRATEGIA PARA EL

CAMBIO - - - 1 - 1 1 - - - 1

 

2 4 3 9 5 13 18 13 8 21 39

- - - - 0,45%1,19% 1,64% 1,19% 0,74 1,93% 3,57

RELACIÓN DE RESPUESTAS DADAS A LAS OBSERVACIONES A ÍTEMES DE PRUEBAS POR ASIGNATURAS CARRERA 430 LAPSO 2008 – 2

DE 49 PRUEBAS ELABORADASEL TOTAL DE ÍTEMS CONSTRUIDOS ES DE 1.092 = 100,00% EL TOTAL DE ÍTEMES CON OBSERVACIONES 39 = 3,57%EL TOTAL DE ÍTEMES SIN OBSERVACIONES 1.080 = 98,90%

Page 17: Observaciones a los ítemes de las pruebas

“El error esta estrechamente vinculado a uno de los espacios didácticos del ámbito educativo, la evaluación(...) una de las finalidades de la evaluación es la revalidación, la cual se denomina evaluación formativa. El error aparece entonces como una referencia una investigación para aplicar la metaevaluación (...) El error siempre tiene una explicación y un porqué”.

De la Torre (2004)

Las observaciones que realizan los estudiantes a los ítemes de las pruebas representan la oportunidad de evaluar sus planteamientos y aprendizajes formativamente y también nuestro trabajo como docente; más que resaltar un error de las partes involucradas, es la oportunidad de mejorar el proceso, a través de los ítemes de las pruebas, las pruebas, la misma observación planteada, con la validación pertinente. Profa. Ana Gudiño.

Page 18: Observaciones a los ítemes de las pruebas

Tancredi, B., Figueroa, P. (2003). Seminario N° 1: Análisis de las características del alumno de educación a distancia: Caso Universidad Nacional Abierta. Red de Universidades de Educación a Distancia Rueda PROGRAMA ALFA, Subprograma A. PROYECTO: Evaluación de los Programas de Educación a Distancia. Loja, Ecuador.

Arandia, J.R. (2006). Procesamiento de Observaciones relacionada con la evaluación estudiantil. Vicerrectorado Académico. Coordinación de Evaluación Académica. UNA. Lapso 2006 – 2.

De la Torre, S. (2004) Aprender de los errores. El tratamiento didáctico de los errores como estrategias innovadoras. Editorial: Magisterio del Rio de la Plata. Buenos Aires. Argentina.

Referencias: