Embed Size (px)
Citation preview
Taller Construcción de Pruebas Taller Construcción de Pruebas EscritasEscritas
Universidad del Bio BioUniversidad del Bio BioPostítulo en Lenguaje y ComunicaciónPostítulo en Lenguaje y Comunicación
Curriculum y EvaluaciónCurriculum y Evaluación
Prof. Enrique Solari A.Prof. Enrique Solari A.
Procedimientos evaluativos escritos
Pruebas escritas:
Su cualidad fundamental es que los alumnos y alumnas reciben una
serie de preguntas por escrito que han de
responderlas del mismo modo, éstas pueden ser
de carácter teórico, práctico, mixtas o con consulta bibliográfica.
Pruebas de elaboración de respuestas:
Como su nombre lo indica exigen que el estudiante
elabore una respuesta; pueden ser construidas con diferentes tipos de ítemes o preguntas:
• Ítem de ensayo o de respuesta extensiva: en donde el alumno puede desarrollar libremente sus
propias respuestas respecto de un tema que se le haya sugerido. La
idea es que sirva para evaluar habilidades de mayor complejidad,
tales como: aplicación, análisis, síntesis, originalidad e incluso
favorece el desarrollo de habilidades de redacción y
comunicación escrita en general.
Procedimientos evaluativos escritos
Pruebas escritas:
Su cualidad fundamental es que los alumnos y alumnas
reciben una serie de preguntas por escrito que han de responderlas del
mismo modo, éstas pueden ser de carácter teórico, práctico, mixtas o con consulta bibliográfica.
- “Relacione el concepto de patriarcado presente en el libro Cien años de soledad,de Gabriel García Márquez,con la familia chilena actual.Explicite esta relación a través de ejemplos.
EJEMPLOS
Precauciones que se deben tener en la elaboración de los ítemes de ensayo:
Redactar el ítem de manera que no dé lugar a dudas lo que se pregunta.
Evitar las expresiones: “¿Qué piensa usted de este tema?”. “Escriba todo lo
que piensa usted de este tema”.
Evaluar la cantidad de preguntas a incorporar, pues exigen un tiempo
prolongado de elaboración de respuesta.
Establecer con antelación los criterios de evaluación y comunicárselos a los
alumnos, pues no habrá un modelo único de respuesta, sobre todo si se
espera originalidad. Por ejemplo ¿qué tendrá mayor puntaje? La claridad de
lo presentado, la destreza lingüística demostrada por el alumno, la letra, la
ortografía, la redacción, la proposición de ideas originales, el fundamento
que da a sus ideas, la coherencia del discurso, etc. Usted puede exigir estos
aspectos, pero el alumno debe saberlo desde antes, así se evitará ser
criticado por considerar, por ejemplo, más elementos de forma que de fondo
y, al mismo tiempo, cuidará de no olvidar lo que usted cree importante que el
alumno demuestre de su desempeño.
Si se establecen con antelación los criterios de evaluación, también se
evitará calificar otorgándole más peso a elementos menos relevantes. De
ahí la importancia de contar con una pauta de evaluación de esta prueba.
Continuación...
Preguntas de respuesta breve o
restringida:
En este tipo de preguntas el estudiante debe
responder condicionado a ciertas exigencias, de
espacio, de cantidad de oraciones, palabras o
fechas. Se requiere que el alumno sea más preciso
y directo. Entre estas tenemos las preguntas
directas y las de completación de
oraciones.
EJEMPLOS
Respuesta directa:
“Mencione dos características del clima de la Séptima Región”.
“Escriba dos oraciones con sujeto tácito”.
Completación de oraciones:
“Los animales que comen hierbas se denominan …………………………………..”
“El orden de los factores no altera el producto, es la ley de ………………………”
Precauciones que se deben tener en el diseño de estos ítemes:
En los de respuesta breve directa, se debe delimitar claramente qué contenidos
se solicita responder, a qué ámbito corresponde y la extensión exacta.
En los de completación, se sugiere ubicar el espacio vacío en el centro o al final
de la frase, no al inicio.
No considerar más de dos espacios vacíos.
Subrayar los espacios de manera que todos tengan el mismo tamaño.
No se deben usar expresiones idénticas a las que emplearon los alumnos para
estudiar en sus textos o documentos de trabajo.
Se deben tener en cuenta posibles sinónimos de la respuesta correcta, los que
también deben considerarse apropiados.
Siempre es conveniente elaborar una pauta de evaluación que contenga los
indicadores o un modelo de las respuestas adecuadas del alumno, para tener
claro con anterioridad a qué elementos le dará más valor a la hora de calificar.
Pruebas de elección de respuestas:
En este caso se presenta al estudiante diferentes posibilidades de respuesta frente a una determinada pregunta,
entonces él o ella debe seleccionar la que a su juicio es correcta. Éstas
pueden ser construidas con ítemes de selección múltiple, de verdadero-falso
o bien de términos pareados.
• Ítem de selección o de elección múltiple: es un enunciado,
representado por una frase o por una pregunta, seguida de alternativas, entre
las cuales se debe seleccionar la correcta y señalarla de la manera que se instruya en cada caso (encerrando en un círculo, marcando con una cruz,
etc.).
EJEMPLOS
Pregunta directa de selección múltiple:
1. ¿Quién descubrió América?
a) Diego de Almagro.
b) Rodrigo de Triana.
c) Pedro de Valdivia.
d) Cristóbal Colón.
Frase incompleta de selección múltiple:
2. “Lo importante es la participación del alumno”, esta frase caracteriza al denominado método………..
a) Pasivo.
b) Integral.
c) Tradicional.
d) Participativo.
Precauciones que se deben tener en la
elaboración de ítemes de selección
múltiple:
En torno al enunciado, es decir,
la afirmación o pregunta a través de la
cual se plantea al problema:
Debe estar escrito en forma clara y
precisa.
Evitar la formulación de enunciados con
frases negativas. Si esto ocurre, es
importante señalar las palabras
negativas, destacándoles en negrita o
con letra grande.
Incorporar en él las palabras que se
repitan al comienzo de cada alternativa,
es decir, artículos como: la, el, los, etc.
En relación a las alternativas:
Es importante que sean gramaticalmente coherentes con el enunciado.
La respuesta correcta no debe ser más extensa que las demás.
En la eventualidad de que sean números, es recomendable ordenarlos en
forma ascendente o descendente.
Se deben analizar cuidadosamente las alternativas, de modo que sólo una
de ellas sea la verdadera, las demás deben ser posibles y no totalmente
absurdas.
Continuación...
En referencia a la clave, es decir, la alternativa que responde en
forma correcta a lo planteado en el enunciado, es importante:
Evitar su obviedad.
Que no esté contenida en el planteamiento de otro ítem de la misma prueba.
Que corresponda exactamente al problema planteado.
Este tipo de preguntas alude a un enunciado que se le presenta al alumno o alumna, para que éste
juzgue como verdadero o falso. Si bien son de fácil construcción no son recomendables cuando
se pretende evaluar aprendizajes de orden superior dentro del dominio cognitivo, ya que
permiten verificar si el alumno recuerda definiciones y clasificaciones.
Ítem de verdadero-falso
(Términos dicotómicos) o
de doble alternativa.
EJEMPLOS
“Escriba V si es verdadera y F si la frase es falsa”:
__ “El principal ángulo del despejo de una máquina de cortar metal es el ángulo que va desde el borde cortante hacia el lado cortador”.
Delante de cada afirmación conteste con una V si es verdadera o con una F si es falta. En caso de ser falsa justifique su respuesta.
__ “Lo que se aprende tiende a retenerse con la práctica y la ejercitación”.
__ “El constructivismo es una teoría sicológica”.
__ “La metacognición y la autorregulación son sinónimos”.
Ítem de verdadero y falso.
Precauciones en la formulación de ítemes de verdadero - falso.
Evitar el uso de palabras tales como: “ninguna”, “todo”, “nunca”, “a veces”,
“generalmente”.
Obviar el uso de palabras negativas.
Se requiere de una gran cantidad de ítemes de este tipo para que den cuenta
del desempeño del alumno, por tanto es absolutamente inconveniente que una
prueba o instrumento evaluativo determinado sólo contar con este tipo de
preguntas. De hecho la literatura especializada aconseja que éstos no sean
usados, porque propician fundamentalmente la memorización.
Otra de las críticas más serias a este tipo de ítem es el hecho de que un
alumno puede ser capaz de reconocer una declaración falsa o incorrecta, pero
no saber cuál es la correcta. Esto se puede superar, “eventualmente”, cuando
se les solicita fundamentalmente el porqué de lo falso, dentro de las
posibilidades que otorga una línea, que es el espacio otorgado para defender
la respuesta.
.Denominado también de correspondencia o asociación de columnas. En este caso se presentan dos columnas para que sean relacionadas. La primera ofrece las premisas o
preguntas numeradas y la otra, una serie de respuestas en donde se escribe el número correspondiente al elemento
que se ha asociado.
Ítem de Términos Pareados
En la línea de puntos que antecede a cada elemento de la columna B, anote el número que corresponde de la columna A, considerando cómo están ubicadas la(s) glándula(s) en el cuerpo.
1. Tiroides.
2. Paratiroides.
3. Páncreas.
4. Suprarrenales.
5. Ovarios.
En la cavidad pelviana unidas por ligamentos a las trompas del útero.
Bajo el estómago en una concavidad dejada por el duodeno.
En la bolsa escrotal fuera del cuerpo.
En la cara anterior del cuello delante de la laringe.
En el polo superior de los riñones.
EJEMPLO
Precauciones que se deben tener en la elaboración de ítemes de Términos Pareados:
Brindar al alumno una orientación clara acerca de cómo debe hacer la
correspondencia.
Utilizar más posibilidades de respuestas que preguntas.
Ubicar ambas columnas de lado a lado, de manera que el alumno pueda
economizar tiempo en la respuesta.
Evitar un error que se comete con frecuencia en este tipo de ítem, referido a la
incorporación de más de una respuesta correcta para cada pregunta.
Pruebas mixtas:
En correspondencia con los
procedimientos escritos que hemos
venido revisando, la prueba mixta es
aquella que contempla diferentes tipos
de ítemes, es decir, se mezclan en un
solo procedimiento o instrumento
evaluativo, preguntas que son propias
de las pruebas de elaboración de
respuestas y preguntas que son
características de las pruebas de
selección de respuestas.
¿Cómo construir una óptima prueba escrita?
Elementos previos:
Tener claridad sobre los objetivos “que se espera evaluar en los estudiantes”.
Tomar decisiones sobre qué niveles del dominio cognoscitivo se medirán: comprensión de contenidos, resolución de problemas, análisis, capacidad de síntesis, etc.
Pensar en la finalidad de la aplicación de este instrumento, es decir, para qué se recogerá esta información: para comenzar una nueva unidad, para diagnosticar dificultades y problemas en los alumnos al inicio o durante el desarrollo de la unidad, etc.
Será relevante construir una prueba equilibrada y para ello existe un instrumento que si bien es tradicional, contribuye justamente a estos fines (Tabla de especificaciones).
Una vez construida la tabla de especificaciones, se deben construir los ítemes, en correspondencia con esta tabla.
Finalmente, se debe elaborar una pauta de evaluación (instrumento) para registrar la información que nos permita asignar una calificación.
Procedimiento para Construir la Tabla de Especificaciones
La tabla de especificaciones es una herramienta destinada a comprobar el grado en que una prueba mide realmente lo que el profesor desea medir.En una dimensión de la tabla se sitúan los objetivos que se pretenden alcanzar, y en la otra, los contenidos. De este modo se establecen relaciones entre objetivos y contenidos, lo que ofrece la posibilidad de leer la tabla horizontalmente, para apreciar que objetivos se medirán a partir de cada contenido, y verticalmente, para ver mediante qué contenidos se medirá el logro de cada objetivo.
Tabla de especificaciones
Es un plan en donde se establece en una doble dimensión la competencia que se espera del alumno y el contenido a través del cual se evaluará esa competencia. Por ahora veamos, como ejemplo, el siguiente formato:
Contenido A 15% 1 1 2 4
Contenido B 20% 1 2 2 5
Contenido C 30% 2 2 3 7
Contenido D 35% 2 3 3 8
6 8 10 24 ítemes
Competencias
Contenidos
Comprensión
25%
Análisis 35%
Aplicación 40%
Total 100%
¿Cómo se construye una tabla de
especificaciones?
Se intentará explicitarla describiendo cada paso. ¡Veamos!
1. Establecer el número total de ítemes que tendrá la prueba.
2. Se decide cuáles son las competencias que serán evaluadas y se ubican en la tabla. Para este ejemplo vamos a suponer que hemos decidido comprensión - análisis - aplicación.
3. Se determinan los contenidos a través de los cuales serán evaluadas las competencias. Éstos dependerán de cada subsector.
¡Con estas tres primeras sugerencias, así nos va quedando la tabla!...
Contenido A Los medios de comunicación.
Competencias
ContenidosComprensión Análisis Aplicación Total
Contenido B Lenguaje publicitario.
Contenido C Componentes periodísticos más importantes.
Contenido D Estructura de una noticia.
Totales 24 ítemes
4. Establecer el porcentaje que se le dará a cada competencia, por ejemplo, un 25% para comprensión, un 35% para análisis, un 40% para aplicación.
5. Calcular el número de ítemes para cada dominio cognoscitivo.
Para saber cuántas preguntas asignar a comprensión, se debe calcular el 25% de 24 ítemes = 6.
Para determinar cuántas preguntas asignar a análisis, debemos calcular el 35% de 24 = 8
Para saber cuántas preguntas se deben elaborar para aplicación, corresponde calcular el 40% de 24 = 10
¡De acuerdo a lo que hemos avanzado, nuestra tabla estaría resultando de este modo!...
Contenido A Los medios de comunicación.
Competencias
Contenidos
Comprensión 25%
Análisis 35%
Aplicación 40%
Total 100%
Contenido B Lenguaje publicitario.
Contenido C Componentes periodísticos más importantes.
Contenido D Estructura de una noticia.
Totales 6 8 10 24 ítemes
¡Continuemos!...
6. Ahora corresponde dilucidar qué importancia le daremos a cada contenido, vamos a suponer que lo hemos asignado de esta manera:
Contenido A: 15%.
Contenido B: 20%.
Contenido C: 30%.
Contenido D: 35%.
7. Es el momento de calcular cómo se traduce lo anterior en número de preguntas en la prueba. Para ello se debe calcular el porcentaje de cada contenido en relación al número de ítemes que ya conocemos en cada dominio cognoscitivo o competencia.
¡De esta manera hemos concluido la elaboración de la tabla de especificaciones y así ha resultado!… Revísela...
Contenido A 10% Los medios de comunicación.
Competencias
Contenidos
Comprensión 25%
Análisis 35%
Aplicación 40%
Total 100%
Contenido B 20% Lenguaje publicitario.
Contenido C 30% Componentes periodísticos más importantes.
Contenido D 40% Estructura de una noticia.
Totales 6 8 10 24 ítemes
1 1 2 4
1 2 2 5
2 2 3 7
2 3 3 8
OBJETIVOS
CONTENIDO
CONOCIMIENTO COMPRENSIÓN APLICACIÓN
ANÁLISIS SINTESIS EVALUACIÓN
TOTAL
Concepto de evaluación
V o F10 ítem10 puntos
S. Múltiple1 ítem1 punto
t. pareado4 ítems4 puntos
Completación3 ítems19 puntos
D. Guiado 6 ítems 12 puntos
18
Enfoques de la Evaluación1
v o F5 ítem5 puntos
11
Criterios de evaluación2
V o F5 ítem5puntos
S. Múltiple1 ítem1 punto
6
Procedimientos de evaluación3
S. Múltiple1 ítem3 puntos
Completación2 ítems11 puntos
3
Instrumentos de evaluación
S. Múltiple2 ítem6 puntos
t. pareado2 ítems2 puntos
D. Guiado 2 ítems 18 puntos
6
Cierre de Asignatura
Desarrollo 1 ítem 10 puntos
Desarrollo 1 ítem 10 puntos
2
Total 20 Preguntas 20 puntos
5 Preguntas 15 puntos
6 Preguntas6 puntos
5 Preguntas 30 puntos
1 Pregunta 10 puntos
8 Preguntas 30 puntos
1 Pregunta10 puntos
46 preg.121 puntos
Tabla de Especificaciones
1. Conocimiento. Evocación por memo-rización o reconoci-miento de:
- Datos específicos.
- Modos de operar con los datos.
- Abstracciones.
Se pide, a través de señales o indica-ciones, reproducir la información adquiri-da y almacenada, casi en la misma forma en que se aprendió.
Esta categoría puede manifestarse a través de los siguientes comportamientos: nombrar, repetir, enu-merar, definir, descu-brir, identificar, reco-nocer, distinguir, anunciar e indicar.
2. Comprensión. Aprehensión del men-saje literal contenido en una comunicación pre-sentada en forma verbal, figurativa o simbólica. Este enten-dimiento implica hacer uso de los materiales o ideas que están siendo comunicadas, en forma de:
CATEGORÍAS PROCESO
PSICOLÓGICO
SITUACIONES PRESENTADAS AL
ESTUDIANTE
COMPORTAMIENTOS EVIDENCIADOS
TAXONOMÍA DEL DOMINIO COGNITIVO
2.1. TraducciónConversión del conoci-miento de la comunica-ción de un nivel de abstracción a otro de una forma verbal o simbólica a otra.
Transformando una idea abstracta en términos concretos, o una comunicación extensa en símbolos más sucintos o más abstractos.
Esta subcategoría puede manifestarse al: traducir, dominar, decir con sus pala-bras, transformar, representar, ilustrar, parafrasear, expresar, organizar.
2.2. Interpretación Reordenamiento de las ideas de una comuni-cación en una nueva configuración.
CATEGORÍAS PROCESO
PSICOLÓGICO
SITUACIONES PRESENTADAS AL
ESTUDIANTE
COMPORTAMIENTOS EVIDENCIADOS
Explicando o resu-miendo la comunica-ción; presentando el material, ya sea en una disposición o en un orden diferente, o bien, desde un nuevo punto de vista.
Comportamientos de esta subcategoría son: establecer, expli-car, demostrar, reor-ganizar, resumir, con-densar, abreviar...
Continuación...
2.3. Extrapolación. Determinación del al-cance, las secuencias, los corolarios, las influencias… de las condiciones descritas en la comunicación original.
Proyectando las ten-dencias o secuen-cias más allá de los datos entregados.
Comportamientos pro-pios de esta sub-categoría serían: pre-decir, estimular, antici-par, inferir, concluir, prever.
3. Aplicación. Utilización de las abstracciones apropia-das en situaciones nuevas, particulares y concretas (ideas gene-rales, reglas, procedi-mientos, principios, teo-rías).
CATEGORÍAS PROCESO
PSICOLÓGICO
SITUACIONES PRESENTADAS AL
ESTUDIANTE
COMPORTAMIENTOS EVIDENCIADOS
Se pide seleccionar, de la información que ya se posee, la adecuada para usar-se en la resolución de una situación problemática nueva.
En esta categoría los comportamientos aceptados son: ele-gir, emplear, usar, transferir, resolver, demostrar, reconocer, puntuar.
Continuación...
4.1. De elementos.
Jerarquía relativa de las ideas.
CATEGORÍAS PROCESO
PSICOLÓGICO
SITUACIONES PRESENTADAS AL
ESTUDIANTE
COMPORTAMIENTOS EVIDENCIADOS
Identificando elementos.
Comportamientos esperados: distinguir, identificar, discriminar, reconocer, clasificar, categorizar, determi-nar.
Continuación...
4. Análisis.Separación de los elementos o partes constitutivas de una comunicación tanto en el contenido como en la forma. Este fracciona-miento puede hacerse para determinar.
Se pide descubrir la organización y la estructura de una comunicación, ya sea:
4.2. De relaciones, reconocer, diferenciar.
Conexiones e interac-ciones entre las partes.
Determinando las conexiones e inter-acciones entre los elementos.
Comparar, contrastar, reconocer, diferenciar, relacionar.
4.3. De principios de organización.
Reunión de elementos para formar un todo nuevo. De acuerdo al producto elaborado, se distingue.
CATEGORÍAS PROCESO
PSICOLÓGICO
SITUACIONES PRESENTADAS AL
ESTUDIANTE
COMPORTAMIENTOS EVIDENCIADOS
Se pide reunir elementos de diver-sas fuentes y orga-nizarlos creativa-mente en una estructura nueva, que puede ser:
Continuación...
Configuración y estruc-tura que unifican la comunicación total.
Estableciendo los principios que orien-taron la organización lógica de una comu-nicación.
5.1. Producción de una comunicación.
Que intenta transmitir ideas, sentimientos y/o experiencias a los otros.
Una obra personal. Esta subcategoría se manifiesta en los siguientes comporta-mientos: escribir, narrar, relatar, pro-ducir, crear.
Distinguir, detectar, deducir, inferir, reco-nocer.
5. Síntesis.
5.2. Producción de un plan de acción.
Que intenta clasificar o explicar datos o fenó-menos específicos, o bien, deducir proposi-ciones de otras propo-siciones.
CATEGORÍAS PROCESO
PSICOLÓGICO
SITUACIONES PRESENTADAS AL
ESTUDIANTE
COMPORTAMIENTOS EVIDENCIADOS
Un set de generali-zaciones (hipótesis a ser verificadas o deducciones).
Continuación...
Que propone un conjunto de opera-ciones que satisface ciertos requisitos.
Un plan de trabajo.
6. Evaluación. Formulación de juicios de valor utilizando criterios, suministrados o no, sobre información más o menos nueva.
Se pide emitir juicios basándose en patro-nes de evaluación, que pueden ser:
Los comportamientos usualmente evidencia-dos en esta categoría son: juzgar, argumen-tar, validar, deducir.
Planificar, proponer, producir, proyectar, especificar.
5.3. Derivación de un conjunto de relaciones abstractas.
Producir, derivar, desa-rrollar, organizar, dedu-cir, formular.
6.1. Evidencia interna.
Se evalúa el material con referencia a criterios seleccionados o evocados.
CATEGORÍAS PROCESO
PSICOLÓGICO
SITUACIONES PRESENTADAS AL
ESTUDIANTE
COMPORTAMIENTOS EVIDENCIADOS
Continuación...
Se evalúa la exactitud de una comunicación a partir de evidencias tales como la precisión lógica, la coherencia y otras.
Propios de trabajo (lógica interna).
6.2. Criterios externos.
Juzgar, argumentar, considerar, comparar, contrastar, estandari-zar.
Externos a la comunicación
Establecer qué objetivos se evaluarán.
Determinar los contenidos relacionados.
Definir las habilidades que serán medidas.
Seleccionar aquellos reactivos que sirven a estos propósitos.
Elabore una Pauta de corrección para corregir las preguntas diseñadas
Construya la tabla de especificaciones para establecer balance
1
2
3
4
5
Taller Nº 1 Construcción de Reactivos
Estimados Docentes: En este taller nos ocuparemos de la construcción y validación de reactivos o preguntas, considerando los insumos obtenidos en los talleres anteriores, y para lo cual se hace necesario:
6
