UNNIIVVEERRSSIIDDAADD DDEE JJAAÉÉNN Vicerrectorado de ... · Otro objetivo secundario es contar con un banco de preguntas ... y tipología de preguntas en ambos exámenes será

UUNNIIVVEERRSSIIDDAADD DDEE JJAAÉÉNN

Vicerrectorado de Docencia y Profesorado Secretariado de Innovación Docente y Formación del Profesorado

MEMORIA FINAL DE PROYECTOS DE INNOVACIÓN DOCENTE

CONVOCATORIA CURSO 2010/2012

DATOS DEL/DE LA SOLICITANTE

Nombre ROBERTO

Apellidos GARCÍA RUIZ

D.N.I. 08915826 E-mail [email protected]

Centro FAC. CIENCIAS EXPERIMENTALES Teléfono 953212668

Departamento BIOLOGÍA ANIMAL, BIOLOGÍA VEGETAL Y ECOLOGÍA

Categoría CATEDRÁTICO DE ECOLOGÍA

DATOS DEL PROYECTO

Título Nueva tecnologías aplicadas a la evaluación del alumnado.

Determinación del grado de correspondencia entre la evaluación de

pruebas escritas presenciales y no presenciales en asignaturas con

distintas tipologías de evaluación

Línea de actuación Proyecto para asignaturas

Departamento/s implicados Biología Animal, Biología Vegetal y Ecología

y Ciencas de la salud.

Asignatura/s implicada/s Evaluación de Impacto Ambiental y

Anatomía Humana.

Titulación/Grado implicado/s Licenciatura en Ciencias Ambientales y

Grado de Enfermería

Curso/s implicado/s 1 y 3 curso

Nº de alumnos afectados 137



MEMORIA DEL PROYECTO

Justificación



La presencia de los contenidos, tanto teórico como prácticos, de las distintas asignaturas en los

espacios de la plataforma Ilias, ha supuesto la posibilidad, por parte del alumnado, de prepararse las

asignaturas sin necesidad de desplazarse a las aulas. Por otro lado, parte de los alumnados de

distintas asignaturas, por ejemplo Ecología de la titulación de Ciencias Ambientales y Anatomía

Humana de los grados de Enfermería y de Fisioterapia, nos han manifestado la dificultad e incluso

imposibilidad de poder asistir a parte de las pruebas escritas que evalúan el grado de conocimiento

adquirido. Ante un escenario probable que posibilite realizar las pruebas escritas a distancia, es

esencial contar de herramientas para ello y, sobre todo, evaluar comparativamente la precisión y

exactitud de las mismas y los posibles incidencias. La plataforma Ilias proporciona un junto de

herramientas para tal fin.

Objetivos conseguidos



El principal objetivo del proyecto de innovación fue probar la precisión y exactitud de pruebas escritas

no presenciales, así como caracterizar la tipología de posibles incidencias (falta de conexión a la red,

nivel de manejo de la plataforma Ilias por parte del alumnado..). Este objetivo se desarrollaró en

asignaturas con una tipología de pruebas escritas contrastada, para que los resultados y las

conclusiones del proyecto de innovación sean robustos. El tipo de prueba escriba en la asignatura de

Anatomía Humana consiste, generalmente, en preguntas de tipo test, mientras que en la de Ecología

son preguntas cortas de razonamiento. Otro objetivo secundario es contar con un banco de preguntas

disponibles para el alumnado, que pueda servir de base para autoevaluaciones por parte de los

mismos.

Los objetivos previstos se han cumplido (véase resultados).

Contenidos desarrollados



Para testar el grado de correspondencia entre las calificaciones obtenidas en exámenes no

presenciales con aquello presenciales, se realizaran a los alumnos matriculados en sendas asignaturas

un examen no presencial, dos días antes de la convocatoria de los exámenes presenciales. El número

y tipología de preguntas en ambos exámenes será muy similar aunque las preguntas serán distintas.

Los exámenes no presenciales se realizarán en un tiempo determinado y se harán a través de la

plataforma Ilias, previo aviso a los alumnos. La posibilidad de que las respuestas a las preguntas no se

deriven del grado de aprendizaje de los contenidos de las asignaturas, se reducirá a través de la

aplicación de herramientas contenidas en la plataforma para tal fin. Las calificaciones obtenidas en las

pruebas no presenciales por parte de los alumnos las recibirán los profesores implicados

inmediatamente. Éstas se relacionarán a través de pruebas estadísticas (correlaciones de Pearson,

modelos de regresión lineal, t-student..) con aquellas obtenidas en las pruebas escritas presenciales.

Se compararán las calificaciones obtenidas en ambos tipos de pruebas para un mismo alumno, para el

conjunto de alumnos de una misma asignatura, y entre asignaturas. Por otra parte, se caracterizan y

cuantificará las incidencias encontradas durante el desarrollo de la prueba escrita.



Descripción global de la experiencia



La creación de espacios virtuales en las Universidades españolas ha supuesto un instrumento

fundamental para el profesorado, permitiendo a su vez que los alumnos puedan acceder al contenido

de las asignaturas sin necesidad de desplazarse a las aulas. Una de las herramientas que dichas

plataformas ponen al servicio del usuario es la posibilidad de realizar exámenes “online”. Este tipo de

exámenes presentan ciertas ventajas como la reducción de costos y mejoran la calidad y la velocidad

del proceso de corrección. El principal objetivo de este estudio fue probar la precisión y exactitud de

pruebas escritas no presenciales, así como caracterizar la tipología de posibles incidencias que este

método de examen puedan causar al alumnado.

Para este estudio se emplearon las herramientas presentes en la plataforma llias de la Universidad de

Jaén. La plataforma Ilias mostró al profesor la calificación obtenida por los alumnos inmediatamente

después de finalizar la prueba escrita no presencial y se registraron todas las incidencias. El grado de

correspondencia en las calificaciones obtenidas entre el método de examen tradicional y las pruebas

online se determinó mediante un análisis estadístico. También se valoró mediante una encuesta el

grado de satisfacción de los alumnos.



Metodología empleada

(sesiones de trabajo, actividades, recursos didácticos, cronograma, etc)

Se emplearán las herramientas presentes en la plataforma Illias de la Universidad de Jaén. La

asignaturas objeto de este proyecto de Innovación Docente tienen un espacio de la plataforma

presentándose los contenidos teóricos de la misma. En concreto se confeccionarán un banco de

preguntas para cada asignatura. Las preguntas consistirán en: a) Preguntas de opción múltiple y de

respuesta múltiple, b) Preguntas de opción múltiple con respuesta única, c) Detección de errores

contenidos en un texto, d) Preguntas de entrada numérica, e) Preguntas consistentes en el envío de

archivos, f) Preguntas de ordenación horizontal, g) Preguntas de ordenación vertical, h) Preguntas de

relleno de huecos, i) Preguntas de respuestas cortas, j) Preguntas de selección de conjuntos, k)

Preguntas de unión de parejas y l) Mapa de imagen. Se seleccionaran para cada tema la tipología de

preguntas más aptas para los mismos.

Las preguntas del examen “online” se barajaron al azar para cada alumno, se presentaron

individualmente y de forma progresiva y se dió un tiempo limitado, y dependiente de la pregunta en

cuestión, para su resolución. No se permitió un tiempo de inactividad superior al límite de respuesta de

una pregunta. Se registró el momento exacto de inicio del examen para cada alumno para evitar

coincidencias en el mismo.

Por último, se realizó, a través de la plataforma Ilias de la Universidad de Jaén, una encuesta que

informe del grado de satisfacción en la idoneidad de la prueba escrita no presencial por parte del

alumnado.

Para testar el grado de correspondencia entre las calificaciones obtenidas en exámenes con soporte

informático con aquello presenciales tradicionales, se ha comparado entre una prueba escrita de

alumnos de el mismo curso de un año anterior, con una realizada con soporte informático a los alumnos

matriculados en las mismas asignaturas en un curso posterior. Las calificaciones obtenidas en las

pruebas “online” por parte de los alumnos las recibirán los profesores implicados inmediatamente. Éstas

se relacionarán a través de pruebas estadísticas con aquellas obtenidas en las pruebas escritas

tradicionales. Se comparó las calificaciones obtenidas en ambos tipos de pruebas para el conjunto de

alumnos de una misma asignatura, y entre asignaturas. Por otra parte, se caracterizaron y cuantificaron

las incidencias encontradas durante el desarrollo de la prueba escrita.



Resultados obtenidos

(los materiales o documentos que se hayan producido en la experiencia deben

presentarse en forma de anexo)



(Figuras en anexo adjunto)

Las calificaciones obtenidas por los alumnos tanto en Evaluación de Impacto Ambiental como en

Anatomía Humana fueron significativamente superiores cuándo se utilizó la plataforma Ilias en

comparación con la tipología tradicional de examen (Figura 1).

La Figura 1 muestra el promedio y el rango de variación en la calificación obtenidas por los alumnos

en las dos tipologías de exámenes. Las diferencias fueron más acusadas para Anatomía Humana; el

conjunto de los alumnos obtuvieron en promedio una calificación de 8.3 y 6.3 cuándo el examen se

realizó a través de la plataforma y tradicional, respectivamente con un 1.5 % y 22.8 % de suspensos,

respectivamente.

El grado de satisfacción del alumno con el examen a través de la plataforma fue elevado, tanto para

Anatomía Humana como para Evaluación de Impacto Ambiental (Figura 2). En promedio los alumnos

calificaron como buena la opinión que le merece el tipo de examen en la plataforma, la facilidad de

manejo de la aplicación y la idoneidad de este tipo de examen para sendas asignatura. Sin embargo, un

elevado número de alumnos expresaron cierto grado de nerviosismo y estrés durante la realización del

examen.

Con el examen en la plataforma el tiempo dedicado a la selección de la tipología de preguntas y su

edición fue muy superior cuándo el examen fue en la plataforma y eso fue así independientemente del

tipo de asignatura (Figura 3). Sin embargo, hubo una reducción notable del tiempo dedicado a la

corrección del mismo. Teniendo en cuenta que la corrección del examen tradicional presencial acapara

más del 50 % del tiempo, el examen a través de la plataforma llevó una reducción de entre 40 y 27 %

de la dedicación del profesor en el conjunto de tareas relacionadas con el examen.

Por últimos los costos económicos variaron entre una media de 20 euros en reprografía, si se realiza un

examen tradicional en papel, a coste cero si se realiza utilizando soporte informático.

Hay que destacar también que 2 alumnos de la asignatura de Evaluación de Impacto Ambiental

accedieron informáticamente a las respuestas de los exámenes y por tanto obtuvieron la máxima

calificación en sendos exámenes parciales. Otra incidencias incluyeron la falta de conexión en el

periodo de tiempo señalado o interrupciones en la conexión, limitando enormemente el posible uso de

estas tecnologías en exámenes presenciales.



Proyección e Impacto

(transferencia de los resultados y mejoras en el aprendizaje demostrables)



Teniendo en cuenta que este proyecto de innovación docente iba dirigido a la evaluación, no hubo

mejoras demostrables en el proceso de aprendizaje.

Los resultados se han presentando en un congreso internacional (IX Jornadas Internacionales de

Innovación Universitaria) y se está en preparación para enviarlos en una revista de innovación docente.



Evaluación del proceso y Autoevaluación

(instrumentos y recursos empleados)

La evaluación del proceso se realizó a través de una encuesta realizada a los alumnos relativas al

grado de satisfacción de los mismos y la adecuación de pruebas no presenciales a través de la

plataforma Ilias. Los resultados se recogen en la siguiente figura.

Figura 2. Resultado promedio

de las encuestas (0; muy malo,

inapropiado o peor. 5; muy

bueno, apropiado o mejor)

sobre distintos aspectos

relacionados con el grado de

satisfacción del examen en la

plataforma efectuadas a los

alumnos de Anatomía Humana

(a) (n = 64) y Evaluación de

Impacto Ambiental (b) (n =

32).

Otras consideraciones



Gastos generados en el segundo año

Fungibles

Inventariables

Viajes/Actividades Asistencia al IX Jornada Internacional de Innovación

Universitaria.

Otros

Justificación

Presentación de comunicaciones orales y tipo póster de

los resultados del proyecto de innovación docente.

Transferencia de resultados

DATOS DE LOS MIEMBROS DEL GRUPO

Nombre MACARENA

Apellidos PERÁN QUESADA

D.N.I. 33372492K E-mail [email protected]

Centro FACUL. CIENCIAS

EXPERIMENTALES

Teléfono 8 29 21

Departamento CIENCIAS DE LA SALUD

Asignatura impartida ANATOMÍA HUMANA

Curso 1º

Categoría PROFESOR TITULAR Firma

P.O.

(Añadir tantas tablas como participantes en el Proyecto)




Nombre ELENA

Apellidos LÓPEZ GARCÍA

D.N.I. 77344539-T E-mail [email protected]


EXPERIMENTALES

Teléfono 8 29 21



Curso 1º

Categoría Becario FPDI

(Prof ayudante)

Firma

P.O.


Nombre ALBERTO

Apellidos RAMIREZ RIVERA

D.N.I. 33372492K E-mail [email protected]


EXPERIMENTALES

Teléfono 8 29 21



Curso 1º

Categoría Becario FPDI

(Prof ayudante)

Firma

P.O.

VºBº de Coordinador/a

Fdo.:

Jaén, a 31 de AGOSTO de 2012

VICERRECTOR DE DOCENCIA Y PROFESORADO DE LA UNIVERSIDAD DE JAÉN



ANEXO

Figura 1. Frecuencia (%) en la que

los alumnos de Evaluación de Impacto

Ambiental (a) y Anatomía Humana (b)

obtuvieron las distintas calificaciones

cuándo el examen se realizó de forma

tradicional y presencial (rojo) y a través de

la plataforma Ilias. En ambas asignaturas

las calificaciones obtenidas de forma

presencial fueron significativamente

inferiores a aquellas obtenidas con la

plataforma (t student, = 0.05).



Figura 2. Resultado promedio de las encuestas (0; muy malo, inapropiado o peor. 5; muy

bueno, apropiado o mejor) sobre distintos aspectos relacionados con el grado de satisfacción del

examen en la plataforma efectuadas a los alumnos de Anatomía Humana (a) (n = 64) y

Evaluación de Impacto Ambiental (b) (n = 32).



Figura 3. Tiempo empleado por el profesor en las distintas tareas relacionadas con el

examen en las asignaturas de Anatomía Humana y Evaluación de Impacto Ambiental en las

modalidades de examen presencial y a través de la plataforma.

Documents

UNNIIVVEERRSSIIDDAADD DDEE JJAAÉÉNN Vicerrectorado de ... · Otro objetivo secundario es contar con un banco de preguntas ... y tipología de preguntas en ambos exámenes será