70

Rev Cubana Med Gen Integr 1998;14(6):565-

EL EXAMEN ESTATAL ESCRITO EN LA ESPECIALIDADDE MEDICINA GENERAL INTEGRAL

Dr. Israel Díaz Roig,1 Lic. Viviana González de la Cruz2 y Dr. Conrado Ramírez Cruz3

RESUMEN:RESUMEN:RESUMEN:RESUMEN:RESUMEN: Se realizó un análisis de las respuestas a las 12 preguntas del Examen EstatalNacional Escrito de Medicina General Integral, aplicado a una muestra de 32 residentes de laprovincia de Sancti Spíritus, con el objetivo de valorar el instrumento utilizado. Aprobó el 75 % de lospresentados y el 81,2 % no rebasó los 79 puntos. El tema que mejor respondieron fue el de Acciden-tes en el Hogar, con el 96,9 % y el peor fue Familia, con el 90,6 % de las respuestas incorrectas. Alcalcularse el grado de dificultad de las preguntas se catalogó de muy difícil la pregunta de Familiay muy fácil la de Accidentes. El 58,3 % de las preguntas permitió distinguir entre «buenos» y «malos»alumnos. Se concluye que la promoción fue aceptable, pero de pobre calidad, que el grado dedificultad de las preguntas tuvo adecuado balance y que la tercera parte de éstas discriminaron malo no lo hicieron.

Descriptores DeCS: EVALUACION EDUCACIONAL/métodos; MEDICINA FAMILIAR.

ason

s seáconcidro

titu di-

uee eos

losbje

ónrio, lasan.sta-en-uero-

-ión

rico.e-

de de

En el ámbito de las ciencias médiclos exámenes implican una enorme respsabilidad social, ya que a través de elloreconoce y autoriza una determinada prtica profesional, vinculada directamente cla salud de las personas. Está reconoque la evaluación es parte esencial del pceso de enseñanza-aprendizaje y consye una vía de retroalimentación para surección y para el propio estudiante.1,2

Los exámenes son instrumentos qpermiten a los docentes informarse sobraprendizaje que han logrado sus alumnÉstos con frecuencia consideran queexámenes son capciosos, confusos, su

5656565656

-

-

o--

l.

-

tivos y arbitrarios, por lo que la confeccide exámenes que serían todo lo contraes un desafío que tienen los docentes yinstituciones de salud donde ellos labor

En el régimen de Residencias se eblecen 3 tipos de evaluación en dependcia de su propósito y del momento en qse producen: evaluación de curso, de pmoción y de graduación.3 Uno de los componentes de la evaluación de graduaces el examen estatal, cuyo ejercicio teópuede realizarse de forma oral o escrita3

En la especialidad de Medicina Genral Integral (MGI) hasta la convocatoria exámenes del período octubre-diciembre

s. Sancti

píritus.

1 Especialista de I Grado en Medicina General Integral. Instructor. Facultad de Ciencias MédicaSpíritus.

2 Licenciada en Sociología. Profesora Auxiliar. Facultad de Ciencias Médicas. Sancti Spíritus.3 Especialista de II Grado en Higiene. Profesor Auxiliar. Facultad de Ciencias Médicas. Sancti S

55555

or-nte

ora-er-onlos asora-pa-osio

nes ha endadsterteso

e-n lac-ezna-ra losul-s-

stente los

quelas

es-n euee lam- el

la-que En difi-

ifi-uje-yor

rrec-ta.

as

te

estes

testes

cri-tin-, sequerue-

1995, el ejercicio teórico se efectuó de fma oral, método más usado especialmeen la Enseñanza Superior. Las pruebas les presentan inconvenientes, por la intvención de variables no relacionadas clo que se quiere evaluar: la influencia de resultados anteriores del estudiante, supecto físico y dominio del lenguaje. Pparte del docente, puede influir su simptía, el estado anímico, el cansancio, la cacidad de atención a las respuestas, la pbilidad de juicio crítico, etcétera. Por todello, se ha reconocido que los exámeorales son poco objetivos, por lo que setrabajado para instaurar la forma escritalos exámenes teóricos, en la especialide MGI. Confeccionar un examen de etipo requiere de un gran esfuerzo por pade los docentes, con un trabajo meticuloy ordenado.

Desde el curso 1994-1995, los exámnes de promoción se hicieron escritos eprovincia Sacti Spíritus y en el período otubre-diciembre de 1996 se efectuó por vprimera el examen estatal con carácter cional, de forma escrita y simultánea patodo el país, pero sólo a una muestra deresidentes de MGI. El análisis de los restados provinciales y la evaluación del intrumento utilizado, es el propósito de etrabajo, teniendo en cuenta que actualmeesta práctica se ha generalizado a todosresidentes de esta especialidad médica,es por cierto, la de mayor matrícula de que se cursan en el país.

MétodosMétodosMétodosMétodosMétodos

Se procedió al análisis de las resputas a las 12 preguntas que conformabaexamen nacional escrito de MGI, el cual faplicado a 32 residentes espirituanos despecialidad, en el período octubre-diciebre de 1996. La selección se realizó ennivel central del MINSAP.

566566566566566

-

-

l

Se efectuó la calificación según la cve elaborada por la comisión nacional confeccionó el instrumento evaluativo.cada pregunta se analizó su grado decultad y su poder de discriminación.

GRADO DE DIFICULTAD DE UNAPREGUNTA

Se calcula a través del índice de dcultad, que expresa la proporción de stos que respondió correctamente. A macantidad de sujetos que respondan cotamente, menos dificultad de la pregun

Se calcula: c p = x 100 n

Donde p: índice de dificultadc: cantidad de respuestas correctn: total de examinados

Se utilizó el siguiente criterio:

Pregunta X Si la respondieron correctamen

Muy difícil Del 0 al 15 % de los estudiantRelativamenteDel 16 al 31 % de los estudiandifícilDificultadmedia Del 32 al 68 % de los estudianRelativamenteDel 69 al 84 % de los estudianfácilMuy fácil Del 85 al 100 % de los estudiantes

PODER DE DISCRIMINACIÓN

Se calcula a través del índice de disminación, que da la posibilidad de disguir entre los alumnos buenos y malosconsidera como buenos los alumnos obtienen los puntajes más altos en la pba y viceversa.

c-

r edepo

uey eos

tom-c-

la

sdelo-

sco-

m-

por deaje al

ue-tabaite-tescir,andu-fi- los

-

ra-mi-ndoor 2ro-

noso yul-

n-ide- de

nsi-res-

Se calcula: C

s - C

i

I.D = x 100 n 2

Donde I.D: índice de discriminaciónC

s: cantidad de respuestas co-

rrectas en el grupo superiorC

i: cantidad de respuestas corre

tas en el grupo inferiorn: total de examinados

Para determinar los grupos superioinferior, se ordenan las calificaciones forma descendente, se determina el grusuperior, por la mitad de los alumnos qobtuvo en la prueba puntajes más altos grupo inferior, por la mitad de los alumnque obtuvo los puntajes más bajos.

Se utilizó el siguiente criterio:

PREGUNTAS CON DISCRIMINACIÓNPOSITIVA

Discrimina bien entre alumnos de aly bajo rendimiento; si la mayoría de los alunos del grupo superior la respondió corretamente y la mayoría del grupo inferior respondió mal.

PREGUNTAS CON DISCRIMINACIÓNNEGATIVA

Discrimina mal entre buenos y maloalumnos; si la mayoría de los alumnos grupo superior la respondió mal y la mayría del grupo inferior la respondió bien.

PREGUNTAS CON DISCRIMINACIÓNNULA

No discrimina entre buenos y maloalumnos, la pregunta es respondida

5656565656

l

rrectamente por un número similar de alunos del grupo superior e inferior.

ResultadosResultadosResultadosResultadosResultados

Dado que los residentes se regían el antiguo reglamento para el régimenresidencias (Resolución No. 196), el puntmínimo para aprobar era de 75 puntoscalificar el examen sobre 100 puntos. Lgo, el aprobado para cada pregunta esdado por el 75 % de su valor. Con este crrio aprobaron el 75 % de los estudianpresentados, por lo cual podemos desegún los criterios que se manejnacionalmente, que el proceso docente ecativo en la provincia no es del todo eciente pues no aprobó más del 90 % depresentados (tabla 1).

TABLA 1. Resultados finales. Examen Estatal Nacional Escrito de MGI Sancti Spíritus.Diciembre 1996

Resultados No. %

Aprobados 24 75,0Suspensos 8 25,0

Total 32 100,0

Sin embargo, en la tabla 2, encontmos que algo más de la mitad de los exanados no rebasaron los 79 puntos, siela nota más alta 88, que fue alcanzada pestudiantes. Luego, el 81,2 % de los apbados, lograron esta condición con mede 80 puntos, por lo que, a nuestro juicisegún criterios establecidos, hubo difictades con la calidad de la promoción.

En primer lugar, calculamos la frecuecia de errores en cada pregunta, consrando correcta, a la que obtuvo más del 75 %su valor (tabla 3). O sea, que puede coderarse correcta y tener una parte con puestas erróneas.

77777

m-ci-

dos

do,e-a-dosm-

deuyteeo-sifi-n elbe-n-ia.óntasloss lanóam-del

-

-tu-os

aser-mi-resuedi-e-naifi-orian-

Se evidenció que casi todos (31 alunos) respondieron bien la pregunta acdentes en el hogar, al igual que casi to(29 alumnos) respondieron mal la de familia.

Quedaron entre las de mejor resultaEDA, diabetes mellitus, TB pulmonar, crcimiento y desarrollo y diagnóstico de slud. Por otra parte las de peores resultafueron las de cáncer de mama, HTA y ebarazo, IMA, rehabilitación y ETS.

Cuando se calcularon los índices dificultad (tabla 4). Se cataloga como mdifícil la pregunta de familia y relativamendifícil la de cáncer de mama (ambas de pres resultados). Por su parte quedó clacada como muy fácil la de accidentes ehogar y relativamente fáciles las de diates mellitus y EDA. Las 7 restantes pregutas se clasificaron como de dificultad med

Según los índices de discriminacicalculados (tablas 5 y 6), 8 de 12 pregundel examen, discriminaron bien, o sea, buenos la respondieron bien y los malorespondieron mal. La que mejor discrimifue la de accidentes en el hogar, que tbién resultó ser la pregunta más fácil examen.

568568568568568

TABLA 2 . Residentes según calificación obtenidas. Examen Estatal Nacional de MGISancti Spíritus. Diciembre 1996

Puntajes No. %

Menos de 75 8 25,0De 75 a 79 18 56,2De 80 a 84 2 6,3De 85 a 89 4 12,5

Total 32 100,0

Las de rehabilitación e IMA no discriminaron entre buenos y malos esdiantes, que habían sido catalogadcomo dificultad media, mientras que lpreguntas de diabetes mellitus y enfmedades de transmisión sexual discrinaron mal, por lo que deben tener errometodológicos en su confección. La qpeor discrimina es la de ETS y fue de ficultad media. Sin embargo, la de diabtes mellitus , que tampoco fue una buepregunta metodológicamente, se clascó como (relativamente fácil), quizás pese mismo hecho casi todos los estudtes la respondieron correctamente.

cti

TABLA 3. Frecuencia de errores en el examen. Examen Estatal Nacional Escrito de MGI SanSpíritus. Diciembre 1996

Respuestas Correctas IncorrectasPregunta Contenidos No. % No. %

1 TB pulmonar 18 56,2 14 43,82 Rehabilitación 15 46,9 17 53,13 HTA en el embarazo 12 37,5 20 62,54 Accidentes en el hogar 31 96,9 1 3,15 Diabetes mellitus 25 78,1 7 21,96 ETS 15 46,9 17 53,17 Diagnóstico de salud 16 50,0 16 50,08 Cáncer de mama 7 21,9 25 78,19 EDA 27 84,4 5 15,610 IMA 12 37,5 20 62,511 Familia 3 9,4 29 90,612 Crecimiento y desarrollo 18 56,2 14 43,8

i

I

ación

e

A,

TABLA 4. Índice de dificultad de las preguntas. Examen Estatal Nacional Escrito de MGI SanctSpíritus. Diciembre 1996

Pregunta Contenido Índice de dificultad % Grado de dificultad

1 TB pulmonar 56,3 media2 Rehabilitación 46,9 media3 HTA en el embarazo 37,5 media4 Accidentes en hogar 96,9 muy fácil5 DM 78,1 relativamente fácil6 ETS 46,9 media7 Diagnóstico de salud 50,0 media8 Cáncer de mama 21,9 relativamente difícil9 EDA 84,4 relativamente fácil10 IMA 37,5 media11 Familia 9,4 muy difícil12 Crecimiento y desarrollo 56,3 media

TABLA 5. Índices de discriminación de las preguntas. Examen Estatal Nacional Escrito de MGSancti Spíritus. Diciembre 1996

Pregunta Contenido Índice de discriminación Poder de discrimin

1 TB pulmonar 25,0 bien2 Rehabilitación 0,0 no3 HTA en el embarazo 6,3 bien4 Accidentes en el hogar 81,3 bien5 DM 6,3 mal6 ETS 12,5 mal7 Diagnóstico salud 25,0 bien8 Cáncer de mama 31,3 bien9 EDA 31,3 bien10 IMA 0,0 no11 Familia 18,8 bien12 Crecimiento y desarrollo 25,0 bien

TABLA 6 . Preguntas según su poder de discriminación. Examen Estatal Nacional Escrito dMGI Sancti Spíritus. Diciembre 1996

Cantidad PreguntasPoder de discriminación No. % Contenidos

Discriminación positiva 8 58,3 TB Pulmonar, Accidentes en el Hogar,Diagnóstico, salud, Cáncer de mama, EDFamilia, Crecimiento y Desarrollo, HTAEmbarazada

Discriminación nula 2 16,7 Rehabilitación, IMADiscriminación negativa 2 25,0 DM, ETS

Total 12 100,0

569569569569569

laran

asba-

vo

re-ia,zo,

cri-losos.

ConclusionesConclusionesConclusionesConclusionesConclusiones

1. Si bien la promoción fue aceptable,calidad de ésta fue pobre, pues una gmayoría obtuvo bajas calificaciones.

2. En cuanto al grado de dificultad de lpreguntas, el examen tuvo adecuado

570570570570570

óna-enor.

a-

lance, pues una mayoría de ellas tudificultad media.

3. Los temas menos dominados por lossidentes examinados fueron: familcáncer de mama, HTA en el embaraIMA, rehabilitación y ETS.

4. La tercera parte de las preguntas disminaban mal o no lo hacían, entre alumnos de mejores y peores resultad

SUMMARY:SUMMARY:SUMMARY:SUMMARY:SUMMARY: The answers given to the 12 questions included in the National State WrittenTest of General Comprehensive Medicine by 32 residents of this speciality in Sancti Spiritus wereanalyzed aimed at assessing the used instrument. 75 % of them passed, whereas 81.2 % did not getmore than 79 points. Home accidents was the best answered topic with 96.9 % and Family was theworst with 90.6 % of wrong answers. On calculating the difficulty degree of the questions, thequestion concerning Family was considered as very difficult, and that regarding Accidents as veryeasy. 58.3 % of the questions allowed to distinguish «good» student from «bad» students. It wasconcluded that the promotion was acceptable, but of poor quality, that the difficulty degree of thequestions had an adequate balance, and that the third part of them were wrongly answered or notresponded.

Subject headings: EDUCATIONAL MEASUREMEMNT/ methods; FAMILY PRACTICE.

ri-a-

de

sos

Referencias BibliográficasReferencias BibliográficasReferencias BibliográficasReferencias BibliográficasReferencias Bibliográficas

1. Cuba. Ministerio de Salud Pública. ResoluciMinisterial No.15. Reglamento para la orgnización del proceso docente educativo los centros de Educación Médica Superi1988.

2. . Resolución Ministerial No. 26. Reglmento del Régimen de Residencia. 1994.

3. Galli A, Castro C. Exámenes orales y esctos. Programa de Formación Docente-Pedgógica. Washington DC: OPS, 1992:

Recibido: 21 de mayo de 1998. Aprobado: 30 mayo de 1998.Dr. Israel Díaz Roig. Facultad de Ciencias Médicade Sancti Spíritus. Circunvalante Norte s/n OlivIII, Sancti Spíritus, Cuba.