Guía Prueba Numero 2

Embed Size (px)

Citation preview

  • 7/26/2019 Gua Prueba Numero 2

    1/25

    Gua prueba numero 2

    CONSTRUCCIN DE TESTS

    La primera tarea y una de las ms importantes a la hora de construir un

    test es la eleccin de los tems, previo acorde de los supuestos tericos que

    deben defnir el rasgo que el test pretenda medir.

    El concepto "Anlisis de items" hace reerencia al con!unto de aquellos

    procedimientos ormales que se llevan a cabo para seleccionar aquellos items

    que fnalmente ormarn el test. La inormacin que se considera ms

    relevante respecto a los items es

    a)Difcultad del tem porcenta!e de indi"iduo# $ue lo aciertan%

    b) Di#criminaci&n correlaci&n de cada tem con la puntuaci&n

    total #obre el te#t% c) Di#tractore# o an'li#i# de error #u in(uencia e# rele"ante

    aecta a la difcultad del item * +ace $ue #e #ube#timen lo# "alore#de di#criminaci&n.

    A la hora de establecer indicadores de los distintos ndices suele usarse

    unos e#tad#tico# o ndice#, siendo los siguientes los ms utili#ados

    ,ndice de difcultad

    ,ndice de di#criminaci&n

    ,ndice de fabilidad

    ,ndice de "alide-

    $onocidos los ndices que hay que tener en cuenta para la seleccin de los

    items que ormarn el test, vamos a ver qu% pasos son necesarios para

    la con#trucci&n de un te#t.

    &' Especifcacin del problema.

    (' Enunciar un amplio con!unto de tems y depurarlos.

    )' Eleccin del modelo *va a depender de los ob!etivos que persiga el test, delas caractersticas y calidad de los datos, y de aquellos recursos de que se

    dispone'.

    +' robar los tems preseleccionados.

    -' eleccionar los tems idneos.

  • 7/26/2019 Gua Prueba Numero 2

    2/25

    /' Estudiar las cualidades del test

    0' Establecer las norma de interpretacin del test fnal obtenido.

    .

    $uando se elige un modelo ya vienen dadas las condiciones tericas en las que

    se puede aplicar, no obstante sus virtudes hay que anali#arlas en cada caso y

    circunstancias concretas. Las propiedades atribuibles a aquellos modelos que

    integran la 1eora de la 2espuesta al 3tem *123', pueden verse aectadas por

    la dimensionalidad de la prueba

    la escasa disponibilidad de muestra

    alta de recursos inormticos

    /roce#o de operali-acion

    Es un proceso que se inicia con la defnicin de las variables en uncin deactores estrictamente medibles a los que se les llama indicadores.

    El proceso obliga a reali#ar una defnicin conceptual de la variablespara romper el concepto diuso que ella engloba y as darle sentido

    concreto dentro de la investigacin, luego en uncin de ello se

    procese a realizar la defnicin operacional de la misma para

    identifcar los indicadores que permitirn realizar su medicin de

    orma emprica y cuantitativa, al igual que cualitativamente llegado el

    caso.

    Es necesario determinar los parmetros de medicin a partir de los cualesse establecer la relacin de variables enunciadas por la hiptesis *o idea adeender'

    0ariable con#tituti"a constructo que se defne a trav%s de otrosconstructos e, se denomina tambi%n defnicin $onceptual

    La valide# de una variable depende sistemticamente del marco tericoque undamenta el problema y del cual se ha desprendido, y de su relacindirecta con la hiptesis *o idea a deender' que la respalda.

    Operali-acion 1te#t)

    0ariable operacional.procedimiento que se debe seguirse para medir *conun numero o no' y4o manipular una variable

    lo undamental5defnir el constructo * proceso de valides del contenido simiden lo que yo quiero que mida, anlisis de los tems.'

  • 7/26/2019 Gua Prueba Numero 2

    3/25

    0ariable dicot&mica. que poseen dos categoras * e!. hombre y mu!er'

    Recordatorio.

    0ariable Independiente

    6 E7plica, condiciona, o determina el cambio en los valores de lavariable dependiente.

    6 Act8a como actor condicionante de la variable dependiente

    6 e le llama tambi%n causal o e7perimental porque es manipuladapor el investigador.

    0ariable dependiente

    6 Es el enmeno o situacin e7plicado Es la variable que esaectada por la presencia o accin de la variable independiente.

    6 se llama tambi%n de eecto o accin condicionada

    Conceptuali-aci&n * elaboraci&n de reacti"o#

    6 revisin de literatura sobre pruebas ya e7istentes para medir elconstructo

    6 enmeno social o patrn de conducta nuevo un dominio o habilidad

    especifca.6 etc9

    Con#trucci&n de tem#

    $lasifcacin de los tipos de test

    :n test psicolgico constituye e#encialmente una medida ob!eti"a *tipifcada de una mue#tra de conducta%odemos afrmar entonces queproporciona una medida ob!etiva, de lo que se intenta medir, cuando

    6 E7iste uniormidad de criterios, a e!ecutar por todos los e7aminadores,

    en el proceso de aplicacin del test en lo reerente a consigna,condiciones generales de aplicacin, como son iluminacin, ventilacin,preparacin de los materiales necesarios, la orma de responder a laspreguntas de las personas e7aminadas, y todos los detalles de lasituacin de e7amen. Esto se conoce como tipifcaci&n en el proce#ode aplicaci&n de un te#t determinado% La tipifcacin incluyeadems, la velocidad con que se habla, las in;e7iones de la vo#, laspautas, la e7presin acial, etc.

  • 7/26/2019 Gua Prueba Numero 2

    4/25

    6 e mantiene el procedimiento tipifcado de califcaci&n e# decir#e otoran la# puntuacione# tal como e#t' pautado para dic+ote#t.

    6 La interpretacin de las puntuaciones son ob!etivas en cuanto sonindependientes del !uicio sub!etivo del e7aminador en particular. Es

    decir, el proceso de interpretacin esta igualmente tipifcadopara las dierentes puntuaciones del test, en relacin a lamuestra de conducta que el test mide. En ocasiones la tipifcacininterpretativa de la puntuacin incluye la consideracin de algunasvariables como la edad, el se7o, etc., ya que estas variables puedenintroducir dierencia# #inifcati"a# para la mue#tra de conducta$ue #e e#tudia%

    6 E3i#ten norma# tipifcada# de la conducta $ue el te#t intentamedir para la poblaci&n en la cual #e aplica el te#t lo $uepermite la interpretaci&n de lo# re#ultado# obtenido# por e#ein#trumento%

    4a norma es la actuacin media o normal del comportamiento en lapoblacin, de la variable o variables que el test mide. Sin norma# no e#po#ible interpretar la# puntuacione# del te#t% 4a puntuaci&n de unindi"iduo #&lo puede "alorar#e compar'ndola con la# obtenida# porotro#. orE!emplo

    Si los nios normales de 8 aos ejecutan correctamente 12 de los 50 temsde un determinado test de razonamiento aritmtico, entonces la norma en estetest, para los nios de 8 aos de edad, corresponde a una puntuacin de 12.La puntuacin ue o!tiene una persona en un test no tiene nin"una

    si"ni#cacin $asta ue se %alora en &uncin de un adecuado conjunto denormas'.

    ara que un test sea considerado como ob!eti"o< este procedimientoest basado en el grado de difcultad que alcan#an los tems del test o el testcompleto, es lo que se conoce como Medida objetiva de difcultad,y en base a esta medida de difcultad es que se puede realizar eltrabajo de dierenciacin de unas personas en relacin a otras y suubicacin, de acuerdo a la distribucin en una curva de normalidad,del rasgo que se mide con dicho test.

    =ormato de las respuestas

    Rendimiento &ptimo 1prueba# de rendimiento * de inteliencia'6 eleccin binaria6 eleccin m8ltiple6 empare!amiento6 redaccin de los tems

  • 7/26/2019 Gua Prueba Numero 2

    5/25

    Rendimiento tpico 1comportamiento ordinario de la# per#ona#)

    6 opcin binaria*acuerdo4desacuerdo' * or#ar a la persona a responder'6 categoras ordenadas *- a 0 cat' * escalas de li>er'6 ad!etivos bipolares *alegra???triste'

    iempre hay que pensar que es lo ms adecuado por el su!eto al momento decontestar la prueba.

    Reacti"o# en ba#e a rendimiento optimo 1prueba# reerida# a norma#)

    @uen reactivo6 aquel que es acertado por quienes obtienen puntuaciones altas en la

    prueba.6 quienes obtienen puntaciones ba!as , tienden a responderlo

    incorrectamente.

    Reacti"o# en ba#e a rendimiento tpico 1prueba# reerida# a uncriterio)

    6 el sentido es discriminar si se tiene o no el criterio * e7perto encomputacin , etc.', por lo tanto la discriminacin tiene otrainterpretacin

    6 implica un estudio con al menos ( grupos en que se puede discriminarel criterio * saber programar dos o no' y esto determina cuales son losreactivos apropiados

    E#tudio piloto

    6 investigacin preliminar que rodea la creacin de una prueba6 se intenta determinar cmo medir el constructo de la me!or orma6 det. caractersticas de quienes poseen distintos niveles del atributo6 verifcacin por medios indirectos de caractersticas tiene los su!etos.

    Con#trucci&n de la prueba 1ormato de re#pue#ta e# lo $ue da launidad de medici&n)

    6 las escalas son reglas de medicin que aplicamos6 la elaboracin de escalas implica reglas para la asignacin num%rica6 diseo y calibracin del instrumento, y la orma en que se asigna

    * niveles de medida'

    E#cala#

  • 7/26/2019 Gua Prueba Numero 2

    6/25

    6 instrumento utili#ados para medir un rasgo caracterstica o atributos6 las escalas son m%todos de medicin , sean estas nominales , ordinales,

    de intervalo o de ra#n6 dependen del ob. de la escala generalmente representa mayor o menor

    cantidad de un atributo, en uncin de la puntuacin en la prueba.

    E#cala de tem# tipo li5ert

    la escala de li>ert nos permite hacer una e7ploracin y conocer lasdierencias de un polo a otro, las li>ert son ordinarias, pero para nosotros esuna medicin de intervalos, ya que nos permite sumarlas, promediarlas desacar de ms a menos.

    Escala de estimacin

    & ( ) + -

    Bunca 2ara ve# A veces $asi siempre iempre

    odemos utili#ar el tem Li>ert para medir dierentes actitudes de un

    encuestado. or e!emplo, podemos emplearlo para descubrir

    El ni"el de acuerdocon una afrmacin.

    La recuenciacon la que se reali#a cierta actividad.

    El nivel de importanciaque se atribuye a un determinado actor.

    La "aloraci&nde un servicio, producto, o empresa.

    La probabilidadde reali#ar una accin utura.

    el tem ms utili#ado sea el de - niveles, pero tambi%n se utili#an de +, 0,o &C. Lo que sabemos es que aadir niveles redunda en la obtencin de unasvaloraciones ms diversas. or e!emplo, en un tem de solo - puntos, losencuestados suelen evitar las ( opciones e7tremas, obteniendo muy pocavariacin *es el conocido como central tendenc( !ias'.

    :na ve# terminado el cuestionario, cada tem puede ser anali#adoseparadamente o bien, en determinados casos, las respuestas de un con!untode tems Li>ert pueden sumarse y obtener un valor total. El valor asignado acada posicin es arbitrario y lo determinar el propio investigador4diseador dela encuesta. Dado este valor, podremos calcular la media, la mediana, o lamoda. La mediana y la moda son las m%tricas ms interesantes, dado quehacer una interpretacin de la media num%rica si mane!amos categoras comode acuerdoF o en desacuerdoF, no nos aportar mucha inormacin.

    http://survey.cvent.com/blog/market-research-design-tips-2/survey-research-definitions-central-tendency-biashttp://survey.cvent.com/blog/market-research-design-tips-2/survey-research-definitions-central-tendency-bias
  • 7/26/2019 Gua Prueba Numero 2

    7/25

    0enta!a# del tem 4i5ert

    Desde el punto de vista del diseo del cuestionario, es una

    escala 'cil de con#truir.

    Desde el punto de vista del encuestado, le orecemos la acilidad

    de poder raduar #u opini&nante afrmaciones comple!as.

    En 3nternet unciona especialmente bien es muy visual, el encuestado

    puede reali#ar comparaciones entre tems, as como modifcar y

    a!ustar su respuesta cilmente.

    Incon"eniente# del tem 4i5ert

    or un lado, dos personas pueden obtener el mi#mo "aloren la

    escala Li>ert, habiendo reali#ado elecciones dierentes.

    Es dicil tratar la# re#pue#ta# neutra#, del tipo ni de acuerdo ni

    en desacuerdoF.

    Los encuestados tienden a estar de acuerdo con las afrmaciones

    presentadas.

    :na buena escala de Li>ert debe #er #im6trica, es decir, debe tener el mismo

    n8mero de categoras positivas y negativas.

    tipos de escalas

    E#cala nominal

    e utili#a en todas aquellas modalidades o caractersticas en las que la 7nica

    comprobaci&n emprica $ue puede +acer#e e# la de iualdad o

    de#iualdad.

    Escala ordinal

    Los objetos pueden manifestar determinada caracterstica en mayor grado unos que otros. Ej. La dureza de

    los minerales.

    Escala de intervalos

    Permite establecer la igualdad o desigualdad de las diferencias enre las magnitudes de los objetods medidos.

    Ej. Termmetro, calendario.

    Escalas de razn

  • 7/26/2019 Gua Prueba Numero 2

    8/25

    Las escalas de intervalo sirven para medir caractersticas en las que el valor cero no significa ausencia de

    dica caracterstica.

    Los valores en una escala de razn tienen un valor absoluto, no arbitrario, o valor cero absoluto que s

    significa ausencia de caracterstica.

    Redacci&n de tem#

    Rendimiento optimo.

    6 la idea principal del tem debe estar en el enunciado * constructo,habilidad debe estar contenida en este punto'

    6 simplicidad del enunciado

    6 evitar los conocimiento e7cesivamente triviales o e7cesivamenterebuscados

    6 evitar dar inormacin irrelevantes en el enunciado6 evitar dar inicios sobre la solucin

    6 evitar cuestiones de opinin

    6 no encadenar unos tems de otros

    6 anticipar la di. e incluir preg. de todo rango de di.

    6 la di. no debe estar en la comprensin del tem

    6 mini. tiempo de lec.6 evitar el uso de neg. y errores gramaticales y ortogrfcos.

    /rueba# de rendimiento tpico

    6 utili#a el tiempo presente6 relevantes al rasgo evaluado6 contenido claro y simple

  • 7/26/2019 Gua Prueba Numero 2

    9/25

    6 evitar generali#acin que todo o nadie asume el contenido6 buscar actitudes , evitar hechos6 alterna punto. tems *ordenes respuesta inversas '6 evitar dobles negaciones * no , ninguno, nunca ' y universal * todo,

    siempre , nada '6 minimi#ar la posibilidad de la deseabilidad social * tems que presente

    imagen positiva solamente6 evitar e7ceder - cat. sufciente variabilidad

    Confabilidad. la medici&n concuerde con#io mi#mo loro medircontrolar

    6 preciso6 que se puede predecir cmo va a responder ante las situaciones6 estabilidad6 fabilidad6 predictible

    6 alta de distorsin/untuaci&n "erdadero la persona es reactiva ante el reactivo, y no poractores e7ternos que pasan a ser varian#a a de error, siendo que este valor sea mayor, y el segundo sea de C, como ideal siendo lo ms pequeo posible, yque el su!eto no conteste con estados alterados, ya que este solo debecontestar lo que est en el su!eto.

    Califcaci&n e interpretaci&n

    6 el califcado puede ser uente de varian#a de error, al obtenercalifcaciones sub!etivas inconsistentes entre los distintos evaluadores.

    6 esto va relacionado tambi%n con quien califca, ya que debe serconocedor del tema, si la persona es e7perta del tema se puede creasen el criterio.

  • 7/26/2019 Gua Prueba Numero 2

    10/25

    Estabilidad de la confabilidad temporal

    /re * po#t%prueba1te#t rete#t)cuando aplico un testen un tiempo uno ydespu%s en un tempo( mida lo que mida,siendo este estable, ydespu%s esas doscorrelaciono estasdos, en base a lamismas * correlacinde earson'* Gsemanas comomnimo el eecto dearrastre' difcultades,es la poblacincautiva.$uando se estamidiendo un rastro

    hay que estaconciente que es unestado que varie,pero debe estarconsistente

    $onfabilidad8orma# alterna# oe$ui"alente# delmismo instrumento

    obtengo dos ormas,lo que se busca esquee7ista una correlacinentre ambas.

    Con#i#tenciainterna

    6 di"i#i&n pormitade# es la

  • 7/26/2019 Gua Prueba Numero 2

    11/25

    versineconmica, elcuestionario quedivido lo partopor la mitad,

    buscando quee7ista una altacorrelacin entreestos.

    6 +omoeneidad.eval8a como eltem aporta amedir elconstructo, larelacion del tem

    con elconstructo,correlacion temtotal.

    6 9R:2; 1 cuandoel ormato dere#pue#ta e#dicot&mico)

  • 7/26/2019 Gua Prueba Numero 2

    12/25

    verdadero delsu!eto

    el >r6(C se tiene que sacar a mano, ya que en el spss no lo contempla. se refere al grado en que el test mide lo que pretende medir. Deigual orma e7isten varios procedimientos para determinar la valide# de untest

    los tres tipos de valides comunes

    ?)% 0alide- de contenido.0erifca $ue el te#t mide correctamenteel con#tructo o la dimen#i&n $ue tiene por ob!eti"o medir% e refere ale7amen sistemtico del contenido del test para determinar si comprende unamuestra representativa de la orma de conducta que ha de medirse.

    1ambi%n nos permite identifcar si el instrumento es una copia adecuada yrepresentativa de los contenidos que se pretenden evaluar con %l, al igual que

    no indica hasta qu% punto los tems del instrumento representan todas lasacetas de un concepto determinado

    e demuestra mediante e!pertos que los tems preguntan sobretodos los aspectos relevantes que se quiere evaluar.

    2)% 0alide# criterial.e7amina la correlacin entre el rendimiento en losresultados del test y un criterio de rendimiento e7terno

    e obtiene la correlacin entre el test y las valoraciones sobrehabilidad verbal realizado por unos proesores.

    @)% 0alide# de con#tructo. En qu% grado la escala mide el constructoinobservable que pretende medir El instrumento debe medir constructocompleto y nada ms que ese constructo

    e aplica anlisis actorial para determinar el agrupamiento de lostems.

    Htras valideces implcitas en la construccin de un test o cuestionario

  • 7/26/2019 Gua Prueba Numero 2

    13/25

    0alide# conceptual o te&rica. todo instrumento de medicin se undamentaen un concepto o modelo terico, que se comprueba para que los resultados seatengan al modelo.

    0alide- predicti"a. 3ndica la eectividad o el grado del test en la prediccin

    de alg8n resultado uturo.

    0alide- concurrente. La relacin entre las puntuaciones del test y los ndicesde status del criterio obtenido, apro7imadamente al mismo tiempo, se conocecomo valide# concurrente.

    0alide- de elaboraci&n o de +ip&te#i# de traba!o La valide# deelaboracin de un test es el grado en que este mide una elaboracin terica orasgo.

    0alide# de in#trumento. se refere al grado en que el instrumento mideaquello que pretende medir.

    CON8I=AI4ID=D.#inifca la e#tabilidad o con#i#tencia de lapuntuaci&n obtenida por una per#ona en dierente# momento# en$ue #e le apli$ue el mi#mo te#t%

    "ambi#n se refere al grado en que el instrumento arroja los mismosdatos $resultados% cuando se vuelve a medir la caracterstica ensituaciones similares, dando por hecho que el evento medido no hacambiado

    La confabilidad se refere a la e7actitud de la medicin. La confabilidad comounidad de probabilidad se e7presa en unidades que varan de cero a uno, en

    ning8n caso podr ser negativa. Entre ms se apro7ime a uno es ms confableel instrumento, es decir es ms preciso en la medicin de lo que se quieremedir

    6 4a e#tabilidad temporal 1confabilidad te#t rete#t) . indica elgrado en que las puntuaciones de un test quedan aectadas por las;uctuaciones diarias que se producen en el su!eto o en el ambiente enque se aplica el test. La estabilidad temporal de un test dependeparcialmente de la lonitud del inter"alo #obre el $ue #e mide%Algunos tests muestran elevada fabilidad tras perodos cortos, perocuando el intervalo de aplicacin se e7tiende en el tiempo se observauna alta casi absoluta de correspondencia entre las puntuaciones

    obtenidas en los dos momentos dierentes .En inter"alo# de tiempolaro# e# mu* po#ible $ue la# condicione# de "ida en la# cuale##e de#empeBa un #u!eto cambien al punto tal $ue #urendimiento en lo# te#t puede me!orar o empeorar en relaci&n a6l mi#mo o en comparaci&n con #u!eto# de #u mi#ma edad acau#a de circun#tancia# como pueden #er. de#arrollo de+abilidade# por al7n ofcio condicione# de #u +oar ocomunidad o por otra# ra-one# como una enermedad otra#torno emocional% 8actore# de e#te tipo +acen nece#ario

  • 7/26/2019 Gua Prueba Numero 2

    14/25

    reali-ar nue"a# e"aluacione# en per#ona# $ue *a uerone"aluada# con anterioridad%

    6 Confabilidad de la con#i#tencia interna del in#trumento. $ueindica en qu% medida los tems miden la misma dimensin, #e puede

    estimar con el ala de $ronbach y >r (C.

    Confabilidad del e3aminador para la aplicaci&n * la califcaci&n. Eneste sentido casi todos los tests proporcionan procedimientos tipifcados parasu aplicacin y puntuacin que permiten pensar que la fabilidad dele7aminador para la aplicacin y califcacin es alta a los fnes prcticos. Lo8nico a vigilar es asegurarse de que se sigue con cuidado los procedimientosprescritos. El problema reside en el control emprico de las condiciones ba!o lascuales el test debe ser aplicado

    Sen#ibilidad. hace reerencia al poder de discriminacin del test, o a la

    capacidad de distincin entre unos individuos y otros.

    4a de#eabilidad #ocial. La deseabilidad social es una tendencia que apareceen las evaluaciones y que re;e!a la predisposicin de una persona a responderde orma que sea vista de manera avorable por el resto.

    Los test se someten a un anlisis de la sensibilidad de los tems paracomprobar que el nivel de deseabilidad social es el mismo para cada una de lasdimensiones que se eval8an. Los tems de un test deben pasar un e7amen paragaranti#ar que no son sensibles a la deseabilidad social.

    Con#trucci&n de lo# tem#

    La construccin de los tems depende ms del ingenio e inspiracin delconstructor que de la aplicacin sistemtica de una tecnologa, confndolotodo a que los anlisis estadsticos a posteriori permitan detectar los temsinapropiado Aortunadamente esta flosoa ha ido cambiando y en laactualidad disponemos de traba!os y programas de investigacin centrados enla construccin rigurosa de los tems, varias son las ra#ones que han originadoeste cambio

    a' el predominio $ue +an tenido en lo# 7ltimo# aBo# lo# modelo# deTeora de Re#pue#ta a lo# ,tem#, colocando todo lo relacionado con el temcomo unidad bsica de medida en el centro del escenario psicom%trico

    b' la aparici&n de lo# Te#t# =daptati"o# Inormati-ado# , que e7igen laelaboracin continua de tems para reponer

    c' el ran de#arrollo de la# t6cnica# para detectar el uncionamientodierencial de lo# tem# $ue oblia a indaar con rior $u6 +ace $ueun tem uncione de dierente modo para di#tinta# poblacione#%

  • 7/26/2019 Gua Prueba Numero 2

    15/25

    d' la interacci&n entre lo# modelo# p#icom6trico# * la p#icoloaconiti"a, que lleva a construir con precisin los distintos componentes de lostems para poder anali#ar los procesos psicolgicos implicados en suresolucin.

    e' la irrupci&n de modelo# de e"aluaci&n alternati"o# a lo#

    con"encionale# tale# como la denominada e"aluaci&n aut6ntica, queha obligado a me!orar * !u#tifcar lo# tem# de lo# te#t# con"encionale# .Adems de estas ra#ones, la combinaci&n del ordenador con otro#medio# audio"i#uale# realidad "irtual e internet est abriendoposibilidades insospechadas en la coneccin de los tems.

    =ormatos para los tems

    /reunta# abierta# en las que el su!eto debe elaborar totalmente lo que sele plantea

    Elecci&n de alternati"a#.si presenta slo dos opciones de respuesta, o de%erdadero)&also si son esas las opciones orecidas.

    Elecci&n m7ltiple.consistente en un enunciado o pregunta que se completacon varias opciones de respuesta entre las que el su!eto debe identifcar la8nica correcta.

    Los tems de eleccin m8ltiple e7igen a quien los elabora un mayoresuer#o y pericia que aquellos ms abiertos que slo plantean la pregunta,aunque hoy por hoy tienen la venta!a de una evaluacin ms fable. or ello,lo# de elecci&n m7ltiple #on un recur#o mu* adecuado para e#tudiaramplia# poblacione# de #u!eto#. A pesar de tales venta!as, e#to# tem##on "i#to# con reticencia por cuanto #&lo #eran adecuado# para

    e"aluar tarea# #encilla# * re#ultado# de proce#o# m'# $ue e#to#%=un$ue tale# carencia# pueden e#tar pre#ente# en muc+o# tem# dee#te tipo no #on in+erente# a ello#< con tems de eleccin m8ltipleadecuadamente construidos re#ulta po#ible e"aluar tarea#coniti"amente comple!a# a# como todo# lo# pa#o# $ue de#eene"aluar#e de un proce#o, como se pone de manifesto ampliamente en laprctica de la evaluacin

    Directrice# para la con#trucci&n de tem# de elecci&n m7ltiple

    las directricesprocedimentales aconse!an un uso correcto de la gramtica, unacantidad no e7cesiva de material a leer en el tem, la colocacin vertical de lasopciones y que haya solo una correcta, as como evitar el ormato de eleccinm8ltiple comple!o

    Reerida# al contenido

    ealan el nivel y tipo de pensamiento que puede requerir el tem,mientras que los dos grupos restantes recogen directrices especfcas paracada una de las partes del tem, enunciado y opciones

  • 7/26/2019 Gua Prueba Numero 2

    16/25

    &. $ada tem debera re;e!ar un contenido especfco y una 8nica conductamental especfca,tal como sea requerido en las especifcaciones del test *tabla de doble entrada,proyecto del test'

    C(. @ase cada tem en un contenido importante para el aprendi#a!e< evitecontenidos triviales

    C). :se material novedoso para evaluar el aprendi#a!e de alto nivel. $uando losutilice en un tem, pararasee el lengua!e de los libros de te7to, o el lengua!eutili#ado durante la instruccin, para as evitar evaluar el mero recuerdo

    C+. Iantenga el contenido de cada tem independiente del contenido de otrostems del test

    C-. Al escribir tems de eleccin m8ltiple, evite contenidos muy especfcos omuy generales

    C/. Evite tems basados en opiniones

    C0. Evite tems con trampas

    CG. :se un vocabulario sencillo para el grupo de estudiantes que estn siendoevaluados

    Reerida# al ormato

    CJ. Del ormato convencional de eleccin m8ltiple utilice la interrogacin,completar rases, la me!or respuesta, eleccin alternativa, verdadero6also,

    verdadero6also m8ltiple, empare!amiento, los con!untos de tems y losdependientes de conte7to< sin embargo, evite el ormato de eleccin m8ltiplecomple!o *el tipo K'

    &C. $onstruya el tem de orma vertical, no hori#ontal 2eeridas al estilo

    &&. $orri!a y pruebe los tems

    &(. :tilice una gramtica, puntuacin, may8sculas y min8sculas y deletreocorrectos

    &). Iinimice la cantidad de lectura en cada tem

    Redacci&n del enunciado

    &+. Aseg8rese de que el sentido del enunciado resulta muy claro

    &-. 3ncluya la idea central en el enunciado y no en las opciones

    &/. Evite adornar el te7to en e7ceso *palabrera e7cesiva'

  • 7/26/2019 Gua Prueba Numero 2

    17/25

    &0. E7prese el enunciado de manera afrmativa, evitando t%rminos negativostales como BH o E$E1H. i usa t%rminos negativos, hgalo con sumocuidado y aseg8rese que aparecen en may8sculas o negritas

    Redacci&n de la# opcione#

    &G. Escriba tantas opciones como pueda, si bien la investigacin sugiere quecon tres es sufciente

    &J. Aseg8rese que slo una de esas opciones es la respuesta correcta

    (C. Mare la colocacin de la respuesta correcta seg8n el n8mero de opciones

    (&. $oloque las opciones en un orden lgico o num%rico

    ((. $onstruya las opciones independientes entre s, no deben solaparse

    (). Iantenga a las opciones homog%neas en contenido y estructura gramatical

    (+. Escriba las opciones con una longitud apro7imadamente igual

    (-. La opcin *in"una de las anteriores debe usarse con mucho cuidado

    (/. Evite la opcin +odas las anteriores

    (0. Escriba las opciones de orma afrmativa, evite t%rminos negativos talescomo BH

    (G. Evite dar pistas sobre la respuesta correcta, tales como

    a. Determinantes especfcos como siempre, nunca, completamente yabsolutamente

    b. Asociaciones por sonido similar y opciones id%nticas o parecidas at%rminos del enunciado

    c. 3nconsistencias gramaticales que indiquen al su!eto la eleccin correcta

    d. Hpcin correcta destacada

    e. . ares o tros de opciones que indiquen al su!eto la opcin correcta. Hpciones claramente absurdas o ridculas

    (J. Naga plausibles todos los distractores

    )C. :se errores usuales de los estudiantes para escribir los distractores

    )&. :se el humor si es compatible con el proesor y con el ambiente deaprendi#a!e

  • 7/26/2019 Gua Prueba Numero 2

    18/25

    Nue"a# directrice# para la con#trucci&n de tem# de elecci&n m7ltiple

    =% Elecci&n del contenido $ue #e de#ea e"aluar

    &.Debe ser una mue#tra repre#entati"a del contenido recoido en unatabla de especifcacin, evitando tems triviales

    &.(.La representatividad deber marcar lo sencillo o comple!o, concreto oabstracto, memorstico o de ra#onamiento que deba ser el tem, as como elmodo de e7presarlo

    (.A% E3pre#i&n del contenido en el tem

    ). 4o central debe e3pre#ar#e en el enunciado. $ada opcin es uncomplemento que debe concordar gramaticalmente con el enunciado

    ).+. 4a #inta3i# o e#tructura ramatical debe #er correcta . Evitar temsdemasiado escuetos o prousos, ambiguos o conusos, cuidando adems lase7presiones negativas

    +.-.La semntica debe estar a!ustada al contenido y a las personas evaluadas

    C% Con#trucci&n de la# opcione#

    /.La opcin correcta debe ser slo una, acompaada por distractoras plausibles

    0. La opcin correcta debe estar repartida entre las distintas ubicaciones

    G. Las opciones deben ser preeriblemente tres

    J. Las opciones deben presentarse usualmente en vertical

    &C. El con!unto de opciones de cada tem debe aparecer estructurado

    &&. Las opciones deben ser autnomas entre s, sin solaparse ni reerirse unasa otras. or ello, deben evitarse las opciones O1odas las anterioresP y OBingunade las anterioresP

    &(. Binguna opcin debe destacar del resto ni en contenido ni en apariencia

    Importancia de la# directrice#

  • 7/26/2019 Gua Prueba Numero 2

    19/25

    4a reorani-aci&n de directrice# lle"ada a cabo puede con#tituiruna +erramienta 7til para el proe#ional $ue de#ee con#truir tem# deelecci&n m7ltiple o tena $ue anali-ar lo# *a e3i#tente#%

    8acilitar' adem'# la in"e#tiaci&n emprica #obre lo# di#tinto#a#pecto# de lo# tem# de elecci&n m7ltiple alo mu* con"eniente

    dada la in#ufciencia de dato# e3i#tente# para muc+a# de la#directrice# apo*ada# en #u deecto en la pr'ctica acumulada con lacon#trucci&nde tem#

    4a directrice# tambi6n pueden re#ultar de ran utilidad a la +orade e#tudiar de orma riuro#a la "alide- de contenido de una pruebapue# no con"iene ol"idar $ue en el comple!o proce#o de "alidaci&n delo# te#t# el an'li#i# de lo# contenido# con#titu*e una a#e e#encial

    Directrices para la traduccin y adaptacin de los test.

    El ob!etivo de las directrices es que el producto fnal del proceso de adaptacinconsiga con respecto a la prueba original el m7imo nivel de equivalencialingQstica, cultural, conceptual y m%trica posible, y para ello son concebidascomo un patrn que gua a los investigadores y proesionales en las pautas aseguir.

    El proceso es global en naturale#a y abarca la totalidad de ases y cuestionesa considerar durante el proceso de traduccin, desde cuestiones legalesrelacionadas con los derechos de la propiedad intelectual del test a adaptar,hasta aspectos ormales que ataen a la redaccin del manual que documentalos cambios introducidos. 1odos ellos son importantes, y a todos ellos se habr

    de prestar atencin.

    irectrices pre%ias

    6 Comprobar #obre $ui6n recae el derec+o de la propiedadintelectual del in#trumento y en su caso obtener los permisoslegales permitir garanti#ar la autenticidad del producto fnal y protegerel traba!o de adaptaciones no autori#adas.

    6 El e#tudio de la# caracter#tica# del con#tructo a medir ya quealerta sobre las consecuencias de asumir sin ms la universalidad de losconstructos entre culturas, y aconse!a evaluar el grado o nivel desolapamiento entre el constructo en la poblacin origen y en lapoblacin diana como 8nico medio para delimitar y defnir el nivel deequivalencia deseado

    Directrice# #obre el de#arrollo del te#t

    Ruan durante el proceso de adaptacin y desarrollo del test, y orecen pautaspara superar algunos de los malentendidos ms comunes relacionados con el

  • 7/26/2019 Gua Prueba Numero 2

    20/25

    uso de la traduccin literal como garanta de equivalencia, o el e7cesivo pesootorgado a la traduccin inversa *!ac-)translation' como procedimiento deverifcacin de la calidad de la adaptacin.

    Es habitual considerar que en una buena traduccin la equivalencia entre laversin original y la versin retrotraducida generada por un traductor

    independiente es muy alta. Esta consideracin, sin embargo, no e# arantade "alide- de la "er#i&ndiana, es ms, en una mala traduccin el grado deequivalencia entre la versin original y la versin retro6traducida puede sermuy alta. La esto se debe a$ue la# mala# traduccione# #e apo*an entraduccione# literale# en luar de en una e#merada adaptaci&n de#inifcado#.

    ara considerar los actores lingQsticos y culturales a tener en cuenta durantela adaptacin se aconse!a la implementacin de un procedimiento interactivode depuracin que se inicia con varias traducciones independientes haciaadelante, que luego sern revisadas por un comit% mi7to en el que convieneincluir, adems de traductores con conocimientos de los idiomas y culturas, a

    especialistas en el campo de evaluacin que analicen la adecuacin de laversin adaptada. $orreccin lingQstica y adecuacin prctica son conceptoscomplementarios que es necesario compatibili#ar.

    /rueba# piloto. permiten

    a' recoger in situF las reacciones de las personas que reali#an la prueba

    b' asegurarse de que los tems e instrucciones son correctamentecomprendidos

    c' registrar el tiempo necesario para la e!ecucin del cuestionario

    d' recoger inormacin sobre posibles errores de contenido o ormato que sepueden corregir antes de pasar a la ase operacional

    e' obtener datos que permitirn llevar a cabo un primer anlisis de tems queindiquen la direccin y sentido de los ndices psicom%tricos ms relevantes.

    &irectrices de confrmacin

    acen reerencia a a#pecto# t6cnico# relacionado# con la#propiedade# p#icom6trica# del te#t adaptado * a #u e$ui"alencia conre#pecto al te#t oriinal. roponen llevar a cabo estudios de equivalenciam%trica entre las versiones original y adaptada que determinar'n el radode relaci&n entre cada uno de lo# tem# $ue componen la prueba * ladimen#i&n $ue repre#entan.

    i la relacin uncional no es equivalente entre las versiones original4adaptadala comparabilidad entre escalas se ver amena#ada.

    &irectrices sobre aplicacin

  • 7/26/2019 Gua Prueba Numero 2

    21/25

    4a orma en la $ue #e aplica un te#t in(u*e en la# propiedade#p#icom6trica# de la# puntuacione# obtenida# tale# como #u fabilidad* "alide-. los aplicadores

    a' deben ser elegidos entre personas de la poblacin a la que se aplica el test

    b' estar amiliari#ados con los distintos matices de la cultura de que se trate

    c' tener e7periencia y aptitudes para la aplicacin de tests

    d' conocer la importancia de seguir al pie de la letra los procedimientosreglados para la aplicacin de los tests. Deben de programarse sesiones deentrenamiento riguroso para los aplicadores.

    &irectrices sobre puntuacin e interpretacin

    =lertan #obre lo# rie#o# deri"ado# de la tentaci&n de comparardirectamente puntuacione# obtenida# en conte3to# culturale# olin#tico# dierente# por medio de e#cala# adaptada#.

    i no puede demostrarse la e7istencia de equivalencia m%trica entre todos lostems que componen las escalas original y adaptada, las puntuacionesobtenidas no podrn compararse directamente. El problema de la comparacinentre puntuaciones se agrava con su interpretacin.

    4o# e#tudio# comparati"o# deberan de u#ar#e para comprenderla# #eme!an-a# * dierencia# entre lo# rupo# anali-ado# pero nuncapara e#tablecer comparacione# #in m'#. S no es adecuado establecerlas

    porque raramente encontraremos dos comunidades que sean equiparablescompletamente en aspectos tan in;uyentes como motivacin a la hora dehacer las pruebas, curriculas escolares, valores culturales, nivel de vida,polticas educativas, oportunidades de acceso a la educacin, etc.

    Directrice# #obre documentaci&n

    =inalmente, para interpretar las puntuaciones el psiclogo debe dedisponer de una documentacin e7haustiva acerca de cmo se llev a cabo elproceso de adaptacin.

    Las directrices de la 31$ a8n en un documento sencillo las pautas a seguir paraasegurar el m7imo nivel de equivalencia entre las versiones original yadaptada de un test, que podran resumirse en

    a' consideraciones legales previas que aectan a la propiedad intelectual

    b' valoracin del constructo en la poblacin diana

  • 7/26/2019 Gua Prueba Numero 2

    22/25

    c' diseos de adaptacin que tengan en cuenta las caractersticas lingQsticas,psicolgicas y culturales del te7to adaptado, as como su adecuacin prctica

    d' la importancia de las pruebas piloto

    e' la seleccin cualitativa y cuantitativa adecuada de la muestra de

    adaptacin

    ' la importancia de los estudios de equivalencia

    g' la delimitacin del grado de comparabilidad entre puntuaciones

    h' la importancia de unas correctas condiciones de aplicacin e interpretacin

    i'la inormacin e7haustiva sobre los cambios llevados a cabo en el testadaptado. Estas directrices constituyen una actuali#acin y reorgani#acin delas publicadas originalmente, tratando de aprovechar la e7periencia recogidadesde la publicacin de la primera edicin.

    eg8n Nambleton *(CC+, (CC/', seis grandes reas atraern la atencin deinvestigadores y proesionales en los pr7imos aos.

    ?% el uso internacional de los tests, debido a la globali#acin creciente y alas acilidades de comunicacin, lo cual plantea todo un con!unto deproblemas de adaptacin de los tests de unos pases a otros.

    2% el uso de nuevos modelos psicom%tricos y tecnologas para generar yanali#ar los tests.

    @% aparicin de nuevos ormatos de tems derivados de los grandesavances inormticos y multimedia

    F% todo lo relacionado con los tests inormati#ados y sus relaciones con3nternet.

    % los sistemas a utili#ar para dar retroalimentacin *eedbac>' de losresultados a los usuarios y partes legtimamente implicadas.

    H% haya una gran demanda de &ormacin por parte de distintosproesionales relacionados con la evaluacin

    =la de Cronbac+ 1tem# li5ert)

    ermite estimar la fabilidad de un instrumento de medida a trav%s de uncon!unto de tems que se espera que midan el mismo constructo o dimensinterica.

  • 7/26/2019 Gua Prueba Numero 2

    23/25

    La medida de la fabilidad mediante el ala de $ronbach asume que lostems *medidos en escala tipo Li>ert' miden un mismo constructo y que estnaltamente correlacionados

    $uanto ms cerca se encuentre el valor del ala a & mayor es laconsistencia interna de los tems anali#ados. La fabilidad de la escala debe

    obtenerse siempre con los datos de cada muestra para garanti#ar la medidafable del constructo en la muestra concreta de investigacin.

    $orrelacin ala de $ronbach$oefciente &. erecta relacin * se acepta el tems'$oefciente C./ Alta relacin$oefcienteC.- Iediana relacin$oefciente C.+ T C.)- @a!a relacin$oefciente C.)& 2elacin cuestionada * se verifca la

    relevancia de este dependiendo loque aborda, si no se elimina'

    $oefciente C.)6 C.(J e recha#a

    9R2; 1dicot&mica#)

    2elacionado con $HB31EB$3A 3B1E2BA

    El K2(C es un indicador de la fdelidad *consistencia interna'. Los m%todosbasados *2ulon, Ala de $ronbach, pearman, @roUn' en la di"i#i&n en do#porcione# 1pre#umiblemente iuale#) da de#"enta!a de #errelacionado con la# opcione# de la partici&n 1"6a#e la mitad iualdad:impar de la primera * #eunda parte al a-ar)%

    En los m%todos de particin en dos, *conocido tambi%n como biseccin' suponepara cada parte ser equivalente * las ormas paralelas'.

    ara el K2(C, la misma lgica se adopta en el nivel de los tems. Es lo que unollama unidimensional.

    El K2(C se aplica en la ca!a dicotmica de items.

    :no calcula el K2(C como sigue

    http://www.angelfire.com/nt/sas/anexo2.htmlhttp://www.angelfire.com/nt/sas/LOSIENTO.htmlhttp://www.angelfire.com/nt/sas/LOSIENTO.htmlhttp://www.angelfire.com/nt/sas/anexo2.htmlhttp://www.angelfire.com/nt/sas/LOSIENTO.htmlhttp://www.angelfire.com/nt/sas/LOSIENTO.html
  • 7/26/2019 Gua Prueba Numero 2

    24/25

  • 7/26/2019 Gua Prueba Numero 2

    25/25

    Dierencia# p#icom6trica# entre ra#o * e#tado

    Ra#o.que permanece en el tiempo y es la caracterstica del constructo ovariable a investigar o medir.

    E#tado. que se presenta en un tiempo o situacion concreta, de carcterestable.