-
7/25/2019 PASOS+PARA+LA+VALIDACIN+DE+UNA+ESCALA
1/5
METODOLOGA PARA LA VALIDACIN DE UNA ESCALA O INSTRUMENTO DE
MEDIDA. RamnEugenio Paniagua Surez. Profesor de la Universidad de
Antioquia. Facultad Nacional de Salud Pblica.Medelln, Colombia,
2015.
Introduccin
El mtodo cientfico (1) pretende la adquisicin de conocimientos,
intenta resolver preguntas. Una vezformuladas las preguntas, se
elaboran posibles respuestas fundamentadas en los conocimientos
aceptados comoconsistentes por la comunidad cientfica; estas
posibles respuestas se llaman hiptesis. Despus de formuladaslas
hiptesis se puede disear un experimento o un estudio no
experimental para contrastar las hiptesis. Poperdeca que la ciencia
busca explicaciones cada vez mejores. La secuencia del mtodo
cientfico es: enunciar
preguntas-posibles respuestas (planteamiento de
hiptesis)-resolucin de las hiptesis (fase experimental
uobservacional)-conclusiones.
Para responder a las preguntas (2) de investigacin planteadas y
cumplir los objetivos del estudio, elinvestigador (a) debe
seleccionar y desarrollar un diseo de investigacin especfico.
Cuando se establecen yformulan hiptesis, los diseos sirven para
someterlas a prueba.
El conducto en la investigacin es: pregunta-objetivo-
hiptesis-anlisis. En los diagramas presentados en loslibros de
metodologa de la investigacin, se contextualiza la presencia de los
estudios experimentales y no
experimentales, en relacin con el diseo del estudio.
La clasificacin del tipo de diseo se hace segn el manejo de las
variables que determinan el alcance de lainvestigacin (3) y la
clasifican en experimental y no experimental. Significa con ello
que en la investigacinexperimental se controlan algunas variables
independientes para lo cual se disea un experimento y los
mtodosson: diseos completamente aleatorios, diseos por bloques,
cuadrados latinos y diseos factoriales. Todosestos mtodos forman
parte de un gran tema que se llama el anlisis de varianza, ANOVAque
permite relacionaruna variable cuantitativa (dependiente) y una
variable cualitativa (independiente). En el diseo observacional ono
experimental los fenmenos se observan tal y como suceden en su
contexto natural, sin que pueda controlarsealgn factor.
La investigacines un proceso que nos lleva al conocimiento de
algo mediante la aplicacin de mtodos ytcnicas que nos permiten
aprehender los elementos de ese algo y sus interrelaciones para
comprenderlo,
describirlo, explicarlo, predecirlo y transformarlo.
Si el conocimiento genera poder y autoridad y, ste es necesario
para transformar la sociedad, la investigacindebe ser el punto de
partida y de confluencia de esa accin transformadora.
La investigacin conduce al investigador (a) a un estado superior
de conocimiento del fenmenoen estudio;adems de una actitud positiva
hacia la investigacin, se debe tener cierta madurez que la dan una
edad mayory la experiencia; mi prctica me ha enseado que
estudiantes menores de 20 aos de edad difcilmentecomprenden el
proyecto de investigacin cientfica como un todo y la forma como se
relacionan sus partes.
Si bien no toda persona tiene aptitudes y actitudes para la
investigacin, el profesional, debe llegar a manejarlos elementos
bsicos del proceso de investigacin para su ejercicio
profesional.
Todos los docentes de la Universidad de Antioquia, somos
responsables de la formacin y acompaamiento delos estudiantes en su
proceso de formacin; es mayor la responsabilidad, para los docentes
- investigadores y
para quienes se encuentren vinculados a los grupos de
investigacin porque son quienes en ltimas, puedenarticular la
docencia y la investigacin por medio de los trabajos de grado de
los estudiantes.
Todos sabemos que la pregunta de investigacin es la que define
el mtodo que se utilizar en el procesoinvestigativo. Si se busca
comprender e interpretar un fenmeno, el mtodo debe ser el
cualitativo, en tanto; sise busca describir o explicar un fenmeno
el mtodo debe ser el cuantitativo.
-
7/25/2019 PASOS+PARA+LA+VALIDACIN+DE+UNA+ESCALA
2/5
La experiencia sin embargo ensea, un trato diferencial entre la
mayora de investigadores de la Universidadde Antioquia para quienes
el mtodo cuantitativo ha sido hegemnico y apenas se empieza a
aceptar el enfoquecualitativo en las investigaciones. Pienso que
cualquiera sea el mtodo de una investigacin, sta debe asumirsecon
rigurosidad para que el proceso de investigacin gane en
calidad.
En la metodologa de investigacin con enfoque cuantitativo, el
instrumento de recoleccin de la informacines una encuesta que se
construye a partir de un cuestionario que recoge todas las
preguntas que sirven para lamedicin de las variables, las cuales a
su vez, surgen de los objetivos especficos y en algunos casos del
marcoterico. Todos los libros de estadstica traen recomendaciones
para construir cuestionarios de preguntas querespondan a los
objetivos porque as se gana en la validez de constructo.
En la investigacin sobre temas mdicos o psicolgicos, es comn que
se utilicen escalas elaboradas porexpertos con las siguientes
caractersticas (2):a) La confiabilidad, se refiere al grado en que
el instrumento en su aplicacin repetida en el mismo individuo
u objeto produce resultados iguales. Generalmente, se miden de
dos formas: mediante el test-retest(coeficiente de correlacin) con
el cual se mide la estabilidad de la escala en sus puntajes
individuales, atravs del tiempo y con la consistencia interna
(coeficiente Alpha de Cronbach) que mide la precisin conla que los
tems de la escala miden el constructo en estudio.
b) La validez, se refiere al grado en que el instrumento mide la
variable que pretende medir. Validez de contenido: se refiere al
grado en que un instrumento refleja un dominio especfico de
contenido. Validez de criterio: se compara con algn criterio
externo que mide lo mismo. Si el criterio se fija en
el mismo momento, se habla de validez concurrente. Validez de
constructo: debe explicar el modelo terico emprico, que subyace a
la variable de inters. Validez de expertos: los expertos definen si
el instrumento mide la variable en cuestin.
c) La validez total se gana con una mayor validez de contenido,
validez de constructo y validez de criterio enel instrumento de
medicin.
d) La relacin entre la confiabilidad y la validez. El
instrumento puede ser confiable pero no vlido. Serequiere que se
cumplan ambas caractersticas.
e) Factores que pueden afectar la confiabilidad y la validez: la
improvisacin, utilizar instrumentosdesarrollados en el extranjero
que no han sido validados en el pas de aplicacin, es inadecuado
para las
personas a quienes se le aplica, las condiciones desfavorables
en las que se aplica.
En lo posible, se deben utilizar instrumentos de los cuales se
sepa que miden lo que pretenden medir, que sonestables en el tiempo
de aplicacin; es decir que obtienen la misma informacin en
intervalos de hasta 15 dasde aplicacin, que son construidos por
expertos en el tema y que han superado cualquier improvisacin en
laforma como se ordenan y relacionan las preguntas y el puntaje
total que generan. No es recomendable construirun cuestionario de
preguntas para indagar temas que tienen que ver con el
comportamiento humano. En nuestrauniversidad, se impone cada vez,
el utilizar escalas de medida que sean validadas, nacional
einternacionalmente.
El proceso de bsqueda de escalas de medida para realizar una
investigacin puede tomar varios meses ymuchas de ellas deben ser
compradas, lo cual demanda que se presupueste en el costo total del
proyecto.Generalmente, se consiguen escalas validadas
internacionalmente y debe realizarse la validacin a nivelnacional
para que se garantice que la escala mida lo mismo que en cualquier
otra parte.
En la presente ponencia se propone una metodologa para la
validacin de escalas que han sido construidas enel extranjero y
algunas de ellas han sido traducidas al idioma castellano.
MtodosSe revisan algunos artculos publicados en revistas
indexadas sobre caractersticas psicomtricas de losinstrumentos o
procesos de validacin de escalas seguidos con el fin de determinar
la ruta comn para lavalidacin de una escala. Se revisa una tesis de
pregrado sobre la validacin de una escala construida en
elextranjero y traducida al castellano en Colombia. Se hace una
propuesta metodolgica para la validacin de unaescala.
-
7/25/2019 PASOS+PARA+LA+VALIDACIN+DE+UNA+ESCALA
3/5
Resultados
Revisiones de otras validaciones
En un estudio en Chile (4), se tuvo una muestra por conveniencia
con un tamao, n=264 de personascon edades entre 16 y 33 aos, 57 %
mujeres y 43 % hombres. La aplicacin fue grupal en el horariode
clase. Se utiliz consentimiento informado para los participantes en
el estudio. Las escalas seaplican al mismo tiempo. Primero, se
aplic un Anlisis de Componentes Principales, ACP, conrotacin
varimax para determinar tres factores. Luego, se realiz un Anlisis
Factorial Confirmatorio
para verificar esa estructura factorial de la escala; se evalu
la consistencia interna de las escalasmediante el coeficiente Alpha
de Cronbach. Se obtuvo la correlacin tem test en la cual
ladistribucin de cada tem se correlaciona con la distribucin del
puntaje total de la escala. Se corre unmodelo de regresin lineal
mltiple para cada una de las escalas, orientacin a la dominancia
social(SDO) y la escala de nacionalismo.
En un estudio con universitario en Mxico (5), se obtuvo una
muestra no probabilstica de n=122estudiantes entre 17 y 25 aos que
solicitaron ayuda psicolgica y que no estaban en
tratamientofarmacolgico. Se realizaron anlisis factoriales para
determinar la estructura factorial de la escala. Secalcularon
coeficientes de correlacin entre los tems y el test y se obtuvieron
medidas de consistenciainterna de la escala y de las
subescalas.
En un estudio realizado en Espaa (6), se obtuvo una muestra de n
=584 individuos; se realiz unAnlisis Factorial Confirmatorio para
verificar la estructura interna de la escala, luego se obtuvo
elcoeficiente Alpha de Cronbach para verificar la consistencia
interna y por ltimo se realiz un ANOVA
entre el puntaje total y el sexo para verificar si hay
diferencia en el puntaje total para los sexos. En un estudio con
adolescentes espaoles (7), se obtuvo una muestra de n=525, se aplic
un anlisis
factorial para determinar la estructura factorial y luego con
ella, se aplic un Anlisis FactorialConfirmatorio, AFC para
verificar que efectivamente esa estructura factorial es apropiada.
Luego,realiz un ANOVA entre el puntaje total y el sexo para
verificar si hay diferencia en el puntaje total
para los sexos tambin se realiz lo mismo para los grupos de
edad. En un estudio sobre uso problemtico de la nuevas tecnologas
en Espaa (8), se obtuvo una muestra
de n=2747 individuos. Se realiz un anlisis factorial con rotacin
varimax para determinar unaestructura factorial; se obtuvo el KMO y
se realiz la prueba de esfericidad de Bartlett para verificarla
igualdad de varianzas. Se verific la consistencia interna con el
Alpha de Cronbach para la escala y
para la escala sin el tem. Se analiz la validez convergente
mediante la correlacin de la distribucinde cada tem con la
subescala sin el tem. Se realiz una validez clnica. , realiz un
ANOVA entreel puntaje total y el sexo para verificar si hay
diferencia en el puntaje total para los sexos.
En un estudio con pacientes psiquitricos hospitalizados
realizado en Colombia (9), se obtuvo unamuestra de tamao n=149. Se
realiz una prueba preprueba con una muestra de n=30 y un
anlisisinterevaluador. La validez concurrente se obtuvo mediante la
correlacin entre el puntaje total de laescala y el de la escala
ICG. La sensibilidad al cambio se verific con la correlacin entre
el puntajetotal de la prueba y el de la preprueba obtenidos en dos
momentos clnicamente diferentes.
En un estudio realizado con adolescentes escolarizados en San
Juan de Pasto, Colombia (10). Seobtuvo una muestra aleatoria de 306
adolescentes escolarizados en las instituciones pblicas y
privadas
para la aplicacin final para el anlisis de la escala fases 4 a7.
El proceso de validacin se ajust a lassiguientes fases: 1) fase 1:
consolidacin de la escala traducida al espaol.
Traduccin-retraduccin;2) fase 2: consolidacin de la versin
preliminar de la escala. Se revisan los tems para que los
valorencon respecto al tema, como: muy importante, importancia
intermedia, menos importante; fase 3:
pilotaje, utilizando una prueba piloto se analiza la comprensin
de las instrucciones y de los tems;fase 4: aplicacin final; fase 5:
validez del RFL-A adaptado al espaol mediante un Anlisis
Factorial
exploratorio con rotacin varimax para determinar una estructura
factorial; se obtuvo el KMO. Para lavalidez convergente, se obtuvo
el coeficiente de correlacin con otra escala. Fase 6: fiabilidad
delRFL-A: alpha de Cronbach, correlaciones tem-prueba, alpha de
Cronbach de la escala sin el tem.,alpha de Cronbach de las
subescalas; fase 7: realiz un ANOVA entre el puntaje total y el
sexo paraverificar si hay diferencia en el puntaje total para los
sexos.
En un artculo sobre validacin de escalas en salud (11) se
propone que el proceso de validacin debetener las siguientes
etapas: seleccin de la escala, traduccin, pruebas preliminares para
realizar ajustes(de tems y utilidad), pruebas de su validez
(validez de apariencia, validez de contenido, validez decriterio o
concurrente, sensibilidad al cambio), pruebas de confiabilidad,
determinacin de su utilidad.
-
7/25/2019 PASOS+PARA+LA+VALIDACIN+DE+UNA+ESCALA
4/5
En un artculo normas para el desarrollo y revisin de estudios
instrumentales (12) se propone con unamuestra de entre 5 y 10
individuos por tem; debe ser mayor a 200 individuos y llevar el
siguienteorden para presentar los resultados de la validacin:
validez de constructo (Anlisis factorialconfirmatorio), Fiabilidad
(alfa de Cronbach y correlacin tem-subconstructo), confiabilidad
test-retest.
Anlisis previo al proceso de validacin
El primer paso es encontrar una escala que mida el fenmeno de
nuestro de inters que haya sido construidasobre una base cientfica
y que, ojal, haya tenido una validacin en Colombia. Si ese es el
caso, podemosrealizar nuestro estudio con absoluta seguridad de que
nuestros resultados pueden publicarse sin temores encualquier
revista indexada del mundo.Lo ms comn es que la escala construida
que encontramos, est en un idioma diferente al castellano y ha
sidovalidada en un pas del extranjero. En este caso, se debe
realizar una traduccin de la escala, someterla a pruebasde
expertos, validarla culturalmente, antes de ser aplicada a la
poblacin de estudio. La fase 1 de traduccinretraduccin utilizada
con adolescentes escolarizados en San Juan de Pasto (10) puede ser
parte de la solucin.Con una prueba piloto en la poblacin de
estudio, se puede analizar la comprensin de los tems por parte de
la
poblacin de estudio para validar culturalmente la escala.
Si la escala ha sido construida en un pas del exterior de habla
hispana y con una cultura par a la colombiana,
la validacin cultural no es necesaria y se debe proceder a la
validacin en el pas de aplicacin.
Propuesta metodolgica para validar una escala
Se parte de un proyecto de investigacin que cuenta con el aval
de algn comit de tica y que cuenta con unaescala en idioma
castellano que debe ser validada para Colombia. Se analiza la forma
como est construida, sussubconstructos o subescalas, los valores de
los coeficientes de la primera validacin y la poblacin en la
cual
puede ser aplicada la escala.
El primer pasoes disear una muestra aleatoria para estimar la
proporcin de inters si se mide en un nivel,que sea mayor a 200
personas (n>200); es decir, el error permisible mximo en la
estimacin de la proporcines del 7 % y en forma equivalente para la
estimacin del puntaje promedio de la escala. Algunos autores
sugierencomo criterio que tenga entre 5 y 10 individuos por cada
tem de la escala) (12). Con esta muestra, se procede
luego a verificar la estructura factorial mediante un Anlisis
Factorial Confirmatorio, AFC, si se conocen lossubconstructos. Si
no hay subconstructos de manera explcita, se debe realizar
previamente un Anlisis Factorialpara determinar la estructura
factorial subyacente y luego el Anlisis Factorial
Confirmatorio.
En segundo lugar, Para verificar la fiabilidad de la escala, se
verifica su consistencia interna mediante el alfade Cronbach para
todos los tems. Tambin se calcula el coeficiente de correlacin
entre cada tem y el puntajetotal del subconstructo.
En tercer lugar, se determina una escala par que mida lo mismo
en la poblacin de inters, y que haya sidovalidada en Colombia.
En cuarto lugar, se disea una muestra aleatoria de tamao mayor o
igual a 50 para que garantice que se
conserva la estructura factorial de la escala (13). Con esta
muestra se verificar la estabilidad de la escala en eltiempo y la
validez concurrente correlacionando los puntajes totales de las dos
escalas.
Luego de obtener el consentimiento informado de los individuos
del estudio, se aplican las dos escalassimultneamente para realizar
la validacin concurrente con la muestra aleatoria de tamao mayor o
igual 50.Se aplican la escala de inters y la escala par en un solo
cuestionario construido por el equipo de investigacinen el cual se
agregan variables como, sexo y edad. Se obtiene as, el pretest o la
preprueba.
A los cuatro dasde la primera aplicacin, se aplica al mismo
grupo de personas la escala de inters y se obtieneas el retest o la
prueba.
-
7/25/2019 PASOS+PARA+LA+VALIDACIN+DE+UNA+ESCALA
5/5
Para verificar la normalidad de los puntajes de cada uno de los
instrumentos, se realiza la prueba de normalidadde
KolmogorovSmirnov con correccin de Liliefors en el software
estadstico SPSS (14). Esta prueba se hacetambin para la distribucin
de cada uno de los tems dela escala de inters.
En quinto lugar, verificar la reproducibilidad test- retest
mediante el coeficiente de correlacin entre los
puntajes totales dela escala de inters, obtenidos en las dos
aplicaciones con cuatro das de intervalo.
En sexto lugar, verificar la validez de convergencia entre las
dos escalas mediante el coeficiente de correlacinde Spearman, donde
el contraste de hiptesis es: H0: no existe correlacin lineal entre
los tems. H1: existecorrelacin lineal entre los tems. Por lo tanto
si el valor p es menor que el 5 %, la correlacin es diferente
decero. Adems, se obtiene el ndice de Kappa para determinar la
concordancia entre los niveles de riesgo desuicidio de las dos
escalas. Todo esto se hace en el SPSS tambin (14).
Calcular el ndice de concordancia de Kappadesde una tabla de
contingencia 2x2 en la cual se colocan enlas filas los valores que
representan la existencia del evento en la escala de inters y en
las columnas los valoresque representan la existencia del evento en
la otra escala. El contraste de hiptesis para el ndice de kappa
es:H0: no existe acuerdo entre los puntajes de ambas escalas.
H1: existe acuerdo entre los puntajes de ambas escalas.
En sptimo lugar, determinar la utilidad de la escala desde su
valoracin y desde su aplicacin.
Bibliografa1. lvarez R. Ensayos clnicos. Diseo, anlisis e
interpretacin. Editorial Daz de Santos. Espaa; 2005.2. Hernndez R,
Fernndez C, Baptista P. Metodologa de la investigacin. 5 edicin. Mc
Graw-Hill. Per;2010.3. Medina Mara. La investigacin aplicada a
proyectos. Identificacin del proyecto y formulacin de
lainvestigacin. 2 edicin. Centro de investigaciones para el
desarrollo CAY. Volumen I. Bogot; 2014.4. Crdenas M. Adaptacin y
validacin de la versin abreviada de la escala de autoritarismos de
derechos(RWA) e una muestra chilena. Revista de psicologa de la
Universidad de Chile. XVIX (1): 61-79; 2010.5. Gonzlez S, Daz A,
Gonzlez C, Gonzlez J. Caractersticas psicomtricas de la escala de
ideacin suicidade Beck (ISB) en estudiantes universitarios de la
ciudad de Mxico. Salud Mental. 23 (2): 21-30. Instituto
Nacional de Psiquiatra de la Fuente Nuez. Mxico.6. Sicilia A,
Alas A, Ferriz R, Moreno J. Spanish adaptation and validation of
the exercise addiction inventory(EAI). Psicotema. 25 (3): 377-383.
Spain; 2013.7. Casas J, Ruiz R, Ortega R. Validation of the
internet and social networking experienciesquestionare inspanish
adolescent. International journal of clinical and healthpsycology.
13: 40-48. Crdoba, Spain; 2013.8. Labrador F, Villadangos S, Crespo
M, Becoa E. Desarrollo y validacin de uso problemtico de
nuevastecnologas. Anales de psicologa. 29 (3): 836-847. Espaa;
2013.9. Snchez R, Ibaez M, Pinzn A. Anlisis factorial y validacin
de la versin en espaol de la escala
brefpsychiatric rating scale in Colombia. Biomdica. Instituto
Nacional de Salud. Bogot, Colombia. 25: 120-128; 2005.10. Moreno A.
Propiedades psicomtricas del inventario razones para vivir (RFL-A,
Osman et al., 1998),adaptado al espaol en una muestra de
estudiantes de bachillerato de la ciudad de San Juan de Pasto.
[Tesis de
pregrado]. Universidad de Nario. Facultad de Ciencias. Programa
de Psicologa. San Juan de Pasto, Colombia;2008.11. Snchez R,
Echeverry J. Validacin de escalas de medicin en salud. Rev. Salud
pblica; 2004; 6 (3):302-3018.12. Carretero H, Prez C. Normas para
el desarrollo y revisin de estudios instrumentales. International
journalof clinical and healthpsychology; 2005; 5(3):521-551.13.
Hair J, Anderson R, tatham R, Black W. Anlisis multivariante. 5
edicin. Pearson-Prentice Hall. Madrid;1999. p. 100.14. Pardo A,
Ruiz M. Anlisis de datos con SPSS 13 base. Espaa: Mac GrawHill;
2005.
