Tema 5 - Psicometria

Descargar como pdf o txt
Descargar como pdf o txt
Está en la página 1de 6

TEMA 5 : CONCEPTO Y EVIDENCIAS DE VALIDEZ

I. INTRODUCCIÓN Y EVOLUCIÓN DEL CONCEPTO DE VALIDEZ

El concepto de validez es considerado central para la psicometría. Angoff (1988, p.22)


sugirió que debía ser el primer requisito que ha de cumplir todo instrumento de medida ya
que “su fiabilidad, aunque esencial, nunca supondrá una garantía de uso suficiente, motivo
por el cual, el concepto psicométrico de validez es el más importante y fundamental”.

Una de las primeras conceptualizaciones propuestas sobre la validez (que sigue siendo
utilizada hoy en día): El grado en que un instrumento mide lo que afirma medir.

La conceptualización a principios del siglo XX de validez es que un instrumento mide lo que


dice medir en términos de la correlación estadística entre la puntuación del test y una
“variable de criterio” que es, un criterio externo que se cree está relacionado de alguna
manera con la propiedad que se desea medir con el test.
"Un test es válido para aquello con lo que se correlaciona" (Guilford, 1946; p. 429).

En una segunda etapa de evolución del concepto de validez, se reconoce la importancia de la


teoría psicológica que subyace al constructo medido, y se pone el foco de atención en el
análisis de la validez de constructo, que se convierte en un concepto unificador que abarca
aspectos de contenido y de relaciones con otras variables.
…"toda validación es una" (Cronbach, 1980; p. 99) y "…toda validación es validación de
constructo" (Cronbach, 1984; p. 126).

Actualmente: “La validez se refiere al grado en que la evidencia y la teoría soportan las
interpretaciones de las puntuaciones del test implicadas por los usos propuestos del mismo....
El proceso de validación implica acumular evidencia para proveer de una base científica las
interpretaciones propuestas de las puntuaciones. Las declaraciones sobre validez deberían
referirse a la interpretación particular de un uso específico y es incorrecto utilizar la frase
“validez del test” " (AERA, APA y NCME, 2014, pág. 11).

Dicho de manera más simple: La validación supone un proceso de acopio de pruebas que
apoyen la interpretación de las puntuaciones derivadas de una prueba cualquiera. Así, la
validación no es un proceso dirigido al test, sino a la interpretación de sus puntuaciones en
función del objetivo y uso concreto de la prueba (Prieto y Delgado, 2010).
.II.FUENTES DE EVIDENCIA DE VALIDEZ

En este proceso de acopio de pruebas, son necesarias múltiples fuentes que apoyen la validez
de los resultados en función de los objetivos planteados en el proceso de medición.
Según las recomendaciones de los Standars for educational and psychological testing (AERA
et al., 2014), las principales fuentes son:
a. PROCESO DE VALIDACIÓN DE CONTENIDO:

El proceso de validación de contenido se define como el análisis del grado en el que todos los
elementos de un instrumento de medida son relevantes para y representativos del constructo
objetivo dentro de un propósito de evaluación particular.

En este sentido, los elementos del instrumento de medida son todos los aspectos del proceso
de medición que afectan a la obtención de puntuaciones, entre los cuales se incluyen los ítems
o preguntas del cuestionario, el formato de respuesta y las instrucciones.

Procedimiento:
Reunir a un grupo o panel de expertos en el dominio evaluado por la prueba, pudiéndose
proceder de dos formas:

1) Se les puede proporcionar todo el material con el que trabajó el constructor del test en las
fases previas a la confección de los ítems, de forma que éstos dispongan de todo el substrato
teórico y conceptual de la prueba.

2) Se puede optar sencillamente por darles la información relativa al objetivo del test, a la
primera fase del proceso. Los expertos deben analizar el contenido del test, de acuerdo a la
especificación propuesta por el constructor o a la suya propia:

b. PROCESO DE RESPUESTA

El proceso de respuesta es una fuente de evidencia de validez que se analiza a partir de la


interacción del sujeto con un test o con un ítem específico del test.
Algunas interpretaciones de constructos implican suposiciones más o menos explícitas sobre
los procesos cognitivos de los sujetos examinados.

Desde un punto de vista teórico y empírico, los procesos de respuesta pueden aportar pruebas
entre el constructo evaluado y la ejecución o respuesta real de los examinandos.
La evidencia obtenida al estudiar los procesos de respuesta generalmente proviene de
análisis individual de las respuestas y el método más utilizado es el de interrogar a los
individuos sobre sus estrategias de ejecución o respuesta

c. ESTRUCTURA INTERNA DEL TEST

La estructura interna del test como fuente de evidencia de validez puede indicar el grado en
que la relación entre ítems y los componentes de los ítems se ajustan al constructo en el que
se basan las interpretaciones propuestas para las puntuaciones derivadas del test.

Un test puede proporcionar medida para un único constructo, pero hay test que miden varios
constructos a la vez. El análisis de la estructura interna busca estudiar de manera empírica si
los ítems se ajustan a las dimensiones previstas por el constructor del test. A todo esto, se le
denomina estudio de la dimensionalidad.

Por otra parte, la estructura interna de un test debe ser puesta a prueba siempre que se utilice
en nuevas poblaciones con cultura, idioma o características socioculturales diferentes.
Además, la aplicación de la prueba a subgrupos de una misma población (etnia/raza, género o
edad) debería ser también controlada. Este tipo de análisis está dirigido a estudiar el
funcionamiento diferencial del ítem.

Estudio de la dimensionalidad:
Uno de los métodos de validación de un test consiste en analizar la estructura interna del
mismo. Para ello, se estudian las relaciones entre los diversos ítems del tests entre sí y se
comprueba si la estructura empírica del test coincide con la estructura teórica postulada.

La técnica de análisis estadístico por excelencia en este método es el análisis factorial (bien
exploratorio o confirmatorio), mediante el cual se puede analizar la unidimensionalidad de
los datos con una pérdida mínima de información.
d. ESTUDIO DE LA RELACIÓN CON OTRAS VARIABLES

El estudio de la relación con otras variables se centra en la búsqueda de evidencias que


relacionen la puntuación con algún criterio que se espera prediga el test, o con otros tests que
hipotéticamente miden el mismo constructo, constructos relacionados o constructos
diferentes.

Los resultados de estos análisis podrían evaluar el grado en que las relaciones hipotetizadas
son consistentes con la interpretación propuesta. Los métodos más utilizados son los de (i)
relaciones test-criterio, (ii) validez discriminante y (iii) evidencia convergente y
discriminante.

i. RELACIONES TEST-CRITERIO

Objetivo: estudiar la relación entre las puntuaciones obtenidas por el test y un criterio (un
indicador de un constructo, de un diagnóstico, o de una conducta que el test intenta predecir).

Generalmente, la información reportada en el manual a modo de coeficiente de validez, es la


correlación obtenida en una muestra representativa entre las puntuaciones en el test y la
medida del criterio: A mayor coeficiente de validez mayor será la relación entre ambas
medidas.

CUANDO TEST Y CRITERIO SON VARIABLES CONTINUAS

El coeficiente de validez de un test se define como el coeficiente de correlación de Pearson


entre las puntuaciones obtenidas en el test (X) y las obtenidas en el criterio (Y) por una
muestra (N) de sujetos. Indica la fuerza que tiene el test para pronosticar el criterio (𝑟𝑟𝑥𝑥𝑥𝑥).

Si se eleva al cuadrado el coeficiente de validez se convierte en el coeficiente de


determinación (𝑟𝑟𝑥𝑥𝑥𝑥 2 ) que expresa la proporción de la varianza del criterio que es
explicada por la varianza del test. Cuanto más se aproxime a 1, mayor será la validez
predictiva de las puntuaciones del test sobre el criterio.
ii. VALIDEZ DISCRIMINANTE (CLASIFICACIÓN).

Aportar información sobre la capacidad discriminatoria del instrumento:

La especificidad y sensibilidad para las distintas puntuaciones obtenidas por un cuestionario


se pueden valorar a través de curvas ROC (Receiver Operating Characteristic). La curva ROC
resume en un único gráfico sensibilidad y especificidad para todos los puntos de corte en una
prueba, es decir, la capacidad predictiva para la detección de casos verdaderamente positivos.
iii. EVIDENCIA CONVERGENTE Y DISCRIMINANTE

Una de las formas más utilizadas en la recogida de información durante el proceso de


validación de las puntuaciones consiste en evaluar su relación (correlación estadística) con
medidas similares obtenidas por medio de otros test (validación convergente), o con medidas
diferentes con las que teóricamente el test no presenta relación (validación discriminante).

Las correlaciones convergentes deberían ser altas, y las correlaciones discriminantes bajas.

e. ESTUDIO DE LAS CONSECUENCIAS DE LA UTILIZACIÓN DEL TEST

El estudio de las consecuencias de la utilización del test es una fuente de evidencia compleja
que se acerca más a aspectos sociopolíticos que a características más propias de la validez
como concepto psicométrico.

Este procedimiento hace referencia al análisis contextual de la evaluación ya que es


importante analizar el uso que se dará al test y cuáles pueden ser sus consecuencias.

Una fuente de evidencia para la validación son las consecuencias que las puntuaciones
derivadas de la aplicación pueden tener sobre determinados grupos poblacionales, por
ejemplo, durante procesos de selección de personal, graduación o promoción profesional o
para el diagnóstico de personas en instituciones mentales, etc., todos estos contextos,
denominados por la literatura psicométrica, como de alto riesgo.

También podría gustarte