Clase Extra Experimental - Tamaño Del Efecto - Fran Gullón

Psicología Experimental I Fran Gullón
Índices de tamaño del efecto

Índice
1.1. Concepto
1.2. ¿Dónde usarlos?
1.3. Fuera del ámbito
meta-analítico
1.4. En el meta-análisis
Pregunta 7 | PIR 2022
En el ámbito de las medidas del tamaño del efecto, para evaluar el

impacto de un determinado tratamiento, indique cuál de las
siguientes afirmaciones es correcta:
1. Eta cuadrado es equivalente al coeficiente de determinación de un modelo de regresión.
2. Omega cuadrado es un estimador sesgado por el tamaño muestral y se recomienda utilizar eta
cuadrado en su lugar.
3. Delta de Cliff es un estimador paramétrico del tamaño del efecto.
4. Sólo la “d” de Cohen puede informar acerca del tamaño de efecto de un tratamiento.

Psicología Experimental
1.1. Concepto
Tres grandes concepciones del tamaño del efecto:
1. Medida de la diferencia que produce un determinado efecto, tratamiento,

etc. entre diferentes grupos poblacionales.
2. Grado de generalidad que se supone que tiene un determinado tratamiento

A sobre otro B en la población.
3. Familia de índices que indican la magnitud del efecto del tratamiento.

1.1. Concepto
Responde a la pregunta ¿qué tal funciona un tratamiento X en diferentes

contextos?
Y no solo simplemente a si un tratamiento es efectivo o no (esto sería la

significación estadística, a través del valor p).
Interesa saber no solo si el tratamiento A es mejor que B, si no hasta que punto

puede generalizarse esta mejoría en la población.
Tanto dentro como fuera del meta-análisis.
Puesto que un resultado no significativo puede tener un tamaño del efecto

importante en determinadas poblaciones o condiciones del experimento.
Esto se entiende claro con el ejemplo de las series, un capítulo me puede aburrir
(no significativo en cuanto a diversión) pero la serie en general me puede
encantar (tamaño del efecto diversión importante).
Es, por lo tanto, complementario al valor de significación estadístico.

Si en un estudio ofrecemos ambos, mejor que mejor.
Permite comparar cuantitativamente los resultados de estudios realizados en

diferentes situaciones (por eso es tan usado en meta-análisis).
¿Cuánto de grande es mi efecto? Para eso usaremos las tres C.
• Contexto
• Contribución
• Criterio de Cohen
Las tres C.
• Contexto: un efecto puede ser pequeño, pero en su contexto real

desencadenar grandes cambios.
• Contribución: al conocimiento general. Si nuestros resultados van en contra
de toda la literatura previa, eso es un efecto importante.
• Criterio de Cohen: los puntos de corte para determinar si un efecto es
pequeño, mediano o grande. Los veremos en detalle.
Criterio
de Cohen
Extraído de:
Cohen, J. (1992). A power prime. Psychological Bulletin, 112, 155-159.
Una
clasificación
Extraído de:
Rendón-Macías, M.E. et al. (2021). Métodos estadísticos para el análisis del
tamaño del efecto. Revista Alergia México, 68(2), 128-136.
Extraído de:
Rendón-Macías, M.E. et al. (2021). Métodos estadísticos para el análisis del tamaño del efecto.
Revista Alergia México, 68(2), 128-136.
Algunos apuntes sobre los índices anteriores
• Delta de Glass es poco sensible a la variabilidad de los grupos control y experimental

(sesgos).
• Para corregir esto se inventa la g de Hedges (que no asume homogeneidad de las

varianzas grupales). Pero también sobreestima el tamaño del efecto (sesgo). Por eso
se desarrolla la corrección o el ajuste de g de Hedges.
• d de Cohen presenta sesgos cuando las varianzas no son homogéneas o cuando n es

menor que 50. Aunque para esto último existe un factor de corrección que se puede
calcular (fórmula de muestras pequeñas).
1.3. Fuera del ámbito meta-analítico
No reportar el tamaño del efecto fuera del ámbito del meta-análisis es uno de
los 7 fallos más comunes en los artículos científicos según la APA.
Dentro de chi-cuadrado es especialmente importante y por eso se han

desarrollado diversos índices a tal efecto.
Dentro de chi-cuadrado:
Tanto en chi-cuadrado como prueba de bondad de ajuste como en chi-cuadrado

como prueba de independencia. Puesto que ambas concluyen con un valor p que
nos habla de si los resultados son significativos o no, pero no nos hablan de su
tamaño del efecto.
Para chi-cuadrado existen tres grandes índices de tamaño del efecto:

1. Phi (φ)
2. V de Cramer (V)
3. Razón de probabilidades (OR)
Índice Phi (φ):

Es la raíz cuadrada de la división de chi-cuadrado entre “n”.
Solo es apropiado cuando se trabaja con una tabla de contingencia 2x2.
Índice V de Cramer (V):

Igual que el anterior, pero corrigiendo el cambio de tamaño de la tabla de
contingencia. Por eso se debe usar en tablas más grandes que 2x2.
Índice de Razón de probabilidades (OR):

Es igual que Phi pero cuando interesa calcular la probabilidad de éxito en un
grupo de tratamiento en relación a esa misma probabilidad en un grupo control.
Valores de referencia para el tamaño del efecto en chi-cuadrado

Phi
Efecto pequeño Efecto medio Efecto grande
A partir de 0’10 A partir de 0’30 A partir de 0’50
V de Cramer
Cambian los valores de referencia cuando aumentan los grados de libertad de chi-cuadrado.
A mayor cantidad de grados de libertad, más pequeño debe ser el valor obtenido para
considerarse un efecto pequeño, mediano o grande.
Por ejemplo, con 5 grados de libertad, un efecto grande sería a partir de 0’22.
Razón de probabilidades
No existen valores específicos estandarizados para este índice, si no que cambian según el
estudio concreto. Aunque como regla general, cuanto más lejos esté el valor de 1, mayor es
la probabilidad de que el tratamiento tenga un efecto real.
Otros ámbitos distintos a chi-cuadrado y sus criterios de Cohen

1.4. En el meta-análisis
• “Análisis de análisis”: resumen cuantitativo de estudios previamente

realizados.
• Variable que nos interesa: tamaño del efecto (proporción de la varianza

total explicada por la variable estudiada).
Hay métodos basados en la magnitud de las DIFERENCIAS entre los grupos y

métodos basados en la CORRELACIÓN (proporción de varianza explicada).
Hay métodos basados en la magnitud de las DIFERENCIAS entre los grupos y métodos basados
en la CORRELACIÓN (proporción de varianza explicada).
MÉTODOS BASADOS EN LAS DIFERENCIAS MÉTODOS BASADOS EN LA CORRELACIÓN
Las d de Cohen r de Pearson

Las g de Hedges R2, Coeficiente de determinación
La delta de Glass Phi y V de Cramer
Razón de probabilidades Eta cuadrado (sesgado por “n”)
Riesgo relativo Omega cuadrado y f de Cohen
Delta de Cliff (no paramétrico) Epsilon cuadrado (muy poco usado)


Breve recordatorio final
Todos los métodos e índices vistos en esta clase se basan en la estadística clásica
o frecuentista.
En los últimos años han surgido algunas propuestas de índices del tamaño del
efecto desde una perspectiva bayesiana.
¡No desesperéis con todo este tema, que no es tan complejo como pudiera parecer!
¡Muchas gracias
por tu atención!
Psicología Experimental I Academia PIR

Clase Extra Experimental - Tamaño Del Efecto - Fran Gullón

Cargado por

Copyright:

Formatos disponibles

Clase Extra Experimental - Tamaño Del Efecto - Fran Gullón

Cargado por

Información del documento

Título original

Derechos de autor

Formatos disponibles

Compartir este documento

Compartir o incrustar documentos

Opciones para compartir

¿Le pareció útil este documento?

¿Este contenido es inapropiado?

Copyright:

Formatos disponibles

Clase Extra Experimental - Tamaño Del Efecto - Fran Gullón

Cargado por

Copyright:

Formatos disponibles

Psicología Experimental I Fran Gullón

Índices de tamaño del efecto

En el ámbito de las medidas del tamaño del efecto, para evaluar el

1. Eta cuadrado es equivalente al coeficiente de determinación de un modelo de regresión.

3. Delta de Cliff es un estimador paramétrico del tamaño del efecto.

En el ámbito de las medidas del tamaño del efecto, para evaluar el

1. Eta cuadrado es equivalente al coeficiente de determinación de un modelo de regresión.

3. Delta de Cliff es un estimador paramétrico del tamaño del efecto.

Tres grandes concepciones del tamaño del efecto:

1. Medida de la diferencia que produce un determinado efecto, tratamiento,

2. Grado de generalidad que se supone que tiene un determinado tratamiento

3. Familia de índices que indican la magnitud del efecto del tratamiento.

Responde a la pregunta ¿qué tal funciona un tratamiento X en diferentes

Y no solo simplemente a si un tratamiento es efectivo o no (esto sería la

Interesa saber no solo si el tratamiento A es mejor que B, si no hasta que punto

1.2. ¿Dónde usarlos?

Tanto dentro como fuera del meta-análisis.

Puesto que un resultado no significativo puede tener un tamaño del efecto

1.2. ¿Dónde usarlos?

Es, por lo tanto, complementario al valor de significación estadístico.

Permite comparar cuantitativamente los resultados de estudios realizados en

¿Cuánto de grande es mi efecto? Para eso usaremos las tres C.

1.2. ¿Dónde usarlos?

• Contexto: un efecto puede ser pequeño, pero en su contexto real

Algunos apuntes sobre los índices anteriores

• Delta de Glass es poco sensible a la variabilidad de los grupos control y experimental

• Para corregir esto se inventa la g de Hedges (que no asume homogeneidad de las

• d de Cohen presenta sesgos cuando las varianzas no son homogéneas o cuando n es

1.3. Fuera del ámbito meta-analítico

Dentro de chi-cuadrado es especialmente importante y por eso se han

Tanto en chi-cuadrado como prueba de bondad de ajuste como en chi-cuadrado

Para chi-cuadrado existen tres grandes índices de tamaño del efecto:

Índice Phi (φ):

Índice V de Cramer (V):

Índice de Razón de probabilidades (OR):

Valores de referencia para el tamaño del efecto en chi-cuadrado

Otros ámbitos distintos a chi-cuadrado y sus criterios de Cohen

• “Análisis de análisis”: resumen cuantitativo de estudios previamente

• Variable que nos interesa: tamaño del efecto (proporción de la varianza

Hay métodos basados en la magnitud de las DIFERENCIAS entre los grupos y

MÉTODOS BASADOS EN LAS DIFERENCIAS MÉTODOS BASADOS EN LA CORRELACIÓN

Las d de Cohen r de Pearson

En el ámbito de las medidas del tamaño del efecto, para evaluar el

1. Eta cuadrado es equivalente al coeficiente de determinación de un modelo de regresión.

3. Delta de Cliff es un estimador paramétrico del tamaño del efecto.

En el ámbito de las medidas del tamaño del efecto, para evaluar el

1. Eta cuadrado es equivalente al coeficiente de determinación de un modelo de regresión.

3. Delta de Cliff es un estimador paramétrico del tamaño del efecto.

Breve recordatorio final

Psicología Experimental I Academia PIR

También podría gustarte