Errores de Signo y Magnitud
Un error de signo ocurre cuando la dirección del efecto estimado (\(\hat{\theta}\)) no coincide con la dirección del efecto real (\(\theta\)).
Esto significa que la prueba sugiere un efecto positivo cuando en realidad es negativo, o viceversa.
La potencia de una prueba (\(1 - \beta\)) es la probabilidad de rechazar correctamente la hipótesis nula (\(H_0\)) cuando la hipótesis alternativa (\(H_a\)) es verdadera. Sin embargo:
Potencia baja aumenta el riesgo de error de signo:
Cuando la potencia es insuficiente (por ejemplo, en estudios con tamaños de muestra pequeños), la probabilidad de cometer un error de signo es mayor, ya que el estimador \(\hat{\theta}\) está más influenciado por el ruido.
En pruebas con baja potencia, incluso si la prueba es significativa (\(p < \alpha\)), \(\hat{\theta}\) puede tener un signo incorrecto debido a la alta varianza.
Distribuciones solapadas:
Un p-valor pequeño no protege contra un error de signo. Por ejemplo: - Si el nivel de significancia es \(\alpha = 0.05\), y se obtiene un \(p < 0.05\), no necesariamente significa que el signo del efecto estimado sea correcto.
Un error de magnitud ocurre cuando el tamaño del efecto estimado (\(\hat{\theta}\)) es mucho mayor (sobreestimación) o mucho menor (subestimación) que el efecto verdadero (\(\theta\)).
Gelman y Carlin (2014) destaca que los errores de magnitud, en particular la sobreestimación, están fuertemente influenciados por:
Significatividad y publicación selectiva:
En estudios donde la significatividad estadística (\(p < 0.05\)) se utiliza como criterio para reportar resultados, los efectos estimados tienden a estar sesgados hacia valores extremos.
Este sesgo se amplifica por el sesgo de publicación: los estudios con efectos grandes son más propensos a ser publicados, incluso si el efecto verdadero es mucho más pequeño.
Relación con la potencia:
Esto aumenta la probabilidad de que un resultado significativo sea una sobreestimación del efecto real.
Efecto estadístico de muestras pequeñas: