¿Qué nos dice el análisis de la curva Z?

Área de la Ciencia:

• Ciencia psicológica
• Metodología de la investigación
• Inferencia estadística

Sus antecedentes:

• El análisis de la curva Z es una herramienta estadística propuesta para evaluar la credibilidad de los hallazgos de la investigación.
• Sin embargo, su interpretación y sus fundamentos estadísticos a menudo se malinterpretan.
• La Tasa Esperada de Descubrimiento (EDR), una métrica clave en el análisis de la curva Z, es conceptualmente distinta de la potencia pre-datos y su vínculo con la credibilidad no está claro.

Objetivo del estudio:

• Aclarar las propiedades estadísticas y la interpretación del análisis de la curva Z.
• Evaluar la fiabilidad de las aplicaciones de la curva Z en la investigación publicada.
• Evaluar la validez de las afirmaciones sobre la credibilidad de la investigación basadas en el análisis de la curva Z, particularmente en la ciencia de la emoción.

Principales métodos:

• Revisión de 37 artículos que informaron 278 aplicaciones de la curva Z.
• Análisis de problemas metodológicos en estudios de curva Z reportados, incluida la independencia de los valores p y el estado de los hallazgos focales.
• Simulaciones por computadora para evaluar el sesgo y la consistencia de los estimadores de la curva Z.

Principales resultados:

• Una gran mayoría (77,3%) de las aplicaciones de la curva Z revisadas concluyeron que existía un sesgo de publicación.
• Sin embargo, muchos estudios presentaban deficiencias metodológicas: el 48,2% no especificaba si los valores p correspondían a los hallazgos focales y el 69,1% podría haber violado el supuesto de independencia.
• Las simulaciones indicaron que los estimadores de la curva Z pueden ser sesgados, inconsistentes y no cumplir la Ley de los Grandes Números, lo que lleva a conclusiones potencialmente engañosas.

Conclusiones:

• No se recomienda el análisis de la curva Z para evaluar los hallazgos de la investigación debido a una interpretación errónea y limitaciones estadísticas.
• La Tasa Esperada de Descubrimiento (EDR) no es una medida fiable de credibilidad.
• Los métodos meta-analíticos tradicionales son más apropiados y fiables para extraer conclusiones estadísticas sobre los hallazgos de la investigación.