¿Cómo afecta el sesgo a la ciencia?

Por qué la mayoría de los hallazgos de investigación publicados son falsos

Sea u la proporción de análisis probados que no habría sido “hallazgos de investigación”, pero sin embargo terminaron presentados y reportados como tales, debido al sesgo. El sesgo no debe confundirse con la variabilidad aleatoria que hace que algunos hallazgos sean falsos por casualidad, aunque el diseño del estudio, los datos, el análisis y la presentación sean perfectos. El sesgo puede implicar manipulación en el análisis o informe de los resultados. La información selectiva o distorsionada es una forma típica de dicho sesgo. Podemos asumir que u No depende de si existe una verdadera relación o no. Esta no es una suposición irrazonable, ya que normalmente es imposible saber qué relaciones son verdaderas. En presencia de sesgo (Tabla 2), uno obtiene PPV = ([1 – β] R + u β R ) / ( R + α – β R + uu α + u β R ), y PPV disminuye con el aumento u , a menos que 1 – β ≤ α, es decir, 1 – β ≤ 0.05 para la mayoría de las situaciones. Por lo tanto, a medida que aumenta el sesgo, las posibilidades de que un hallazgo de investigación sea verdadero disminuyen considerablemente . Esto se muestra para diferentes niveles de potencia y para diferentes probabilidades previas al estudio en la Figura 1. Por el contrario, los verdaderos hallazgos de investigación pueden anularse ocasionalmente debido a un sesgo inverso . Por ejemplo, con grandes errores de medición, las relaciones se pierden en ruido [12], o los investigadores usan datos de manera ineficiente o no notan relaciones estadísticamente significativas, o pueden existir conflictos de interés que tienden a “enterrar” hallazgos significativos [13]. No existe una buena evidencia empírica a gran escala sobre la frecuencia con que puede producirse dicho sesgo inverso en diversos campos de investigación. Sin embargo, probablemente sea justo decir que el sesgo inverso no es tan común

Desde la publicación de este documento, se han realizado algunos esfuerzos de retractación por parte de revistas científicas, pero no hay muchos incentivos para los estudios de replicación.

Nota al margen : el sesgo por sí solo no es la única razón para la mala ciencia , aunque entiendo que mi enlace y los textos de bloque seleccionados pueden inducir a error a algunas personas a asumir eso erróneamente. Las secciones que elegí son solo para responder a la pregunta dada.

Este siguiente enlace se desvía un poco de la pregunta, pero creo que tiene valor como introducción para algunas de las formas en que se produce el sesgo.

9 tipos de sesgo de investigación y cómo evitarlos – iModerate

Uno podría sugerir que el sesgo, y el reconocimiento de la naturaleza generalizada del sesgo, es la base del “método científico”, ya que las diversas técnicas de la ciencia son en gran parte métodos para erradicar y tratar con nuestros diversos sesgos. El sesgo de confirmación es muy prominente. Tendemos a ver lo que esperamos ver. Por lo tanto, el diseño de un buen análisis estadístico intenta demostrar lo contrario, tratando de probar que los resultados NO se deben a la manipulación específica. Y la necesidad de una revisión por pares: que no es suficiente para reclamar sus resultados, debe “mostrar su trabajo” para que todos puedan hacer agujeros o replicarlo. Otras respuestas brindarán más detalles acerca de cómo pueden aparecer los errores. Afortunadamente, la ciencia tiene una sorprendente tendencia a “autocurarse”; dado el tiempo suficiente, la mayoría de los errores serán detectados y revertidos.

Pero la presencia de este tipo de técnica, para evitar un tipo particular de error, sugiere (creo que es correcto) que los errores de sesgo son fuertes y generalizados. Dudo que los atrapemos a todos.

El problema con los científicos – Número 24: Error – Nautilus tiene una discusión.

Puede agregar todos los sesgos que la psicología conoce, como el sesgo de confirmación a los mencionados.

El trabajo de Thomas Kuhn sugiere que esencialmente hay que esperar a que muera una generación de científicos, cuando la próxima sin los sesgos idénticos asuma el control.