Science Fictions

1. La ciencia es una construcción social, basada en la revisión por pares y la publicación

La ciencia es una construcción social.

La revisión por pares es esencial. El proceso científico no solo implica realizar experimentos, sino también convencer a otros científicos de la validez de los resultados. Este aspecto social de la ciencia se refleja en el sistema de revisión por pares, donde expertos evalúan la investigación antes de su publicación. El proceso busca asegurar calidad y fiabilidad en la literatura científica.

La publicación es clave. Los científicos comunican sus hallazgos a través de revistas, conferencias y otras plataformas. Este intercambio de conocimiento permite un escrutinio colectivo, cuestionamiento y refinamiento de ideas. El sistema de publicación, aunque imperfecto, sirve como el principal medio para difundir descubrimientos científicos y construir consenso dentro de la comunidad científica.

2. La crisis de replicación revela una falta de fiabilidad generalizada en los hallazgos científicos

Al examinar más de cerca, los 'resultados' del Experimento de la Prisión de Stanford, tal como son, carecen de significado científico.

Abundan los problemas de reproducibilidad. La crisis de replicación ha expuesto problemas significativos en varios campos científicos. Intentos de replicación a gran escala han encontrado que muchos estudios publicados, particularmente en psicología y biomedicina, no producen los mismos resultados cuando se repiten.

Confianza erosionada. Esta crisis ha sacudido la confianza en los hallazgos científicos y ha resaltado la necesidad de prácticas de investigación más rigurosas. Ejemplos de resultados no replicables incluyen:

• Efectos de la postura de poder
• Estudios de priming en psicología social
• Muchos estudios preclínicos de cáncer
• Numerosos tratamientos médicos que luego se encontraron ineficaces

3. El fraude científico socava la confianza y desperdicia recursos

El fraude muestra cuán gravemente se puede explotar esa confianza.

Casos de alto perfil impactan. Instancias de fraude científico, como el escándalo de Macchiarini en medicina regenerativa y el vínculo fabricado entre vacunas y autismo por Wakefield, han tenido consecuencias devastadoras. Estos casos no solo desperdician recursos, sino que también pueden llevar a daño o muerte cuando se implementan tratamientos médicos fraudulentos.

Problemas sistémicos expuestos. El fraude revela debilidades en el sistema científico:

• Revisión por pares inadecuada
• Reticencia institucional a investigar conductas indebidas
• Presión para producir resultados innovadores
• Falta de transparencia de datos

La prevalencia del fraude, aunque difícil de cuantificar con precisión, probablemente sea mayor de lo que comúnmente se cree, con encuestas que sugieren que una minoría significativa de científicos admite prácticas de investigación cuestionables.

4. El sesgo de publicación distorsiona la literatura científica hacia resultados positivos

El "salami-slicing" no significa necesariamente que la ciencia contenida en cada una de las partes sea de mala calidad (aunque el hecho de que los investigadores estén dispuestos a aprovechar el sistema de publicación tan descaradamente no habla precisamente de su confiabilidad).

Problema del cajón de archivo. Los investigadores tienden a publicar estudios con resultados positivos mientras dejan sin publicar los hallazgos negativos o nulos. Esto crea una representación sesgada del conocimiento científico, donde la literatura parece apoyar ciertas hipótesis más fuertemente de lo que realmente lo hace el cuerpo total de investigación.

El meta-análisis revela sesgo. Al examinar gráficos de embudo en meta-análisis, los estudios faltantes (a menudo aquellos con tamaños de muestra pequeños y efectos pequeños) indican sesgo de publicación. Esta distorsión puede llevar a una sobreestimación de los tamaños de efecto y a una falsa confianza en las afirmaciones científicas. El sesgo afecta a varios campos, incluyendo:

• Psicología
• Medicina
• Ecología
• Economía

5. La manipulación de datos y el p-hacking conducen a conclusiones poco fiables

Los números son ruidosos.

Expediciones de pesca estadística. El p-hacking implica manipular datos o análisis para lograr resultados estadísticamente significativos (p < 0.05). Esto puede incluir:

• Informar selectivamente resultados
• Excluir puntos de datos "inconvenientes"
• Continuar recopilando datos hasta alcanzar significancia
• Probar múltiples pruebas estadísticas y solo reportar las "exitosas"

Proliferan los falsos positivos. Estas prácticas aumentan la probabilidad de resultados falsos positivos, llevando a un número inflado de hallazgos aparentemente significativos en la literatura. El enfoque en la significancia estadística a menudo eclipsa consideraciones más importantes, como el tamaño del efecto y la significancia práctica.

6. La negligencia en las prácticas de investigación compromete la integridad científica

Demasiados estudios científicos son demasiado pequeños.

Prevalecen los estudios con poca potencia. Muchos estudios, particularmente en campos como la neurociencia y la psicología, tienen tamaños de muestra insuficientes para detectar de manera confiable los efectos que afirman encontrar. Esto lleva a:

• Tamaños de efecto inflados
• Mala replicabilidad
• Recursos desperdiciados en investigaciones inconclusas

Abundan los errores básicos. La negligencia en las prácticas de investigación incluye:

• Errores computacionales
• Datos mal etiquetados
• Muestras contaminadas
• Falta de aleatorización o cegamiento adecuado de los estudios

Estos problemas, aunque a menudo no intencionales, pueden impactar significativamente la fiabilidad de los hallazgos científicos y desperdiciar valiosos recursos.

7. El bombo y la exageración distorsionan la comunicación científica

Los científicos quieren que su investigación suene como si fuera de ese tipo que grita Eureka, por lo que la analizan, la redactan y la publicitan en consecuencia.

Los comunicados de prensa exageran. Muchas oficinas de prensa universitarias e investigadores exageran las implicaciones de sus hallazgos, llevando a una cobertura mediática sensacionalista. Este bombo puede:

• Representar erróneamente la certeza de los resultados
• Exagerar aplicaciones prácticas
• Ignorar limitaciones importantes

Los libros de ciencia popular simplifican. Los autores de libros de ciencia popular a menudo presentan hallazgos complejos como verdades simples y definitivas, descuidando los matices e incertidumbres inherentes a la investigación científica. Esto puede crear expectativas poco realistas y malentendidos entre el público.

8. Los incentivos perversos en la academia promueven la cantidad sobre la calidad

El "salami-slicing" no significa necesariamente que la ciencia contenida en cada una de las partes sea de mala calidad (aunque el hecho de que los investigadores estén dispuestos a aprovechar el sistema de publicación tan descaradamente no habla precisamente de su confiabilidad).

Cultura de publicar o perecer. El éxito académico a menudo se mide por el conteo de publicaciones y el prestigio de las revistas, incentivando a los investigadores a:

• Priorizar la cantidad sobre la calidad
• Buscar resultados novedosos y positivos a expensas de métodos rigurosos
• Participar en prácticas de investigación cuestionables para aumentar la publicabilidad

Presiones de financiamiento distorsionan. La necesidad de asegurar subvenciones puede llevar a los investigadores a:

• Exagerar hallazgos preliminares
• Evitar investigaciones arriesgadas pero potencialmente innovadoras
• Enfocarse en temas de moda en lugar de trabajos importantes pero menos glamorosos

Estos incentivos contribuyen a muchos de los problemas en la investigación científica, desde el p-hacking hasta el sesgo de publicación.

9. La Ciencia Abierta y la preinscripción pueden mejorar la transparencia de la investigación

La preinscripción ha sido obligatoria para los ensayos clínicos financiados por el gobierno de EE. UU. desde 2000, y una condición previa para la publicación en la mayoría de las revistas médicas desde 2005.

Beneficios de la preinscripción. Al declarar públicamente los planes de investigación antes de la recopilación de datos, la preinscripción:

• Reduce el p-hacking y el HARKing (Hipotetizar Después de Conocer los Resultados)
• Distingue análisis confirmatorios de exploratorios
• Ayuda a combatir el sesgo de publicación al crear un registro de todos los estudios

Prácticas de Ciencia Abierta. Aumentar la transparencia a través de datos abiertos, métodos abiertos y publicación de acceso abierto puede:

• Facilitar intentos de replicación
• Permitir una revisión por pares más exhaustiva
• Aumentar la confianza pública en los hallazgos científicos

Estas prácticas representan un cambio cultural hacia una mayor responsabilidad y fiabilidad en la investigación científica.

10. Reformar la cultura científica es crucial para restaurar la fiabilidad

Arregla la ciencia, sugeriría, y la confianza seguirá.

Cambios sistémicos necesarios. Abordar los problemas en la investigación científica requiere reformas en múltiples niveles:

• Revisar las estructuras de incentivos en la academia
• Mejorar la educación estadística para los investigadores
• Fomentar estudios de replicación y resultados nulos
• Implementar procesos de revisión por pares más rigurosos

Cambio cultural esencial. Más allá de los cambios de política, es necesario un cambio fundamental en la cultura científica. Esto incluye:

• Valorar el rigor metodológico sobre la novedad
• Abrazar la incertidumbre y las limitaciones en la investigación
• Promover la colaboración sobre la competencia
• Fomentar un enfoque más crítico y escéptico hacia las afirmaciones científicas

Al abordar estos problemas sistémicos y normas culturales, la ciencia puede trabajar hacia una mayor fiabilidad y confianza pública.

Última actualización: November 23, 2024