Resultados nulos: qué significan para la ciencia

Un equipo formula una pregunta, prepara una prueba y no encuentra el efecto que esperaba. Contarlo puede ahorrar a otros investigadores un camino repetido y completar el mapa de evidencia que consultan quienes toman decisiones. Pero «resultado nulo» no siempre significa «hemos demostrado que no existe efecto». La calidad del diseño, la precisión de la estimación y lo que se decidió medir antes de ver los datos son parte de la conclusión. Una revisión sobre ensayos clínicos advierte expresamente que un resultado no significativo puede ser inconcluso.

Ilustración conceptual generada para Gaia. Los gráficos no proceden de un experimento real ni contienen resultados publicados.

Tres frases que no son equivalentes

«No observamos una diferencia estadísticamente significativa» informa de un análisis bajo un método concreto. «Nuestros datos descartan un efecto de tamaño relevante» exige además un intervalo suficientemente preciso y un umbral de relevancia definido. «No existe efecto» es una afirmación todavía más fuerte, rara vez justificada por una sola prueba. La revisión metodológica disponible en PubMed Central distingue un ensayo incapaz de descartar un beneficio importante de otro que sí ofrece una estimación suficientemente precisa para una conclusión de ausencia práctica. No debe leerse un valor p aislado como veredicto final.

Imagina dos investigaciones que informan «sin diferencia significativa». La primera reunió pocos datos y su intervalo compatible incluye desde un beneficio apreciable hasta un perjuicio. La segunda estimó el efecto con mucha más precisión y su intervalo excluye el cambio que los investigadores habían definido como relevante. El titular podría parecer idéntico; el conocimiento que aportan, no. Este ejemplo es conceptual: no representa ensayos de Gaia ni inventa porcentajes de pacientes.

Por qué importa publicar lo que no salió como se esperaba

Si solo se conocen estudios con resultados llamativos, una revisión puede partir de un conjunto incompleto. El manual de Cochrane sobre evidencia faltante describe el riesgo de que falten estudios enteros o resultados concretos según la dirección o significación de los hallazgos. Eso es un problema de selección de evidencia, no una acusación automática contra un investigador o una revista.

Publicar con rigor un resultado nulo permite valorar también qué hipótesis se puso realmente a prueba, con qué método y bajo qué límites. No convierte un experimento mal diseñado en buena evidencia. Si el procedimiento no podía detectar un efecto relevante, el resultado puede ser útil para aprender del diseño, pero la conclusión sobre el fenómeno debe permanecer prudente. Tampoco corresponde usar «fracaso» como sinónimo de un resultado que contradice la expectativa inicial.

Una respuesta editorial: revisar el protocolo antes del desenlace

Los Registered Reports proponen que una revista examine la pregunta y el protocolo antes de conocer los resultados. Según el Center for Open Science, un proyecto que supera esa revisión puede obtener una aceptación en principio, condicionada a ejecutar correctamente el método registrado y a informar con claridad. Así, el signo del resultado deja de ser el criterio que decide si el trabajo merece publicarse.

La garantía es condicional. No significa que cualquier experimento vaya a imprimirse sin control, ni que los análisis exploratorios estén prohibidos. El propio Center for Open Science permite informar hallazgos exploratorios siempre que se distingan del plan confirmatorio. La distinción protege al lector: una idea descubierta después de mirar los datos puede ser una pista valiosa, pero no debe presentarse como una predicción que ya estaba fijada.

Diagrama original de Gaia basado en las orientaciones metodológicas de Cochrane y Center for Open Science; no representa datos de un estudio concreto.

Qué debería buscar un lector en una noticia científica

Antes de compartir un titular de «no funciona», busca la pregunta exacta y el resultado que se había definido como principal. Comprueba si la noticia enlaza el estudio completo, el protocolo o el registro. Después mira la estimación y su incertidumbre, no solo la palabra «significativo». Pregunta si el diseño permite descartar el efecto que importaría en la práctica. Si no hay suficiente detalle, lo honesto es escribir «no se encontró evidencia concluyente en este estudio», no «la ciencia ha descartado».

En ensayos clínicos hay además obligaciones de registro y difusión con ámbitos definidos. Los NIH explican sus políticas de registro e información de resultados para determinados ensayos. Ese ejemplo muestra que la transparencia puede exigirse por mecanismos distintos de la publicación en una revista; no es una norma universal para toda la investigación ni una descripción de la ley española.

Los resultados que contradicen una hipótesis son parte de la ciencia siempre que se expliquen con la misma exigencia que los resultados favorables. El valor informativo no está en celebrar un «no», sino en mostrar qué pregunta queda mejor respondida y cuál continúa abierta.

Lectura relacionada: cómo se investiga un medicamento hasta los ensayos clínicos.

Fuentes y agradecimientos

• Center for Open Science, Registered Reports: procedimiento y condiciones de aceptación en principio.
• Cochrane, capítulo sobre evidencia faltante en metaanálisis: riesgo de sesgo por estudios o resultados omitidos.
• Revisión sobre interpretación de intervalos en ensayos no significativos: diferencia entre ausencia de evidencia y conclusión precisa.
• NIH, política de registro e información de ensayos: ejemplo acotado de transparencia.

Agradecemos a estas organizaciones y autores la documentación pública consultada. No colaboraron con Gaia ni avalan esta síntesis.