Revisiones sistemáticas retractadas. Cuando la síntesis falla

Se supone que una revisión sistemática es de lo más fiable que ofrece la ciencia sobre una pregunta. Reúne toda la evidencia y la evalúa con método. Pero ni ese formato está a salvo del error o del fraude. Este artículo mira las revisiones sistemáticas retractadas, es decir, las retiradas oficialmente por la revista porque sus conclusiones no se sostienen. Son pocas, pero merece la pena mirarlas, porque enseñan cómo puede fallar la síntesis de la evidencia.

Cuántas revisiones sistemáticas se han retractado

Según OpenAlex, al menos 964 de los trabajos con «revisión sistemática» en el título están marcados como retractados. Sobre las más de 700.000 que registra la base con ese criterio (un recuento por título que incluye algún falso positivo, como protocolos), eso es el 0,14 %, aproximadamente una de cada 730. Es una cifra baja, la inmensa mayoría de las revisiones nunca se retracta, así que no hay motivo para desconfiar del formato. Pero no es cero, y ese matiz importa cuando tu trabajo se apoya en una de ellas.

Un poco más que la media

Las revisiones sistemáticas se retractan a un ritmo algo mayor que el de la literatura en general. En el conjunto de OpenAlex, la tasa de retractación ronda el 0,04 %, mientras que en las revisiones sistemáticas sube al 0,14 %, unas tres veces más. Conviene tomar esa comparación con cautela. El conjunto global incluye muchos tipos de documento (datos, materiales, notas) que casi nunca se retractan y que rebajan la media, así que una comparación más justa sería frente a la tasa de otros artículos. Aun con esa salvedad, la señal es que el formato no está exento del problema.

Por qué se retracta una revisión

Una revisión sistemática puede caer por varios motivos, y no todos son culpa de sus autores.

• Estudios primarios fraudulentos. Si una revisión incluye ensayos con datos fabricados que después se retractan, sus resultados quedan tocados aunque el método de la revisión fuera impecable.
• Errores de método. Fallos en la búsqueda, en la extracción o en el análisis estadístico que invalidan las conclusiones. El fallo empieza antes de lo que parece. Al leer el objetivo de estas 368 retractadas vimos que el 42 % ni siquiera declara qué se proponía hacer, frente al 97,7 % de las revisiones Cochrane. Los tres vicios se repiten y están tipificados en nuestro análisis de cómo formulan la pregunta 2.368 revisiones publicadas.
• Solapamiento o plagio. Revisiones que copian otras o que reutilizan material sin declararlo.
• Conflictos de interés no declarados que sesgan la interpretación.

El primer motivo es el más difícil de prevenir. Una revisión sistemática puede quedar comprometida si se apoya en un estudio que luego se retracta, aunque ella misma esté bien hecha. No se trata de que una retractación contamine automáticamente todo lo que la cita, sino de que quien haya usado esos datos debería revisar si sus conclusiones aguantan sin ellos.

Cómo protegerte al hacer o leer una revisión

La buena noticia es que hay formas concretas de reducir el riesgo, y son parte del buen método.

• Comprueba las retractaciones. Antes de incluir un estudio, verifica que no esté retractado. Bases como Retraction Watch y los avisos de las propias editoriales ayudan.
• Evalúa el riesgo de sesgo. Una evaluación del riesgo de sesgo rigurosa detecta muchos de los estudios problemáticos antes de que hagan daño.
• Cuida la extracción. Una extracción de datos fiel y verificable, con la cita de la fuente delante, evita arrastrar errores de los estudios primarios a tu síntesis.
• Mira dos veces los resultados demasiado perfectos. En un campo confuso, una conclusión sorprendentemente nítida es motivo para revisar bien la fuente, un problema ligado a la sobreproducción de revisiones.

Que ningún dato se cuele sin verificar es el corazón de revisia. Cada dato extraído lleva su cita al lado para que compruebes la fuente en segundos, y tú validas cada decisión. Crea tu cuenta gratis.

Lo que enseñan las retractadas

Novecientas sesenta y cuatro revisiones retractadas sobre setecientas mil no son una epidemia, pero tampoco un detalle. Recuerdan que el rigor hay que cuidarlo en cada paso, desde los estudios que entran hasta la extracción de sus datos y las conclusiones. Una revisión sistemática vale lo que vale su punto más flojo. Por eso conviene revisar cada fase y no fiarlo todo a la etiqueta de «sistemática».

¿Quieres que tu revisión resista el escrutinio? En revisia cribas con inteligencia artificial y verificas con la cita al lado, en español y de principio a fin. Crea tu cuenta gratis y compruébalo.

Preguntas frecuentes