HTML Revisiones Rápidas y Síntesis de Evidencia en Crisis: 40 Horas, No 40 Días

En la hora de la crisis, la velocidad salva vidas.

Pero la prisa sin sabiduria las quita.

Oh, tu que buscas guiar a los sanadores,

¿has presenciado lo que sucede cuando la evidencia se mueve demasiado lento?

¿Y has visto lo que sucede cuando se mueve demasiado rapido?

Enero 2020

Un nuevo coronavirus emerge en Wuhan.

Los pacientes estan muriendo. No hay tratamiento.
El mundo exige respuestas.

¿Cuanto tiempo toma una revision sistematica?

Revision Sistematica Tradicional

12-24
Meses para completar
6-12
Meses hasta la publicacion

Cronologia de la Pandemia

7
Dias para duplicar casos
Ahora
Cuando se necesitan respuestas

¿No has visto como respondio el mundo?

200,000+
Articulos COVID solo en 2020
30,000+
Preprints sin revision por pares
33+
Retracciones importantes

La velocidad creo una inundacion. ¿Quien separaria la verdad del ruido?

La Pregunta Que Nos Persigue

La Historia de Dos Respuestas Pandemicas:

En marzo de 2020, Francia aprobo la hidroxicloroquina para COVID-19 basandose en un estudio pequeño y defectuoso. Millones la tomaron antes de que ensayos mas grandes mostraran que no habia beneficio—y posible daño cardiaco. Mientras tanto, el ensayo RECOVERY del Reino Unido probo la dexametasona rapida pero rigurosamente. En 3 meses, demostraron que reducia las muertes en un tercio en casos graves.

Ambos paises enfrentaron la misma urgencia. Uno actuo con evidencia debil, otro genero evidencia solida rapidamente.

La velocidad sin rigor costo vidas. El rigor rapido las salvo.

Eres un ministro de salud en marzo de 2020. Un estudio pequeño afirma que un medicamento comun cura el COVID-19. ¿Que haces?

Camino A: Aprobar la hidroxicloroquina inmediatamente basandose en este estudio prometedor
→ Millones toman un medicamento ineficaz con riesgos cardiacos; pacientes con lupus pierden acceso a su medicacion
Camino B: Financiar un ensayo rapido pero riguroso (como RECOVERY) para generar evidencia definitiva
→ En 3 meses, demostrar que la dexametasona funciona—salvando mas de 1 millon de vidas globalmente

Al finalizar, seras capaz de:

  • Realizar una revision rapida en 40 horas, no 40 dias
  • Saber cuando "suficientemente bueno" es realmente suficiente
  • Identificar fraude y sesgo en evidencia que se mueve rapido
  • Usar arboles de decision para compromisos metodologicos
  • Entender las revisiones sistematicas vivas
  • Aprender de los desastres de hidroxicloroquina e ivermectina

Contempla los Cinco Principios de la Evidencia Rapida:

1. Velocidad sin rigor es temeridad.

2. Rigor sin velocidad es abandono.

3. Un estudio defectuoso en un metaanalisis envenena todo.

4. La transparencia revela; el ocultamiento engaña.

5. La evidencia viva sirve a los vivos.

La Catastrofe de Surgisphere

El Relato de la Base de Datos Fantasma:

En mayo de 2020, The Lancet publico un estudio de 96,000 pacientes de 671 hospitales en seis continentes. Mostraba que la hidroxicloroquina aumentaba las tasas de mortalidad. La OMS detuvo ensayos en todo el mundo.

Pero los datos provenian de Surgisphere—una empresa con 11 empleados, incluyendo un autor de ciencia ficcion y una modelo de contenido para adultos. La base de datos no existia.

En 13 dias, el articulo fue retractado. Pero los ensayos ya se habian detenido. Se perdio tiempo. La confianza se quebro.
Fuente: Mehra MR et al. Lancet 2020 (RETRACTADO). Retraccion: Lancet 2020;395:1820.

¿Como pudieron dos de las revistas medicas mas prestigiosas—

The Lancet y NEJM—publicar datos fabricados?

13
Dias hasta la retraccion
0
Auditores con acceso a datos
100+
Ensayos afectados

La presion por la velocidad rompio a los guardianes.

Arbol de decision: ¿Pueden los investigadores independientes acceder a los datos crudos? Si SI, verificar si el estudio esta pre-registrado. Si esta pre-registrado, mayor confianza - proceder con evaluacion estandar. Si no esta pre-registrado, confianza moderada - verificar cambio de resultados. Si NO hay acceso a datos, baja confianza - solicitar datos antes de incluir.
Escenario
Es marzo de 2020. Un preprint afirma que un medicamento comun cura el COVID-19 en el 100% de los pacientes. El estudio tiene 36 pacientes, sin grupo de control, y fue publicado hace 2 dias. El director de tu hospital pregunta si deberian almacenar el medicamento.

¿Que deberias aconsejar?

Considera los Tres Testigos de 2020:

Dr. Anthony Fauci, Marzo 2020
"La evidencia es realmente bastante evidente... de que hay una disminucion significativa en la propagacion del virus."
Director General de la OMS, Mayo 2020
"Hemos suspendido temporalmente el brazo de hidroxicloroquina del Ensayo Solidaridad."
Cochrane, Diciembre 2020
"La hidroxicloroquina probablemente tiene poco o ningun efecto sobre la mortalidad y la progresion a ventilacion mecanica."

Nueve meses de la esperanza al veredicto. ¿Cuantas decisiones se tomaron en el intermedio?

El Envenenamiento por Cloroquina

Nigeria, Marzo 2020:

A los pocos dias del anuncio sobre hidroxicloroquina, los nigerianos comenzaron a automedicarse con cloroquina—un medicamento relacionado pero mas toxico.

Tres muertes. Multiples hospitalizaciones por sobredosis. El centro de toxicologia del estado de Lagos se vio abrumado.

En Arizona, un hombre murio despues de beber limpiador de peceras que contenia fosfato de cloroquina. Su esposa sobrevivio pero fue hospitalizada.

Las afirmaciones prematuras de evidencia mataron a personas que nunca tuvieron COVID-19.
Fuentes: Centro de Control de Enfermedades de Nigeria, Marzo 2020; Banner Health, Arizona, Marzo 2020.

La Historia de la Talidomida:

En 1957, la talidomida se comercializo como un sedante seguro para mujeres embarazadas. El fabricante compartio datos de seguridad incompletos—los estudios en animales fueron limitados, los ensayos en humanos breves. Los medicos, confiando en la reputacion de la empresa, la recetaron ampliamente.

Para 1961, mas de 10,000 niños nacieron con malformaciones severas de extremidades. El "mapa" de seguridad tenia un vacio fatal que nadie revelo.

Evidencia incompleta, presentada como completa, causo una tragedia que remodelo la regulacion de medicamentos para siempre.

Eres un regulador de medicamentos en 1957. Una empresa farmaceutica presenta la talidomida para aprobacion con datos de seguridad limitados. ¿Que haces?

Camino A: Aceptar los datos de seguridad limitados y aprobar rapidamente—las mujeres embarazadas necesitan alivio de las nauseas matutinas
→ Mas de 10,000 niños nacen con defectos de nacimiento graves; la tragedia remodela la regulacion de medicamentos para siempre
Camino B: Exigir estudios de seguridad completos incluyendo toxicidad reproductiva antes de la aprobacion
→ Frances Kelsey de la FDA tomo este camino para EE.UU.—los niños estadounidenses se salvaron de la tragedia
Arbol de decision: ¿Podria actuar sobre este hallazgo causar daño directo? Si si, no compartir - esperar confirmacion. Si no, verificar si NO actuar podria causar mayor daño. Si si, compartir con advertencias preliminares claras. Si no hay urgencia, esperar para completar el analisis.

En la hora de la crisis, la velocidad salva vidas.

Modulo 1: El Compromiso

Velocidad sin rigor es temeridad.

Rigor sin velocidad es abandono.

¿Has considerado lo que sacrificamos por la velocidad?

Una revision sistematica es exhaustiva porque es lenta.
Una revision rapida es veloz porque hace compromisos.
¿Cuales son estos compromisos?

Elemento Revision Sistematica Revision Rapida
Bases de datos buscadas 5-10+ 1-3
Literatura gris Extensa Limitada o ninguna
Cribado Dual independiente Simple + verificacion
Evaluacion de calidad Herramienta completa Abreviada
Cronograma 12-24 meses 1-6 semanas

La Respuesta de Cochrane

Marzo 2020, Ginebra
"En marzo de 2020, el grupo de Metodos de Revisiones Rapidas de Cochrane lanzo orientacion sobre como realizar una revision rapida, que agilizo sus procesos para crear revisiones de alta calidad muy rapidamente."

Los guardianes del rigor mismos dijeron: "Debemos movernos mas rapido."

¿Es la decision urgente (vidas en juego AHORA)?
SI
¿Es la evidencia existente escasa/conflictiva?
SI
REVISION RAPIDA
40 horas
NO
ACTUALIZAR RS
EXISTENTE
NO
SISTEMATICA COMPLETA
Cronograma estandar

¿Que riesgos aceptamos?

Estudios perdidos: La busqueda limitada puede omitir evidencia relevante

Sesgo de seleccion: Un solo cribador puede tener puntos ciegos sistematicos

Brechas de calidad: La evaluacion abreviada puede omitir fallas fatales

Sesgo de publicacion: Menos literatura gris significa mas sesgo

Estos riesgos deben declararse explicitamente en cada revision rapida.

Y sin embargo, considera esto:

La Historia del Clima del Dia D:

El 4 de junio de 1944, Eisenhower enfrento una decision imposible. Su meteorologo, el Capitan de Grupo Stagg, no podia garantizar buen clima—solo 80% de confianza de un breve claro el 6 de junio. Esperar certeza significaba retrasar la invasion por semanas, arriesgando su descubrimiento.

Eisenhower decidio: "OK, vamos." El pronostico del 80% fue correcto. La invasion tuvo exito.

Stagg dijo despues que los pronosticos perfectos eran imposibles—pero los pronosticos accionables salvaron la guerra. A veces 80% de certeza hoy supera al 95% de certeza demasiado tarde.

Eres el General Eisenhower el 4 de junio de 1944. Tu meteorologo da 80% de confianza de una breve ventana de clima el 6 de junio. Esperar certeza significa retrasar semanas y arriesgar el descubrimiento de la fuerza de invasion.

Camino A: Esperar 95% de certeza antes de lanzar la invasion
→ Retraso de semanas; riesgo de descubrimiento aleman; proxima marea favorable no hasta finales de junio; potencial fracaso de toda la operacion
Camino B: Actuar con el pronostico del 80%—lanzar el 6 de junio
→ El pronostico fue correcto; la invasion tuvo exito; el rumbo de la guerra cambio. La evidencia accionable supero a la evidencia perfecta.

El Relato de los Dos Metaanalisis

Julio 2020: La Paradoja de las Mascarillas

Dos metaanalisis sobre la misma pregunta: "¿Las mascarillas previenen la transmision de COVID-19?"

El primero combino 14 estudios observacionales: OR 0.35—¡las mascarillas reducen el riesgo en 65%!
El segundo incluyo solo 3 ECAs: OR 0.91—sin efecto significativo.

Misma pregunta. Mismo año. Respuestas opuestas. ¿Por que?

Que estudios incluyes determina que verdad encuentras.

Estudios Observacionales

65%
Reduccion del riesgo

Mayor riesgo de confusion

Solo ECAs

9%
Reduccion del riesgo (NS)

Menor poder, mayor validez

En revisiones rapidas, tus criterios de inclusion SON tu conclusion.

Arbol de decision: ¿Hay ECAs disponibles? Si si, verificar si son lo suficientemente grandes. Si son grandes, preferir ECAs para mayor certeza. Si no son grandes, presentar ambos y declarar incertidumbre. Si no hay ECAs disponibles, usar observacional pero degradar certeza.
Escenario
Tu ministerio necesita evidencia sobre suplementacion de vitamina D para prevencion de COVID-19 en 72 horas. Existe una revision Cochrane completa de 2019 sobre vitamina D e infecciones respiratorias, pero nada especifico de COVID-19.

¿Cual es el enfoque mas apropiado?

La Historia de Dos Ciudades en 1918:

En septiembre de 1918, Filadelfia y San Luis detectaron casos de influenza. El comisionado de salud de Filadelfia espero mas datos antes de actuar. El 28 de septiembre, permitio un desfile masivo—200,000 personas. En dias, los hospitales se desbordaron; 12,000 murieron en semanas.

San Luis, con los mismos datos incompletos, cerro escuelas y prohibio reuniones inmediatamente. Su tasa de mortalidad fue la mitad de la de Filadelfia.

La luz tenue de la accion temprana supero a la luz brillante que llego demasiado tarde.

Eres el comisionado de salud de Filadelfia en septiembre de 1918. Estan apareciendo casos de una gripe mortal. Un desfile masivo de Bonos de Libertad esta programado para el 28 de septiembre con 200,000 asistentes esperados. ¿Que haces?

Camino A: Esperar mas datos antes de actuar—el desfile elevara la moral para el esfuerzo de guerra
→ 12,000 muertos en Filadelfia en semanas; hospitales desbordados; cuerpos acumulados en morgues
Camino B: Actuar con datos incompletos como San Luis—cancelar reuniones publicas inmediatamente
→ San Luis tuvo la mitad de la tasa de mortalidad de Filadelfia; la accion temprana salvo miles de vidas

El Giro del Tocilizumab

El Relato del Medicamento Juzgado Demasiado Pronto:

Febrero 2021: Multiples ensayos pequeños de tocilizumab (un inhibidor de IL-6) no mostraron beneficio. Los titulares lo declararon inutil. Algunos hospitales dejaron de usarlo.

Junio 2021: El ensayo RECOVERY reporta 4,116 pacientes. Mortalidad reducida en 14%. La OMS lo recomienda inmediatamente.

Los ensayos pequeños tenian poco poder. Encontraron "sin evidencia de efecto"—que no es "evidencia de ningun efecto." El ensayo grande encontro la verdad.
Fuente: RECOVERY Collaborative. Lancet 2021;397:1637-1645. REMAP-CAP confirmo resultados similares.

¿Cual es la diferencia entre estas dos afirmaciones?

"Sin evidencia de efecto"

p = 0.08
200 pacientes, poco poder

No puede descartar beneficio

"Evidencia de ningun efecto"

p = 0.92
4,000 pacientes, poder adecuado

Excluye beneficio con confianza

Ausencia de evidencia no es evidencia de ausencia—a menos que tu estudio fuera lo suficientemente grande para detectarlo.

Arbol de decision: ¿El estudio reporto calculo de poder? Si si, verificar si lograron reclutamiento objetivo. Si lo lograron, estudio tiene poder adecuado y resultados negativos pueden confiarse. Si no lo lograron, poco poder y "sin efecto" puede ser falso negativo. Si no hay calculo de poder reportado, asumir poco poder y calcular poder post-hoc.

La Reversion del Ventilador

Marzo 2020: "Intubar Temprano"
Orientacion inicial: pacientes con bajo oxigeno debian intubarse rapidamente para prevenir deterioro.

Abril 2020: "Intubar Despues"
Los clinicos observaron que muchos pacientes toleraban bajo oxigeno ("hipoxia feliz"). El posicionamiento prono a menudo prevenia la necesidad de ventilacion.

Resultado: La practica cambio a mitad de la pandemia basada en observacion del mundo real, no ECAs. La intubacion temprana pudo haber causado muertes evitables.

Cuando los ECAs son imposibles, observa cuidadosamente. Documenta sistematicamente. Comparte transparentemente.

Velocidad sin rigor es temeridad.

Rigor sin velocidad es abandono.

Modulo 2: El Metodo

Cuarenta horas hacia la verdad—si conoces el camino.

La Revision Rapida de 40 Horas

1
Definir Pregunta
2 horas
2
Estrategia de Busqueda
4 horas
3
Cribar y Seleccionar
12 horas
4
Extraer y Evaluar
14 horas
5
Sintetizar
8 horas

El Marco PICO—Mas Preciso Que Nunca

Poblacion: Adultos hospitalizados con COVID-19 (¡estrecho!)

Intervencion: Dexametasona 6mg diarios

Comparador: Atencion estandar / placebo

Resultado: Mortalidad a 28 dias (solo primario)

En revisiones rapidas, la pregunta debe ser quirurgica. Las preguntas amplias crean busquedas interminables. Las preguntas estrechas permiten velocidad.

NO HACER: Busqueda Sistematica

MEDLINE + EMBASE + Cochrane + CINAHL + PsycINFO + Web of Science + literatura gris + busqueda manual

Tiempo: 40+ horas

HACER: Busqueda Enfocada

PubMed + Biblioteca Cochrane + un servidor de preprints (medRxiv)

Tiempo: 4 horas

Documenta lo que buscaste Y lo que deliberadamente excluiste.

El atajo critico:

Cribado simple con verificacion.

1
Cribador primario
20%
Verificado por segundo revisor
100%
De exclusiones verificadas

Esto ahorra 50% del tiempo de cribado mientras detecta la mayoria de errores.

¿Cuantos estudios incluiras?
≤10
Evaluacion de calidad completa
Usar herramienta estandar (RoB 2, ROBINS-I)
>10
Evaluacion abreviada
Solo dominios clave

Dominios clave: aleatorizacion, cegamiento, datos faltantes, reporte selectivo

El Paso Final: Sintesis

Advertencia: El metaanalisis en revisiones rapidas es territorio peligroso.

Puede que no hayas buscado exhaustivamente. Puede que hayas omitido estudios. Una estimacion combinada de una busqueda incompleta puede crear falsa confianza.

Prefiere la sintesis narrativa. Si debes combinar, declara las limitaciones fuertemente.

Extension PRISMA para Revisiones Rapidas (2024)

Al reportar revisiones rapidas, DEBES incluir:

  • Atajos tomados: ¿Que se simplifico vs. RS completa?
  • Restricciones de tiempo: ¿Por que fue necesaria una revision rapida?
  • Bases de datos buscadas: Y por que se excluyeron otras
  • Numero de cribadores: Cribado simple vs. dual
  • Fecha de busqueda: Evidencia actual a [FECHA]
  • Seccion de limitaciones: Que pudo haberse omitido
Fuente: Stevens A et al. Extension PRISMA-RR. J Clin Epidemiol 2024. DOI: 10.1016/j.jclinepi.2024.01.015

El Relato de la Reversion del Remdesivir

Noviembre 2020: Dos Gigantes en Desacuerdo

La FDA otorgo Autorizacion de Uso de Emergencia: "El remdesivir acorta el tiempo de recuperacion."
La OMS recomendo en contra: "Sin beneficio de mortalidad, alto costo."

Mismo medicamento. Misma base de evidencia. Conclusiones opuestas.

¿La diferencia? La FDA priorizo resultados subrogados (tiempo de recuperacion). La OMS priorizo resultados centrados en el paciente (mortalidad).
Fuentes: FDA EUA Oct 2020; Consorcio del Ensayo Solidaridad de la OMS, NEJM 2021.
Arbol de decision: ¿Es medible el resultado duro? Si si, usar resultados duros para mayor certeza. Si no, verificar si el subrogado esta validado. Si el subrogado esta validado, usar con precaucion y notar indirectez. Si el subrogado no esta validado, incertidumbre mayor - declarar explicitamente.
Escenario
Estas realizando una revision rapida sobre un nuevo antiviral. Encuentras 47 resumenes potencialmente relevantes. Tu cronograma: 40 horas totales, 12 horas asignadas para cribado.

¿Que enfoque de cribado es apropiado?

Segun PRISMA-RR, ¿que NO es requerido en un reporte de revision rapida?

El Descubrimiento del Posicionamiento Prono

El Relato de la Solucion Simple:

Durante decadas, los pacientes de UCI con insuficiencia respiratoria yacian boca arriba. En COVID-19, los clinicos notaron algo notable.

Voltear a los pacientes boca abajo—pronacion—mejoraba dramaticamente los niveles de oxigeno. Sin medicamento requerido. Sin costo. Disponible en todas partes.

Metaanalisis de 6 ECAs: Mortalidad reducida en 25% en pacientes con SDRA severo.

A veces el avance no es una molecula. A veces es una posicion.
Fuente: Munshi L et al. Lancet Respir Med 2017;5:627-38. Pronacion COVID-19: Ehrmann S et al. Lancet Respir Med 2021.

La Historia del Error de Excel:

En 2010, los economistas de Harvard Reinhart y Rogoff publicaron una investigacion influyente: paises con deuda superior al 90% del PIB tenian crecimiento negativo. Gobiernos en todo el mundo la citaron para justificar la austeridad.

Tres años despues, un estudiante de posgrado encontro que su hoja de calculo de Excel excluia cinco paises debido a un error de codificacion. Cuando se corrigio, el umbral del 90% desaparecio.

Un error de hoja de calculo, sin verificar, influencio politicas que afectaron a millones. Los investigadores que verifican son tan importantes como los que calculan.

Eres un estudiante de posgrado revisando el famoso articulo de Reinhart-Rogoff que los gobiernos estan usando para justificar la austeridad. ¿Te molestas en verificar la hoja de calculo de los profesores de Harvard?

Camino A: Confiar en los famosos economistas—no cometerian errores basicos
→ El error de Excel pasa desapercibido por 3 años mas; politicas de austeridad basadas en datos erroneos afectan a millones
Camino B: Solicitar los datos originales y verificar cada calculo tu mismo
→ Thomas Herndon hizo exactamente esto—encontro el error, corrigio el registro cientifico, cambio el debate politico
Arbol de decision: ¿Son los estudios incluidos clinicamente homogeneos? Si si, verificar si buscaste exhaustivamente. Si busqueda exhaustiva, metaanalisis es apropiado. Si busqueda rapida, hacer metaanalisis pero declarar limitaciones claramente. Si los estudios son heterogeneos, usar sintesis narrativa - no mezcles peras con manzanas.

Cuarenta horas hacia la verdad—si conoces el camino.

Modulo 3: El Desastre

Un estudio defectuoso en un metaanalisis envenena todo.

¿No has oido el relato de Marsella?

¿Del articulo que cambio el mundo—y no debio hacerlo?

17 de Marzo de 2020: El Articulo

Gautret et al. — Revista Internacional de Agentes Antimicrobianos

Afirmacion: Hidroxicloroquina + azitromicina elimina el virus COVID-19 en el 100% de los pacientes

Enviado: 16 de marzo de 2020

Aceptado: 17 de marzo de 2020

Tiempo de revision por pares: UN DIA

El editor en jefe era colega en el mismo instituto que los autores.

¿Cuales fueron los defectos?

36
Pacientes totales
6
Eliminados del analisis
1
Murio (excluido)
3
A UCI (excluidos)

Los pacientes que empeoraron simplemente fueron removidos del analisis.

Y sin embargo, considera lo que siguio:

19 de Marzo: El Presidente Trump tuitea sobre la hidroxicloroquina como "uno de los mayores cambios de juego en la historia de la medicina."

28 de Marzo: La FDA emite Autorizacion de Uso de Emergencia.

Abril 2020: Paises en todo el mundo almacenan el medicamento. India prohibe exportaciones.

Resultado: Pacientes con lupus y artritis reumatoide—que necesitan hidroxicloroquina para vivir—no pueden obtener sus medicamentos.

1. Diseño no aleatorizado, etiqueta abierta

2. Grupo de control de conveniencia de diferentes hospitales

3. Pacientes que empeoraron excluidos del analisis

4. Diferentes umbrales de PCR para tratamiento vs. control

5. Aprobacion etica otorgada DESPUES de que comenzo el ensayo

6. Niños incluidos a pesar de criterios de exclusion

7. Revision por pares de un dia por editor con conflicto

El Ajuste de Cuentas: Diciembre 2023

Revista internacional de agentes antimicrobianos
"Despues de casi cuatro años y presion sostenida de la comunidad cientifica, la revista retracto oficialmente el estudio de Gautret, citando preocupaciones sobre etica, metodologia e integridad de datos."

Sigue siendo el articulo de COVID-19 mas citado en ser retractado.
El daño se hizo en dias. La correccion tomo años.

¿Es el resultado demasiado bueno para ser verdad?
SI
DETENERSE
Verificar antes de compartir
NO
¿Revision por pares < 1 semana?
PRECAUCION
Verificar afiliaciones autor/editor

El Colapso del Plasma Convaleciente

El Relato de la Prisa de la FDA:

Agosto 2020: La FDA otorga Autorizacion de Uso de Emergencia para plasma convaleciente, citando 35% de reduccion de mortalidad.

Los datos provenian de un estudio no aleatorizado de 35,000 pacientes. Sin grupo de control. Solo comparaciones historicas.

Para febrero 2021, siete ECAs no mostraron beneficio de mortalidad. La EUA fue revisada. Mas de 500,000 dosis ya se habian administrado.
Fuentes: FDA EUA Ago 2020; Janiaud P et al. JAMA 2021;325:1185-1195.

Considera la amplificacion en redes sociales:

3.1M
Interacciones en Twitter del articulo de Gautret (primera semana)
15,000
Articulos de noticias que lo citaron
83
Interacciones en el aviso de retraccion

La desinformacion se propaga mas rapido que las correcciones. Esta es la asimetria que combates.

Inoculacion: La Defensa de Pre-Desmentido

¿Que tal si pudieras vacunar mentes contra la desinformacion?

Prebunking > Debunking: Advertir a las personas sobre tacticas de manipulacion antes de que encuentren afirmaciones falsas.

La tecnica: "Podrias escuchar afirmaciones de que un estudio pequeño prueba que X funciona. Esta es la razon por la que los estudios pequeños a menudo engañan..."

La evidencia: La inoculacion reduce la susceptibilidad a la desinformacion en 20-30% (van der Linden et al., 2020).

Tres Enfoques de Prebunking

1. Basado en Logica: "Si alguien afirma 100% de efectividad, pregunta: ¿hubo grupo de control? Un estudio sin comparacion no prueba nada."

2. Basado en Fuente: "Ten cuidado con estudios publicados en linea antes de revision por pares—aun no han sido verificados por expertos independientes."

3. Basado en Emociones: "Las afirmaciones de cura milagrosa explotan nuestra esperanza. Los tratamientos reales muestran beneficios modestos con limitaciones honestas."

Usa estas plantillas en comunicaciones de salud publica, capacitacion de clinicos y comunicados de prensa.

Escenario
Un estudio muestra 100% de tasa de cura para una enfermedad. Tiene 36 pacientes, fue aceptado para publicacion en 1 dia, y 6 pacientes que empeoraron fueron eliminados del analisis.

¿Cuantas señales de alerta tiene este estudio?

El estudio de hidroxicloroquina de Gautret recibio 3.1 millones de interacciones en Twitter. El aviso de retraccion recibio 83. Esto ilustra:

Un estudio defectuoso en un metaanalisis envenena todo.

Modulo 4: El Fraude

Cuidado con el metaanalisis construido sobre arena.

¿Has presenciado como el fraude se propaga a traves de la evidencia?

¿Como una mentira se convierte en el fundamento de muchas verdades?

El Fenomeno de la Ivermectina

2020-2021: Multiples estudios emergen de todo el mundo afirmando que la ivermectina—un medicamento antiparasitario—cura el COVID-19. Los metaanalisis combinan los resultados: ¡51% de reduccion en mortalidad!

Gobiernos en America Latina, Africa e India distribuyen millones de dosis. Los pacientes exigen recetas. Algunos toman formulaciones veterinarias.

Pero algo estaba profundamente mal en los datos.

El Estudio de Elgazzar: Anatomia del Fraude

Egipto, 2020: El Ensayo de Ivermectina Mas Grande

El Dr. Ahmed Elgazzar publico un preprint afirmando que la ivermectina reducia la mortalidad por COVID-19 en 90%.

Fue incluido en multiples metaanalisis y contribuyo 12.6% de la estimacion de efecto general para mortalidad.

Entonces un estudiante de posgrado comenzo a verificar los datos.

¿Que encontraron?

79
Datos de pacientes duplicados
4+
Muertes antes de que comenzara el ensayo
~50%
Texto plagiado

15 de julio de 2021: El estudio fue retractado por "preocupaciones eticas."

Estudios Incluidos Beneficio de Supervivencia Significancia
Los 12 estudios 51% de reduccion Significativo
Sin Elgazzar 38% de reduccion Limite
Sin estudios de alto sesgo 10% de reduccion No significativo
Solo estudios de bajo sesgo 4% de reduccion No significativo

Un estudio fraudulento cambio la conclusion de "sin efecto" a "cura milagrosa."

Y Nature Medicine advirtio:

Nature Medicine, Octubre 2021
"Una base de evidencia mal escrutada apoyo la administracion de millones de dosis de un medicamento potencialmente ineficaz globalmente, y sin embargo cuando esta evidencia fue sometida a un escrutinio numerico muy basico, colapso en cuestion de semanas."

Los metaanalisis basados solo en datos resumidos son inherentemente poco confiables.

¿Puedes acceder a los datos crudos?
SI
¿Tienen sentido las caracteristicas basales?
Proceder con precaucion
NO
ALTO RIESGO
Ejecutar analisis de sensibilidad sin el

La Leccion de la Ivermectina:

Siempre ejecuta tu metaanalisis dos veces:
Una vez con todos los estudios. Una vez sin el mas influyente.

Si un estudio cambia tu conclusion, tu conclusion es fragil.

El Relato de Jack Lawrence

El Estudiante de Posgrado Que Cambio Todo:

Jack Lawrence era un estudiante de maestria en Londres. No sabia arabe. Pero podia detectar filas duplicadas en una hoja de calculo.

Descargo el suplemento de datos de Elgazzar. La fila 148 era identica a la fila 11. La fila 228 coincidia con la fila 79. 79 pacientes aparecian dos veces.

Tuiteo sus hallazgos. En dias, los servidores de preprints retractaron el articulo. Los metaanalisis fueron revisados. Las politicas cambiaron.

Un estudiante con habilidades basicas de datos hizo lo que la revision por pares no pudo.
Escenario
Estas realizando un metaanalisis. Un estudio contribuye 40% del efecto combinado. Sin el, el resultado cambia de significativo (p=0.02) a no significativo (p=0.31).

¿Que deberias hacer?

El estudio de ivermectina de Elgazzar fue detectado como fraudulento porque:

Cuidado con el metaanalisis construido sobre arena.

Modulo 5: El Triunfo

Del protocolo a salvar vidas: 100 dias.

Ahora escucha la historia de como debe hacerse.

De como velocidad y rigor encontraron armonia.

El Ensayo RECOVERY

Marzo 2020, Reino Unido:

Mientras el caos de la hidroxicloroquina se extendia, investigadores britanicos lanzaron el ensayo de tratamiento de COVID-19 mas grande del mundo. Fue diseñado para ser rapido Y riguroso.

En 6 semanas desde la financiacion, se estaban reclutando pacientes.

¿Como lograron velocidad sin sacrificar calidad?

176
Hospitales reclutados
11,500
Pacientes (brazo de dexametasona)
100
Dias: protocolo a resultados

Un ensayo de plataforma adaptativa: multiples tratamientos probados simultaneamente.

Resultados de Dexametasona

Pacientes ventilados: 29% de reduccion de mortalidad (NNT = 8)

Oxigenoterapia: 20% de reduccion de mortalidad (NNT = 25)

Sin oxigeno necesario: Sin beneficio (posible daño)

Costo por tratamiento: ~$6 por un esteroide comun.

Y el mundo respondio—correctamente esta vez.

1
Resultados anunciados
16 de junio
2
Practica del RU cambio
Mismo dia
3
Guias NIH actualizadas
En dias
4
Recomendacion OMS
Septiembre

1,000,000

Vidas salvadas globalmente para marzo 2021

22,000 solo en el Reino Unido. De un medicamento de $6 que habia estado disponible por 60 años.
La diferencia fue evidencia rigurosa, rapidamente producida.

1. Diseño controlado aleatorizado (no observacional)

2. Resultados y plan de analisis pre-especificados

3. Escala masiva (poder estadistico)

4. Plataforma adaptativa (brazos abandonados temprano si no habia señal)

5. Reclutamiento simplificado (consentimiento de una pagina en emergencia)

6. Comite independiente de monitoreo de datos

La Leccion de RECOVERY:

La velocidad no requiere tomar atajos. Requiere eliminar el desperdicio.

Formularios de consentimiento simplificados. Diseños adaptativos. Ensayos de plataforma que prueban multiples tratamientos a la vez.

El rigor y la velocidad no son enemigos. Son socios esperando ser presentados.

El Contraste SOLIDARITY

Estudios Pequeños Combinados

Caos
Multiples resultados contradictorios

Gautret: 36 pacientes
Elgazzar: ~400 pacientes (fraude)

RECOVERY/SOLIDARITY

Claridad
Respuestas definitivas

RECOVERY: 11,500 pacientes
SOLIDARITY: 11,330 pacientes

Los ensayos de plataforma reemplazan el ruido de muchos estudios pequeños con la señal de uno grande.

El ensayo RECOVERY recluto 11,500 pacientes en el brazo de dexametasona. ¿Cual fue la razon principal de que esto fuera posible?

La dexametasona para COVID-19 salvo aproximadamente 1 millon de vidas globalmente. El costo del medicamento por tratamiento fue:

Fuente: RECOVERY Collaborative Group. N Engl J Med 2021;384:693-704. Estimacion de vidas salvadas: Horby & Landray, Science 2021.

Del protocolo a salvar vidas: 100 dias.

Modulo 6: Lo Vivo

La evidencia viva sirve a los vivos.

¿Has considerado evidencia que nunca deja de crecer?

¿Revisiones que respiran con la epidemia misma?

La Revision Sistematica Viva

Una revision tradicional es una fotografia: congelada en el tiempo.

Una revision viva es un video: continuamente actualizada a medida que surge nueva evidencia.

En una pandemia, la fotografia esta obsoleta antes de imprimirse.

Organizacion Panamericana de la Salud, Abril 2020 - Presente

Lanzada: Abril 2020

Intervenciones evaluadas: 305 tratamientos

ECAs incluidos: 924 ensayos controlados aleatorizados

Actualizaciones: 48 actualizaciones publicadas

Fuentes monitoreadas: 40+ bases de datos incluyendo servidores de preprints

¿Cuando deberia una revision volverse "viva"?

1. El tema es una prioridad para la toma de decisiones

2. Nueva evidencia esta emergiendo rapidamente

3. La certeza actual es baja

4. Nueva evidencia probablemente cambiara las conclusiones

Si las cuatro son verdaderas, un enfoque vivo esta justificado.

97
RS Vivas sobre COVID-19
35%
Actualizadas al menos una vez
65%
Nunca actualizadas (inactivas)
Una revision "viva" que nunca se actualiza es peor que una revision tradicional. Crea falsa confianza de que la evidencia es actual.

Arbol de Decision: Cuando Actualizar una Revision Viva

¿Nuevo(s) ECA(s) identificado(s) desde la ultima actualizacion?
SI
¿Probable que cambie conclusiones o certeza?
SI
ACTUALIZAR AHORA
NO
Encolar para proxima actualizacion programada
NO
No se necesita actualizacion
Nota: "Sin nueva evidencia" sigue siendo informacion

Un estudio encontro que el 65% de las revisiones sistematicas "vivas" sobre COVID-19 nunca fueron actualizadas. Esto es problematico porque:

Escenario
Gestionas una revision viva sobre tratamientos antivirales. No se han publicado nuevos ECAs en 8 meses, y la certeza GRADE para el resultado primario es "moderada."

¿Que deberias hacer?

La evidencia viva sirve a los vivos.

Modulo 7: La Calidad

La transparencia revela; el ocultamiento engaña.

¿Como juzgas una revision rapida?

Cuando el tiempo impide la perfeccion, ¿que es "suficientemente bueno"?

Evaluacion GRADE Completa

Riesgo de sesgo + Inconsistencia + Indirectez + Imprecision + Sesgo de publicacion

Tiempo: 8-16 horas por resultado

GRADE Rapido

Riesgo de sesgo + Imprecision + Solo preocupaciones mayores

Tiempo: 2-4 horas por resultado

Enfocarse en los dominios mas probables de afectar la certeza.

Los No Negociables

1. Documentar todo: Que buscaste, que excluiste, por que

2. Declarar limitaciones explicitamente: No enterradas en texto—al frente y centro

3. Distinguir rapida de sistematica: Nunca pretender exhaustividad

4. Fechar todo: Evidencia actual a [FECHA]

5. Planear actualizaciones: Una revision rapida no es la palabra final

Cinco Preguntas Antes de Confiar

  1. ¿Cuando se hizo la busqueda? — Si tiene >3 meses en un campo de movimiento rapido, esta desactualizada
  2. ¿Que bases de datos se buscaron? — Solo PubMed puede omitir 30% de estudios relevantes
  3. ¿Fue el cribado simple o dual? — El cribado simple puede omitir 5-10% de estudios relevantes
  4. ¿Se declaran explicitamente las limitaciones? — Limitaciones ocultas = agendas ocultas
  5. ¿Hay un plan de actualizaciones? — Las revisiones rapidas deben ser vivas o tener disparadores de actualizacion

Toma de Decisiones Compartida Bajo Incertidumbre

¿Como le dices a un paciente que la evidencia es... incierta?

1. Nombrar la incertidumbre: "Tenemos algo de evidencia, pero es temprana/limitada/conflictiva."

2. Cuantificar cuando sea posible: "Los estudios sugieren que 20-40% podrian beneficiarse, pero no estamos seguros."

3. Explicar que estamos observando: "Un ensayo mas grande reporta el proximo mes."

4. Ofrecer eleccion estructurada: "Dada esta incertidumbre, podemos intentarlo o esperar. ¿Que es mas importante para ti?"

Clinico a Paciente:

"He revisado la evidencia mas reciente. Esto es lo que sabemos: este tratamiento puede ayudar—algunos estudios muestran una mejora del 30%. Pero los estudios son pequeños, y algunos no mostraron beneficio.

"Quiero ser honesto contigo. Si esperamos 2 meses, tendremos mejores datos de un ensayo mas grande. Pero tambien entiendo que estas sufriendo ahora.

"¿Que te ayudaria a tomar esta decision? ¿Te gustaria intentarlo ahora sabiendo la incertidumbre, o preferiries esperar evidencia mas solida?"

La toma de decisiones compartida no se trata de tener todas las respuestas. Se trata de compartir honestamente lo que no sabemos.

Una revision rapida SIEMPRE debe incluir:

Escenario
Un colega comparte una "revision sistematica" que afirma que un suplemento reduce la mortalidad por COVID-19 en 40%. La revision no menciona su fecha de busqueda, lista solo una base de datos buscada, y no discute limitaciones.

¿Que deberias concluir?

La transparencia revela; el ocultamiento engaña.

Evaluacion Final

Has viajado a traves de la crisis y la verdad.

Los Cinco Principios

1. Velocidad sin rigor es temeridad.

2. Rigor sin velocidad es abandono.

3. Un estudio defectuoso en un metaanalisis envenena todo.

4. La transparencia revela; el ocultamiento engaña.

5. La evidencia viva sirve a los vivos.

El estudio de hidroxicloroquina de Gautret fue retractado principalmente porque:

Cuando el estudio fraudulento de ivermectina de Elgazzar fue removido, el beneficio de mortalidad:

El ensayo RECOVERY logro resultados en aproximadamente:

De 97 revisiones sistematicas "vivas" sobre COVID-19, ¿que porcentaje nunca fue actualizado?

En una revision rapida, el requisito de calidad mas importante es:

Has completado el viaje.

Ve y sintetiza con sabiduria.

Recuerda las lecciones de 2020:
La velocidad sin verdad mato. La verdad sin velocidad abandono.
El equilibrio es el arte.