In the hour of crisis, speed saves lives.
But haste without wisdom takes them.
O voi che cercate di guidare il guaritori,
avete visto cosa succede quando le prove si muovono troppo lentamente?
E avete visto cosa succede quando le prove si muovono troppo velocemente?
January 2020
A novel coronavirus emerges in Wuhan.
Patients are dying. There is no treatment.
Il mondo esige risposte.
How long does a systematic review take?
Sistematica tradizionale Revisione
Pandemic Timeline
Non hai visto come ha risposto il mondo?
Speed created a flood. Who would separate truth from noise?
La domanda che ci perseguita
Nel marzo 2020, la Francia ha approvato l'idrossiclorochina per COVID-19 sulla base di uno studio piccolo e imperfetto. Milioni di persone lo hanno preso prima che studi più ampi mostrassero alcun beneficio e possibili danni cardiaci. Nel frattempo, lo studio RECOVERY del Regno Unito ha testato il desametasone in modo rapido ma rigoroso. Nel giro di 3 mesi, hanno dimostrato che riduceva le morti di un terzo nei casi più gravi.
Entrambi i paesi si trovavano ad affrontare la stessa urgenza. Uno ha agito sulla base di prove deboli, l'altro ha generato rapidamente prove forti.
Speed without rigor cost lives. Rapid rigor saved them.
Sei un ministro della sanità nel marzo 2020. Un piccolo studio afferma che un farmaco comune cura il COVID-19. Cosa fai?
Questo corso ti insegnerà
Entro la fine, sarai in grado di:
- Condurre una revisione rapida in 40 ore, non 40 giorni
- Know when "good enough" is actually good enough
- Identifica frodi e parzialità nelle prove in rapido movimento
- Use decision trees for methodological trade-offs
- Understand living systematic reviews
- Impara dai disastri dell'idrossiclorochina e dell'ivermectina
Osserva i cinque principi della prova rapida:
1. Speed without rigor is recklessness.
2. Rigor without speed is abandonment.
3. A flawed study in a meta-analysis poisons all.
4. Transparency reveals; concealment deceives.
5. Le prove viventi sono al servizio dei vivi.
La catastrofe della Surgisfera
Nel maggio 2020, The Lancet ha pubblicato uno studio su 96.000 pazienti provenienti da 671 ospedali in sei continenti. Risultava presente idrossiclorochina increased death rates. The WHO halted trials worldwide.
Ma i dati provenivano da Surgisphere, un'azienda con 11 dipendenti, tra cui un autore di fantascienza e un modello di contenuti per adulti. Il database non esisteva.
Entro 13 giorni, il documento è stato ritirato. Ma i processi erano già stati interrotti. Il tempo è stato perso. La fiducia è stata infranta.
How did two of medicine's most prestigious journals—
The Lancet e NEJM: pubblicano dati inventati?
Speed pressure broke the gatekeepers.
Albero decisionale: dovreste fidarvi di questo studio?
Procedere con la valutazione standard
Verificare il cambio dei risultati
Richiedere i dati prima di includerli
Module 0 Quiz
Cosa dovresti consigliare?
Considera i tre testimoni del 2020:
Nove mesi dalla speranza al verdetto. Quante decisioni sono state prese nel frattempo?
L'avvelenamento da clorochina
Entro pochi giorni dall'annuncio dell'idrossiclorochina, i nigeriani hanno iniziato ad automedicarsi con la clorochina, un farmaco correlato ma più tossico.
Three deaths. Numerosi ricoveri per overdose. Il centro antiveleni statale di Lagos fu sopraffatto.
In Arizona, a man died after drinking fish tank cleaner containing chloroquine phosphate. His wife survived but was hospitalized.
Premature evidence claims killed people who never had COVID-19.
La storia della talidomide:
Nel 1957, la talidomide fu commercializzata come sedativo sicuro per le donne incinte. Il produttore ha condiviso dati di sicurezza incompleti: gli studi sugli animali erano limitati, gli studi sull’uomo brevi. I medici, confidando nella reputazione dell'azienda, lo prescrivevano ampiamente.
Nel 1961, oltre 10.000 bambini nacquero con gravi malformazioni agli arti. La "mappa" della sicurezza presentava una lacuna fatale che nessuno ha rivelato.
Prove incomplete, presentate come complete, hanno causato una tragedia che ha rimodellato per sempre la regolamentazione dei farmaci.
Sei un regolatore di farmaci nel 1957. Un'azienda farmaceutica richiede l'approvazione della talidomide con dati di sicurezza limitati. Cosa fare?
Decision Tree: When to Share Preliminary Findings
Aspetta conferma
"Preliminary—may change"
Completa l'analisi
In the hour of crisis, speed saves lives.
Modulo 1: Il compromesso
Speed without rigor is recklessness.
Rigor without speed is abandonment.
Hai considerato cosa sacrifichiamo per la velocità?
A systematic review is thorough because it is slow.
A rapid review is fast because it makes trade-offs.
Cosa sono questi compromessi?
Sistematica vs. rapida: le differenze
| Element | Systematic Review | Rapid Review |
|---|---|---|
| Databases searched | 5-10+ | 1-3 |
| Grey literature | Extensive | Limited or none |
| Screening | Dual independent | Single + verification |
| Quality assessment | Full tool | Abbreviated |
| Timeline | 12-24 months | 1-6 weeks |
La risposta Cochrane
The guardians of rigor themselves said: "We must move faster."
Decision Tree: When to Use Rapid Review
40 hours
SR
Standard timeline
What risks do we accept?
Missing studies: Limited search may miss relevant evidence
Selection bias: Single screener may have systematic blind spots
Quality gaps: Abbreviated assessment may miss fatal flaws
Publication bias: Less grey literature means more bias
Questi rischi devono essere esplicitamente dichiarati in ogni revisione rapida.
E tuttavia, considera questo:
Il 4 giugno 1944 Eisenhower dovette prendere una decisione impossibile. Il suo meteorologo, il capitano del gruppo Stagg, non poteva garantire il bel tempo: c'era solo l'80% di probabilità di una breve schiarita il 6 giugno. Aspettare la certezza significava ritardare l'invasione di settimane, rischiando di essere scoperti.
Eisenhower decise: "OK, andiamo". La previsione dell’80% era giusta. L'invasione ebbe successo.
Stagg in seguito disse che fare previsioni perfette era impossibile, ma previsioni attuabili salvarono la guerra. A volte l'80% di certezza oggi batte il 95% di certezza troppo tardi.
Tu sei il generale Eisenhower il 4 giugno 1944. Il tuo meteorologo dà l'80% di fiducia in una breve finestra meteorologica il 6 giugno. Aspettare la certezza significa ritardare di settimane e rischiare di scoprire le forze d'invasione.
La storia delle due meta-analisi
Due meta-analisi sulla stessa domanda: "Le maschere prevengono il COVID-19" trasmissione?"
I primi 14 studi osservazionali raggruppati: OR 0.35—masks reduce risk by 65%!
The second included only 3 RCTs: OR 0.91—no significant effect.
Same question. Same year. Opposite answers. Why?
Quali studi includi determinano quale verità trovi.
Observational Studies
Higher confounding risk
RCTs Only
Lower power, higher validity
Nelle revisioni rapide, i criteri di inclusione SONO la tua conclusione.
Decision Tree: Observational vs. RCT Evidence
Higher certainty
State uncertainty clearly
But downgrade certainty
Module 1 Quiz
What is the most appropriate approach?
La storia di due città in 1918:
Nel settembre 1918, Filadelfia e St. Louis rilevarono entrambe casi di influenza. Il commissario sanitario di Filadelfia ha atteso ulteriori dati prima di agire. Il 28 settembre ha consentito una parata imponente: 200.000 persone. In pochi giorni gli ospedali traboccarono; 12.000 morirono in settimane.
St. Louis, con gli stessi dati incompleti, ha chiuso subito le scuole e vietato gli assembramenti. Il loro tasso di mortalità era la metà di quello di Filadelfia.
La luce fioca dell'azione tempestiva ha superato la luce brillante arrivata troppo tardi.
Sei il commissario sanitario di Filadelfia nel settembre 1918. Stanno emergendo casi di influenza mortale. Una massiccia parata del Liberty Loan è prevista per il 28 settembre con 200.000 partecipanti attesi. Cosa fare?
La svolta del Tocilizumab
February 2021: Multiple small trials of tocilizumab (an IL-6 inhibitor) showed no benefit. Headlines declared it useless. Some hospitals stopped using it.
June 2021: RECOVERY trial reports 4,116 patients. Mortality reduced by 14%. WHO immediately recommends it.
I piccoli studi erano sottodimensionati. Non hanno trovato "nessuna prova di effetto", che non è "prova di nessun effetto". L'ampio studio ha trovato la verità.
Qual è la differenza tra queste due affermazioni?
"No evidence of effect"
Cannot rule out benefit
"Evidence of no effect"
Confidently excludes benefit
L'assenza di prove non è una prova di assenza, a meno che il tuo studio non sia abbastanza ampio da rilevarla.
Albero decisionale: questo studio è abbastanza ampio?
Fiducia nei risultati negativi
"No effect" may be false negative
Calculate post-hoc power
L'inversione del ventilatore
Initial guidance: patients with low oxygen should be intubated quickly to prevent deterioration.
April 2020: "Intubate Later"
I medici hanno osservato che molti pazienti tolleravano un basso livello di ossigeno ("ipossia felice"). La posizione prona spesso evitava la necessità di ventilazione.
Result: Practice changed mid-pandemic based on real-world observation, not RCTs. Early intubation may have caused avoidable deaths.
When RCTs are impossible, observe carefully. Document systematically. Share transparently.
Speed without rigor is recklessness.
Rigor without speed is abandonment.
Modulo 2: Il metodo
Quaranta ore alla verità, se conosci il percorso.
La 40 ore rapida Revisione
Passaggio 1: definizione della domanda (2 ore)
The PICO Framework—Sharper Than Ever
Population: Adults hospitalized with COVID-19 (narrow!)
Intervention: Dexamethasone 6mg daily
Comparator: Standard care / placebo
Outcome: 28-day mortality (primary only)
Step 2: Search Strategy (4 hours)
DON'T: Systematic Search
MEDLINE + EMBASE + Cochrane + CINAHL + PsycINFO + Web of Science + grey literature + hand searching
Time: 40+ hours
DO: Focused Search
PubMed + Cochrane Library + one preprint server (medRxiv)
Time: 4 hours
Documentare ciò che hai cercato E ciò che hai deliberatamente escluso.
La scorciatoia critica:
Screening singolo con verifica.
This saves 50% of screening time while catching most errors.
Decision Tree: Quality Assessment Shortcuts
Use standard tool (RoB 2, ROBINS-I)
Key domains only
Key domains: randomization, blinding, missing data, selective reporting
Il passaggio finale: sintesi
Potresti non aver effettuato una ricerca completa. Potresti aver perso gli studi. Una stima aggregata da una ricerca incompleta può creare falsa fiducia.
Preferire la sintesi narrativa. Se è necessario raggruppare, indicare ad alta voce le limitazioni.
PRISMA-RR: la vostra lista di controllo per il reporting
PRISMA for Rapid Reviews Extension (2024)
When reporting rapid reviews, you MUST include:
- Shortcuts taken: Cosa è stato ottimizzato rispetto alla SR completa?
- Time constraints: Perché era necessaria una revisione rapida?
- Databases searched: E perché altri lo sono stati esclusi
- Screener count: Single vs. dual screening
- Date of search: Prove attuali al [DATA]
- Limitations section: What may have been missed
La storia dell'inversione di Remdesivir
The FDA granted Emergency Use Authorization: "Remdesivir shortens recovery time."
The WHO recommended against it: "No mortality benefit, high cost."
Same drug. Same evidence base. Opposite conclusions.
La differenza? La FDA ha dato priorità ai risultati surrogati (tempi di recupero). L'OMS ha dato priorità ai risultati incentrati sul paziente (mortalità).
Decision Tree: Choosing Outcomes in Rapid Reviews
Highest certainty
Note indirectness
State explicitly
Module 2 Quiz
What screening approach is appropriate?
Module 2 Quiz (2)
Secondo PRISMA-RR, cosa NON è richiesto in un rapporto di revisione rapida?
Il posizionamento prono Scoperta
Per decenni, i pazienti in terapia intensiva con insufficienza respiratoria sono rimasti distesi sulla schiena. Nel caso del COVID-19, i medici hanno notato qualcosa di straordinario.
Turning patients onto their stomachs—proning—dramatically improved oxygen levels. No drug required. No cost. Available everywhere.
Meta-analysis of 6 RCTs: Mortality reduced by 25% in severe ARDS patients.
A volte la svolta non è una molecola. A volte è una posizione.
La storia dell'errore Excel:
Nel 2010, gli economisti di Harvard Reinhart e Rogoff hanno pubblicato una ricerca influente: i paesi con un debito superiore al 90% del PIL hanno avuto una crescita negativa. I governi di tutto il mondo lo hanno citato per giustificare l’austerità.
Three years later, a graduate student found their Excel spreadsheet excluded five countries due to a coding error. When corrected, the 90% threshold disappeared.
Un errore nel foglio di calcolo, non controllato, ha influenzato la politica che ha colpito milioni di persone. I ricercatori che verificano sono importanti tanto quanto quelli che calcolano.
Sei uno studente laureato che sta esaminando il famoso documento di Reinhart-Rogoff che i governi stanno utilizzando per giustificare l'austerità. Ti preoccupi di controllare il foglio di calcolo dei professori di Harvard?
Decision Tree: Narrative vs. Meta-Analysis
Pool con fiducia
"Possono mancare studi"
Don't pool apples and oranges
Quaranta ore alla verità, se conosci il percorso.
Modulo 3: Il disastro
A flawed study in a meta-analysis poisons all.
Non hai sentito la storia di Marsiglia?
Della carta che ha cambiato il mondo – e non avrebbe dovuto?
17 marzo 2020: L'articolo
Gautret et al. — International Journal of Antimicrobial Agents
Claim: Hydroxychloroquine + azithromycin clears COVID-19 virus in 100% of patients
Submitted: March 16, 2020
Accepted: March 17, 2020
Peer review time: ONE DAY
Il redattore capo era un collega dello stesso istituto degli autori.
Quali erano i difetti?
I pazienti che peggioravano sono stati semplicemente rimossi dall'analisi analisi.
And yet, consider what followed:
March 28: FDA issues Emergency Use Authorization.
April 2020: Countries worldwide stockpile the drug. India bans exports.
Result: I pazienti affetti da lupus e artrite reumatoide, che hanno bisogno dell'idrossiclorochina per vivere, non possono assumere i loro farmaci.
I sette mortali Difetti
1. Non-randomized, open-label design
2. Convenience control group from different hospitals
3. Pazienti peggiorati esclusi dall'analisi
4. Different PCR thresholds for treatment vs. control
5. Ethics approval granted AFTER trial started
6. Children included despite exclusion criteria
7. One-day peer review by conflicted editor
La resa dei conti: dicembre 2023
It remains the most-cited COVID-19 paper to be retracted.
Il danno è stato fatto in pochi giorni. La correzione ha richiesto anni.
Decision Tree: Red Flags in Rapid Evidence
Verify before sharing
Check author/editor affiliations
Il collasso del plasma dei convalescenti
Agosto 2020: la FDA concede l'autorizzazione all'uso di emergenza per i convalescenti plasma, citando una riduzione della mortalità del 35%.
I dati provenivano da uno studio non randomizzato su 35.000 pazienti. Nessun gruppo di controllo. Solo confronti storici.
A febbraio 2021, sette studi randomizzati non hanno mostrato alcun beneficio in termini di mortalità. L'EUA è stata rivista. Sono già state somministrate oltre 500.000 dosi.
Consider the social media amplification:
La disinformazione si diffonde più velocemente delle correzioni. Questa è l'asimmetria che combatti.
Inoculazione: la difesa pre-bunking
Prebunking > Debunking: Warn people about manipulation tactics before they encounter false claims.
The technique: "Potresti sentire affermazioni secondo cui un piccolo studio dimostra che X funziona. Ecco perché piccoli studi spesso fuorviano..."
The evidence: Inoculation reduces susceptibility to misinformation by 20-30% (van der Linden et al., 2020).
Inoculation Messaging: Practical Templates
Three Prebunking Approaches
1. Logic-Based: "Se qualcuno afferma un'efficacia al 100%, chiedi: esisteva un gruppo di controllo? Uno studio senza paragoni non dimostra nulla."
2. Source-Based: "Diffidare degli studi pubblicati online prima della revisione tra pari: non sono stati ancora controllati da esperti indipendenti."
3. Emotional-Based: "Le affermazioni di cure miracolose sfruttano la nostra speranza mostrano benefici modesti con limitazioni oneste."
Utilizzare questi modelli nelle comunicazioni sulla sanità pubblica, nella formazione dei medici e nella stampa. rilasci.
Decision Tree: Evaluating Preprint Claims
Author-editor relationship?
Never cite as definitive
Module 3 Quiz
Quanti segnali d'allarme ha questo studio?
Module 3 Quiz (2)
Lo studio Gautret sull'idrossiclorochina ha ricevuto 3,1 milioni di interazioni su Twitter. L'avviso di ritrattazione ha ricevuto 83. Ciò illustra:
A flawed study in a meta-analysis poisons all.
Modulo 4: La frode
Beware the meta-analysis built on sand.
Hai assistito a come la frode si diffonde attraverso le prove?
How one lie becomes the foundation of many truths?
Il fenomeno dell'ivermectina
Governments in Latin America, Africa, and India distribute millions of doses. Patients demand prescriptions. Some take veterinary formulations.
Ma nei dati c'era qualcosa di profondamente sbagliato.
The Elgazzar Study: Anatomy of Fraud
Egypt, 2020: The Largest Ivermectin Trial
Dr. Ahmed Elgazzar posted a preprint claiming ivermectin reduced COVID-19 mortality by 90%.
È stato incluso in numerose meta-analisi e ha contribuito 12.6% alla stima dell'effetto complessivo sulla mortalità.
Poi uno studente laureato ha iniziato a controllare i dati.
What did they find?
July 15, 2021: Lo studio è stato ritirato per "problemi etici."
L'effetto cascata
| Studies Included | Survival Benefit | Significance |
|---|---|---|
| All 12 studies | 51% reduction | Significant |
| Without Elgazzar | 38% reduction | Borderline |
| Senza studi ad alto bias | 10% reduction | Not significant |
| Solo studi a basso bias | 4% reduction | Not significant |
Uno studio fraudolento è stato modificato la conclusione da "nessun effetto" a "cura miracolosa."
E Nature Medicine ha avvertito:
Le meta-analisi basate solo sui dati di riepilogo sono intrinsecamente inaffidabili.
Decision Tree: Detecting Problematic Studies
Eseguire l'analisi di sensibilità senza it
La lezione sull'ivermectina:
Always run your meta-analysis twice:
Una volta con tutti gli studi. Una volta senza il più influente.
Se uno studio cambia la tua conclusione, la tua conclusione è fragile.
Il racconto di Jack Lawrence
Jack Lawrence was a master's student in London. He knew no Arabic. But he could spot duplicate rows in a spreadsheet.
Ha scaricato il supplemento dati di Elgazzar. La riga 148 era identica alla riga 11. La riga 228 corrispondeva alla riga 79. 79 patients appeared twice.
Ha twittato le sue scoperte. Nel giro di pochi giorni, i server di prestampa ritirarono il documento. Le meta-analisi sono state riviste. Le politiche sono cambiate.
Uno studente con competenze di base sui dati ha fatto ciò che la peer review non poteva fare.
Decision Tree: Fraud Detection Checklist
(Identical means across groups)
May indicate fabrication
Deaths before trial = impossible
Check other signals
Module 4 Quiz
Cosa dovresti fare?
Module 4 Quiz (2)
Lo studio sull'ivermectina Elgazzar è stato rilevato come fraudolento perché:
Lo studio TOGETHER Delusione
Dopo che piccoli studi hanno suggerito che la fluvoxamina (un antidepressivo) potrebbe prevenire una forma grave di COVID-19, il mondo ha aspettato la risposta definitiva.
The TOGETHER trial enrolled 1,497 patients in Brazil. Initial interim: 32% reduction in hospitalization!
Risultati finali: solo il 5,1% dei pazienti trattati con placebo è stato ricoverato in ospedale contro il 4,0% dei pazienti con fluvoxamina. L'effetto è stato minore di quanto sperato e il beneficio assoluto è stato minimo.
Small absolute differences require enormous trials to detect. Most promising treatments fade when tested properly.
La storia del Power Posing:
Nel 2010, i ricercatori hanno affermato che le "pose di potere" (stare in piedi come Superman) aumentavano il testosterone e l'assunzione di rischi. Lo studio è diventato virale: conferenze TED, libri di affari, milioni di credenti. Diversi studi sembravano replicarlo.
Poi repliche più grandi e preregistrate fallirono. Il coautore originale ha pubblicamente rinnegato i risultati. Molti studi piccoli e flessibili avevano trovato ciò che volevano trovare.
Le prove deboli moltiplicate sembravano prove forti, finché una replica rigorosa non ha rivelato che si trattava di rumore.
Sei un editore di una rivista che riceve un ampio studio di replica pre-registrato che non riesce a riprodurre il popolare effetto di posa di potere. Lo studio originale ha milioni di credenti e un famoso discorso TED.
Decision Tree: Reading a Forest Plot
Cannot exclude no effect
Higher confidence
True effect varies—explore why
Beware the meta-analysis built on sand.
Modulo 5: Il trionfo
From protocol to saving lives: 100 days.
Ora ascolta la storia di come dovrebbe essere fatto.
Of how speed and rigor found harmony.
Lo studio RECOVERY
Mentre si diffondeva il caos relativo all'idrossiclorochina, i ricercatori britannici hanno lanciato il più grande studio al mondo sul trattamento del COVID-19. È stato progettato per essere veloce E rigoroso.
Within 6 weeks of funding, patients were being enrolled.
How did they achieve speed without sacrificing quality?
An adaptive platform trial: multiple treatments tested simultaneously.
16 giugno 2020: l'annuncio
Dexamethasone Results
Ventilated patients: 29% mortality reduction (NNT = 8)
Oxygen therapy: 20% mortality reduction (NNT = 25)
No oxygen needed: No benefit (possible harm)
Cost per treatment: ~$6 for a common steroid.
E il mondo ha risposto, questa volta correttamente.
1,000,000
Lives saved globally by March 2021
22.000 nel Regno Unito solo. Da un farmaco da 6 dollari che era disponibile da 60 anni.
La differenza era un'evidenza rigorosa, prodotta rapidamente.
What Made RECOVERY Different?
1. Randomized controlled design (not observational)
2. Risultati pre-specificati e piano di analisi
3. Massive scale (statistical power)
4. Adaptive platform (dropped arms early if no signal)
5. Simplified enrollment (one-page consent in emergency)
6. Comitato indipendente per il monitoraggio dei dati
La lezione di RECUPERO:
Speed does not require cutting corners. It requires cutting waste.
Simplified consent forms. Adaptive designs. Platform trials that test multiple treatments at once.
Rigore e velocità non sono nemici. Sono partner in attesa di essere presentati.
Il contrasto di SOLIDARITY
Piccoli studi combinati
Gautret: 36 patients
Elgazzar: ~400 patients (fraud)
RECOVERY/SOLIDARITY
RECOVERY: 11,500 patients
SOLIDARITY: 11,330 patients
Le sperimentazioni sulla piattaforma sostituiscono il rumore di molti piccoli studi con il segnale di un grande uno.
Albero decisionale: dovresti aspettare il grande processo?
Prove di qualità superiore in arrivo
Update when trial reports
Migliori prove disponibili
Module 5 Quiz
Lo studio RECOVERY ha arruolato 11.500 pazienti nel braccio desametasone. Qual è stata la ragione principale per cui ciò è stato possibile?
Module 5 Quiz (2)
Il desametasone per il COVID-19 ha salvato circa 1 milione di vite in tutto il mondo. Il costo del farmaco per trattamento è stato:
L'abbandono dell'azitromicina
Lo studio Gautret ha combinato l'idrossiclorochina con azitromicina. All'improvviso, l'azitromicina era ovunque, aggiunta ai protocolli di trattamento in tutto il mondo.
Ma l'azitromicina non era mai stata testata da sola. La combinazione non è mai stata provata. E l'azitromicina causa aritmie cardiache.
July 2020: RECOVERY randomizes 7,763 patients. Result: No benefit. Median hospital stay identical. Mortality identical.
Mesi di esposizione al rischio cardiaco per un beneficio pari a zero, perché lo studio originale non è mai stato messo in discussione.
La storia di Tacoma Narrows:
Nel 1940, il Tacoma Narrows Bridge fu costruito rapidamente e a buon mercato. Gli ingegneri hanno saltato i test nella galleria del vento per risparmiare tempo. Quattro mesi dopo l'apertura, venti moderati hanno fatto oscillare il ponte. Si è girato violentemente ed è crollato, ripreso nel filmato che gli studenti di ingegneria ancora studiano.
Un vicino ponte più vecchio, costruito lentamente e con test approfonditi, è ancora in piedi. La terza lezione è arrivata dopo: i bridge moderni utilizzano test computazionali rapidi, metodi rapidi che non saltano la verifica.
Speed without testing destroys. Testing without speed delays. Rapid testing saves.
Sei un ingegnere che nel 1940 progetta il Tacoma Narrows Bridge. Il budget è limitato e la scadenza è fissa. I test nella galleria del vento aggiungerebbero settimane e costi. Cosa fai?
Decision Tree: Evaluating Platform Trial Arms
Non utilizzare questo trattamento
Contraindicated
Update guidelines
From protocol to saving lives: 100 days.
Modulo 6: The Living
L'evidenza vivente è al servizio dei viventi.
Hai considerato l'evidenza che mai smette di crescere?
Le revisioni che respirano con l'epidemia stessa?
The Living Systematic Review
Una revisione vivente è un video: continuamente aggiornato man mano che emergono nuove prove.
In a pandemic, the photograph is obsolete before it's printed.
Paho's Living Review: A Case Studio
Pan American Health Organization, April 2020 - Present
Launched: April 2020
Interventions assessed: 305 treatments
RCTs included: 924 randomized controlled trials
Updates: 48 updates published
Sources monitored: 40+ databases including preprint servers
When should a review become "living"?
1. The topic is a priority for decision-making
2. Nuove prove stanno emergendo rapidly
3. Current certainty is low
4. È probabile che nuove prove change conclusions
If all four are true, a living approach is warranted.
The Challenge: Keeping Reviews Alive
Decision Tree: When to Update a Living Review
Note: "No new evidence" is still information
La storia del Momentum di Molnupiravir
October 2021: Merck announces interim results—50% reduction in hospitalization!
Stock prices soar. Countries pre-order millions of courses. Headlines celebrate.
November 2021: Final results published—30% reduction. Still significant, but...
Dicembre 2021: l'analisi aggiornata mostra solo il 6,8% del braccio di controllo ricoverato in ospedale, non 14,1%.
Il denominatore è cambiato. La magia svanì. Lezioni: provvisorio ≠ finale.
E poi è arrivato Paxlovid—
Molnupiravir
Low-risk patients
Mutagenic concerns
Paxlovid
High-risk patients
Drug interactions
Le revisioni in tempo reale devono distinguere provvisorie da finali, preliminari da confermate.
Decision Tree: Retiring a Living Review
Archivio con data finale
Low certainty needs monitoring
Prova attiva field
Module 6 Quiz
Uno studio ha rilevato che il 65% delle revisioni sistematiche "in tempo reale" su COVID-19 non sono mai state aggiornate. Ciò è problematico perché:
Module 6 Quiz (2)
Cosa dovresti fare?
Il Bamlanivimab Ritiro
Novembre 2020: la FDA concede l'EUA per bamlanivimab, un anticorpo monoclonale. I primi dati si sono rivelati promettenti.
March 2021: EUA revoked. Why? Variant escape. Il virus è mutato. L'anticorpo non si è più legato.
Una revisione vivente che monitorava gli anticorpi monoclonali avrebbe segnalato questo problema nel giro di settimane. Ci sono voluti mesi per cambiare la guida statica.
In una pandemia, il nemico si evolve. Le tue prove devono evolversi più velocemente.
La storia della sorveglianza dell'influenza:
Il CDC monitora l'influenza attraverso la sorveglianza sentinella. I primi sistemi controllavano gli ospedali settimanalmente: troppo lenti per rilevare picchi. Il monitoraggio costante in tempo reale ha sopraffatto gli analisti con il rumore.
La soluzione: sorveglianza basata su soglie. Tieni traccia continuamente, ma attiva avvisi solo quando i casi superano i valori di riferimento stagionali. Questo approccio di "revisione dal vivo" ha catturato l'H1N1 nel 2009, settimane prima dei metodi tradizionali.
Il guardiano che monitora le soglie supera sia l'ispettore annuale che l'esausto controllore orario.
Stai progettando un sistema di sorveglianza della malattia. Con quale frequenza dovresti rivedere le prove e attivare gli avvisi?
Albero decisionale: questo nuovo studio è sufficientemente significativo per attivare un aggiornamento?
Certainty change = guideline change
Direction change is major
Update at next scheduled
L'evidenza vivente è al servizio dei viventi.
Modulo 7: La qualità
Transparency reveals; concealment deceives.
Come giudichi una revisione rapida?
When time prevents perfection, what is "good enough"?
GRADE in 40 Hours: Is It Possible?
Full GRADE Assessment
Risk of bias + Inconsistency + Indirectness + Imprecision + Publication bias
Time: 8-16 hours per outcome
Rapid GRADE
Risk of bias + Imprecision + Major concerns only
Time: 2-4 hours per outcome
Focus on the domains most likely to affect certainty.
The Non-Negotiables
1. Document everything: Cosa hai cercato, cosa hai escluso, perché
2. State limitations explicitly: Non sepolto nel testo: davanti e al centro
3. Distinguere rapido da sistematico: Never pretend comprehensiveness
4. Date-stamp everything: Prove attuali al [DATA]
5. Pianificare gli aggiornamenti: Una revisione rapida non è l'ultima parola
La storia dell'incertezza climatica:
IPCC climate reports could claim certainty to seem authoritative. Instead, they explicitly quantify uncertainty: "likely (66-100%)", "very likely (90-100%)", "virtually certain (99-100%)".
Quando il rapporto del 2021 affermava che il riscaldamento era "inequivocabile" ma i tempi del collasso della calotta glaciale erano "a bassa confidenza", i politici sapevano esattamente dove fidarsi della mappa e dove i draghi avrebbero potuto si nascondono.
Questa trasparenza ha aumentato, e non diminuito, la credibilità dei rapporti e l'impatto politico.
Stai scrivendo il rapporto sul clima dell'IPCC. Dovresti rivendicare la certezza per sembrare più autorevole o riconoscere l’incertezza laddove esiste?
How to READ a Rapid Review (Consumer Guide)
Five Questions to Ask Before Trusting
- Quando è stata effettuata la ricerca? — If >3 months old in a fast-moving field, it's outdated
- In quali database sono stati esaminati? — PubMed alone may miss 30% of relevant studies
- Lo screening è stato singolo o doppio? — Single screening may miss 5-10% of relevant studies
- Le limitazioni sono indicate esplicitamente? — Hidden limitations = hidden agendas
- Esiste un piano per aggiornamenti? — Rapid reviews should be living or have update triggers
Processo decisionale condiviso in condizioni di incertezza
1. Dai un nome all'incertezza: "We have some evidence, but it's early/limited/conflicting."
2. Quantify when possible: "Gli studi suggeriscono che il 20-40% potrebbe trarne beneficio, ma non ne siamo sicuri."
3. Explain what we're watching: "A larger trial reports next month."
4. Offer structured choice: "Data questa incertezza, possiamo provarci o aspettare. Cosa conta di più per te?"
La conversazione Script
"Ho esaminato le prove più recenti. Ecco cosa sappiamo: questo trattamento may aiuta: alcuni studi mostrano un miglioramento del 30%. Ma gli studi sono piccoli e alcuni non hanno mostrato alcun beneficio.
"Voglio essere onesto con te. Se aspettiamo 2 mesi, avremo dati migliori da uno studio più ampio. Ma capisco anche che stai soffrendo adesso.
"Cosa ti aiuterebbe a prendere questa decisione? Ti piacerebbe provarlo adesso conoscendo l'incertezza, o preferiresti aspettare prove più forti?"
Il processo decisionale condiviso non significa avere tutte le risposte. Si tratta di condividere ciò che don't know honestly.
Network Meta-Analysis: A Word of Caution
What Can Go Wrong:
• Transitivity violation: Populations in A-vs-B trials differ from B-vs-C trials
• Inconsistency: Le prove dirette e indirette contraddicono
• Sparse networks: Single-study connections carry entire inference
In Rapid Reviews: Network meta-analysis typically requires more time and expertise than available. When used, state transitivity assumptions explicitly. When skipped, explain why indirect comparisons weren't attempted.
Albero decisionale: dovresti fidarti di questa revisione rapida?
Applicare con avvertenze dichiarate
Cannot assess currency
Pretending comprehensiveness
La storia dell'illusione della vitamina D
Dozens of observational studies showed: low vitamin D → worse COVID outcomes.
Le meta-analisi di questi studi hanno mostrato: "Riduzione della mortalità del 40% con l'integrazione!"
Then came the RCTs. One after another: no benefit. No benefit. No benefit.
Gli osservatori avevano trovato una correlazione. Le persone malate restano in casa → vitamina D bassa ed esiti peggiori. Il sole era il fattore confondente, non la cura.
Module 7 Quiz
A rapid review should ALWAYS include:
Module 7 Quiz (2)
Cosa dovresti concludere?
Module 7 Quiz (3)
Gli studi osservazionali sulla vitamina D hanno mostrato una riduzione della mortalità del 40%. Gli RCT non hanno mostrato alcun beneficio. Questa discrepanza è meglio spiegata da:
Module 7 Quiz (4)
Inoculation messaging (prebunking) is effective because it:
Module 7 Quiz (5)
L'approccio migliore è:
La tragedia della casa di cura
I vaccini sono arrivati. Chi dovrebbe riceverli per primo? Le prove erano chiare: i residenti nelle case di cura avevano la mortalità più alta.
Ma alcuni erano a favore dei lavoratori essenziali. Altri per il personale sanitario. Il dibattito ha ritardato l'implementazione.
Result: 60,000+ US nursing home deaths occurred after i vaccini erano disponibili ma before rollout completed.
Rapid evidence synthesis on prioritization could have saved weeks. Weeks meant thousands of lives.
La storia del Challenger:
Il 27 gennaio 1986, gli ingegneri dissero alla NASA che gli O-ring del Challenger avrebbero potuto guastarsi con la stagione fredda. Ma avevano dati incompleti: solo alcuni record di lanci a freddo e schemi di fallimento ambigui. Il manager Larry Mulloy ha chiesto prove del pericolo; gli ingegneri potevano solo mostrare incertezza.
Mulloy lanciato. Gli O-ring si sono guastati dopo 73 secondi. Analisi successive hanno mostrato che i dati prevedevano chiaramente il fallimento, ma solo quando gli analisti sapevano cosa cercare.
Prove parziali, respinte come insufficienti, contenevano l'avvertimento che avrebbe potuto salvare sette vite.
Sei un ingegnere della NASA il 27 gennaio 1986. Hai dati incompleti che suggeriscono che gli O-ring potrebbero rompersi con il freddo. Il lancio è previsto per domani in condizioni di gelo. Il tuo manager richiede una prova del pericolo.
Decision Tree: Assessing Funding Source Bias
Outcome switching limited
Selective reporting possible
But still assess RoB
Il paradosso della prestampa
December 2020: I dati sull'efficacia del vaccino Pfizer sono apparsi su medRxiv prima della pubblicazione. Nel giro di poche ore, le autorità di regolamentazione avevano iniziato la revisione. Il mondo potrebbe pianificare.
January 2021: A preprint claimed vaccines caused deaths in nursing homes. It was methodologically flawed. It went viral. Vaccine hesitancy increased.
Stessa piattaforma. Risultati diversi. I preprint accelerano sia la verità che le bugie. Il lettore ha l'onere del giudizio.
Decision Tree: When Is a Preprint Acceptable to Cite?
"Preprint, not peer-reviewed"
Attendere la verifica
Nessuna giustificazione per la prestampa
Regional Adaptation: MENA Context
Durante il COVID-19, le nazioni del Consiglio di cooperazione del Golfo (GCC) si sono trovate ad affrontare un divario critico: la limitata capacità locale di revisione rapida ha significato fare affidamento su prove occidentali che a volte non hanno tenuto conto di fattori regionali: il digiuno del Ramadan, le famiglie multigenerazionali, il rapporto degli operatori sanitari e la diversa popolazione dati demografici.
Lezione: adattare il protocollo di 40 ore al proprio contesto. Termini di ricerca arabi nei database regionali. Considerazioni sull'implementazione locale. Casi di studio regionali per la formazione.
Key Adaptations:
• Include regional databases (IMEMR, EMBASE Arabic)
• Consider local healthcare infrastructure capacity
• Adapt communication for local stakeholders
Transparency reveals; concealment deceives.
Final Assessment
Hai viaggiato attraverso la crisi e la verità.
I cinque principi
1. Speed without rigor is recklessness.
2. Rigor without speed is abandonment.
3. A flawed study in a meta-analysis poisons all.
4. Transparency reveals; concealment deceives.
5. Le prove viventi sono al servizio dei vivi.
Final Quiz (1/5)
Lo studio Gautret sull'idrossiclorochina è stato ritirato principalmente perché:
Final Quiz (2/5)
Quando lo studio fraudolento sull'ivermectina di Elgazzar è stato rimosso, il beneficio in termini di mortalità:
Final Quiz (3/5)
Lo studio RECOVERY ha ottenuto risultati in circa:
Final Quiz (4/5)
Of 97 "living" systematic reviews on COVID-19, what percentage were never updated?
Final Quiz (5/5)
In una rapida revisione, il singolo requisito di qualità più importante è:
Hai completato il viaggio.
Vai avanti e sintetizza con saggezza.
Ricorda il lezioni del 2020:
Speed without truth killed. Truth without speed abandoned.
L'equilibrio è l'arte.