In the hour of crisis, speed saves lives.
But haste without wisdom takes them.
O Sie, die Sie leiten möchten Heiler,
Haben Sie gesehen, was passiert, wenn sich Beweise zu langsam bewegen?
Und haben Sie gesehen, was passiert, wenn sie sich zu schnell bewegen?
January 2020
A novel coronavirus emerges in Wuhan.
Patients are dying. There is no treatment.
Die Welt verlangt nach Antworten.
How long does a systematic review take?
Traditionell Systematisch Rezension
Pandemic Timeline
Haben Sie nicht gesehen, wie die Welt reagierte?
Speed created a flood. Who would separate truth from noise?
Die Frage, die uns verfolgt
Im März 2020 hat Frankreich Hydroxychloroquin für COVID-19 auf der Grundlage einer kleinen, fehlerhaften Studie zugelassen. Millionen nahmen es ein, bevor größere Studien keinen Nutzen zeigten – und möglicherweise Herzschäden verursachten. Unterdessen wurde in der britischen RECOVERY-Studie Dexamethason schnell, aber gründlich getestet. Innerhalb von drei Monaten konnten sie nachweisen, dass dadurch die Zahl der Todesfälle in schweren Fällen um ein Drittel reduziert wurde.
Beide Länder waren mit der gleichen Dringlichkeit konfrontiert. Einer hat aufgrund schwacher Beweise gehandelt, einer hat schnell starke Beweise generiert.
Speed without rigor cost lives. Rapid rigor saved them.
Sie sind Gesundheitsminister im März 2020. Eine kleine Studie behauptet, dass ein gängiges Medikament COVID-19 heilt. Was machen Sie?
In diesem Kurs lernen Sie
Am Ende werden Sie in der Lage sein:
- Eine schnelle Überprüfung in 40 Stunden durchzuführen, nicht in 40 Tage
- Know when "good enough" is actually good enough
- Identifizieren Sie Betrug und Voreingenommenheit in sich schnell bewegenden Beweisen
- Use decision trees for methodological trade-offs
- Understand living systematic reviews
- Lernen Sie aus den Hydroxychloroquin- und Ivermectin-Katastrophen
Beachten Sie die fünf Prinzipien der schnellen Beweisaufnahme:
1. Speed without rigor is recklessness.
2. Rigor without speed is abandonment.
3. A flawed study in a meta-analysis poisons all.
4. Transparency reveals; concealment deceives.
5. Lebende Beweise dienen den Lebenden.
The Surgisphere Catastrophe
Im Mai 2020 veröffentlichte The Lancet eine Studie mit 96.000 Patienten aus 671 Krankenhäusern auf sechs Kontinenten. Es zeigte Hydroxychloroquin increased death rates. The WHO halted trials worldwide.
Aber die Daten stammten von Surgisphere – einem Unternehmen mit 11 Mitarbeitern, darunter ein Science-Fiction-Autor und ein Model für Inhalte für Erwachsene. Die Datenbank existierte nicht.
Innerhalb von 13 Tagen wurde das Papier zurückgezogen. Doch die Prozesse waren bereits eingestellt worden. Es ging Zeit verloren. Das Vertrauen wurde zerstört.
How did two of medicine's most prestigious journals—
The Lancet und NEJM – veröffentlichen gefälschte Daten?
Speed pressure broke the gatekeepers.
Entscheidungsbaum: Sollten Sie dieser Studie vertrauen?
Mit der Standardbewertung fortfahren
Auf Ergebniswechsel prüfen
Daten vor Einschluss anfordern
Module 0 Quiz
Was sollten Sie raten?
Betrachten Sie die drei Zeugen des Jahres 2020:
Neun Monate von der Hoffnung bis zum Urteil. Wie viele Entscheidungen wurden dazwischen getroffen?
Die Chloroquin-Vergiftung
Nur wenige Tage nach der Ankündigung von Hydroxychloroquin begannen die Nigerianer mit der Selbstmedikation mit Chloroquin – einem verwandten, aber giftigeren Medikament.
Three deaths. Mehrere Krankenhausaufenthalte wegen Überdosis. Das Giftzentrum des Bundesstaates Lagos war überlastet.
In Arizona, a man died after drinking fish tank cleaner containing chloroquine phosphate. His wife survived but was hospitalized.
Premature evidence claims killed people who never had COVID-19.
Die Geschichte von Thalidomid:
Im Jahr 1957 wurde Thalidomid als sicheres Beruhigungsmittel für schwangere Frauen vermarktet. Der Hersteller teilte unvollständige Sicherheitsdaten mit – Tierversuche waren begrenzt, Versuche am Menschen waren kurz. Ärzte, die auf den Ruf des Unternehmens vertrauten, verschrieben es in großem Umfang.
Bis 1961 wurden über 10.000 Kinder mit schweren Gliedmaßenfehlbildungen geboren. Die „Karte“ der Sicherheit wies eine fatale Lücke auf, die niemand offenlegte.
Unvollständige Beweise, die als vollständig präsentiert wurden, führten zu einer Tragödie, die die Arzneimittelregulierung für immer veränderte.
Sie sind Arzneimittelaufsicht im Jahr 1957. Ein Pharmaunternehmen beantragt die Zulassung von Thalidomid mit begrenzten Sicherheitsdaten. Was machst du?
Decision Tree: When to Share Preliminary Findings
Warten Sie auf die Bestätigung
"Preliminary—may change"
Schließen Sie die Analyse ab
In the hour of crisis, speed saves lives.
Modul 1: Der Kompromiss
Speed without rigor is recklessness.
Rigor without speed is abandonment.
Haben Sie darüber nachgedacht, was wir der Geschwindigkeit opfern?
A systematic review is thorough because it is slow.
A rapid review is fast because it makes trade-offs.
Was sind diese Kompromisse?
Systematisch vs. schnell: Die Unterschiede
| Element | Systematic Review | Rapid Review |
|---|---|---|
| Databases searched | 5-10+ | 1-3 |
| Grey literature | Extensive | Limited or none |
| Screening | Dual independent | Single + verification |
| Quality assessment | Full tool | Abbreviated |
| Timeline | 12-24 months | 1-6 weeks |
Die Cochrane-Antwort
The guardians of rigor themselves said: "We must move faster."
Decision Tree: When to Use Rapid Review
40 hours
SR
Standard timeline
What risks do we accept?
Missing studies: Limited search may miss relevant evidence
Selection bias: Single screener may have systematic blind spots
Quality gaps: Abbreviated assessment may miss fatal flaws
Publication bias: Less grey literature means more bias
Diese Risiken müssen in jedem Rapid Review explizit benannt werden.
Und doch bedenken Sie Folgendes:
Am 4. Juni 1944 stand Eisenhower vor einer unmöglichen Entscheidung. Sein Meteorologe, Gruppenkapitän Stagg, konnte kein gutes Wetter garantieren – er hatte nur 80-prozentige Sicherheit für eine kurze Lichtung am 6. Juni. Auf Gewissheit zu warten bedeutete, die Invasion um Wochen zu verzögern und das Risiko einer Entdeckung einzugehen.
Eisenhower entschied: „Okay, lass uns gehen.“ Die 80 %-Prognose war richtig. Die Invasion war erfolgreich.
Stagg sagte später, perfekte Prognosen seien unmöglich – aber umsetzbare Prognosen hätten den Krieg gerettet. Manchmal übertrifft die 80-prozentige Sicherheit heute die 95-prozentige Sicherheit zu spät.
Sie sind General Eisenhower am 4. Juni 1944. Ihr Meteorologe geht zu 80 % davon aus, dass es am 6. Juni ein kurzes Wetterfenster geben wird. Auf Gewissheit zu warten bedeutet, Wochen zu verzögern und die Entdeckung der Invasionstruppe zu riskieren.
Die Geschichte der zwei Metaanalysen
Zwei Metaanalysen zur gleichen Frage: „Verhindern Masken die Übertragung von COVID-19?“
Die Zuerst wurden 14 Beobachtungsstudien zusammengefasst: OR 0.35—masks reduce risk by 65%!
The second included only 3 RCTs: OR 0.91—no significant effect.
Same question. Same year. Opposite answers. Why?
Welche Studien Sie einbeziehen, bestimmt, welche Wahrheit Sie finden.
Observational Studies
Higher confounding risk
RCTs Only
Lower power, higher validity
Bei schnellen Überprüfungen SIND Ihre Einschlusskriterien Ihre Schlussfolgerung.
Decision Tree: Observational vs. RCT Evidence
Higher certainty
State uncertainty clearly
But downgrade certainty
Module 1 Quiz
What is the most appropriate approach?
The Story of Two Städte im Jahr 1918:
Im September 1918 wurden in Philadelphia und St. Louis Grippefälle festgestellt. Der Gesundheitskommissar von Philadelphia wartete auf weitere Daten, bevor er handelte. Am 28. September erlaubte er eine große Parade mit 200.000 Menschen. Innerhalb weniger Tage waren die Krankenhäuser überfüllt; 12.000 starben innerhalb weniger Wochen.
St. Louis schloss aufgrund der gleichen unvollständigen Daten sofort Schulen und verbot Versammlungen. Ihre Sterblichkeitsrate war halb so hoch wie in Philadelphia.
Das schwache Licht früher Maßnahmen übertraf das helle Licht, das zu spät kam.
Sie sind Philadelphias Gesundheitskommissar im September 1918. Es treten Fälle einer tödlichen Grippe auf. Für den 28. September ist eine große Liberty-Loan-Parade mit erwarteten 200.000 Teilnehmern geplant. Was tun Sie?
Die Tocilizumab-Wende
February 2021: Multiple small trials of tocilizumab (an IL-6 inhibitor) showed no benefit. Headlines declared it useless. Some hospitals stopped using it.
June 2021: RECOVERY trial reports 4,116 patients. Mortality reduced by 14%. WHO immediately recommends it.
Die kleinen Studien waren untermotorisiert. Sie fanden „keinen Beweis für eine Wirkung“ – was kein „Beweis für keine Wirkung“ ist. Die große Studie fand die Wahrheit.
Was ist der Unterschied zwischen diesen beiden Aussagen?
"No evidence of effect"
Cannot rule out benefit
"Evidence of no effect"
Confidently excludes benefit
Das Fehlen von Beweisen ist kein Beweis für das Fehlen – es sei denn, Ihre Studie war groß genug, um dies zu erkennen.
Entscheidungsbaum: Ist diese Studie groß genug?
Negativen Ergebnissen vertrauen
"No effect" may be false negative
Calculate post-hoc power
Die Ventilatorumkehr
Initial guidance: patients with low oxygen should be intubated quickly to prevent deterioration.
April 2020: "Intubate Later"
Kliniker beobachteten, dass viele Patienten einen niedrigen Sauerstoffgehalt („glückliche Hypoxie“) tolerierten. Die Lagerung in Bauchlage verhinderte oft die Notwendigkeit einer Beatmung.
Result: Practice changed mid-pandemic based on real-world observation, not RCTs. Early intubation may have caused avoidable deaths.
When RCTs are impossible, observe carefully. Document systematically. Share transparently.
Speed without rigor is recklessness.
Rigor without speed is abandonment.
Modul 2: Die Methode
Vierzig Stunden bis zur Wahrheit – wenn Sie den Weg kennen.
Das 40-Stunden-Rapid Überprüfen
Schritt 1: Definieren Sie die Frage (2 Stunden)
The PICO Framework—Sharper Than Ever
Population: Adults hospitalized with COVID-19 (narrow!)
Intervention: Dexamethasone 6mg daily
Comparator: Standard care / placebo
Outcome: 28-day mortality (primary only)
Step 2: Search Strategy (4 hours)
DON'T: Systematic Search
MEDLINE + EMBASE + Cochrane + CINAHL + PsycINFO + Web of Science + grey literature + hand searching
Time: 40+ hours
DO: Focused Search
PubMed + Cochrane Library + one preprint server (medRxiv)
Time: 4 hours
Dokumentieren Sie, was Sie gesucht haben UND was Sie bewusst ausgeschlossen haben.
Die entscheidende Abkürzung:
Einzelscreening mit Verifizierung.
This saves 50% of screening time while catching most errors.
Decision Tree: Quality Assessment Shortcuts
Use standard tool (RoB 2, ROBINS-I)
Key domains only
Key domains: randomization, blinding, missing data, selective reporting
Der letzte Schritt: Synthese
Möglicherweise haben Sie nicht umfassend gesucht. Möglicherweise haben Sie das Studium verpasst. Eine zusammengefasste Schätzung aus einer unvollständigen Suche kann zu falschem Vertrauen führen.
Erzählsynthese bevorzugen. Wenn Sie bündeln müssen, geben Sie die Einschränkungen laut an.
PRISMA-RR: Ihre Reporting-Checkliste
PRISMA for Rapid Reviews Extension (2024)
When reporting rapid reviews, you MUST include:
- Shortcuts taken: Was wurde im Vergleich zur vollständigen SR optimiert?
- Time constraints: Warum war eine schnelle Überprüfung notwendig?
- Databases searched: Und warum waren es andere? ausgeschlossen
- Screener count: Single vs. dual screening
- Date of search: Beweise aktuell am [DATUM]
- Limitations section: What may have been missed
Die Geschichte der Remdesivir-Umkehr
The FDA granted Emergency Use Authorization: "Remdesivir shortens recovery time."
The WHO recommended against it: "No mortality benefit, high cost."
Same drug. Same evidence base. Opposite conclusions.
Der Unterschied? Die FDA priorisierte Ersatzergebnisse (Erholungszeit). Die WHO priorisierte patientenzentrierte Ergebnisse (Mortalität).
Decision Tree: Choosing Outcomes in Rapid Reviews
Highest certainty
Note indirectness
State explicitly
Module 2 Quiz
What screening approach is appropriate?
Module 2 Quiz (2)
Was ist laut PRISMA-RR NICHT in einem Schnellprüfungsbericht erforderlich?
Die Bauchlagerung Entdeckung
Jahrzehntelang lagen Intensivpatienten mit Atemversagen auf dem Rücken. Bei COVID-19 bemerkten Ärzte etwas Bemerkenswertes.
Turning patients onto their stomachs—proning—dramatically improved oxygen levels. No drug required. No cost. Available everywhere.
Meta-analysis of 6 RCTs: Mortality reduced by 25% in severe ARDS patients.
Manchmal ist der Durchbruch kein Molekül. Manchmal ist es eine Position.
Die Geschichte des Excel-Fehlers:
Im Jahr 2010 veröffentlichten die Harvard-Ökonomen Reinhart und Rogoff einflussreiche Forschungsergebnisse: Länder mit Schulden über 90 % des BIP verzeichneten ein negatives Wachstum. Regierungen auf der ganzen Welt zitierten es, um Sparmaßnahmen zu rechtfertigen.
Three years later, a graduate student found their Excel spreadsheet excluded five countries due to a coding error. When corrected, the 90% threshold disappeared.
Ein ungeprüfter Tabellenkalkulationsfehler beeinflusste die Politik, die Millionen Menschen betraf. Die Forscher, die überprüfen, sind genauso wichtig wie diejenigen, die berechnen.
Sie sind ein Doktorand, der das berühmte Reinhart-Rogoff-Papier überprüft, das Regierungen zur Rechtfertigung von Sparmaßnahmen verwenden. Machen Sie sich die Mühe, die Tabellenkalkulation von Harvard-Professoren zu überprüfen?
Decision Tree: Narrative vs. Meta-Analysis
Mit Zuversicht vergleichen
"Kann Studien verpassen"
Don't pool apples and oranges
Vierzig Stunden bis zur Wahrheit – wenn Sie den Weg kennen.
Modul 3: Die Katastrophe
A flawed study in a meta-analysis poisons all.
Haben Sie die Geschichte davon noch nicht gehört? Marseille?
Von der Zeitung, die die Welt verändert hat – und es nicht hätte tun sollen?
17. März 2020: Das Papier
Gautret et al. — International Journal of Antimicrobial Agents
Claim: Hydroxychloroquine + azithromycin clears COVID-19 virus in 100% of patients
Submitted: March 16, 2020
Accepted: March 17, 2020
Peer review time: ONE DAY
Der Chefredakteur war ein Kollege am gleichen Institut wie die Autoren.
Was waren die Mängel?
Die Patienten, denen es schlechter ging, wurden einfach aus der Analyse entfernt.
And yet, consider what followed:
March 28: FDA issues Emergency Use Authorization.
April 2020: Countries worldwide stockpile the drug. India bans exports.
Result: Patienten mit Lupus und rheumatoider Arthritis, die Hydroxychloroquin zum Leben benötigen, können ihre Medikamente nicht erhalten.
Die sieben tödlichen Fehler
1. Non-randomized, open-label design
2. Convenience control group from different hospitals
3. Patienten, deren Zustand sich verschlechterte, wurden von der Analyse ausgeschlossen
4. Different PCR thresholds for treatment vs. control
5. Ethics approval granted AFTER trial started
6. Children included despite exclusion criteria
7. One-day peer review by conflicted editor
Die Abrechnung: Dezember 2023
It remains the most-cited COVID-19 paper to be retracted.
Der Schaden wurde innerhalb von Tagen angerichtet. Die Korrektur dauerte Jahre.
Decision Tree: Red Flags in Rapid Evidence
Verify before sharing
Check author/editor affiliations
Der Rekonvaleszenten-Plasmakollaps
August 2020: Die FDA erteilt eine Notfallzulassung für Rekonvaleszentenplasma und führt eine Reduzierung der Sterblichkeit um 35 % an.
Die Daten stammen aus einer nicht randomisierten Studie mit 35.000 Patienten. Keine Kontrollgruppe. Nur historische Vergleiche.
Bis Februar 2021 zeigten sieben RCTs keinen Mortalitätsvorteil. Die EUA wurde überarbeitet. Es wurden bereits mehr als 500.000 Dosen verabreicht.
Consider the social media amplification:
Fehlinformationen verbreiten sich schneller als Korrekturen. Das ist die Asymmetrie, die Sie bekämpfen.
Impfung: Die Pre-Bunking-Verteidigung
Prebunking > Debunking: Warn people about manipulation tactics before they encounter false claims.
The technique: „Vielleicht hören Sie Behauptungen, dass eine kleine Studie beweist, dass X funktioniert. Deshalb führen kleine Studien oft in die Irre …“
The evidence: Inoculation reduces susceptibility to misinformation by 20-30% (van der Linden et al., 2020).
Inoculation Messaging: Practical Templates
Three Prebunking Approaches
1. Logic-Based: „Wenn jemand eine 100-prozentige Wirksamkeit behauptet, fragen Sie: Gab es eine Kontrollgruppe? Eine Studie ohne Vergleich beweist nichts.“
2. Source-Based: „Seien Sie vorsichtig bei Studien, die vor dem Peer-Review online veröffentlicht werden – sie wurden noch nicht von unabhängigen Experten überprüft.“
3. Emotional-Based: „Wunderheilungsansprüche nutzen unsere Hoffnung aus. Echte Behandlungen zeigen bescheidene Vorteile mit ehrlichen Einschränkungen.“
Verwenden Sie diese Vorlagen für die Kommunikation im Bereich der öffentlichen Gesundheit, die Schulung von Ärzten und Pressemitteilungen.
Decision Tree: Evaluating Preprint Claims
Author-editor relationship?
Never cite as definitive
Module 3 Quiz
Wie viele Warnsignale gibt es in dieser Studie?
Module 3 Quiz (2)
Die Gautret-Hydroxychloroquin-Studie erhielt 3,1 Millionen Twitter-Interaktionen. Die Widerrufsmitteilung erhielt 83. Dies zeigt:
A flawed study in a meta-analysis poisons all.
Modul 4: Der Betrug
Beware the meta-analysis built on sand.
Haben Sie miterlebt, wie sich Betrug durch Beweise ausbreitet?
How one lie becomes the foundation of many truths?
Das Ivermectin-Phänomen
Governments in Latin America, Africa, and India distribute millions of doses. Patients demand prescriptions. Some take veterinary formulations.
Aber irgendetwas stimmte mit den Daten grundlegend nicht.
Die Elgazzar-Studie: Anatomie des Betrugs
Egypt, 2020: The Largest Ivermectin Trial
Dr. Ahmed Elgazzar posted a preprint claiming ivermectin reduced COVID-19 mortality by 90%.
Sie wurde in mehrere Metaanalysen einbezogen und trug 12.6% zur Gesamteffektschätzung für die Mortalität bei.
Dann begann ein Doktorand mit der Überprüfung der Daten.
What did they find?
July 15, 2021: Die Studie wurde wegen „ethischer Bedenken“ zurückgezogen.
Der Kaskadeneffekt
| Studies Included | Survival Benefit | Significance |
|---|---|---|
| All 12 studies | 51% reduction | Significant |
| Without Elgazzar | 38% reduction | Borderline |
| Ohne Studien mit hoher Verzerrung | 10% reduction | Not significant |
| Nur Studien mit geringer Verzerrung | 4% reduction | Not significant |
Eine betrügerische Studie änderte die Schlussfolgerung von „keine Wirkung“ zu „Wunderheilung“.
Und Nature Medicine warnte:
Metaanalysen, die allein auf zusammenfassenden Daten basieren, sind von Natur aus unzuverlässig.
Decision Tree: Detecting Problematic Studies
Führen Sie die Sensitivitätsanalyse ohne aus it
Die Lektion von Ivermectin:
Always run your meta-analysis twice:
Einmal mit allen Studien. Einmal ohne die einflussreichsten.
Wenn eine Studie Ihre Schlussfolgerung ändert, ist Ihre Schlussfolgerung fragil.
Die Geschichte von Jack Lawrence
Jack Lawrence was a master's student in London. He knew no Arabic. But he could spot duplicate rows in a spreadsheet.
Er hat Elgazzars Datenergänzung heruntergeladen. Zeile 148 war identisch mit Zeile 11. Zeile 228 stimmte mit Zeile 79 überein. 79 patients appeared twice.
Er twitterte seine Ergebnisse. Innerhalb weniger Tage zogen die Preprint-Server das Papier zurück. Metaanalysen wurden überarbeitet. Richtlinien geändert.
Ein Student mit grundlegenden Datenkenntnissen hat geschafft, was Peer-Review nicht konnte.
Decision Tree: Fraud Detection Checklist
(Identical means across groups)
May indicate fabrication
Deaths before trial = impossible
Check other signals
Module 4 Quiz
Was sollten Sie tun?
Module 4 Quiz (2)
Die Elgazzar-Ivermectin-Studie wurde als betrügerisch erkannt, weil:
Die TOGETHER-Studie Enttäuschung
Nachdem kleine Studien nahelegten, dass Fluvoxamin (ein Antidepressivum) schweres COVID-19 verhindern könnte, wartete die Welt auf die endgültige Antwort.
The TOGETHER trial enrolled 1,497 patients in Brazil. Initial interim: 32% reduction in hospitalization!
Endgültige Ergebnisse: Nur 5,1 % der Placebo-Patienten wurden ins Krankenhaus eingeliefert vs 4,0 % der Fluvoxamin-Patienten. Der Effekt war geringer als erhofft und der absolute Nutzen war winzig.
Small absolute differences require enormous trials to detect. Most promising treatments fade when tested properly.
Die Geschichte des Power Posing:
Im Jahr 2010 behaupteten Forscher, dass „Power Posen“ (Stehen wie Superman) den Testosteronspiegel und die Risikobereitschaft steigerten. Die Studie ging viral – TED-Vorträge, Wirtschaftsbücher, Millionen von Gläubigen. Mehrere Studien schienen es zu replizieren.
Dann scheiterten größere, vorregistrierte Replikationen. Der ursprüngliche Co-Autor dementierte die Ergebnisse öffentlich. Viele kleine, flexible Studien hatten gefunden, was sie finden wollten.
Die Vervielfachung schwacher Belege fühlte sich wie starker Beweis an – bis eine gründliche Replikation ergab, dass es sich um Rauschen handelte.
Sie sind Herausgeber einer Zeitschrift und erhalten eine große, vorab registrierte Replikationsstudie, die den beliebten Power-Posing-Effekt nicht reproduzieren kann. Die ursprüngliche Studie hat Millionen von Gläubigen und einen berühmten TED-Vortrag.
Decision Tree: Reading a Forest Plot
Cannot exclude no effect
Higher confidence
True effect varies—explore why
Beware the meta-analysis built on sand.
Modul 5: Der Triumph
From protocol to saving lives: 100 days.
Jetzt erfahren Sie, wie es sein sollte erledigt.
Of how speed and rigor found harmony.
Die RECOVERY-Studie
Als sich das Hydroxychloroquin-Chaos ausbreitete, starteten britische Forscher die weltweit größte COVID-19-Behandlungsstudie. Es wurde so konzipiert, dass es schnell UND streng ist.
Within 6 weeks of funding, patients were being enrolled.
How did they achieve speed without sacrificing quality?
An adaptive platform trial: multiple treatments tested simultaneously.
16. Juni 2020: Die Ankündigung
Dexamethasone Results
Ventilated patients: 29% mortality reduction (NNT = 8)
Oxygen therapy: 20% mortality reduction (NNT = 25)
No oxygen needed: No benefit (possible harm)
Cost per treatment: ~$6 for a common steroid.
Und die Welt reagierte – dieses Mal richtig.
1,000,000
Lives saved globally by March 2021
22.000 Allein im Vereinigten Königreich. Ausgehend von einem 6-Dollar-Medikament, das seit 60 Jahren erhältlich war.
Der Unterschied bestand in strengen Beweisen, die schnell erstellt wurden.
What Made RECOVERY Different?
1. Randomized controlled design (not observational)
2. Vorab festgelegte Ergebnisse und Analyseplan
3. Massive scale (statistical power)
4. Adaptive platform (dropped arms early if no signal)
5. Simplified enrollment (one-page consent in emergency)
6. Unabhängiges Datenüberwachungskomitee
Die Lektion von RECOVERY:
Speed does not require cutting corners. It requires cutting waste.
Simplified consent forms. Adaptive designs. Platform trials that test multiple treatments at once.
Strenge und Geschwindigkeit sind keine Feinde. Sie sind Partner, die darauf warten, vorgestellt zu werden.
Der SOLIDARITY-Kontrast
Kleine Studien kombiniert
Gautret: 36 patients
Elgazzar: ~400 patients (fraud)
RECOVERY/SOLIDARITY
RECOVERY: 11,500 patients
SOLIDARITY: 11,330 patients
Plattformversuche ersetzen den Lärm vieler kleiner Studien durch das Signal einer großen eins.
Entscheidungsbaum: Sollten Sie auf den großen Prozess warten?
Beweise von höherer Qualität folgen
Update when trial reports
Beste verfügbare Beweise
Module 5 Quiz
An der RECOVERY-Studie nahmen 11.500 Patienten im Dexamethason-Arm teil. Was war der Hauptgrund dafür, dass dies möglich war?
Module 5 Quiz (2)
Dexamethason gegen COVID-19 rettete weltweit schätzungsweise 1 Million Leben. Die Medikamentenkosten pro Behandlung betrugen:
Der Verzicht auf Azithromycin
Die Gautret-Studie kombinierte Hydroxychloroquin mit Azithromycin. Plötzlich war Azithromycin überall und wurde weltweit in die Behandlungsprotokolle aufgenommen.
Aber Azithromycin wurde nie allein getestet. Die Kombination wurde nie bewiesen. Und Azithromycin verursacht Herzrhythmusstörungen.
July 2020: RECOVERY randomizes 7,763 patients. Result: No benefit. Median hospital stay identical. Mortality identical.
Monatelange Exposition gegenüber Herzrisiken ohne Nutzen – weil die ursprüngliche Studie nie in Frage gestellt wurde.
Die Geschichte von Tacoma Narrows:
1940 wurde die Tacoma Narrows Bridge schnell und schnell gebaut günstig. Um Zeit zu sparen, verzichteten die Ingenieure auf Tests im Windkanal. Vier Monate nach der Eröffnung versetzten mäßige Winde die Brücke in Schwingungen. Sie drehte sich heftig und brach zusammen – festgehalten auf einem Film, den Ingenieurstudenten immer noch studieren.
Eine nahegelegene ältere Brücke, die langsam und mit umfangreichen Tests gebaut wurde, steht noch. Die dritte Lektion kam später: Moderne Brücken nutzen schnelle rechnerische Tests – schnelle Methoden, die keine Verifizierung überspringen.
Speed without testing destroys. Testing without speed delays. Rapid testing saves.
Sie waren 1940 Ingenieur und entwarfen die Tacoma-Narrows-Brücke. Das Budget ist knapp und die Frist fest. Windkanaltests würden Wochen und Kosten verursachen. Was machen Sie?
Decision Tree: Evaluating Platform Trial Arms
Diese Behandlung nicht anwenden
Contraindicated
Update guidelines
From protocol to saving lives: 100 days.
Modul 6: Die Lebenden
Lebende Beweise dienen den Lebenden.
Haben Sie Beweise in Betracht gezogen, die niemals? hört auf zu wachsen?
Rezensionen, die mit der Epidemie selbst atmen?
The Living Systematic Review
Eine lebende Rezension ist ein Video: kontinuierlich aktualisiert, wenn neue Beweise auftauchen.
In a pandemic, the photograph is obsolete before it's printed.
PAHO's Living Review: Ein Fall Studie
Pan American Health Organization, April 2020 - Present
Launched: April 2020
Interventions assessed: 305 treatments
RCTs included: 924 randomized controlled trials
Updates: 48 updates published
Sources monitored: 40+ databases including preprint servers
When should a review become "living"?
1. The topic is a priority for decision-making
2. Neue Beweise tauchen auf rapidly
3. Current certainty is low
4. Neue Beweise werden wahrscheinlich change conclusions
If all four are true, a living approach is warranted.
The Challenge: Keeping Reviews Alive
Decision Tree: When to Update a Living Review
Note: "No new evidence" is still information
Die Geschichte der Molnupiravir-Momentum
October 2021: Merck announces interim results—50% reduction in hospitalization!
Stock prices soar. Countries pre-order millions of courses. Headlines celebrate.
November 2021: Final results published—30% reduction. Still significant, but...
Dezember 2021: Die aktualisierte Analyse zeigt, dass nur 6,8 % der Kontrollarmpatienten ins Krankenhaus eingeliefert wurden, nicht 14,1 %.
Der Nenner hat sich geändert. Die Magie verblasste. Lektionen: vorläufig ≠ endgültig.
Und dann kam Paxlovid—
Molnupiravir
Low-risk patients
Mutagenic concerns
Paxlovid
High-risk patients
Drug interactions
Lebende Rezensionen müssen zwischen vorläufig und endgültig, vorläufig und bestätigt unterscheiden.
Decision Tree: Retiring a Living Review
Archiv mit Enddatum
Low certainty needs monitoring
Aktive Beweise Feld
Module 6 Quiz
Eine Studie ergab, dass 65 % der „lebenden“ systematischen Überprüfungen zu COVID-19 nie aktualisiert wurden. Dies ist aus folgenden Gründen problematisch:
Module 6 Quiz (2)
Was sollten Sie tun?
Das Bamlanivimab Rückzug
November 2020: FDA erteilt EUA für Bamlanivimab, einen monoklonalen Antikörper. Erste Daten waren vielversprechend.
March 2021: EUA revoked. Why? Variant escape. Das Virus mutierte. Der Antikörper hat nicht mehr gebunden.
Eine Live-Überprüfung, die monoklonale Antikörper verfolgt, hätte dies innerhalb von Wochen ergeben. Die Änderung der statischen Führung dauerte Monate.
Bei einer Pandemie entwickelt sich der Feind weiter. Ihre Beweise müssen sich schneller weiterentwickeln.
Die Geschichte der Grippeüberwachung:
Das CDC überwacht die Grippe durch Sentinel-Überwachung. Frühe Systeme überprüften Krankenhäuser wöchentlich – zu langsam, um Überspannungen zu erkennen. Die ständige Echtzeitüberwachung überforderte die Analysten mit Lärm.
Die Lösung: schwellenbasierte Überwachung. Verfolgen Sie kontinuierlich, lösen Sie jedoch nur dann Warnungen aus, wenn die Fälle die saisonalen Basiswerte überschreiten. Dieser Ansatz der „lebenden Überprüfung“ hat H1N1 im Jahr 2009 Wochen vor herkömmlichen Methoden erkannt.
Der Wächter, der Schwellenwerte überwacht, übertrifft sowohl den jährlichen Inspektor als auch den erschöpften stündlichen Prüfer.
Sie entwerfen ein Krankheitsüberwachungssystem. Wie oft sollten Sie die Beweise überprüfen und Warnungen auslösen?
Entscheidungsbaum: Ist diese neue Studie signifikant genug, um eine Aktualisierung auszulösen?
Certainty change = guideline change
Direction change is major
Update at next scheduled
Lebende Beweise dienen den Lebenden.
Modul 7: Die Qualität
Transparency reveals; concealment deceives.
Wie beurteilen Sie eine schnelle Überprüfung?
When time prevents perfection, what is "good enough"?
GRADE in 40 Hours: Is It Possible?
Full GRADE Assessment
Risk of bias + Inconsistency + Indirectness + Imprecision + Publication bias
Time: 8-16 hours per outcome
Rapid GRADE
Risk of bias + Imprecision + Major concerns only
Time: 2-4 hours per outcome
Focus on the domains most likely to affect certainty.
The Non-Negotiables
1. Document everything: Was Sie gesucht haben, was Sie ausgeschlossen haben, Warum
2. State limitations explicitly: Nicht im Text vergraben – vorne und in der Mitte
3. Unterscheiden Sie schnell von systematisch: Never pretend comprehensiveness
4. Date-stamp everything: Beweise aktuell am [DATUM]
5. Planen Sie Aktualisierungen ein: Eine schnelle Überprüfung ist nicht das letzte Wort
Die Geschichte der Klimaunsicherheit:
IPCC climate reports could claim certainty to seem authoritative. Instead, they explicitly quantify uncertainty: "likely (66-100%)", "very likely (90-100%)", "virtually certain (99-100%)".
Als im Bericht von 2021 festgestellt wurde, dass die Erwärmung „eindeutig“ sei, der Zeitpunkt des Zusammenbruchs der Eisdecke jedoch „geringes Vertrauen“ sei, wussten die politischen Entscheidungsträger genau, worauf sie der Karte vertrauen konnten – und wo sich Drachen befinden könnten lauern.
Diese Transparenz hat die Glaubwürdigkeit und die politische Wirkung der Berichte erhöht, nicht verringert.
Sie schreiben den IPCC-Klimabericht. Sollten Sie Gewissheit beanspruchen, um verbindlicher zu wirken, oder Unsicherheit anerkennen, wo sie existiert?
How to READ a Rapid Review (Consumer Guide)
Five Questions to Ask Before Trusting
- Wann wurde die Suche durchgeführt? — If >3 months old in a fast-moving field, it's outdated
- Welche Datenbanken wurden durchsucht? — PubMed alone may miss 30% of relevant studies
- Fand das Screening einfach oder doppelt statt? — Single screening may miss 5-10% of relevant studies
- Sind Einschränkungen explizit angegeben? — Hidden limitations = hidden agendas
- Gibt es einen Plan für Aktualisierungen? — Rapid reviews should be living or have update triggers
Gemeinsame Entscheidungsfindung unter Unsicherheit
1. Nennen Sie die Unsicherheit: "We have some evidence, but it's early/limited/conflicting."
2. Quantify when possible: „Studien deuten darauf hin, dass 20–40 % davon profitieren könnten, aber wir sind uns nicht sicher.“
3. Explain what we're watching: "A larger trial reports next month."
4. Offer structured choice: „Angesichts dieser Unsicherheit können wir es versuchen oder warten. Was ist Ihnen am wichtigsten?“
Das Gespräch Skript
"Ich habe mir die neuesten Erkenntnisse angesehen. Folgendes wissen wir: Diese Behandlung may hilft – einige Studien zeigen eine 30-prozentige Verbesserung. Aber die Studien sind klein und einige zeigten keinen Nutzen.
"Ich möchte ehrlich zu Ihnen sein. Wenn wir zwei Monate warten, erhalten wir bessere Daten aus einem größeren Versuch. Aber ich verstehe auch, dass Sie jetzt leiden.
„Was würde Ihnen bei dieser Entscheidung helfen? Möchten Sie es jetzt angesichts der Unsicherheit versuchen, oder möchten Sie lieber auf stärkere Beweise warten?“
Bei der gemeinsamen Entscheidungsfindung geht es nicht darum, alle Antworten zu haben. Es geht darum, zu teilen, was wir don't know honestly.
Network Meta-Analysis: A Word of Caution
What Can Go Wrong:
• Transitivity violation: Populations in A-vs-B trials differ from B-vs-C trials
• Inconsistency: Direkte und indirekte Beweise widersprechen
• Sparse networks: Single-study connections carry entire inference
In Rapid Reviews: Network meta-analysis typically requires more time and expertise than available. When used, state transitivity assumptions explicitly. When skipped, explain why indirect comparisons weren't attempted.
Entscheidungsbaum: Sollten Sie diesem Rapid Review vertrauen?
Mit angegebenen Einschränkungen anwenden
Cannot assess currency
Pretending comprehensiveness
Die Geschichte vom Vitamin-D-Wahn
Dozens of observational studies showed: low vitamin D → worse COVID outcomes.
Metaanalysen dieser Studien zeigten: „40 % Sterblichkeitsreduktion durch Nahrungsergänzung!“
Then came the RCTs. One after another: no benefit. No benefit. No benefit.
Die Beobachter hatten einen Zusammenhang gefunden. Kranke Menschen bleiben zu Hause → Mangel an Vitamin D UND schlimmere Folgen. Die Sonne war der Störfaktor, nicht das Heilmittel.
Module 7 Quiz
A rapid review should ALWAYS include:
Module 7 Quiz (2)
Was sollten Sie daraus ziehen?
Module 7 Quiz (3)
Vitamin-D-Beobachtungsstudien zeigten eine Reduzierung der Sterblichkeit um 40 %. RCTs zeigten keinen Nutzen. Diese Diskrepanz lässt sich am besten erklären durch:
Module 7 Quiz (4)
Inoculation messaging (prebunking) is effective because it:
Module 7 Quiz (5)
Der beste Ansatz ist:
Die Tragödie im Pflegeheim
Die Impfstoffe sind eingetroffen. Wer sollte sie zuerst bekommen? Die Beweise waren eindeutig: Pflegeheimbewohner hatten die höchste Sterblichkeit.
Aber einige plädierten für wichtige Arbeitskräfte. Andere für Gesundheitspersonal. Die Debatte verzögerte die Einführung.
Result: 60,000+ US nursing home deaths occurred after Impfstoffe waren verfügbar, aber before rollout completed.
Rapid evidence synthesis on prioritization could have saved weeks. Weeks meant thousands of lives.
Die Geschichte des Challenger:
Am 27. Januar 1986 teilten Ingenieure der NASA mit, dass die O-Ringe des Challenger bei kaltem Wetter versagen könnten. Aber sie hatten unvollständige Daten – nur einige Kaltstartaufzeichnungen, mehrdeutige Fehlermuster. Manager Larry Mulloy verlangte einen Gefahrennachweis; Ingenieure konnten nur Unsicherheit zeigen.
Mulloy startete. Die O-Ringe versagten nach 73 Sekunden. Eine spätere Analyse ergab, dass die Daten eindeutig einen Ausfall vorhersagten – allerdings nur, als die Analysten wussten, worauf sie achten mussten.
Teilbeweise, die als unzureichend abgetan wurden, enthielten die Warnung, die sieben Leben hätte retten können.
Sie sind am 27. Januar 1986 Ingenieur bei der NASA. Sie haben unvollständige Daten, die darauf hindeuten, dass O-Ringe bei kaltem Wetter versagen könnten. Der Start ist für morgen bei eisigen Temperaturen geplant. Ihr Vorgesetzter verlangt einen Gefahrennachweis.
Decision Tree: Assessing Funding Source Bias
Outcome switching limited
Selective reporting possible
But still assess RoB
Das Preprint-Paradoxon
December 2020: Daten zur Wirksamkeit des Pfizer-Impfstoffs erschienen vor der Veröffentlichung auf medRxiv. Innerhalb weniger Stunden hatten die Aufsichtsbehörden mit der Überprüfung begonnen. Die Welt könnte planen.
January 2021: A preprint claimed vaccines caused deaths in nursing homes. It was methodologically flawed. It went viral. Vaccine hesitancy increased.
Gleiche Plattform. Unterschiedliche Ergebnisse. Preprints beschleunigen sowohl Wahrheit als auch Lüge. Die Last des Urteils liegt beim Leser.
Decision Tree: When Is a Preprint Acceptable to Cite?
„Vordruck, nicht peer-reviewed“
Warten auf Verifizierung
Keine Begründung für Vorabdruck
Regional Adaptation: MENA Context
Während COVID-19 standen die Staaten des Golf-Kooperationsrates (GCC) vor einer kritischen Lücke: Begrenzte lokale Schnellprüfungskapazitäten bedeuteten, dass man sich auf westliche Erkenntnisse verlassen musste, die manchmal regionale Faktoren außer Acht ließen – Ramadan-Fasten, Haushalte mit mehreren Generationen, Verhältnisse der Beschäftigten im Gesundheitswesen usw unterschiedliche Bevölkerungsdemografien.
Lektion: Passen Sie das 40-Stunden-Protokoll an Ihren Kontext an. Arabische Suchbegriffe in regionalen Datenbanken. Überlegungen zur lokalen Implementierung. Regionale Fallstudien für Schulungen.
Key Adaptations:
• Include regional databases (IMEMR, EMBASE Arabic)
• Consider local healthcare infrastructure capacity
• Adapt communication for local stakeholders
Transparency reveals; concealment deceives.
Final Assessment
Sie sind durch Krise und Wahrheit gereist.
Die fünf Prinzipien
1. Speed without rigor is recklessness.
2. Rigor without speed is abandonment.
3. A flawed study in a meta-analysis poisons all.
4. Transparency reveals; concealment deceives.
5. Lebende Beweise dienen den Lebenden.
Final Quiz (1/5)
Die Gautret-Hydroxychloroquin-Studie wurde hauptsächlich aus folgenden Gründen zurückgezogen:
Final Quiz (2/5)
Als die betrügerische Elgazzar-Ivermectin-Studie entfernt wurde, sank der Mortalitätsvorteil:
Final Quiz (3/5)
Die RECOVERY-Studie erzielte Ergebnisse in ungefähr:
Final Quiz (4/5)
Of 97 "living" systematic reviews on COVID-19, what percentage were never updated?
Final Quiz (5/5)
Bei einem Rapid Review ist die wichtigste Qualitätsanforderung:
Sie haben die Reise abgeschlossen.
Gehen Sie los und synthetisieren Sie mit Weisheit.
Erinnern Sie sich an die Lektionen von 2020:
Speed without truth killed. Truth without speed abandoned.
Das Gleichgewicht ist die Kunst.