In the hour of crisis, speed saves lives.
But haste without wisdom takes them.
ヒーラーを導こうとする者よ、
証拠の動きが遅すぎると何が起こるかを目撃しましたか?
そして、証拠が速すぎると何が起こるか見たことがありますか?
January 2020
A novel coronavirus emerges in Wuhan.
Patients are dying. There is no treatment.
世界は答えを求めています。
How long does a systematic review take?
従来の系統的レビュー
Pandemic Timeline
世界は反応した?
Speed created a flood. Who would separate truth from noise?
私たちを悩ませる疑問
2020年3月、フランスは、1つの小規模で欠陥のある研究に基づいて、新型コロナウイルス感染症に対するヒドロキシクロロキンを承認した。大規模な試験で効果が示されず、心臓に害を及ぼす可能性が示されるまで、何百万人もの人々がそれを服用しました。一方、英国の RECOVERY 試験では、デキサメタゾンが迅速かつ厳密にテストされました。 3 か月以内に、重篤な場合の死亡が 3 分の 1 減少することが証明されました。
両国は同じ緊急事態に直面していました。ある者は弱い証拠に基づいて行動し、ある者は強力な証拠を迅速に生成しました。
Speed without rigor cost lives. Rapid rigor saved them.
あなたは 2020 年 3 月に保健大臣になりました。小規模な研究では、一般的な薬が新型コロナウイルス感染症 (COVID-19) を治すと主張しています。何をしますか?
このコースで学べること
最後までに次のことができるようになります:
- 40 時間ではなく 40 時間で迅速な審査を実施する日
- Know when "good enough" is actually good enough
- 急速に変化する証拠から不正と偏見を特定する
- Use decision trees for methodological trade-offs
- Understand living systematic reviews
- ヒドロキシクロロキンとイベルメクチンの災害から学ぶ
迅速な証拠の 5 つの原則をご覧ください:
1. Speed without rigor is recklessness.
2. Rigor without speed is abandonment.
3. A flawed study in a meta-analysis poisons all.
4. Transparency reveals; concealment deceives.
5。生きた証拠は生きているものに役立ちます。
サージスフィアの大惨事
2020 年 5 月、ランセット誌は、6 大陸の 671 の病院からの 96,000 人の患者を対象とした研究を発表しました。ヒドロキシクロロキンが示されていました increased death rates. The WHO halted trials worldwide.
しかし、データは Surgisphere からのものでした。Surgisphere は、SF 作家とアダルト コンテンツ モデルを含む従業員 11 名を擁する会社です。 データベースは存在しませんでした。
13 日以内に、この論文は撤回されました。しかし、裁判はすでに中止されていた。時間が失われてしまいました。信頼は打ち砕かれた。
How did two of medicine's most prestigious journals—
ランセットとNEJM—捏造データを公開?
Speed pressure broke the gatekeepers.
意思決定ツリー: この研究を信頼すべきか?
標準評価を続行
結果の切り替えをチェック
含める前にデータをリクエスト
Module 0 Quiz
何をアドバイスすべきですか?
2020 年の 3 人の証人について考えてみましょう:
希望から判決まで9か月。その間、何回の決断が下されましたか?
クロロキン中毒
ヒドロキシクロロキンの発表から数日以内に、ナイジェリア人は関連性はあるがより毒性の高い薬物であるクロロキンによる自己治療を開始しました。
Three deaths. 過剰摂取で複数回入院しました。ラゴス州毒物センターは圧倒されました。
In Arizona, a man died after drinking fish tank cleaner containing chloroquine phosphate. His wife survived but was hospitalized.
Premature evidence claims killed people who never had COVID-19.
サリドマイドの物語:
1957 年、サリドマイドは妊婦向けの安全な鎮静剤として市販されました。メーカーは不完全な安全性データを共有しました。動物実験は限られており、人体実験は簡潔でした。医師たちは会社の評判を信頼し、この薬を広く処方しました。
1961 年までに、10,000 人以上の子供が重度の四肢奇形を持って生まれました。安全性の「地図」には、誰も明らかにしていない致命的なギャップがありました。
完全なものとして提示された不完全な証拠が、医薬品規制を永久に再構築する悲劇を引き起こしました。
あなたは 1957 年の医薬品規制当局です。製薬会社は、限られた安全性データでサリドマイドの承認を申請しています。何をしますか?
Decision Tree: When to Share Preliminary Findings
確認を待つ
"Preliminary—may change"
分析を完了してください
In the hour of crisis, speed saves lives.
モジュール 1: トレードオフ
Speed without rigor is recklessness.
Rigor without speed is abandonment.
速度のために何を犠牲にするか考えましたか?
A systematic review is thorough because it is slow.
A rapid review is fast because it makes trade-offs.
これらは何ですか?トレードオフ?
体系的 vs. 迅速: 違い
| Element | Systematic Review | Rapid Review |
|---|---|---|
| Databases searched | 5-10+ | 1-3 |
| Grey literature | Extensive | Limited or none |
| Screening | Dual independent | Single + verification |
| Quality assessment | Full tool | Abbreviated |
| Timeline | 12-24 months | 1-6 weeks |
コクランの対応
The guardians of rigor themselves said: "We must move faster."
Decision Tree: When to Use Rapid Review
40 hours
SR
Standard timeline
What risks do we accept?
Missing studies: Limited search may miss relevant evidence
Selection bias: Single screener may have systematic blind spots
Quality gaps: Abbreviated assessment may miss fatal flaws
Publication bias: Less grey literature means more bias
これらのリスクは、すべての迅速なレビューで明示的に述べられなければなりません。
それでも、次のことを考慮してください:
6 月1944年4日、アイゼンハワーは不可能な決断を迫られた。彼の気象学者であるグループ キャプテン スタッグは、好天を保証できませんでした。6 月 6 日に短時間晴れるという確信度は 80% のみでした。確実性を待つことは、侵攻を数週間遅らせることを意味し、発見の危険を冒すことを意味しました。
アイゼンハワーは決断しました。「分かった、行こう。」 80%の予測は当たりました。侵攻は成功した。
スタッグ氏は後に、完璧な予測は不可能だったが、実行可能な予測が戦争を救ったと語った。今日の 80% の確実性が 95% の確実性を上回ることもあります。手遅れです。
1944 年 6 月 4 日、あなたはアイゼンハワー将軍です。あなたの気象学者は、6 月 6 日の短い天気窓について 80% の信頼性を示しています。確実性を待つということは、数週間遅れ、侵略軍の発見の危険を冒すことを意味します。
2 つのメタ分析の物語
同じ質問に関する 2 つのメタ分析: 「マスクは新型コロナウイルス感染症の感染を防ぐのか?」
最初にプールされたもの14 の観察研究: OR 0.35—masks reduce risk by 65%!
The second included only 3 RCTs: OR 0.91—no significant effect.
Same question. Same year. Opposite answers. Why?
どの研究を含めるかによって、どのような真実が見つかるかが決まります。
Observational Studies
Higher confounding risk
RCTs Only
Lower power, higher validity
迅速なレビューでは、選択基準が結論となります。
Decision Tree: Observational vs. RCT Evidence
Higher certainty
State uncertainty clearly
But downgrade certainty
Module 1 Quiz
What is the most appropriate approach?
2つの都市の物語1918:
1918 年 9 月、フィラデルフィアとセントルイスの両方でインフルエンザの症例が検出されました。フィラデルフィアの保健委員は、行動を起こす前にさらなるデータを待った。 9月28日、彼は20万人規模の大規模なパレードを許可した。数日のうちに病院はあふれかえった。数週間で 12,000 人が死亡しました。
St.ルイは同じ不完全なデータを持って学校を閉鎖し、集会を直ちに禁止した。彼らの死亡率はフィラデルフィアの半分でした。
初期の行動の薄暗い光は、遅すぎた明るい光よりも優れていました。
あなたは 1918 年 9 月にフィラデルフィアの保健委員でした。致死性のインフルエンザの症例が発生しています。 9月28日には大規模なリバティローンパレードが予定されており、20万人の参加者が見込まれる。何をしますか?
トシリズマブの好転反応
February 2021: Multiple small trials of tocilizumab (an IL-6 inhibitor) showed no benefit. Headlines declared it useless. Some hospitals stopped using it.
June 2021: RECOVERY trial reports 4,116 patients. Mortality reduced by 14%. WHO immediately recommends it.
小規模な治験は力不足でした。彼らは「効果の証拠がない」ことを発見しましたが、これは「効果がないという証拠」ではありません。大規模な試験で真実が判明しました。
これら 2 つのステートメントの違いは何ですか?
"No evidence of effect"
Cannot rule out benefit
"Evidence of no effect"
Confidently excludes benefit
証拠の不在は、それを検出できるほど大規模な研究でない限り、不在の証拠ではありません。
意思決定ツリー: この研究は十分な規模ですか?
否定的な結果を信頼します
"No effect" may be false negative
Calculate post-hoc power
人工呼吸器の逆転
Initial guidance: patients with low oxygen should be intubated quickly to prevent deterioration.
April 2020: "Intubate Later"
臨床医は、多くの患者が低酸素 (「幸福な低酸素症」) に耐えられることを観察しました。うつ伏せの姿勢では、換気の必要性が妨げられることがよくありました。
Result: Practice changed mid-pandemic based on real-world observation, not RCTs. Early intubation may have caused avoidable deaths.
When RCTs are impossible, observe carefully. Document systematically. Share transparently.
Speed without rigor is recklessness.
Rigor without speed is abandonment.
モジュール 2: 方法
真実を知るには 40 時間 - 道筋がわかっていれば。
40 時間の急行レビュー
ステップ 1: 質問を定義する (2 時間)
The PICO Framework—Sharper Than Ever
Population: Adults hospitalized with COVID-19 (narrow!)
Intervention: Dexamethasone 6mg daily
Comparator: Standard care / placebo
Outcome: 28-day mortality (primary only)
Step 2: Search Strategy (4 hours)
DON'T: Systematic Search
MEDLINE + EMBASE + Cochrane + CINAHL + PsycINFO + Web of Science + grey literature + hand searching
Time: 40+ hours
DO: Focused Search
PubMed + Cochrane Library + one preprint server (medRxiv)
Time: 4 hours
検索した内容と意図的に除外した内容を文書化します。
重要なショートカット:
検証付きの単一スクリーニング。
This saves 50% of screening time while catching most errors.
Decision Tree: Quality Assessment Shortcuts
Use standard tool (RoB 2, ROBINS-I)
Key domains only
Key domains: randomization, blinding, missing data, selective reporting
最終ステップ: 合成
包括的に検索していない可能性があります。勉強を怠ってしまったのかもしれません。不完全な検索からプールされた推定値は、誤った信頼性を生み出す可能性があります。
ナラティブ合成を優先します。プールする必要がある場合は、制限をはっきりと述べてください。
PRISMA-RR: レポート チェックリスト
PRISMA for Rapid Reviews Extension (2024)
When reporting rapid reviews, you MUST include:
- Shortcuts taken: 完全な SR と比較して何が合理化されましたか?
- Time constraints: なぜ迅速なレビューが必要でしたか?
- Databases searched: また、他の理由が必要でしたか?除外
- Screener count: Single vs. dual screening
- Date of search: [日付]時点の証拠
- Limitations section: What may have been missed
レムデシビル逆転の物語
The FDA granted Emergency Use Authorization: "Remdesivir shortens recovery time."
The WHO recommended against it: "No mortality benefit, high cost."
Same drug. Same evidence base. Opposite conclusions.
違いは? FDA は代理結果 (回復時間) を優先しました。 WHO は患者中心の転帰 (死亡率) を優先しました。
Decision Tree: Choosing Outcomes in Rapid Reviews
Highest certainty
Note indirectness
State explicitly
Module 2 Quiz
What screening approach is appropriate?
Module 2 Quiz (2)
PRISMA-RR によれば、迅速レビュー レポートではどれが必須ではありませんか?
うつぶせのポジショニング発見
何十年もの間、呼吸不全の ICU 患者は仰向けに横たわっていました。新型コロナウイルス感染症 (COVID-19) において、臨床医は注目すべきことに気づきました。
Turning patients onto their stomachs—proning—dramatically improved oxygen levels. No drug required. No cost. Available everywhere.
Meta-analysis of 6 RCTs: Mortality reduced by 25% in severe ARDS patients.
画期的な進歩は分子ではない場合があります。場合によっては、それがポジションであることもあります。
Excel エラーの話:
2010 年、ハーバード大学の経済学者ラインハートとロゴフは、GDP の 90% を超える負債を抱える国はマイナス成長であるという影響力のある研究を発表しました。世界中の政府が緊縮財政を正当化するためにこれを引用しました。
Three years later, a graduate student found their Excel spreadsheet excluded five countries due to a coding error. When corrected, the 90% threshold disappeared.
1 つのスプレッドシートのエラーがチェックされておらず、数百万人に影響を及ぼす政策に影響を与えました。検証する研究者は、計算する研究者と同じくらい重要です。
あなたは、政府が緊縮財政を正当化するために利用している有名なラインハート・ロゴフの論文を研究している大学院生です。わざわざハーバード大学教授のスプレッドシートをチェックするつもりですか?
Decision Tree: Narrative vs. Meta-Analysis
自信を持ってプール
「研究を見逃す可能性がある」
Don't pool apples and oranges
真実を知るには 40 時間 - 道筋がわかっていれば。
モジュール 3: 災害
A flawed study in a meta-analysis poisons all.
の話を聞いたことがありませんか?マルセイユ?
世界を変えた、そしてそうすべきではなかった紙について?
2020 年 3 月 17 日: 論文
Gautret et al. — International Journal of Antimicrobial Agents
Claim: Hydroxychloroquine + azithromycin clears COVID-19 virus in 100% of patients
Submitted: March 16, 2020
Accepted: March 17, 2020
Peer review time: ONE DAY
編集長は著者らと同じ研究所の同僚でした。
欠陥は何でしたか?
悪化した患者は単純に論文から除外されました。分析。
And yet, consider what followed:
March 28: FDA issues Emergency Use Authorization.
April 2020: Countries worldwide stockpile the drug. India bans exports.
Result: 生きるためにヒドロキシクロロキンが必要な狼瘡や関節リウマチの患者は薬を入手できない。
七人の死者欠陥
1. Non-randomized, open-label design
2. Convenience control group from different hospitals
3. 悪化した患者は分析から除外
4. Different PCR thresholds for treatment vs. control
5. Ethics approval granted AFTER trial started
6. Children included despite exclusion criteria
7. One-day peer review by conflicted editor
清算: 2023 年 12 月
It remains the most-cited COVID-19 paper to be retracted.
被害は数日で発生しました。修正には何年もかかりました。
Decision Tree: Red Flags in Rapid Evidence
Verify before sharing
Check author/editor affiliations
回復期血漿崩壊
2020 年 8 月: FDA が緊急使用許可を付与
このデータは、35,000 人の患者を対象とした非ランダム化研究から得られたものです。対照群なし。過去の比較のみ。
2021 年 2 月までに、7 つの RCT で死亡率の改善が示されませんでした。 EUAが改訂されました。すでに 500,000 回以上のワクチン接種が行われていました。
Consider the social media amplification:
誤った情報は訂正よりも早く広がります。これがあなたが戦う非対称性です。
予防接種: バンキング前の防御
Prebunking > Debunking: Warn people about manipulation tactics before they encounter false claims.
The technique: 「小規模な研究が X の効果を証明しているという主張を耳にするかもしれません。小規模な研究がしばしば誤解を招く理由はここにあります...」
The evidence: Inoculation reduces susceptibility to misinformation by 20-30% (van der Linden et al., 2020).
Inoculation Messaging: Practical Templates
Three Prebunking Approaches
1. Logic-Based: 「誰かが 100% の有効性を主張する場合は、尋ねてください: 対照群はありましたか? 比較のない研究何も証明していません。"
2. Source-Based: 「査読前にオンラインに投稿された研究には注意してください。独立した専門家によるチェックがまだ行われていません。"
3. Emotional-Based: "奇跡の治療法は、私たちの希望を悪用したものです。実際の治療法は、正直な限界があるものの、ささやかな効果を示しています。"
これらのテンプレートを公衆衛生通信、臨床医の研修、報道で使用してください。
Decision Tree: Evaluating Preprint Claims
Author-editor relationship?
Never cite as definitive
Module 3 Quiz
この研究には危険信号がいくつありますか?
Module 3 Quiz (2)
ゴートレヒドロキシクロロキンの研究には、Twitter で 310 万件のエンゲージメントがありました。撤回通知は 83 を受け取りました。これは次のことを示しています:
A flawed study in a meta-analysis poisons all.
モジュール 4: 詐欺
Beware the meta-analysis built on sand.
どのような詐欺行為を目撃したか証拠によって広がる?
How one lie becomes the foundation of many truths?
イベルメクチン現象
Governments in Latin America, Africa, and India distribute millions of doses. Patients demand prescriptions. Some take veterinary formulations.
しかし、データには何かが大きく間違っていました。
Elgazzar 研究: 不正行為の解剖学
Egypt, 2020: The Largest Ivermectin Trial
Dr. Ahmed Elgazzar posted a preprint claiming ivermectin reduced COVID-19 mortality by 90%.
これは複数のメタ分析に含まれており、死亡率に対する全体的な影響推定値 12.6% に貢献しました。
その後、大学院生がデータのチェックを開始しました。
What did they find?
July 15, 2021: 研究は「倫理的懸念」により撤回されました。
カスケード効果
| Studies Included | Survival Benefit | Significance |
|---|---|---|
| All 12 studies | 51% reduction | Significant |
| Without Elgazzar | 38% reduction | Borderline |
| 高バイアス研究なし | 10% reduction | Not significant |
| 低バイアス研究のみ | 4% reduction | Not significant |
1つの不正研究により結論が変更されました「奇跡の治療法」には「効果なし」。
そしてネイチャー・メディシンは次のように警告した。
概要データのみに基づくメタ分析は本質的に信頼性が低くなります。
Decision Tree: Detecting Problematic Studies
それを使用せずに感度分析を実行します
イベルメクチンの教訓:
Always run your meta-analysis twice:
すべての研究で 1 回。一度は最も影響力のある人物がいなかった。
一つの研究で結論が変わると、結論は脆弱になる。
ジャック・ローレンスの物語
Jack Lawrence was a master's student in London. He knew no Arabic. But he could spot duplicate rows in a spreadsheet.
彼はエルガザールのデータ補足をダウンロードした。行 148 は行 11 と同一でした。行 228 は行 79 と一致しました。 79 patients appeared twice.
彼は発見結果をツイートしました。数日以内に、プレプリントサーバーはその論文を撤回しました。メタ分析が改訂されました。ポリシーが変更されました。
基本的なデータ スキルを持つ 1 人の学生が、ピアレビューでは不可能なことを行いました。
Decision Tree: Fraud Detection Checklist
(Identical means across groups)
May indicate fabrication
Deaths before trial = impossible
Check other signals
Module 4 Quiz
どうすればよいですか?
Module 4 Quiz (2)
エルガザール社のイベルメクチン研究は次の理由により不正であると検出されました:
TOGETHER 試験失望
フルボキサミン(抗うつ薬)が重篤な新型コロナウイルス感染症を予防する可能性を示唆した小規模試験の後、世界は最終的な答えを待ち望んでいた。
The TOGETHER trial enrolled 1,497 patients in Brazil. Initial interim: 32% reduction in hospitalization!
最終結果: 入院したのはプラセボ患者のわずか5.1%、対してプラセボ患者の4.0%フルボキサミン患者。その効果は予想よりも小さく、絶対的な利益はわずかでした。
Small absolute differences require enormous trials to detect. Most promising treatments fade when tested properly.
パワーポーズの物語:
2010年、研究者らは「パワーポーズ」(スーパーマンのように立つ)がテストステロンとリスクテイクを増加させると主張した。この研究は急速に広まり、TED 講演、ビジネス書、何百万人もの信者が集まりました。複数の研究でそれが再現されたようです。
その後、事前に登録された大規模な複製は失敗しました。元の共著者はこの研究結果を公に否認した。多くの小規模で柔軟な研究で、探していたものが見つかりました。
弱い証拠を重ねると、強力な証拠のように感じられましたが、厳密な複製によってそれがノイズであることが判明するまでは。
あなたはジャーナル編集者で、人気のある権力ポーズ効果を再現できない、事前に登録された大規模な複製研究を受け取りました。元の研究には何百万人もの信者がおり、有名な TED 講演でもあります。
Decision Tree: Reading a Forest Plot
Cannot exclude no effect
Higher confidence
True effect varies—explore why
Beware the meta-analysis built on sand.
モジュール 5: 勝利
From protocol to saving lives: 100 days.
次に、それがどうあるべきかについての話を聞いてください。
Of how speed and rigor found harmony.
RECOVERY試験
ヒドロキシクロロキンの混乱が広がる中、英国の研究者は世界最大規模の新型コロナウイルス感染症(COVID-19)治療試験を開始した。高速かつ厳密であるように設計されました。
Within 6 weeks of funding, patients were being enrolled.
How did they achieve speed without sacrificing quality?
An adaptive platform trial: multiple treatments tested simultaneously.
2020 年 6 月 16 日: 発表
Dexamethasone Results
Ventilated patients: 29% mortality reduction (NNT = 8)
Oxygen therapy: 20% mortality reduction (NNT = 25)
No oxygen needed: No benefit (possible harm)
Cost per treatment: ~$6 for a common steroid.
そして世界は今回も正しく反応しました。
1,000,000
Lives saved globally by March 2021
英国だけで 22,000 人。 60 年間入手可能だった 6 ドルの薬から。
その違いは、迅速に生成された厳密な証拠でした。
What Made RECOVERY Different?
1. Randomized controlled design (not observational)
2. 事前に指定された結果と分析計画
3. Massive scale (statistical power)
4. Adaptive platform (dropped arms early if no signal)
5. Simplified enrollment (one-page consent in emergency)
6. 独立データ監視委員会
教訓回復:
Speed does not require cutting corners. It requires cutting waste.
Simplified consent forms. Adaptive designs. Platform trials that test multiple treatments at once.
厳格さとスピードは敵ではありません。彼らは紹介を待っているパートナーです。
SOLIDARITY コントラスト
小規模研究の結合
Gautret: 36 patients
Elgazzar: ~400 patients (fraud)
RECOVERY/SOLIDARITY
RECOVERY: 11,500 patients
SOLIDARITY: 11,330 patients
プラットフォーム試験により、多数の小規模研究のノイズが 1 つの大規模研究の信号に置き換えられます。 1.
デシジョン ツリー: 大規模な裁判を待つべきですか?
より質の高い証拠が到着します
Update when trial reports
入手可能な最良の証拠
Module 5 Quiz
RECOVERY 試験では、デキサメタゾン群に 11,500 人の患者が登録されました。これが可能となった主な理由は何ですか?
Module 5 Quiz (2)
新型コロナウイルス感染症に対するデキサメタゾンにより、世界中で推定 100 万人の命が救われました。治療ごとの薬剤費は次のとおりです:
アジスロマイシンの放棄
ゴートレの研究では、ヒドロキシクロロキンとアジスロマイシンを組み合わせました。突然、アジスロマイシンがどこにでも存在し、世界中の治療プロトコルに追加されました。
しかし、アジスロマイシン単独でテストされたことはありませんでした。この組み合わせは決して証明されていません。また、アジスロマイシンは心臓不整脈を引き起こします。
July 2020: RECOVERY randomizes 7,763 patients. Result: No benefit. Median hospital stay identical. Mortality identical.
何ヶ月も心臓リスクにさらされても利益はゼロです。元の研究はまったく疑問視されなかったためです。
タコマ ナローズの物語:
1940 年、タコマ ナローズ橋は迅速かつ安価に建設されました。エンジニアは時間を節約するために風洞試験を省略しました。開通から 4 か月後、適度な風により橋が揺れました。それは激しくねじれ、崩壊した――それは工学部の学生が今も研究しているフィルムに記録されている。
近くにある古い橋は、大規模なテストを経てゆっくりと建設され、今も立っている。 3 番目の教訓はその後に得られました。現代の橋梁では、検証を省略しない高速な計算テストが使用されています。
Speed without testing destroys. Testing without speed delays. Rapid testing saves.
あなたは 1940 年にタコマ ナローズ橋を設計したエンジニアです。予算は厳しく、納期もしっかりしています。風洞試験には数週間と費用がかかります。何をしますか?
Decision Tree: Evaluating Platform Trial Arms
この処理を使用しないでください
Contraindicated
Update guidelines
From protocol to saving lives: 100 days.
モジュール 6: 生きている
生きている証拠は生きているものに役立ちます。
絶対に起こらない証拠を考慮しましたか?成長が止まる?
疫病そのものと共鳴するレビュー?
生きた系統的レビュー
生きたレビューはビデオであり、新しい証拠が出現するたびに継続的に更新されます。
In a pandemic, the photograph is obsolete before it's printed.
PAHO の生きたレビュー: ケーススタディ
Pan American Health Organization, April 2020 - Present
Launched: April 2020
Interventions assessed: 305 treatments
RCTs included: 924 randomized controlled trials
Updates: 48 updates published
Sources monitored: 40+ databases including preprint servers
When should a review become "living"?
1. The topic is a priority for decision-making
2. 新規証拠が出現しています rapidly
3. Current certainty is low
4. 新しい証拠が出現する可能性があります change conclusions
If all four are true, a living approach is warranted.
The Challenge: Keeping Reviews Alive
Decision Tree: When to Update a Living Review
Note: "No new evidence" is still information
モルヌピラビルの勢いの物語
October 2021: Merck announces interim results—50% reduction in hospitalization!
Stock prices soar. Countries pre-order millions of courses. Headlines celebrate.
November 2021: Final results published—30% reduction. Still significant, but...
2021 年 12 月: 最新の分析では、対照群の入院はわずか 6.8% であり、入院していないことが示されています。 14.1%.
分母が変更されました。魔法が消えた。教訓: 暫定 ≠ 最終。
そしてパクスロビッドがやってきた—
Molnupiravir
Low-risk patients
Mutagenic concerns
Paxlovid
High-risk patients
Drug interactions
継続的なレビューでは中間と最終、予備と確認を区別する必要がある。
Decision Tree: Retiring a Living Review
最終日付付きでアーカイブ
Low certainty needs monitoring
有効な証拠フィールド
Module 6 Quiz
調査によると、新型コロナウイルス感染症に関する「生きている」系統的レビューの 65% が更新されていないことが判明しました。これには問題があります。
Module 6 Quiz (2)
どうすればよいですか?
バムラニビマブ撤退
2020 年 11 月: FDA がモノクローナル抗体であるバムラニビマブの EUA を認可。初期のデータは期待を示していました。
March 2021: EUA revoked. Why? Variant escape. ウイルスは変異しました。抗体は結合しなくなりました。
モノクローナル抗体を追跡する生きたレビューであれば、数週間でこれを指摘できたでしょう。静的なガイダンスが変更されるまでに数か月かかりました。
パンデミックでは、敵は進化します。証拠はより速く進化する必要があります。
インフルエンザ監視の物語:
CDC は監視監視を通じてインフルエンザを監視しています。初期のシステムは病院を毎週チェックしていましたが、遅すぎて急増をキャッチできませんでした。継続的なリアルタイム監視により、アナリストはノイズに悩まされていました。
解決策は、閾値ベースの監視です。継続的に追跡しますが、感染者数が季節ベースラインを超えた場合にのみアラートをトリガーします。この「生きたレビュー」アプローチは、従来の方法よりも数週間前に 2009 年に H1N1 を捕捉しました。
閾値を監視する監視員は、年次検査員と疲れ果てた時間ごとの検査員の両方を上回っています。
あなたは疾病監視システムを設計しています。どのくらいの頻度で証拠を確認し、アラートをトリガーする必要がありますか?
デシジョン ツリー: この新しい研究は更新をトリガーするほど重要ですか?
Certainty change = guideline change
Direction change is major
Update at next scheduled
生きている証拠は生きているものに役立ちます。
モジュール 7: 品質
Transparency reveals; concealment deceives.
迅速なレビューをどのように判断しますか?
When time prevents perfection, what is "good enough"?
GRADE in 40 Hours: Is It Possible?
Full GRADE Assessment
Risk of bias + Inconsistency + Indirectness + Imprecision + Publication bias
Time: 8-16 hours per outcome
Rapid GRADE
Risk of bias + Imprecision + Major concerns only
Time: 2-4 hours per outcome
Focus on the domains most likely to affect certainty.
The Non-Negotiables
1. Document everything: 検索したもの、除外したもの、なぜ
2. State limitations explicitly: テキストに埋もれていない - 前面と中央
3.高速と系統的な区別: Never pretend comprehensiveness
4. Date-stamp everything: [日付]時点の証拠
5.更新の計画: 迅速な見直しが最終決定ではない
気候不確実性の物語:
IPCC climate reports could claim certainty to seem authoritative. Instead, they explicitly quantify uncertainty: "likely (66-100%)", "very likely (90-100%)", "virtually certain (99-100%)".
2021年の報告書で温暖化は「明白」だが氷床崩壊の時期は「信頼度が低い」と述べられたとき、政策立案者は地図のどこを信頼すべきか、そしてドラゴンが出現する可能性がある場所を正確に知っていた。潜んでいます。
この透明性により、報告書の信頼性と政策への影響は減少するのではなく増加しました。
あなたは IPCC 気候報告書を書いています。より信頼できるように見せるために確実性を主張するべきですか、それとも、不確実性が存在する場合にはそれを認めるべきですか?
How to READ a Rapid Review (Consumer Guide)
Five Questions to Ask Before Trusting
- 検索はいつ行われましたか? — If >3 months old in a fast-moving field, it's outdated
- どのデータベースが検索されましたか? — PubMed alone may miss 30% of relevant studies
- スクリーニングは単一または二重でしたか? — Single screening may miss 5-10% of relevant studies
- 制限は明示的に記載されていますか? — Hidden limitations = hidden agendas
- 計画はありますか?更新情報? — Rapid reviews should be living or have update triggers
不確実性の下での意思決定の共有
1.不確実性の名前を指定してください: "We have some evidence, but it's early/limited/conflicting."
2. Quantify when possible: 「研究によると、20 ~ 40% に効果がある可能性がありますが、確信はありません。」
3. Explain what we're watching: "A larger trial reports next month."
4. Offer structured choice: 「この不確実性を考慮すると、試してみることも、待つこともできます。あなたにとって最も重要なことは何ですか?」
The Conversationスクリプト
「最新の証拠を調べました。私たちが知っていることは次のとおりです。この治療法 may は役に立ちます。一部の研究では 30% の改善が示されています。しかし、研究は小規模で、効果が見られなかったものもあります。
」正直に言いたいのです。 2 か月待てば、より大規模な試験からより良いデータが得られるでしょう。しかし、私はあなたが今苦しんでいることも理解しています。
「この決定を下すのに何が役立ちますか? 不確実性を承知で今すぐ試してみますか? それとも、より強力な証拠を待つ方がいいですか?」
意思決定を共有するということは、すべての答えを持っているということではありません。それは、我々が何を共有するかということです don't know honestly.
Network Meta-Analysis: A Word of Caution
What Can Go Wrong:
• Transitivity violation: Populations in A-vs-B trials differ from B-vs-C trials
• Inconsistency: 直接証拠と間接証拠が矛盾しています
• Sparse networks: Single-study connections carry entire inference
In Rapid Reviews: Network meta-analysis typically requires more time and expertise than available. When used, state transitivity assumptions explicitly. When skipped, explain why indirect comparisons weren't attempted.
意思決定ツリー: この迅速なレビューを信頼すべきですか?
記載された注意事項とともに適用します
Cannot assess currency
Pretending comprehensiveness
ビタミン D 妄想の物語
Dozens of observational studies showed: low vitamin D → worse COVID outcomes.
これらの研究のメタ分析では、「サプリメントで死亡率が 40% 減少!」
Then came the RCTs. One after another: no benefit. No benefit. No benefit.
観察者は相関関係を発見しました。病気の人が屋内に留まる→ビタミンDが不足し、結果は悪化します。太陽は治療法ではなく交絡者でした。
Module 7 Quiz
A rapid review should ALWAYS include:
Module 7 Quiz (2)
何を結論づけるべきですか?
Module 7 Quiz (3)
ビタミン D の観察研究では、死亡率が 40% 減少することが示されました。 RCTでは有益性が示されなかった。この矛盾は、次のことから最もよく説明されます。
Module 7 Quiz (4)
Inoculation messaging (prebunking) is effective because it:
Module 7 Quiz (5)
最善のアプローチは次のとおりです:
老人ホームの悲劇
ワクチンが到着しました。誰が最初にそれらを取得する必要がありますか?証拠は明白でした。老人ホームの入居者の死亡率が最も高かったのです。
しかし、エッセンシャルワーカーのほうがいいと主張する人もいます。その他医療従事者向け。この議論により、展開が遅れました。
Result: 60,000+ US nursing home deaths occurred after ワクチンは利用可能でしたが、 before rollout completed.
Rapid evidence synthesis on prioritization could have saved weeks. Weeks meant thousands of lives.
チャレンジャー号の物語:
1986 年 1 月 27 日、技術者は NASA に対し、チャレンジャー号の O リングは寒冷地では故障する可能性があると伝えました。しかし、データは不完全で、いくつかのコールド ローンチ記録とあいまいな障害パターンしかありませんでした。マネージャーのラリー・マロイは危険の証拠を求めた。エンジニアは不確実性を示すことしかできませんでした。
マロイが発射されました。 O リングは 73 秒で破損しました。その後の分析により、データが故障を明確に予測していたことが示されました。ただし、それは分析者が何を調べるべきかを知っていた場合に限られます。
不十分として無視された部分的な証拠には、7 人の命を救った可能性のある警告が含まれていました。
あなたは 1986 年 1 月 27 日、NASA のエンジニアです。寒冷な気候で O リングが故障する可能性があることを示唆する不完全なデータを持っています。打ち上げは明日、氷点下で予定されている。上司は危険性の証明を求めています。
Decision Tree: Assessing Funding Source Bias
Outcome switching limited
Selective reporting possible
But still assess RoB
プレプリントのパラドックス
December 2020: ファイザーのワクチン有効性データは、公開前に medRxiv に掲載されました。数時間以内に規制当局は審査を開始した。世界は計画できる。
January 2021: A preprint claimed vaccines caused deaths in nursing homes. It was methodologically flawed. It went viral. Vaccine hesitancy increased.
同じプラットフォーム。さまざまな結果。プレプリントは真実も嘘も加速します。判断の責任は読者にあります。
Decision Tree: When Is a Preprint Acceptable to Cite?
「プレプリント、査読なし」
検証を待つ
正当な理由はないプレプリント
Regional Adaptation: MENA Context
新型コロナウイルス感染症流行中、湾岸協力会議 (GCC) 諸国は重大なギャップに直面しました。地域の迅速な審査能力が限られていたため、西側の証拠に依存する必要があり、ラマダン断食、多世代世帯、医療従事者の割合、人口の違いなどの地域要因が見逃されることもありました。人口統計。
レッスン: 40 時間のプロトコルを状況に合わせて調整します。地域データベース内のアラビア語の検索用語。ローカルでの実装に関する考慮事項。トレーニングのための地域のケーススタディ。
Key Adaptations:
• Include regional databases (IMEMR, EMBASE Arabic)
• Consider local healthcare infrastructure capacity
• Adapt communication for local stakeholders
Transparency reveals; concealment deceives.
Final Assessment
あなたは危機と真実を旅してきました。
5 つの原則
1. Speed without rigor is recklessness.
2. Rigor without speed is abandonment.
3. A flawed study in a meta-analysis poisons all.
4. Transparency reveals; concealment deceives.
5。生きた証拠は生きているものに役立ちます。
Final Quiz (1/5)
ゴートレ社のヒドロキシクロロキン研究が撤回された主な理由は次のとおりです。
Final Quiz (2/5)
不正な Elgazzar のイベルメクチン研究が削除されたとき、死亡率の利点:
Final Quiz (3/5)
RECOVERY 試験は約:
Final Quiz (4/5)
Of 97 "living" systematic reviews on COVID-19, what percentage were never updated?
Final Quiz (5/5)
迅速にレビューすると、最も重要な品質要件は次のとおりです。
これで旅は完了です。
知恵を絞って前進し、合成します。
教訓を思い出してください。 2020:
Speed without truth killed. Truth without speed abandoned.
バランスは芸術です。