मॉड्यूल 0: गणना

In the hour of crisis, speed saves lives.

But haste without wisdom takes them.

हे आप जो मार्गदर्शन करना चाहते हैं चिकित्सकों,

क्या आपने देखा है कि जब साक्ष्य बहुत धीमी गति से आगे बढ़ता है तो क्या होता है?

और क्या आपने देखा है कि जब यह बहुत तेजी से आगे बढ़ता है तो क्या होता है?

January 2020

A novel coronavirus emerges in Wuhan.

Patients are dying. There is no treatment.
दुनिया जवाब मांगती है।

How long does a systematic review take?

पारंपरिक व्यवस्थित समीक्षा

12-24
Months to complete
6-12
Months until publication

Pandemic Timeline

7
Days to double cases
Now
जब उत्तर की आवश्यकता होती है

क्या आपने नहीं देखा कि दुनिया ने कैसे प्रतिक्रिया दी?

200,000+
COVID papers in 2020 alone
30,000+
बिना सहकर्मी समीक्षा के प्रीप्रिंट
33+
Major retractions

Speed created a flood. Who would separate truth from noise?

वह प्रश्न जो हमें परेशान करता है

दो महामारी की कहानी प्रतिक्रियाएँ:

मार्च 2020 में, फ्रांस ने एक छोटे, त्रुटिपूर्ण अध्ययन के आधार पर COVID-19 के लिए हाइड्रोक्सीक्लोरोक्वीन को मंजूरी दे दी। बड़े परीक्षणों से कोई लाभ न होने और संभावित हृदय हानि होने से पहले लाखों लोगों ने इसे लिया। इस बीच, यूके के रिकवरी ट्रायल में डेक्सामेथासोन का तेजी से लेकिन कठोरता से परीक्षण किया गया। 3 महीने के भीतर, उन्होंने साबित कर दिया कि इससे गंभीर मामलों में मौतों में एक तिहाई की कमी आई है।

दोनों देशों को समान तात्कालिकता का सामना करना पड़ा। एक ने कमजोर सबूतों पर कार्रवाई की, एक ने तुरंत मजबूत सबूत तैयार किए।

Speed without rigor cost lives. Rapid rigor saved them.

आप मार्च 2020 में स्वास्थ्य मंत्री हैं। एक छोटे अध्ययन में दावा किया गया है कि एक सामान्य दवा से कोविड-19 ठीक हो जाता है। आप क्या करते हैं?

Path A: इस आशाजनक अध्ययन के आधार पर तुरंत हाइड्रोक्सीक्लोरोक्वीन को मंजूरी दें
→ Millions take an ineffective drug with cardiac risks; lupus patients lose access to their medication
Path B: Fund a rapid but rigorous trial (like RECOVERY) to generate definitive evidence
→ Within 3 months, prove dexamethasone works—saving over 1 million lives globally

अंत में, आप सक्षम होंगे:

  • 40 नहीं, बल्कि 40 घंटों में तेजी से समीक्षा करें दिन
  • Know when "good enough" is actually good enough
  • तेजी से आगे बढ़ने वाले साक्ष्य में धोखाधड़ी और पूर्वाग्रह की पहचान करें
  • Use decision trees for methodological trade-offs
  • Understand living systematic reviews
  • हाइड्रॉक्सीक्लोरोक्वीन और आइवरमेक्टिन आपदाओं से सीखें

तेजी से साक्ष्य के पांच सिद्धांतों को देखें:

1. Speed without rigor is recklessness.

2. Rigor without speed is abandonment.

3. A flawed study in a meta-analysis poisons all.

4. Transparency reveals; concealment deceives.

5. जीवित साक्ष्य जीवितों की सेवा करते हैं।

द सर्जिस्फीयर कैटास्ट्रोफ

द टेल ऑफ़ द फैंटम डेटाबेस:

मई 2020 में, द लैंसेट ने छह महाद्वीपों के 671 अस्पतालों के 96,000 रोगियों का एक अध्ययन प्रकाशित किया। इसमें हाइड्रोक्सीक्लोरोक्वीन दिखाया गया था increased death rates. The WHO halted trials worldwide.

लेकिन डेटा Surgisphere से आया था - एक कंपनी जिसमें 11 कर्मचारी थे, जिसमें एक विज्ञान कथा लेखक और एक वयस्क सामग्री मॉडल शामिल थे। डेटाबेस मौजूद नहीं था।

13 दिनों के भीतर, पेपर वापस ले लिया गया था। लेकिन ट्रायल पहले ही रोक दिया गया था. समय बर्बाद हो गया. भरोसा टूट गया।
Source: Mehra MR et al. Lancet 2020 (RETRACTED). Retraction: Lancet 2020;395:1820.

How did two of medicine's most prestigious journals—

लैंसेट और NEJM- मनगढ़ंत डेटा प्रकाशित करते हैं?

13
Days until retraction
0
लेखा परीक्षकों को डेटा एक्सेस दिया गया
100+
Trials affected

Speed pressure broke the gatekeepers.

निर्णय वृक्ष: स्वतंत्र शोधकर्ता कर सकते हैं कच्चे डेटा तक पहुंचें? यदि हां, तो जांचें कि क्या अध्ययन पूर्व-पंजीकृत है। यदि पूर्व-पंजीकृत है, तो उच्च विश्वास - मानक मूल्यांकन के साथ आगे बढ़ें। यदि पूर्व-पंजीकृत नहीं है, तो मध्यम विश्वास - परिणाम परिवर्तन की जांच करें। यदि कोई डेटा एक्सेस नहीं है, तो कम विश्वास - शामिल करने से पहले डेटा का अनुरोध करें।
Scenario
यह मार्च 2020 है। एक प्रीप्रिंट का दावा है कि एक सामान्य दवा 100% रोगियों में COVID-19 को ठीक करती है। अध्ययन में 36 मरीज़ हैं, कोई नियंत्रण समूह नहीं है, और 2 दिन पहले पोस्ट किया गया था। आपके अस्पताल निदेशक पूछते हैं कि क्या आपको दवा का भंडारण करना चाहिए।

आपको क्या सलाह देनी चाहिए?

2020 के तीन गवाहों पर विचार करें:

Dr. Anthony Fauci, March 2020
"साक्ष्य वास्तव में काफी स्पष्ट है... कि वायरस के प्रसार में उल्लेखनीय कमी आई है।"
WHO Director-General, May 2020
"हमने सॉलिडेरिटी ट्रायल के हाइड्रोक्सीक्लोरोक्वीन आर्म को अस्थायी रूप से निलंबित कर दिया है।"
Cochrane, December 2020
"Hydroxychloroquine probably has little or no effect on mortality and progression to mechanical ventilation."

आशा से फैसले तक नौ महीने। बीच में कितने निर्णय लिए गए?

क्लोरोक्वीन विषाक्तता

Nigeria, March 2020:

हाइड्रॉक्सीक्लोरोक्वीन की घोषणा के कुछ दिनों के भीतर, नाइजीरियाई लोगों ने क्लोरोक्वीन से स्वयं-चिकित्सा करना शुरू कर दिया - एक संबंधित लेकिन अधिक जहरीली दवा।

Three deaths. ओवरडोज़ के लिए कई बार अस्पताल में भर्ती होना पड़ा। लागोस राज्य जहर केंद्र अभिभूत था।

In Arizona, a man died after drinking fish tank cleaner containing chloroquine phosphate. His wife survived but was hospitalized.

Premature evidence claims killed people who never had COVID-19.
Sources: Nigeria Centre for Disease Control, March 2020; Banner Health, Arizona, March 2020.

थैलिडोमाइड की कहानी:

1957 में, थैलिडोमाइड को गर्भवती महिलाओं के लिए एक सुरक्षित शामक के रूप में विपणन किया गया था। निर्माता ने अधूरा सुरक्षा डेटा साझा किया—पशु अध्ययन सीमित थे, मानव परीक्षण संक्षिप्त थे। डॉक्टरों ने, कंपनी की प्रतिष्ठा पर भरोसा करते हुए, इसे व्यापक रूप से निर्धारित किया।

1961 तक, 10,000 से अधिक बच्चे गंभीर अंग विकृति के साथ पैदा हुए थे। सुरक्षा के "मानचित्र" में एक घातक अंतर था जिसका खुलासा किसी ने नहीं किया।

अपूर्ण साक्ष्य, पूर्ण के रूप में प्रस्तुत किए गए, उस त्रासदी का कारण बने जिसने दवा विनियमन को हमेशा के लिए बदल दिया।

आप 1957 में एक दवा नियामक हैं। एक दवा कंपनी सीमित सुरक्षा डेटा के साथ अनुमोदन के लिए थैलिडोमाइड प्रस्तुत करती है। आप क्या करते हैं?

Path A: सीमित सुरक्षा डेटा स्वीकार करें और शीघ्र स्वीकृति दें—गर्भवती महिलाओं को मॉर्निंग सिकनेस से राहत की आवश्यकता है
→ गंभीर जन्म दोषों के साथ पैदा हुए 10,000 से अधिक बच्चे; त्रासदी ने दवा विनियमन को हमेशा के लिए बदल दिया
Path B: अनुमोदन से पहले प्रजनन विषाक्तता सहित पूर्ण सुरक्षा अध्ययन की मांग करें
→ FDA के फ्रांसिस केल्सी ने अमेरिका के लिए यह रास्ता अपनाया—अमेरिकी बच्चे इस त्रासदी से बच गए
निर्णय वृक्ष: क्या इस निष्कर्ष पर कार्रवाई करने से प्रत्यक्ष नुकसान हो सकता है? यदि हाँ, तो साझा न करें - पुष्टि की प्रतीक्षा करें। यदि नहीं, तो जांचें कि क्या कार्रवाई न करने से अधिक नुकसान हो सकता है। यदि हां, तो स्पष्ट प्रारंभिक चेतावनियों के साथ साझा करें। यदि कोई अत्यावश्यकता नहीं है, तो विश्लेषण पूरा होने तक प्रतीक्षा करें।

In the hour of crisis, speed saves lives.

मॉड्यूल 1: ट्रेड-ऑफ

मॉड्यूल 1: ट्रेड-ऑफ

Speed without rigor is recklessness.

Rigor without speed is abandonment.

क्या आपने सोचा है कि हम गति के लिए क्या त्याग करते हैं?

A systematic review is thorough because it is slow.
A rapid review is fast because it makes trade-offs.
ये क्या हैं व्यापार-बंद?

Element Systematic Review Rapid Review
Databases searched 5-10+ 1-3
Grey literature Extensive Limited or none
Screening Dual independent Single + verification
Quality assessment Full tool Abbreviated
Timeline 12-24 months 1-6 weeks

कोक्रेन प्रतिक्रिया

March 2020, Geneva
"मार्च 2020 में, कोक्रेन मेथड्स रैपिड रिव्यू समूह ने तेजी से समीक्षा करने के बारे में मार्गदर्शन शुरू किया, जिसने उच्च गुणवत्ता वाली समीक्षा बनाने के लिए अपनी प्रक्रियाओं को सुव्यवस्थित किया शीघ्रता से।"

The guardians of rigor themselves said: "We must move faster."

Is the decision urgent (lives at stake NOW)?
YES
क्या मौजूदा साक्ष्य विरल/विरोधाभासी हैं?
YES
RAPID REVIEW
40 hours
NO
UPDATE EXISTING
SR
NO
FULL SYSTEMATIC
Standard timeline

What risks do we accept?

Missing studies: Limited search may miss relevant evidence

Selection bias: Single screener may have systematic blind spots

Quality gaps: Abbreviated assessment may miss fatal flaws

Publication bias: Less grey literature means more bias

प्रत्येक त्वरित समीक्षा में इन जोखिमों को स्पष्ट रूप से बताया जाना चाहिए।

और फिर भी, इस पर विचार करें:

डी-डे की कहानी मौसम:

4 जून 1944 को, आइजनहावर को एक असंभव निर्णय का सामना करना पड़ा। उनके मौसम विज्ञानी, ग्रुप कैप्टन स्टैग, अच्छे मौसम की गारंटी नहीं दे सके - 6 जून को एक संक्षिप्त समाशोधन का केवल 80% विश्वास। निश्चितता की प्रतीक्षा करने का मतलब था आक्रमण में हफ्तों की देरी करना, खोज को जोखिम में डालना।

आइजनहावर ने फैसला किया: "ठीक है, चलो चलते हैं।" 80% पूर्वानुमान सही था। आक्रमण सफल रहा।

स्टैग ने बाद में कहा कि सही पूर्वानुमान असंभव थे - लेकिन कार्रवाई योग्य पूर्वानुमानों ने युद्ध बचा लिया। कभी-कभी आज 80% निश्चितता 95% निश्चितता को बहुत देर से मात देती है।

आप 4 जून 1944 को जनरल आइजनहावर हैं। आपका मौसम विज्ञानी 6 जून को एक संक्षिप्त मौसम विंडो का 80% विश्वास देता है। निश्चितता की प्रतीक्षा करने का अर्थ है हफ्तों की देरी करना और आक्रमण बल की खोज को जोखिम में डालना।

Path A: आक्रमण शुरू करने से पहले 95% निश्चितता की प्रतीक्षा करें
→ Delay of weeks; risk of German discovery; next favorable tide not until late June; potential failure of entire operation
Path B: Act on the 80% forecast—launch on June 6
→ पूर्वानुमान सही था; आक्रमण सफल हुआ; युद्ध का पासा पलट गया. कार्रवाई योग्य सबूत सही सबूतों को मात देते हैं।

दो मेटा-विश्लेषणों की कहानी

जुलाई 2020: मास्क विरोधाभास

एक ही प्रश्न पर दो मेटा-विश्लेषण: "क्या मास्क COVID-19 को रोकते हैं ट्रांसमिशन?"

पहला पूलित 14 अवलोकन अध्ययन: OR 0.35—masks reduce risk by 65%!
The second included only 3 RCTs: OR 0.91—no significant effect.

Same question. Same year. Opposite answers. Why?

आप कौन सा अध्ययन शामिल करते हैं यह निर्धारित करता है कि आप क्या सत्य पाते हैं।

Observational Studies

65%
Risk reduction

Higher confounding risk

RCTs Only

9%
Risk reduction (NS)

Lower power, higher validity

तेजी से समीक्षा में, आपके समावेशन मानदंड आपका निष्कर्ष हैं।

निर्णय वृक्ष: क्या RCT उपलब्ध हैं? यदि हां, तो जांचें कि क्या वे पर्याप्त बड़े हैं। यदि पर्याप्त बड़ा हो, तो उच्च निश्चितता के लिए आरसीटी को प्राथमिकता दें। यदि पर्याप्त बड़ा नहीं है, तो दोनों प्रस्तुत करें और अनिश्चितता बताएं। यदि कोई आरसीटी उपलब्ध नहीं है, तो अवलोकन का उपयोग करें लेकिन निश्चितता को डाउनग्रेड करें।
Scenario
आपके मंत्रालय को 72 घंटों के भीतर COVID-19 की रोकथाम के लिए विटामिन डी अनुपूरण पर साक्ष्य की आवश्यकता है। विटामिन डी और श्वसन संक्रमण पर 2019 से एक पूर्ण कोक्रेन समीक्षा मौजूद है, लेकिन सीओवीआईडी ​​-19 के लिए कुछ भी विशिष्ट नहीं है।

What is the most appropriate approach?

दो की कहानी 1918 में शहर:

सितंबर 1918 में, फिलाडेल्फिया और सेंट लुइस दोनों में इन्फ्लूएंजा के मामले पाए गए। फ़िलाडेल्फ़िया के स्वास्थ्य आयुक्त ने कार्रवाई करने से पहले अधिक डेटा की प्रतीक्षा की। 28 सितंबर को, उन्होंने 200,000 लोगों की एक विशाल परेड की अनुमति दी। कुछ ही दिनों में अस्पताल भर गए; हफ्तों में 12,000 की मृत्यु हो गई।

सेंट। लुइस ने उसी अधूरे डेटा के साथ, स्कूलों को तुरंत बंद कर दिया और सभाओं पर प्रतिबंध लगा दिया। उनकी मृत्यु दर फिलाडेल्फिया की आधी थी।

शुरुआती कार्रवाई की मंद रोशनी ने बहुत देर से आई तेज रोशनी को मात दे दी।

आप सितंबर 1918 में फिलाडेल्फिया के स्वास्थ्य आयुक्त थे। घातक फ्लू के मामले सामने आ रहे हैं। 28 सितंबर को 200,000 संभावित प्रतिभागियों के साथ एक विशाल लिबर्टी लोन परेड निर्धारित है। आप क्या करते हैं?

Path A: कार्य करने से पहले अधिक डेटा की प्रतीक्षा करें - परेड से युद्ध प्रयासों के लिए मनोबल बढ़ेगा
→ 12,000 dead in Philadelphia within weeks; hospitals overflow; bodies pile in morgues
Path B: Act on incomplete data like St. Louis—cancel public gatherings immediately
→ St. Louis had half the death rate of Philadelphia; early action saved thousands of lives

टोसीलिज़ुमैब टर्नअराउंड

दवा की कहानी जिस पर बहुत जल्द निर्णय लिया गया:

February 2021: Multiple small trials of tocilizumab (an IL-6 inhibitor) showed no benefit. Headlines declared it useless. Some hospitals stopped using it.

June 2021: RECOVERY trial reports 4,116 patients. Mortality reduced by 14%. WHO immediately recommends it.

छोटे परीक्षण कमजोर थे। उन्हें "प्रभाव का कोई सबूत नहीं" मिला - जो कि "बिना किसी प्रभाव का सबूत" नहीं है। बड़े परीक्षण में सत्य पाया गया।
Source: RECOVERY Collaborative. Lancet 2021;397:1637-1645. REMAP-CAP confirmed similar results.

इन दोनों कथनों में क्या अंतर है?

"No evidence of effect"

p = 0.08
200 patients, underpowered

Cannot rule out benefit

"Evidence of no effect"

p = 0.92
4,000 patients, adequate power

Confidently excludes benefit

साक्ष्य की अनुपस्थिति अनुपस्थिति का प्रमाण नहीं है - जब तक कि आपका अध्ययन इसका पता लगाने के लिए पर्याप्त बड़ा न हो।

निर्णय वृक्ष: क्या अध्ययन ने पावर गणना की रिपोर्ट दी? यदि हां, तो जांचें कि क्या उन्होंने लक्ष्य नामांकन हासिल कर लिया है। यदि हासिल किया जाता है, तो अध्ययन पर्याप्त रूप से संचालित होता है और नकारात्मक परिणामों पर भरोसा किया जा सकता है। यदि हासिल नहीं किया गया, तो अध्ययन कमजोर हो जाएगा और "कोई प्रभाव नहीं" गलत नकारात्मक हो सकता है। यदि कोई शक्ति गणना रिपोर्ट नहीं की गई है, तो कम शक्ति मान लें और पोस्ट-हॉक शक्ति की गणना करें।

वेंटिलेटर रिवर्सल

March 2020: "Intubate Early"
Initial guidance: patients with low oxygen should be intubated quickly to prevent deterioration.

April 2020: "Intubate Later"
चिकित्सकों ने देखा कि कई मरीज़ कम ऑक्सीजन ("हैप्पी हाइपोक्सिया") को सहन करते हैं। प्रोन पोजिशनिंग अक्सर वेंटिलेशन की आवश्यकता को रोकती है।

Result: Practice changed mid-pandemic based on real-world observation, not RCTs. Early intubation may have caused avoidable deaths.

When RCTs are impossible, observe carefully. Document systematically. Share transparently.

Speed without rigor is recklessness.

Rigor without speed is abandonment.

मॉड्यूल 2: विधि

मॉड्यूल 2: विधि

सत्य के लिए चालीस घंटे - यदि आप रास्ता जानते हैं।

40-घंटे की रैपिड समीक्षा

1
Define Question
2 hours
2
Search Strategy
4 hours
3
Screen & Select
12 hours
4
Extract & Assess
14 hours
5
Synthesize
8 hours

The PICO Framework—Sharper Than Ever

Population: Adults hospitalized with COVID-19 (narrow!)

Intervention: Dexamethasone 6mg daily

Comparator: Standard care / placebo

Outcome: 28-day mortality (primary only)

त्वरित समीक्षाओं में, प्रश्न होना चाहिए surgical. Broad questions create endless searches. Narrow questions enable speed.

DON'T: Systematic Search

MEDLINE + EMBASE + Cochrane + CINAHL + PsycINFO + Web of Science + grey literature + hand searching

Time: 40+ hours

DO: Focused Search

PubMed + Cochrane Library + one preprint server (medRxiv)

Time: 4 hours

आपने क्या खोजा और आपने जानबूझकर क्या बाहर रखा, इसका दस्तावेजीकरण करें।

महत्वपूर्ण शॉर्टकट:

सत्यापन के साथ एकल स्क्रीनिंग।

1
Primary screener
20%
Verified by second reviewer
100%
Of exclusions verified

This saves 50% of screening time while catching most errors.

आप कितने अध्ययन शामिल करेंगे?
≤10
Full quality assessment
Use standard tool (RoB 2, ROBINS-I)
>10
Abbreviated assessment
Key domains only

Key domains: randomization, blinding, missing data, selective reporting

अंतिम चरण: संश्लेषण

Warning: Meta-analysis in rapid reviews is dangerous territory.

आपने व्यापक रूप से खोज नहीं की होगी। हो सकता है आपकी पढ़ाई छूट गई हो. अधूरी खोज से एकत्रित अनुमान गलत आत्मविश्वास पैदा कर सकता है।

कथा संश्लेषण को प्राथमिकता दें। यदि आपको पूल करना है, तो सीमाएं जोर से बताएं।

PRISMA for Rapid Reviews Extension (2024)

When reporting rapid reviews, you MUST include:

  • Shortcuts taken: पूर्ण SR बनाम क्या सुव्यवस्थित था?
  • Time constraints: तेजी से समीक्षा क्यों आवश्यक थी?
  • Databases searched: और अन्य क्यों थे बहिष्कृत
  • Screener count: Single vs. dual screening
  • Date of search: [DATE] तक वर्तमान साक्ष्य
  • Limitations section: What may have been missed
Source: Stevens A et al. PRISMA-RR Extension. J Clin Epidemiol 2024. DOI: 10.1016/j.jclinepi.2024.01.015

रेमडेसिविर उलटफेर की कहानी

November 2020: Two Giants Disagree

The FDA granted Emergency Use Authorization: "Remdesivir shortens recovery time."
The WHO recommended against it: "No mortality benefit, high cost."

Same drug. Same evidence base. Opposite conclusions.

अंतर? एफडीए ने सरोगेट परिणामों (पुनर्प्राप्ति समय) को प्राथमिकता दी। WHO ने रोगी-केंद्रित परिणामों (मृत्यु दर) को प्राथमिकता दी है।
Sources: FDA EUA Oct 2020; WHO Solidarity Trial Consortium, NEJM 2021.
निर्णय वृक्ष: क्या कठिन परिणाम मापने योग्य है? यदि हां, तो उच्चतम निश्चितता के लिए कठिन परिणामों का उपयोग करें। यदि नहीं, तो जांचें कि क्या सरोगेट मान्य है। यदि सरोगेट मान्य है, तो सावधानी से उपयोग करें और अप्रत्यक्षता पर ध्यान दें। यदि सरोगेट मान्य नहीं है, तो बड़ी अनिश्चितता - स्पष्ट रूप से बताएं।
Scenario
आप एक नए एंटीवायरल पर तेजी से समीक्षा कर रहे हैं। आपको 47 संभावित रूप से प्रासंगिक सार मिलते हैं। आपकी समयरेखा: कुल 40 घंटे, स्क्रीनिंग के लिए 12 घंटे आवंटित।

What screening approach is appropriate?

PRISMA-RR के अनुसार, जो एक तीव्र समीक्षा रिपोर्ट में आवश्यक नहीं है?

प्रवण स्थिति निर्धारण खोज

सरल समाधान की कहानी:

दशकों से, श्वसन विफलता वाले आईसीयू रोगी अपनी पीठ के बल लेटे रहते थे। COVID-19 में, चिकित्सकों ने कुछ उल्लेखनीय देखा।

Turning patients onto their stomachs—proning—dramatically improved oxygen levels. No drug required. No cost. Available everywhere.

Meta-analysis of 6 RCTs: Mortality reduced by 25% in severe ARDS patients.

कभी-कभी सफलता एक अणु नहीं होती है। कभी-कभी यह एक स्थिति होती है।
Source: Munshi L et al. Lancet Respir Med 2017;5:627-38. COVID-19 proning: Ehrmann S et al. Lancet Respir Med 2021.

एक्सेल त्रुटि की कहानी:

2010 में, हार्वर्ड के अर्थशास्त्री रेनहार्ट और रोगॉफ ने प्रभावशाली शोध प्रकाशित किया: जीडीपी के 90% से अधिक कर्ज वाले देशों में नकारात्मक वृद्धि हुई थी। Governments worldwide cited it to justify austerity.

Three years later, a graduate student found their Excel spreadsheet excluded five countries due to a coding error. When corrected, the 90% threshold disappeared.

One spreadsheet error, unchecked, influenced policy affecting millions. जो शोधकर्ता सत्यापित करते हैं वे उतने ही महत्वपूर्ण हैं जितने गणना करने वाले।

आप एक स्नातक छात्र हैं जो प्रसिद्ध रेनहार्ट-रोगॉफ़ पेपर की समीक्षा कर रहे हैं जिसका उपयोग सरकारें मितव्ययिता को उचित ठहराने के लिए कर रही हैं। क्या आप हार्वर्ड प्रोफेसरों की स्प्रेडशीट की जांच करने की जहमत उठाते हैं?

Path A: प्रसिद्ध अर्थशास्त्रियों पर भरोसा करें-वे बुनियादी त्रुटियां नहीं करेंगे
→ एक्सेल त्रुटि अगले 3 वर्षों तक पता नहीं चल पाती है; त्रुटिपूर्ण डेटा पर आधारित मितव्ययता नीतियां लाखों लोगों को प्रभावित करती हैं
Path B: मूल डेटा का अनुरोध करें और प्रत्येक गणना को स्वयं सत्यापित करें
→ थॉमस हेरंडन ने ठीक यही किया-त्रुटि पाई, वैज्ञानिक रिकॉर्ड को ठीक किया, नीतिगत बहस को बदल दिया
निर्णय वृक्ष: क्या शामिल अध्ययन चिकित्सकीय रूप से सजातीय हैं? यदि हां, तो जांचें कि क्या आपने व्यापक रूप से खोज की है। यदि व्यापक खोज हो तो मेटा-विश्लेषण उपयुक्त है। यदि तीव्र खोज हो, तो मेटा-विश्लेषण करें लेकिन सीमाएं स्पष्ट रूप से बताएं। यदि अध्ययन विषम हैं, तो कथा संश्लेषण का उपयोग करें - सेब और संतरे को एक साथ न रखें।

सत्य के लिए चालीस घंटे - यदि आप रास्ता जानते हैं।

मॉड्यूल 3: आपदा

मॉड्यूल 3: आपदा (हाइड्रॉक्सीक्लोरोक्वीन)

A flawed study in a meta-analysis poisons all.

क्या आपने इसकी कहानी नहीं सुनी है मार्सिले?

उस कागज़ के बारे में जिसने दुनिया बदल दी—और ऐसा नहीं होना चाहिए था?

17 मार्च, 2020: द पेपर

Gautret et al. — International Journal of Antimicrobial Agents

Claim: Hydroxychloroquine + azithromycin clears COVID-19 virus in 100% of patients

Submitted: March 16, 2020

Accepted: March 17, 2020

Peer review time: ONE DAY

प्रधान संपादक उसी संस्थान में सहकर्मी थे जहां लेखक थे।

क्या खामियाँ थीं?

36
Total patients
6
विश्लेषण से हटा दिया गया
1
Died (excluded)
3
To ICU (excluded)

जो मरीज़ बदतर हो गए उन्हें विश्लेषण से हटा दिया गया।

And yet, consider what followed:

March 19: राष्ट्रपति ट्रम्प ने हाइड्रोक्सीक्लोरोक्वीन के बारे में ट्वीट करते हुए इसे "चिकित्सा के इतिहास में सबसे बड़े गेम चेंजरों में से एक" बताया।

March 28: FDA issues Emergency Use Authorization.

April 2020: Countries worldwide stockpile the drug. India bans exports.

Result: ल्यूपस और रुमेटीइड गठिया के मरीज़ - जिन्हें जीने के लिए हाइड्रोक्सीक्लोरोक्वीन की आवश्यकता होती है - को उनकी दवाएँ नहीं मिल पाती हैं।

1. Non-randomized, open-label design

2. Convenience control group from different hospitals

3. जिन मरीजों की हालत बिगड़ गई उन्हें विश्लेषण से बाहर रखा गया

4. Different PCR thresholds for treatment vs. control

5. Ethics approval granted AFTER trial started

6. Children included despite exclusion criteria

7. One-day peer review by conflicted editor

गणना: दिसंबर 2023

International Journal of Antimicrobial Agents
"लगभग चार वर्षों के बाद और वैज्ञानिक समुदाय के निरंतर दबाव के बाद, पत्रिका ने नैतिकता, कार्यप्रणाली और डेटा अखंडता के बारे में चिंताओं का हवाला देते हुए आधिकारिक तौर पर गौट्रेट अध्ययन को वापस ले लिया।"

It remains the most-cited COVID-19 paper to be retracted.
नुकसान कुछ ही दिनों में हो गया. सुधार में वर्षों लग गए.

Is the result too good to be true?
YES
STOP
Verify before sharing
NO
सहकर्मी समीक्षा <1 सप्ताह?
CAUTION
Check author/editor affiliations

दीक्षांत प्लाज्मा पतन

एफडीए की जल्दबाजी की कहानी:

अगस्त 2020: एफडीए ने 35% मृत्यु दर में कमी का हवाला देते हुए, कॉन्वलसेंट प्लाज्मा के लिए आपातकालीन उपयोग प्राधिकरण प्रदान किया।

डेटा 35,000 रोगियों के गैर-यादृच्छिक अध्ययन से आया है। कोई नियंत्रण समूह नहीं. केवल ऐतिहासिक तुलनाएँ।

फरवरी 2021 तक, सात आरसीटी ने कोई मृत्यु दर लाभ नहीं दिखाया। EUA को संशोधित किया गया। 500,000 से अधिक खुराकें पहले ही दी जा चुकी थीं।
Sources: FDA EUA Aug 2020; Janiaud P et al. JAMA 2021;325:1185-1195.

Consider the social media amplification:

3.1M
Twitter engagements on Gautret paper (first week)
15,000
News articles citing it
83
Engagements on retraction notice

गलत सूचना सुधार की तुलना में तेजी से फैलती है। आप इसी विषमता से लड़ते हैं।

इनोक्यूलेशन: प्री-बंकिंग डिफेंस

What if you could vaccinate minds against misinformation?

Prebunking > Debunking: Warn people about manipulation tactics before they encounter false claims.

The technique: "आप ऐसे दावे सुन सकते हैं कि एक छोटा अध्ययन साबित करता है कि एक्स काम करता है। यही कारण है कि छोटे अध्ययन अक्सर गुमराह करते हैं..."

The evidence: Inoculation reduces susceptibility to misinformation by 20-30% (van der Linden et al., 2020).

Three Prebunking Approaches

1. Logic-Based: "यदि कोई 100% प्रभावशीलता का दावा करता है, तो पूछें: क्या कोई नियंत्रण समूह था? तुलना के बिना एक अध्ययन कुछ भी साबित नहीं करता है।"

2. Source-Based: "सहकर्मी समीक्षा से पहले ऑनलाइन पोस्ट किए गए अध्ययनों से सावधान रहें - उन्हें अभी तक स्वतंत्र विशेषज्ञों द्वारा जांचा नहीं गया है।"

3. Emotional-Based: "चमत्कारिक इलाज के दावे हमारी आशा का फायदा उठाते हैं। वास्तविक उपचार ईमानदार सीमाओं के साथ मामूली लाभ दिखाते हैं।"

सार्वजनिक स्वास्थ्य संचार, चिकित्सक प्रशिक्षण और प्रेस विज्ञप्तियों में इन टेम्पलेट्स का उपयोग करें।

निर्णय वृक्ष: क्या अध्ययन की सहकर्मी-समीक्षा की गई है? यदि हां, तो जांचें कि क्या समीक्षा में 2 सप्ताह से अधिक समय लगा। यदि पर्याप्त समीक्षा समय हो, तो मानक मूल्यांकन का उपयोग करें। यदि त्वरित समीक्षा हो, तो लेखक-संपादक टकराव की जाँच करें। यदि केवल पूर्वमुद्रण है, तो इसे प्रारंभिक मानें और कभी भी अंतिम रूप में उद्धृत न करें।
Scenario
एक अध्ययन किसी बीमारी के इलाज की 100% दर दर्शाता है। इसमें 36 मरीज़ हैं, इसे 1 दिन में प्रकाशन के लिए स्वीकार कर लिया गया और 6 मरीज़ जिनकी हालत बिगड़ गई, उन्हें विश्लेषण से हटा दिया गया।

इस अध्ययन में कितने लाल झंडे हैं?

गौट्रेट हाइड्रोक्सीक्लोरोक्वीन अध्ययन को 3.1 मिलियन ट्विटर एंगेजमेंट प्राप्त हुए। वापसी नोटिस 83 प्राप्त हुआ। यह दर्शाता है:

A flawed study in a meta-analysis poisons all.

मॉड्यूल 4: धोखाधड़ी

मॉड्यूल 4: धोखाधड़ी (इवरमेक्टिन)

Beware the meta-analysis built on sand.

क्या आपने देखा है कि धोखाधड़ी सबूतों के माध्यम से कैसे फैलती है?

How one lie becomes the foundation of many truths?

इवरमेक्टिन घटना

2020-2021: दुनिया भर से कई अध्ययन सामने आए हैं जिनमें दावा किया गया है कि आइवरमेक्टिन-एक एंटीपैरासिटिक दवा-कोविड-19 को ठीक करती है। मेटा-विश्लेषण ने परिणामों को एकत्रित किया: मृत्यु दर में 51% की कमी!

Governments in Latin America, Africa, and India distribute millions of doses. Patients demand prescriptions. Some take veterinary formulations.

लेकिन डेटा में कुछ गहरी गड़बड़ी थी.

एल्गाज़ार अध्ययन: धोखाधड़ी की शारीरिक रचना

Egypt, 2020: The Largest Ivermectin Trial

Dr. Ahmed Elgazzar posted a preprint claiming ivermectin reduced COVID-19 mortality by 90%.

इसे कई मेटा-विश्लेषणों में शामिल किया गया और योगदान दिया गया 12.6% मृत्यु दर के लिए समग्र प्रभाव का अनुमान।

फिर एक स्नातक छात्र ने डेटा की जांच शुरू कर दी।

What did they find?

79
मरीज़ों का डेटा डुप्लिकेट किया गया
4+
Deaths before trial started
~50%
Text plagiarized

July 15, 2021: अध्ययन को "नैतिक चिंताओं" के कारण वापस ले लिया गया था।

Studies Included Survival Benefit Significance
All 12 studies 51% reduction Significant
Without Elgazzar 38% reduction Borderline
उच्च-पूर्वाग्रह अध्ययन के बिना 10% reduction Not significant
केवल निम्न-पूर्वाग्रह अध्ययन 4% reduction Not significant

एक कपटपूर्ण अध्ययन ने निष्कर्ष को "कोई प्रभाव नहीं" से "चमत्कारिक इलाज" में बदल दिया।

और प्राकृतिक चिकित्सा ने चेतावनी दी:

Nature Medicine, October 2021
"एक खराब जांच किए गए साक्ष्य आधार ने वैश्विक स्तर पर संभावित रूप से अप्रभावी दवा की लाखों खुराक के प्रशासन का समर्थन किया, और फिर भी जब इस सबूत को एक बहुत ही बुनियादी संख्यात्मक जांच के अधीन किया गया तो यह कुछ ही हफ्तों में ध्वस्त हो गया।"

अकेले सारांश डेटा पर आधारित मेटा-विश्लेषण स्वाभाविक रूप से अविश्वसनीय हैं।

क्या आप कच्चे डेटा तक पहुंच सकते हैं?
YES
Do baseline characteristics make sense?
सावधानी के साथ आगे बढ़ना
NO
HIGH RISK
इसके बिना संवेदनशीलता विश्लेषण चलाएँ

आइवरमेक्टिन का पाठ:

Always run your meta-analysis twice:
एक बार सारी पढ़ाई के साथ. एक बार सबसे प्रभावशाली के बिना.

यदि एक अध्ययन आपके निष्कर्ष को बदल देता है, तो आपका निष्कर्ष नाजुक है।

जैक लॉरेंस की कहानी

The Graduate Student Who Changed Everything:

Jack Lawrence was a master's student in London. He knew no Arabic. But he could spot duplicate rows in a spreadsheet.

उन्होंने एल्गाज़ार का डेटा सप्लीमेंट डाउनलोड किया। पंक्ति 148 पंक्ति 11 के समान थी। पंक्ति 228 पंक्ति 79 से मेल खाती थी। 79 patients appeared twice.

उन्होंने अपने निष्कर्षों को ट्वीट किया। कुछ ही दिनों में प्रीप्रिंट सर्वरों ने पेपर वापस ले लिया। मेटा-विश्लेषण संशोधित किए गए। नीतियां बदल गईं.

बुनियादी डेटा कौशल वाले एक छात्र ने वह किया जो सहकर्मी समीक्षा नहीं कर सकी।
निर्णय वृक्ष: क्या आधारभूत विशेषताएँ भी पूर्णतः संतुलित हैं? यदि हाँ, तो संभावित निर्माण के लिए लाल झंडी। यदि नहीं, तो जांचें कि क्या घटना की तारीखें नामांकन से पहले की हैं। मुकदमा शुरू होने से पहले मौतें असंभव हैं और यह मनगढ़ंत बातें दर्शाता है। यदि तारीखें वैध हैं, तो अन्य धोखाधड़ी संकेतों की जांच के लिए आगे बढ़ें।
Scenario
आप मेटा-विश्लेषण कर रहे हैं। एक अध्ययन एकत्रित प्रभाव का 40% योगदान देता है। इसके बिना, परिणाम महत्वपूर्ण (पी=0.02) से गैर-महत्वपूर्ण (पी=0.31) में बदल जाता है।

आपको क्या करना चाहिए?

एल्गाज़ार इवरमेक्टिन अध्ययन को धोखाधड़ी के रूप में पाया गया क्योंकि:

एक साथ परीक्षण में निराशा

उस बड़े मुकदमे की कहानी जिसने आशा ख़त्म कर दी:

छोटे परीक्षणों के बाद सुझाव दिया गया कि फ़्लूवोक्सामाइन (एक अवसादरोधी) गंभीर सीओवीआईडी ​​​​-19 को रोक सकता है, दुनिया निश्चित उत्तर की प्रतीक्षा कर रही थी।

The TOGETHER trial enrolled 1,497 patients in Brazil. Initial interim: 32% reduction in hospitalization!

अंतिम परिणाम: केवल 5.1% प्लेसिबो रोगियों को अस्पताल में भर्ती कराया गया जबकि 4.0% फ़्लूवोक्सामाइन रोगियों को। प्रभाव आशा से कम था, और पूर्ण लाभ बहुत कम था।

Small absolute differences require enormous trials to detect. Most promising treatments fade when tested properly.
Source: Reis G et al. Lancet Glob Health 2022. TOGETHER trial platform.

पावर पोज़िंग की कहानी:

2010 में, शोधकर्ताओं ने दावा किया कि "पावर पोज़" (सुपरमैन की तरह खड़े होने) से टेस्टोस्टेरोन और जोखिम लेने की क्षमता में वृद्धि हुई। अध्ययन वायरल हो गया- TED वार्ता, व्यावसायिक पुस्तकें, लाखों विश्वासी। अनेक अध्ययन इसे दोहराते प्रतीत हुए।

फिर बड़ी, पूर्व-पंजीकृत प्रतिकृतियाँ विफल हो गईं। मूल सह-लेखक ने सार्वजनिक रूप से निष्कर्षों को अस्वीकार कर दिया। कई छोटे, लचीले अध्ययनों में वह पाया गया जो वे खोजना चाहते थे।

कमजोर सबूतों को गुणा करने पर यह मजबूत सबूतों की तरह महसूस हुआ - जब तक कि कठोर प्रतिकृति से पता नहीं चला कि यह शोर था।

आप एक जर्नल संपादक हैं जो एक बड़ा, पूर्व-पंजीकृत प्रतिकृति अध्ययन प्राप्त कर रहा है जो लोकप्रिय पावर पोज़िंग प्रभाव को पुन: उत्पन्न करने में विफल रहता है। मूल अध्ययन में लाखों विश्वासी और एक प्रसिद्ध TED वार्ता शामिल है।

Path A: प्रतिकृति को अस्वीकार करें क्योंकि यह स्थापित, लोकप्रिय खोज का खंडन करती है
→ False belief persists; millions continue to be misled; science fails to self-correct
Path B: विफल प्रतिकृति को प्रकाशित करें—साक्ष्य को बोलने दें
→ विज्ञान स्वयं सुधार करता है; मूल सह-लेखक सार्वजनिक रूप से इस खोज को अस्वीकार करता है; सच्चाई लोकप्रियता से अधिक उभरती है
निर्णय वृक्ष: क्या एकत्रित अनुमान आत्मविश्वास अंतराल बिना किसी प्रभाव की रेखा को पार करता है? यदि हाँ, तो परिणाम सांख्यिकीय रूप से महत्वपूर्ण नहीं है। यदि नहीं, तो विविधता की जाँच करें। यदि I-वर्ग 50% से कम है, तो प्रभाव उच्च आत्मविश्वास के अनुरूप है। यदि I-वर्ग उच्च है, तो विविधता है और वास्तविक प्रभाव अध्ययनों के बीच भिन्न होता है - पता लगाएं कि क्यों।

Beware the meta-analysis built on sand.

मॉड्यूल 5: विजय

मॉड्यूल 5: विजय (वसूली परीक्षण)

From protocol to saving lives: 100 days.

अब कहानी सुनें कि यह कैसा होना चाहिए हो गया।

Of how speed and rigor found harmony.

रिकवरी ट्रायल

March 2020, United Kingdom:

जैसे ही हाइड्रोक्सीक्लोरोक्वीन को लेकर अराजकता फैली, ब्रिटिश शोधकर्ताओं ने दुनिया का सबसे बड़ा COVID-19 उपचार परीक्षण शुरू किया। इसे तेज़ और कठोर बनाने के लिए डिज़ाइन किया गया था।

Within 6 weeks of funding, patients were being enrolled.

How did they achieve speed without sacrificing quality?

176
Hospitals enrolled
11,500
Patients (dexamethasone arm)
100
दिन: परिणामों के लिए प्रोटोकॉल

An adaptive platform trial: multiple treatments tested simultaneously.

Dexamethasone Results

Ventilated patients: 29% mortality reduction (NNT = 8)

Oxygen therapy: 20% mortality reduction (NNT = 25)

No oxygen needed: No benefit (possible harm)

Cost per treatment: ~$6 for a common steroid.

और दुनिया ने इस बार सही प्रतिक्रिया दी।

1
Results announced
June 16
2
UK practice changed
Same day
3
NIH guidelines updated
Within days
4
WHO recommendation
September

1,000,000

Lives saved globally by March 2021

अकेले यूके में 22,000। $6 की दवा से जो 60 वर्षों से उपलब्ध थी।
अंतर कठोर साक्ष्य था, जो तेजी से तैयार किया गया।

1. Randomized controlled design (not observational)

2. पूर्व-निर्दिष्ट परिणाम और विश्लेषण योजना

3. Massive scale (statistical power)

4. Adaptive platform (dropped arms early if no signal)

5. Simplified enrollment (one-page consent in emergency)

6. स्वतंत्र डेटा निगरानी समिति

का पाठ पुनर्प्राप्ति:

Speed does not require cutting corners. It requires cutting waste.

Simplified consent forms. Adaptive designs. Platform trials that test multiple treatments at once.

कठोरता और गति दुश्मन नहीं हैं। वे भागीदार हैं जो परिचय की प्रतीक्षा कर रहे हैं।

सॉलिडैरिटी कंट्रास्ट

छोटे अध्ययन संयुक्त

Chaos
एकाधिक विरोधाभासी परिणाम

Gautret: 36 patients
Elgazzar: ~400 patients (fraud)

RECOVERY/SOLIDARITY

Clarity
Definitive answers

RECOVERY: 11,500 patients
SOLIDARITY: 11,330 patients

प्लेटफ़ॉर्म परीक्षण कई छोटे अध्ययनों के शोर को एक बड़े अध्ययन के संकेत से बदल देते हैं एक।

निर्णय वृक्ष: है एक बड़े मंच का परीक्षण चल रहा है? यदि हां, तो जांच लें कि परिणाम समय पर उपलब्ध होंगे या नहीं। यदि परिणाम जल्द ही आ रहे हैं, तो उच्च गुणवत्ता वाले साक्ष्य की प्रतीक्षा करें। यदि समय पर नहीं आ रहा है, तो अभी त्वरित समीक्षा करें और परीक्षण रिपोर्ट आने पर अपडेट करें। यदि कोई बड़ा परीक्षण मौजूद नहीं है, तो सर्वोत्तम उपलब्ध सबूतों की त्वरित समीक्षा के साथ आगे बढ़ें।

रिकवरी परीक्षण ने डेक्सामेथासोन बांह में 11,500 रोगियों को नामांकित किया। ऐसा संभव होने का प्राथमिक कारण क्या था?

कोविड-19 के लिए डेक्सामेथासोन ने वैश्विक स्तर पर अनुमानित 1 मिलियन लोगों की जान बचाई। प्रति उपचार दवा की लागत थी:

Source: RECOVERY Collaborative Group. N Engl J Med 2021;384:693-704. Lives saved estimate: Horby & Landray, Science 2021.

एज़िथ्रोमाइसिन का परित्याग

हर चीज़ में दवा जोड़ने की कहानी:

गौट्रेट अध्ययन ने हाइड्रोक्सीक्लोरोक्वीन को हाइड्रोक्सीक्लोरोक्वीन के साथ जोड़ा एज़िथ्रोमाइसिन। अचानक, एज़िथ्रोमाइसिन हर जगह था - दुनिया भर में उपचार प्रोटोकॉल में जोड़ा गया।

लेकिन एज़िथ्रोमाइसिन का कभी भी अकेले परीक्षण नहीं किया गया था। संयोजन कभी सिद्ध नहीं हुआ. और एज़िथ्रोमाइसिन हृदय अतालता का कारण बनता है।

July 2020: RECOVERY randomizes 7,763 patients. Result: No benefit. Median hospital stay identical. Mortality identical.

शून्य लाभ के लिए हृदय जोखिम के महीनों का जोखिम - क्योंकि मूल अध्ययन पर कभी सवाल नहीं उठाया गया था।
Source: RECOVERY Collaborative. Lancet 2021;397:605-612. Azithromycin arm.

टैकोमा नैरो की कहानी:

1940 में, टैकोमा नैरो ब्रिज का निर्माण तेजी से किया गया था और सस्ते में. इंजीनियरों ने समय बचाने के लिए पवन सुरंग परीक्षण को छोड़ दिया। खुलने के चार महीने बाद, मध्यम हवाओं ने पुल को हिला दिया। यह हिंसक रूप से मुड़ गया और ढह गया - फिल्म में कैद किया गया, जिसका अध्ययन इंजीनियरिंग छात्र अभी भी करते हैं।

पास में एक पुराना पुल, जिसे व्यापक परीक्षण के साथ धीरे-धीरे बनाया गया था, अभी भी खड़ा है। तीसरा सबक बाद में आया: आधुनिक पुल तीव्र कम्प्यूटेशनल परीक्षण का उपयोग करते हैं - तेज़ तरीके जो सत्यापन को नहीं छोड़ते हैं।

Speed without testing destroys. Testing without speed delays. Rapid testing saves.

आप 1940 में एक इंजीनियर हैं और टैकोमा नैरो ब्रिज को डिज़ाइन कर रहे हैं। बजट तंग है और समय सीमा पक्की है. पवन सुरंग परीक्षण में सप्ताह और लागत बढ़ जाएगी। आप क्या करते हैं?

Path A: समय और पैसा बचाने के लिए पवन सुरंग परीक्षण छोड़ें- डिज़ाइन कागज पर ठोस दिखता है
→ Bridge collapses 4 months after opening; "Galloping Gertie" becomes a cautionary tale studied by every engineering student
Path B: Insist on proper wind tunnel testing despite the delay
→ पास का एक पुराना पुल, उचित परीक्षण के साथ बनाया गया, आज भी खड़ा है। आधुनिक पुल तीव्र कम्प्यूटेशनल परीक्षण का उपयोग करते हैं - तेज़ और सत्यापित।
निर्णय वृक्ष: क्या डेटा सुरक्षा निगरानी बोर्ड ने इस परीक्षण शाखा को जल्दी बंद कर दिया है? यदि व्यर्थता के लिए रोका जाता है, तो उपचार से कोई लाभ नहीं होता है और इसका उपयोग नहीं किया जाना चाहिए। यदि नुकसान पहुंचाने के लिए रोका जाए तो उपचार खतरनाक और विपरीत होता है। यदि स्पष्ट लाभ के कारण जल्दी ही रोक दिया जाए, तो उपचार प्रभावी है और दिशानिर्देशों को अद्यतन किया जाना चाहिए।

From protocol to saving lives: 100 days.

मॉड्यूल 6: द लिविंग

मॉड्यूल 6: व्यवस्थित समीक्षाएँ जीना

जीवित साक्ष्य जीवितों की सेवा करता है।

क्या आपने ऐसे साक्ष्यों पर विचार किया है जो कभी बढ़ना बंद नहीं करते?

समीक्षाएँ जो महामारी के साथ ही साँस लेती हैं?

द लिविंग सिस्टमैटिक रिव्यू

A traditional review is a photograph: frozen in time.

एक जीवंत समीक्षा एक वीडियो है: नए सबूत सामने आने पर इसे लगातार अपडेट किया जाता है।

In a pandemic, the photograph is obsolete before it's printed.

Pan American Health Organization, April 2020 - Present

Launched: April 2020

Interventions assessed: 305 treatments

RCTs included: 924 randomized controlled trials

Updates: 48 updates published

Sources monitored: 40+ databases including preprint servers

When should a review become "living"?

1. The topic is a priority for decision-making

2. नए सबूत सामने आ रहे हैं rapidly

3. Current certainty is low

4. नए सबूत मिलने की संभावना है change conclusions

If all four are true, a living approach is warranted.

97
Living SRs on COVID-19
35%
Updated at least once
65%
Never updated (dormant)
एक "जीवित" समीक्षा जो कभी अपडेट नहीं होती, पारंपरिक समीक्षा से भी बदतर है। यह झूठा विश्वास पैदा करता है कि सबूत वर्तमान हैं।

Decision Tree: When to Update a Living Review

New RCT(s) identified since last update?
YES
Likely to change conclusions or certainty?
YES
UPDATE NOW
NO
Queue for next scheduled update
NO
No update needed
Note: "No new evidence" is still information

मोलनुपिरवीर मोमेंटम की कहानी

अंतरिम विश्लेषण का ख़तरा:

October 2021: Merck announces interim results—50% reduction in hospitalization!
Stock prices soar. Countries pre-order millions of courses. Headlines celebrate.

November 2021: Final results published—30% reduction. Still significant, but...
दिसंबर 2021: अद्यतन विश्लेषण से पता चलता है कि नियंत्रण शाखा के केवल 6.8% लोग अस्पताल में भर्ती हैं, 14.1% नहीं।

भाजक बदल गया. जादू फीका पड़ गया. पाठ: अंतरिम ≠ अंतिम.
Source: Jayk Bernal A et al. N Engl J Med 2022;386:509-520. MOVe-OUT trial.

और फिर पैक्स्लोविड आया-

Molnupiravir

30%
Reduction (final)

Low-risk patients
Mutagenic concerns

Paxlovid

89%
Reduction (consistent)

High-risk patients
Drug interactions

जीवित समीक्षाओं में अंतरिम को अंतिम से, प्रारंभिक को पुष्टि से अलग करना चाहिए।

निर्णय वृक्ष: क्या 6 महीनों में कोई नया परीक्षण नहीं होने से साक्ष्य स्थिर हो गए हैं? यदि हां, तो जांचें कि क्या निश्चितता अब मध्यम या उच्च है। यदि निश्चितता पर्याप्त है, तो अंतिम तिथि के साथ स्थिर समीक्षा पर वापस जाएँ। यदि निश्चितता अभी भी कम है, तो नए सबूतों की निगरानी के लिए जीवित रहें। यदि साक्ष्य अभी तक स्थिर नहीं हुआ है, तो लाइव समीक्षा को सक्रिय रखें।

एक अध्ययन में पाया गया कि COVID-19 पर 65% "जीवित" व्यवस्थित समीक्षाएँ कभी भी अपडेट नहीं की गईं। यह समस्याग्रस्त है क्योंकि:

Source: Stable et al. J Clin Epidemiol 2022;142:66-73. Survey of 97 COVID-19 living SRs.
Scenario
आप एंटीवायरल उपचारों पर एक जीवंत समीक्षा का प्रबंधन करते हैं। 8 महीनों में कोई नई आरसीटी प्रकाशित नहीं हुई है, और प्राथमिक परिणाम के लिए ग्रेड निश्चितता "मध्यम" है।

आपको क्या करना चाहिए?

बामलानिविमाब निकासी

मोनोक्लोनल की कहानी जिसने काम करना बंद कर दिया:

नवंबर 2020: एफडीए ने एक मोनोक्लोनल एंटीबॉडी बामलानिविमैब के लिए ईयूए अनुदान दिया। Early data showed promise.

March 2021: EUA revoked. Why? Variant escape. वायरस उत्परिवर्तित हो गया. एंटीबॉडी अब बाध्य नहीं है.

मोनोक्लोनल एंटीबॉडी पर नज़र रखने वाली एक जीवित समीक्षा ने इसे हफ्तों में चिह्नित कर लिया होगा। स्थैतिक मार्गदर्शन को बदलने में महीनों लग गए।

महामारी में, दुश्मन विकसित होता है। आपके साक्ष्य तेजी से विकसित होने चाहिए।
Source: FDA revocation of bamlanivimab EUA, April 2021. Variant surveillance: CDC SARS-CoV-2 Variants.

फ़्लू निगरानी की कहानी:

सीडीसी प्रहरी निगरानी के माध्यम से इन्फ्लूएंजा की निगरानी करता है। प्रारंभिक प्रणालियों ने साप्ताहिक रूप से अस्पतालों की जाँच की - वृद्धि को पकड़ने के लिए बहुत धीमी। लगातार वास्तविक समय की निगरानी ने विश्लेषकों को शोर से अभिभूत कर दिया।

समाधान: सीमा-आधारित निगरानी। लगातार ट्रैक करें, लेकिन अलर्ट केवल तभी ट्रिगर करें जब मामले मौसमी आधार रेखा से अधिक हों। इस "जीवित समीक्षा" दृष्टिकोण ने पारंपरिक तरीकों से कुछ सप्ताह पहले 2009 में H1N1 को पकड़ लिया।

जो चौकीदार सीमा पर नज़र रखता है, वह वार्षिक निरीक्षक और थके हुए प्रति घंटा चेकर दोनों से बेहतर प्रदर्शन करता है।

आप एक रोग निगरानी प्रणाली डिज़ाइन कर रहे हैं। आपको कितनी बार साक्ष्यों की समीक्षा करनी चाहिए और अलर्ट ट्रिगर करना चाहिए?

Path A: दक्षता के लिए वार्षिक रूप से जाँच करें—व्यापक वार्षिक समीक्षाएँ गहन होती हैं
→ उछाल याद आती है; H1N1 पता चलने से पहले हफ्तों तक फैलता है; विलंबित प्रतिक्रिया से जीवन की हानि होती है
Path B: सीमा-आधारित निगरानी लागू करें-आधार रेखा पार होने पर अलर्ट के साथ निरंतर ट्रैकिंग
→ पारंपरिक तरीकों से सप्ताह पहले H1N1 पकड़ें; प्रारंभिक चेतावनी त्वरित प्रतिक्रिया को सक्षम बनाती है; "जीवित समीक्षा" दृष्टिकोण जीवन बचाता है
निर्णय वृक्ष: क्या इस अध्ययन को जोड़ने से निश्चितता रेटिंग बदल जाएगी? यदि हां, तो तुरंत अपडेट करें क्योंकि निश्चितता परिवर्तन दिशानिर्देशों को प्रभावित करते हैं। यदि नहीं, तो जांचें कि क्या यह बिंदु अनुमान दिशा बदलता है। यदि दिशा बदलती है, तो जल्द ही अपडेट करें क्योंकि यह एक प्रमुख खोज है। यदि कोई दिशा नहीं बदलती, तो अगले बैच अपडेट के लिए कतार में लग जाएँ।

जीवित साक्ष्य जीवितों की सेवा करता है।

मॉड्यूल 7: गुणवत्ता

मॉड्यूल 7: तीव्र समीक्षा में गुणवत्ता

Transparency reveals; concealment deceives.

आप त्वरित समीक्षा का मूल्यांकन कैसे करते हैं?

When time prevents perfection, what is "good enough"?

Full GRADE Assessment

Risk of bias + Inconsistency + Indirectness + Imprecision + Publication bias

Time: 8-16 hours per outcome

Rapid GRADE

Risk of bias + Imprecision + Major concerns only

Time: 2-4 hours per outcome

Focus on the domains most likely to affect certainty.

The Non-Negotiables

1. Document everything: आपने क्या खोजा, क्या छोड़ा, क्यों

2. State limitations explicitly: पाठ में छिपा हुआ नहीं - सामने और बीच में

3. व्यवस्थित से तीव्र अंतर करें: Never pretend comprehensiveness

4. Date-stamp everything: [DATE] तक वर्तमान साक्ष्य

5. अद्यतन के लिए योजना: त्वरित समीक्षा अंतिम शब्द नहीं है

जलवायु अनिश्चितता की कहानी:

IPCC climate reports could claim certainty to seem authoritative. Instead, they explicitly quantify uncertainty: "likely (66-100%)", "very likely (90-100%)", "virtually certain (99-100%)".

जब 2021 की रिपोर्ट में कहा गया कि वार्मिंग "स्पष्ट" है, लेकिन बर्फ की चादर ढहने का समय "कम विश्वास" है, तो नीति निर्माताओं को ठीक से पता था कि मानचित्र पर कहाँ भरोसा करना है - और ड्रेगन कहाँ छिप सकते हैं।

इस पारदर्शिता से रिपोर्ट की विश्वसनीयता और नीतिगत प्रभाव बढ़ा, कम नहीं हुआ।

आप आईपीसीसी जलवायु रिपोर्ट लिख रहे हैं। Should you claim certainty to seem more authoritative, or acknowledge uncertainty where it exists?

Path A: विश्वसनीयता के लिए निश्चितता का दावा करें- हेजिंग से रिपोर्ट कमजोर लगेगी
→ Lose trust when predictions vary; critics seize on any uncertainty as proof the science is unreliable; credibility undermined
Path B: Quantify uncertainty explicitly—"likely," "very likely," "virtually certain"
→ नीति निर्माताओं को ठीक-ठीक पता है कि सबूतों पर कहाँ भरोसा करना है; पारदर्शिता से विश्वसनीयता और नीति प्रभाव बढ़ता है; विज्ञान को ईमानदार माना जाता है

Five Questions to Ask Before Trusting

  1. खोज कब की गई? — If >3 months old in a fast-moving field, it's outdated
  2. कौन से डेटाबेस खोजे गए? — PubMed alone may miss 30% of relevant studies
  3. स्क्रीनिंग सिंगल थी या डुअल? — Single screening may miss 5-10% of relevant studies
  4. क्या सीमाएँ स्पष्ट रूप से बताई गई हैं? — Hidden limitations = hidden agendas
  5. क्या अपडेट की कोई योजना है? — Rapid reviews should be living or have update triggers

अनिश्चितता के तहत साझा निर्णय लेना

आप किसी मरीज़ को कैसे बताते हैं कि सबूत... अनिश्चित है?

1. अनिश्चितता का नाम बताएं: "We have some evidence, but it's early/limited/conflicting."

2. Quantify when possible: "अध्ययन से पता चलता है कि 20-40% को लाभ हो सकता है, लेकिन हम निश्चित नहीं हैं।"

3. Explain what we're watching: "A larger trial reports next month."

4. Offer structured choice: "इस अनिश्चितता को देखते हुए, हम इसकी कोशिश कर सकते हैं या प्रतीक्षा कर सकते हैं। आपके लिए सबसे ज्यादा क्या मायने रखता है?"

Clinician to Patient:

"मैंने नवीनतम साक्ष्यों को देखा है। यहाँ हम जो जानते हैं वह है: यह उपचार may सहायता—कुछ अध्ययन 30% सुधार दिखाते हैं। लेकिन अध्ययन छोटे हैं, और कुछ ने कोई लाभ नहीं दिखाया।

"मैं आपके साथ ईमानदार होना चाहता हूं। अगर हम 2 महीने इंतजार करते हैं, तो हमारे पास बड़े परीक्षण से बेहतर डेटा होगा। लेकिन मैं यह भी समझता हूं कि अब आप पीड़ित हैं।

"आपको यह निर्णय लेने में क्या मदद मिलेगी? क्या आप अनिश्चितता को जानते हुए अभी इसे आज़माना चाहेंगे, या आप मजबूत सबूतों की प्रतीक्षा करना पसंद करेंगे?"

साझा निर्णय लेना सभी उत्तरों के बारे में नहीं है। यह साझा करने के बारे में है कि हम don't know honestly.

Network Meta-Analysis: A Word of Caution

What It Promises: उन उपचारों की तुलना करें जिनकी परीक्षणों में सीधे तुलना नहीं की गई थी (ए बनाम बी, बी बनाम सी → अनुमान ए बनाम सी)।

What Can Go Wrong:
Transitivity violation: Populations in A-vs-B trials differ from B-vs-C trials
Inconsistency: प्रत्यक्ष और अप्रत्यक्ष साक्ष्य विरोधाभासी हैं
Sparse networks: Single-study connections carry entire inference

In Rapid Reviews: Network meta-analysis typically requires more time and expertise than available. When used, state transitivity assumptions explicitly. When skipped, explain why indirect comparisons weren't attempted.
Cochrane Training: Network Meta-analysis. Cipriani et al., BMJ 2013.
निर्णय वृक्ष: क्या समीक्षा स्पष्ट रूप से बताती है कि यह एक तीव्र समीक्षा है? यदि हां, तो जांचें कि क्या खोज तिथि और डेटाबेस स्पष्ट रूप से बताए गए हैं। यदि कहा गया है, तो समीक्षा बताई गई चेतावनियों के साथ प्रयोग करने योग्य है। यदि नहीं बताया गया है, तो सावधानी बरतें क्योंकि मुद्रा का मूल्यांकन नहीं किया जा सकता है। यदि समीक्षा यह नहीं बताती है कि यह तीव्र है, तो व्यापकता का दिखावा करने के लिए इस पर अविश्वास करें।

विटामिन डी भ्रम की कहानी

Correlation Posing as Causation:

Dozens of observational studies showed: low vitamin D → worse COVID outcomes.
इन अध्ययनों के मेटा-विश्लेषणों से पता चला: "पूरक के साथ मृत्यु दर में 40% की कमी!"

Then came the RCTs. One after another: no benefit. No benefit. No benefit.

पर्यवेक्षकों ने सहसंबंध पाया था। बीमार लोग घर के अंदर ही रहते हैं → कम विटामिन डी और बदतर परिणाम। सूरज संस्थापक था, इलाज नहीं।
स्रोत: विटामिन डी फॉर सीओवीआईडी-19 कोक्रेन रिव्यू 2023। 11 आरसीटी, 3,968 प्रतिभागी। कोई मृत्यु दर लाभ नहीं।

A rapid review should ALWAYS include:

Scenario
एक सहकर्मी ने एक "व्यवस्थित समीक्षा" साझा करते हुए दावा किया है कि एक पूरक से COVID-19 मृत्यु दर 40% कम हो जाती है। समीक्षा में इसकी खोज तिथि का उल्लेख नहीं है, खोजे गए केवल एक डेटाबेस को सूचीबद्ध किया गया है, और सीमाओं पर चर्चा नहीं की गई है।

आपको क्या निष्कर्ष निकालना चाहिए?

विटामिन डी अवलोकन अध्ययनों से पता चला है कि मृत्यु दर में 40% की कमी आई है। आरसीटी से कोई लाभ नहीं दिखा। इस विसंगति को सबसे अच्छी तरह से समझाया गया है:

Inoculation messaging (prebunking) is effective because it:

Scenario
एक मरीज सोशल मीडिया पर देखे गए उपचार के बारे में पूछता है। आपकी त्वरित समीक्षा से पता चलता है कि प्रारंभिक साक्ष्य अनिश्चित हैं (3 छोटे परीक्षण, परस्पर विरोधी परिणाम)। आपको इस पर कैसे चर्चा करनी चाहिए?

सबसे अच्छा तरीका है:

नर्सिंग होम त्रासदी

दिसंबर 2020: प्राथमिकता पर बहस

टीके आ गए। उन्हें पहले किसे प्राप्त करना चाहिए? सबूत स्पष्ट था: नर्सिंग होम के निवासियों की मृत्यु दर सबसे अधिक थी।

लेकिन कुछ ने आवश्यक श्रमिकों के लिए तर्क दिया। अन्य स्वास्थ्य कर्मियों के लिए। बहस के कारण रोलआउट में देरी हुई।

Result: 60,000+ US nursing home deaths occurred after टीके उपलब्ध थे लेकिन before rollout completed.

Rapid evidence synthesis on prioritization could have saved weeks. Weeks meant thousands of lives.
स्रोत: CDC COVID-19 नर्सिंग होम डेटा। विश्लेषण: AARP पब्लिक पॉलिसी इंस्टीट्यूट, 2021।

चैलेंजर की कहानी:

27 जनवरी 1986 को, इंजीनियरों ने नासा को बताया कि चैलेंजर की ओ-रिंग्स ठंड के मौसम में विफल हो सकती हैं। लेकिन उनके पास अधूरा डेटा था - केवल कुछ कोल्ड-लॉन्च रिकॉर्ड, अस्पष्ट विफलता पैटर्न। मैनेजर लैरी मुलॉय ने खतरे का सबूत मांगा; इंजीनियर केवल अनिश्चितता दिखा सके।

मुलॉय लॉन्च किया गया। ओ-रिंग्स 73 सेकंड पर विफल हो गईं। बाद के विश्लेषण से पता चला कि डेटा ने स्पष्ट रूप से विफलता की भविष्यवाणी की थी - लेकिन केवल तब जब विश्लेषकों को पता था कि क्या देखना है।

आंशिक सबूत, अपर्याप्त के रूप में खारिज कर दिया गया, जिसमें चेतावनी थी कि सात लोगों की जान बचाई जा सकती थी।

आप 27 जनवरी, 1986 को नासा में एक इंजीनियर हैं। आपके पास अधूरा डेटा है जो सुझाव देता है कि ठंड के मौसम में ओ-रिंग्स विफल हो सकते हैं। ठंड की स्थिति में कल प्रक्षेपण निर्धारित है। आपका प्रबंधक खतरे का सबूत मांगता है।

Path A: मान लें कि आप अधूरे डेटा के साथ खतरे को साबित नहीं कर सकते - लॉन्च को आगे बढ़ने दें
→ लॉन्च के 73 सेकंड बाद, चैलेंजर में विस्फोट हो गया; 7 अंतरिक्ष यात्रियों की मौत; बाद के विश्लेषण से पता चलता है कि डेटा ने विफलता की भविष्यवाणी की थी
Path B: अधूरे डेटा के बावजूद देरी पर जोर देना - सबूत का बोझ सुरक्षा पर होना चाहिए, खतरे पर नहीं
→ 7 जिंदगियां बचाएं; जब दांव अपरिवर्तनीय होते हैं तो "साबित करें कि यह सुरक्षित है" का सिद्धांत "साबित करें कि यह खतरनाक है" पर भारी पड़ता है
निर्णय वृक्ष: क्या अध्ययन को वित्तीय हित वाली पार्टी द्वारा वित्त पोषित किया जाता है? यदि हां, तो जांचें कि क्या परीक्षण पूर्व-पंजीकृत था। यदि पूर्व-पंजीकृत है, तो मध्यम चिंता क्योंकि परिणाम परिवर्तन सीमित है। यदि पूर्व-पंजीकृत नहीं है, तो संभावित चयनात्मक रिपोर्टिंग के कारण उच्च चिंता। यदि स्वतंत्र रूप से वित्त पोषित किया जाता है, तो चिंता कम होगी लेकिन फिर भी पूर्वाग्रह के जोखिम का आकलन किया जाएगा।

प्रीप्रिंट विरोधाभास

दोधारी तलवार:

December 2020: फाइजर वैक्सीन प्रभावकारिता डेटा प्रकाशन से पहले medRxiv पर दिखाई दिया। कुछ ही घंटों में नियामकों ने समीक्षा शुरू कर दी। दुनिया योजना बना सकती है.

January 2021: A preprint claimed vaccines caused deaths in nursing homes. It was methodologically flawed. It went viral. Vaccine hesitancy increased.

वही मंच. अलग-अलग परिणाम. प्रीप्रिंट्स सच और झूठ दोनों को गति देते हैं। निर्णय का भार पाठक पर पड़ता है।
निर्णय वृक्ष: क्या यह तेजी से विकसित होने वाला आपातकाल है? यदि अत्यावश्यक हो, तो जांच लें कि क्या यह किसी ज्ञात विश्वसनीय शोध समूह से है। यदि समूह विश्वसनीय है, तो स्पष्ट प्रीप्रिंट चेतावनी के साथ उद्धृत करें। यदि अज्ञात समूह है, तो उद्धृत न करें और सत्यापन की प्रतीक्षा करें। यदि स्थिति अत्यावश्यक नहीं है, तो सहकर्मी-समीक्षित प्रकाशन की प्रतीक्षा करें।

Regional Adaptation: MENA Context

खाड़ी और मध्य पूर्व में क्षमता निर्माण:

कोविड-19 के दौरान, खाड़ी सहयोग परिषद (जीसीसी) देशों को एक महत्वपूर्ण अंतर का सामना करना पड़ा: सीमित स्थानीय त्वरित समीक्षा क्षमता का मतलब पश्चिमी साक्ष्यों पर निर्भरता था जो कभी-कभी क्षेत्रीय कारकों से चूक जाते थे-रमजान उपवास, बहु-पीढ़ी वाले घर, स्वास्थ्य देखभाल कार्यकर्ता अनुपात और विभिन्न जनसंख्या जनसांख्यिकी।

पाठ: 40-घंटे के प्रोटोकॉल को अपने संदर्भ के अनुसार अपनाएँ। क्षेत्रीय डेटाबेस में अरबी खोज शब्द। स्थानीय कार्यान्वयन संबंधी विचार. प्रशिक्षण के लिए क्षेत्रीय मामले का अध्ययन।

Key Adaptations:

• Include regional databases (IMEMR, EMBASE Arabic)

• Consider local healthcare infrastructure capacity

• Adapt communication for local stakeholders

Transparency reveals; concealment deceives.

Final Assessment

मॉड्यूल 8: अंतिम मूल्यांकन

आपने संकट और सत्य की यात्रा की है।

पांच सिद्धांत

1. Speed without rigor is recklessness.

2. Rigor without speed is abandonment.

3. A flawed study in a meta-analysis poisons all.

4. Transparency reveals; concealment deceives.

5. जीवित साक्ष्य जीवितों की सेवा करते हैं।

गौट्रेट हाइड्रोक्सीक्लोरोक्वीन अध्ययन को मुख्य रूप से वापस ले लिया गया क्योंकि:

जब कपटपूर्ण एल्गाज़ार आइवरमेक्टिन अध्ययन को हटा दिया गया, तो मृत्यु दर लाभ:

पुनर्प्राप्ति परीक्षण ने लगभग परिणाम प्राप्त किए:

Of 97 "living" systematic reviews on COVID-19, what percentage were never updated?

त्वरित समीक्षा में, सबसे महत्वपूर्ण गुणवत्ता आवश्यकता है:

आपने यात्रा पूरी कर ली है.

आगे बढ़ें और ज्ञान का संश्लेषण करें।

2020 के सबक याद रखें:
Speed without truth killed. Truth without speed abandoned.
संतुलन ही कला है.