TruthCert > The Warning
=================== MODUL 1: DIE WARNUNG ====================
Folie 1.2: Die Besetzung Geschichte
Folie 1.3: Die Zahl der Todesopfer
Folie 1.4: Der Refrain
Folie 1.5: Die Frage
================================================= ===================
Folie 3.5: Die vier Grade
Folie 3.7: Das Verbotene
==================== MODUL 4: DIE METHODE ====================
Folie 5.2: Die Krise
Folie 5.3: Der Samen
Folie 5.5: Der Refrain
==================== MODUL 6: FÜR ENTSCHEIDUNGSTREFFENDE ===================
Folie 6.2: Die Entscheidungsmatrix
Folie 6.4: Die einseitige Zusammenfassung
=================== MODUL 7: PRAKTISCHES TUTORIAL ====================
Folie 7.2: Was Sie brauchen
Folie 7.3: Die Schritte
Folie 7.4: Datenquellen
=================== MODUL 8: NACHHALTIGKEIT & GRENZEN ====================
Folie 8.3: Die ehrliche Wahrheit
==================== MODUL 9: REFERENZEN & QUIZ ====================
==================== MODUL 10: ECHTE GESCHICHTEN ====================
Haben Sie die Geschichte der Ärzte nicht gehört?
who, certain of their cure,
killed more patients than the disease itself?
who, certain of their cure,
killed more patients than the disease itself?
Das Jahr war 1989
UNITED STATES
Jeder Kardiologe in Amerika kannte die Logik: Unregelmäßige Herzschläge nach einem Herzinfarkt waren gefährlich. Medikamente, die diese Arrhythmien unterdrücken, würden sicherlich Leben retten.
Die Argumentation war stichhaltig. Der Mechanismus war klar. Die Medikamente wurden verschrieben 200,000 Americans every year.
Niemand verlangte einen Nachweis. Die Logik genügte.
Die Argumentation war stichhaltig. Der Mechanismus war klar. Die Medikamente wurden verschrieben 200,000 Americans every year.
Niemand verlangte einen Nachweis. Die Logik genügte.
Echt DS et al. NEJM 1991; Moore TJ. Deadly Medicine, 1995
Und dann kam der Prozess namens CAST...
50,000
Americans killed by "the cure" each year
IN SIMPLE WORDS
Ärzte gaben Medikamente, die made sense but had never been tested properly. Die Medizin tötete mehr Menschen als der Vietnamkrieg. Jedes Jahr.
„Und die Zahlen waren nackt –
without witness, without proof, without certification.
Und die Menschen kamen um.“
without witness, without proof, without certification.
Und die Menschen kamen um.“
Deshalb ist TruthCert existiert.
Do you think such catastrophes happen only in America?
Consider Africa.
Consider Africa.
Die Last geliehener Beweise
90%
of clinical trials
outside Africa
outside Africa
13%
of global disease
burden in Africa
burden in Africa
<2%
of global health
research funding
research funding
IN SIMPLE WORDS
Africa has many sick people but sehr wenige Studien about how to treat them.
Doctors must use treatments tested on people in other countries.
But what works in London may not work in Lagos.
Folie 2.1: Die Dreizehn
Folie 2.2: Die Länder
Folie 2.4: Die sieben Leiden
Folie 2.5: Der Refrain
=================== MODUL 3: DIE LÖSUNG =====================
Haben Sie die dreizehn Nationen nicht gesehen?
where mothers die giving life,
where children fall to fever,
where Entscheidungen werden im Dunkeln getroffen?
where mothers die giving life,
where children fall to fever,
where Entscheidungen werden im Dunkeln getroffen?
Thirteen Nations
Maternal deaths per 100,000 live births (WHO 2020)
NGA
Nigeria
917
GHA
Ghana
308
KEN
Kenya
342
TZA
Tanzania
524
UGA
Uganda
284
ZAF
South Africa
127
SLE
Sierra Leone
1,120
LBR
Liberia
652
CIV
Cote d'Ivoire
617
BEN
Benin
523
BFA
Burkina Faso
320
GMB
The Gambia
458
SWZ
Eswatini
240
Compare: UK = 10, USA = 21, Sweden = 4
SIERRA LEONE
In Freetown, a woman giving birth is 112 times more likely to die
than a woman in London.
Der Gesundheitsminister muss entscheiden: Welche Interventionen verdienen das begrenzte Budget? Welche Behandlungen retten die meisten Mütter?
Sie hat Studien aus Europa. Sie hat Modelle aus Amerika.
But does she have proof that applies to her people?
Der Gesundheitsminister muss entscheiden: Welche Interventionen verdienen das begrenzte Budget? Welche Behandlungen retten die meisten Mütter?
Sie hat Studien aus Europa. Sie hat Modelle aus Amerika.
But does she have proof that applies to her people?
WHO Maternal Mortality Report, 2023
Seven Disease Groups
HIV
25.6M in Africa
MAL
95% of deaths
MCH
Mother & Child
NCD
Chronic Disease
CVD
Heart Disease
NTD
Tropical Disease
HSP
Health Systems
13 countries x 7 disease groups = 91 configuration packs
„Und sie nahmen die Beweise aus der Ferne auf,
without testing if it fit their land,
without certifying if it fit their people.
Und die Zahlen waren nackt."
without testing if it fit their land,
without certifying if it fit their people.
Und die Zahlen waren nackt."
But what if every number had to show its face?
What if every statistic had to name its witness?
What if naked numbers were forbidden?
What if every statistic had to name its witness?
What if naked numbers were forbidden?
TruthCert
Kleidung der nackten Zahlen
🔒
Der Kern Regel
No number shall be shown to decision-makers
unless it carries proof of its origin,
proof of its transformation,
und Nachweis ihrer Gültigkeit für diesen Kontext.
IN SIMPLE WORDS
Jede Zahl muss antworten: "Woher kommen Sie?" and "Kann ich Ihnen hier vertrauen?"
What Is Proof?
1
Evidence Locator
Die genaue Studie, Datenbank oder Quelle, aus der diese Nummer stammt
2
Content Hash
Ein digitaler Fingerabdruck, der beweist, dass die Daten nicht geändert wurden
3
Transformation Trail
Jeder Berechnungsschritt von den Rohdaten bis zur endgültigen Zahl
4
Validation Status
Wurden die automatischen Prüfungen erfolgreich durchgeführt? Was waren die Warnungen?
What TruthCert Output Looks Like
TRUTHCERT CERTIFIED CLAIM
claim: "Misoprostol reduces PPH by 24%"
grade: STABLE
context: NGA (Nigeria)
african_studies: k = 6 # meets GO threshold
effect_size: RR 0.76 [95% CI: 0.68-0.84]
evidence_locator: doi:10.1016/S0140-6736(10)60348-7
hash: sha256:a3f2c9...
cost_per_dose: NGN 450 # local currency
icer: NGN 12,400 per DALY averted
validated: PASS # all checks passed
Four Grades of Certainty
STABLE
Starke Beweise. Gehen Sie mit Zuversicht vor.
MODERATE
Gute Beweise mit Lücken. Zustandsunsicherheit.
EXPOSED
Structural uncertainty. Scenarios only.
UNCERTAIN
Refuse false precision. Bounds only.
So werden Noten vergeben
Grade
African Studies (k)
Was Sie tun können
STABLE
k >= 4 mit geringer Heterogenität (I² < 50 %)
Full HTA, PSA, VOI, point estimates
MODERATE
k >= 4 mit hoher Heterogenität, ODER k = 2-3
Full HTA with widened CIs, emphasize uncertainty
EXPOSED
k = 1, OR significant transportability concerns
Scenario analysis only, no point estimates
UNCERTAIN
k = 0, ODER Beweise aus dem Gedächtnis/nicht verifiziert
Bounds only, worst-case, value-of-research
What Is Forbidden
MEMORY-LEAK = BLOCK
Wenn jemand sagt: „Ich erinnere mich, dass die Statistik bei etwa 30 % lag“ –
that cannot be certified.
Erinnerung ist kein Beweis. Erinnerung ist kein Beweis.
that cannot be certified.
Erinnerung ist kein Beweis. Erinnerung ist kein Beweis.
IN SIMPLE WORDS
Das kann man nicht sagen "I think I heard..." or "Someone told me..."
Du musst es zeigen exactly where Die Nummer stammt von.
Folie 4.1: Die Frage des Wertes
Folie 4.3: Die BIP-Falle
Folie 4.4: Der bessere Weg
Folie 4.6: Der Refrain
==================== MODUL 5: DIE DISZIPLIN ====================
When a government has only $50 per person per year for health,
how do you decide which treatments to fund?
how do you decide which treatments to fund?
Health Technology Assessment
DIE KERNFRAGE
For every Naira, Cedi, or Shilling spent,
how much health gewinnen wir? Und was noch could we have done mit diesem Geld?
Die Schwellenfalle
Eine Warnung aus der Geschichte
For years, economists said: "Cost-effective if it costs less than 3x GDP per capita."
Nach dieser Logik würde sich eine Behandlung im Wert von 3.000 US-Dollar in Amerika „lohnen“ (BIP 76.000 US-Dollar), in Sierra Leone jedoch „nicht lohnenswert“ (BIP 500 US-Dollar).
Die gleiche Behandlung. Der gleiche Vorteil. Unterschiedliche Urteile je nach Geburtsort.
Nach dieser Logik würde sich eine Behandlung im Wert von 3.000 US-Dollar in Amerika „lohnen“ (BIP 76.000 US-Dollar), in Sierra Leone jedoch „nicht lohnenswert“ (BIP 500 US-Dollar).
Die gleiche Behandlung. Der gleiche Vorteil. Unterschiedliche Urteile je nach Geburtsort.
Woods B et al. Lancet Global Health 2016; Revill P et al. Health Policy Plan 2018
A Better Way
A
Affordability Analysis
Can the health system actually pay? What else gets cut?
N
Net Health Benefit
Health gained minus health lost by diverting resources
V
Value of Information
Is it worth doing more research before deciding?
Local Currency. Always.
NGN
Nigerian Naira
GHS
Ghana Cedi
KES
Kenyan Shilling
XOF
CFA Franc
WARUM DAS WICHTIG IST
A minister in Accra budgets in Cedis.
She shouldn't have to convert from dollars.
Her budget, her currency, her decision.
„Und als die Zahlen in Beweise gekleidet wurden,
when every claim showed its source,
als die Währung zum Land passte –
then the decision-makers could see clearly."
when every claim showed its source,
als die Währung zum Land passte –
then the decision-makers could see clearly."
In 2012, scientists at Amgen tried to reproduce
53 wegweisende Krebsstudien.
How many could they replicate?
53 wegweisende Krebsstudien.
How many could they replicate?
6
Only 6 of 53 landmark studies could be reproduced.
IN SIMPLE WORDS
89 % der „bahnbrechenden“ Studien waren falsch or couldn't be repeated.
Treatments given to patients. Based on findings that failed.
Begley CG & Ellis LM. Nature 2012;483:531-533
Die Disziplin des Samens
THE REQUIREMENT
Das muss bei jeder TruthCert-Analyse der Fall sein exactly reproducible.
An analyst in Nairobi and an analyst in Geneva must get identical results.
786888
Master Seed
Fixed
All Random Processes
Logged
Every Step
Für die Realität konzipiert
THE CONSTRAINT
A health economist in Freetown has an ordinary laptop, maybe unreliable internet.
TruthCert must run on what she actually has.
60s
Core Analysis
45s
Uncertainty (5K draws)
Offline
Works Without Internet
„Und derselbe Samen wurde in Accra und in Genf gepflanzt,
und an beiden Orten wuchs die gleiche Frucht.
Und jeder könnte den Samen erneut pflanzen,
und die gleiche Wahrheit ernten.“
und an beiden Orten wuchs die gleiche Frucht.
Und jeder könnte den Samen erneut pflanzen,
und die gleiche Wahrheit ernten.“
Für Minister und Direktoren
What you need to know in 3 minutes
Was jede Note für Sie bedeutet
When TruthCert Says... You Should...
STABLE
Gehen Sie mit Zuversicht vor. Present point estimates. Defend the numbers.
MODERATE
Gehen Sie mit Vorsicht vor. Show ranges. Say "between X and Y."
EXPOSED
Show scenarios. "If A, then X. If B, then Y." No single number.
UNCERTAIN
Say "we don't know." Request more research before committing.
Bei Konflikten mit der Politik Beweise
DIE SCHWIERIGE SITUATION
Ein beliebtes Programm hat UNSICHERE Beweise. Was tun Sie?
TruthCert gibt Ihnen einen Schutzschild:
"Ich möchte unseren Leuten helfen. Aber die Beweise besagen, dass wir nicht wissen, ob das hier funktioniert. Lassen Sie mich eine pilot study first—so we can be sure we're helping, not harming."
You're not saying no. You're saying "let's be sure."
TruthCert gibt Ihnen einen Schutzschild:
"Ich möchte unseren Leuten helfen. Aber die Beweise besagen, dass wir nicht wissen, ob das hier funktioniert. Lassen Sie mich eine pilot study first—so we can be sure we're helping, not harming."
You're not saying no. You're saying "let's be sure."
Ihre einseitige Zusammenfassung
1
Numbers must have sources
If staff can't show where a number came from, don't use it
2
Suchen Sie nach afrikanischen Beweisen
Fragen Sie: „Wie viele Studien wurden in Afrika durchgeführt?“ (brauche 4+ für Vertrauen)
3
Demand local currency
Costs should be in Naira/Cedi/Shilling, not USD
4
Embrace uncertainty
"We don't know" is more honest than a fake precise number
Führen Sie Ihre erste Analyse durch
A practical walkthrough
Was Sie brauchen
Browser
Chrome/Firefox/Edge
Data
Ihre Eingabe-YAML
~2 hrs
Training time
NO SPECIAL SOFTWARE NEEDED
TruthCert runs in your browser. No installation. Works offline after first load.
Five Steps
1
Select Country + Disease
Choose from 13 countries, 7 disease groups. Example: NGA + MCH
2
Eingabe lokal Daten
Unit costs, target population, budget. In NGN (local currency).
3
Select Evidence
Link zu Studien. Das System zählt Afrikastudien (k) automatisch.
4
Run Analysis
Click "Certify." Wait ~60 seconds. System assigns grade.
5
Export Results
PDF-Bericht herunterladen. Alle Behauptungen haben Beweislokatoren + Hashes.
Wo man Daten erhält
1
Unit Costs
WHO-CHOICE database, iDSI costing studies, local MOH price lists
2
Disease Burden
GBD (Global Burden of Disease), DHS surveys, local HMIS
3
Effect Sizes
Cochrane reviews, published meta-analyses, WHO guidelines
4
Budget Data
National health accounts, MOF budget documents, donor reports
Wenn afrikanische Beweise spärlich sind
WENN k < 4 (WENIGER ALS 4 AFRIKANISCHE STUDIEN)
TruthCert wird Ihnen keine vorgetäuschte, selbstbewusste Antwort geben. Stattdessen:
1
Pivot to broader group
If "CVD in Ghana" has k=1, try "NCD in West Africa"
2
Szenarioanalyse verwenden
Show best-case, worst-case, and middle scenarios
3
Calculate Value of Information
Would a new local study be worth funding?
Sustainability
How TruthCert survives long-term
📁
Open Source
Code is public. Anyone can run, modify, improve.
🎓
Train Locals
Each country builds own HTA capacity. Not dependent on outsiders.
💻
Offline-First
Works without internet. No cloud subscription needed.
What TruthCert Cannot Do
⚠
Kann nicht erstellt werden Beweise. If no studies exist, TruthCert can't invent them.
⚠
Cannot guarantee political acceptance. Beweise sind notwendig, aber nicht ausreichend für Richtlinienänderungen.
⚠
Cannot replace judgment. It informs decisions, doesn't make them.
⚠
Fehlerhafte Daten können nicht korrigiert werden. Wenn Ihre Eingabekosten falsch sind, sind die Ausgaben falsch.
⚠
Kann nicht berücksichtigt werden Implementierung. A cost-effective intervention badly implemented may fail.
"TruthCert does not promise certainty.
It promises Ehrlichkeit gegenüber Unsicherheit.
Und diese Ehrlichkeit rettet Leben.“
It promises Ehrlichkeit gegenüber Unsicherheit.
Und diese Ehrlichkeit rettet Leben.“
References
Hier zitierte wichtige Quellen Kurs
- Echt DS, Liebson PR, Mitchell LB, et al. Mortalität und Morbidität bei Patienten, die Encainid, Flecainid oder Placebo erhalten: Das CAST. NEJM 1991;324:781-788.
- Moore TJ. Deadly Medicine: Why Tens of Thousands of Heart Patients Died in America's Worst Drug Disaster. Simon & Schuster, 1995.
- Begley CG, Ellis LM. Drug development: Raise standards for preclinical cancer research. Nature 2012;483:531-533.
- Woods B, Revill P, Sculpher M, Claxton K. Kostenwirksamkeitsschwellen auf Länderebene: erste Schätzungen und der Bedarf an weiterer Forschung. Lancet Global Health 2016;4:e594-e601.
- WHO. Trends in maternal mortality 2000-2020. Geneva: World Health Organization, 2023.
- WHO. World Malaria Report 2022. Geneva: World Health Organization, 2022.
- UNAIDS. Global HIV Statistics 2023. Geneva: UNAIDS, 2023.
- Revill P, Ochalek J, Lomas J, et al. Cost-effectiveness thresholds: guiding health care spending for population health improvement. Health Policy Plan 2018;33:707-716.
Was hat die CAST-Studie in der Geschichte der Ärzte enthüllt, die „wussten“, dass ihre Heilung wirken würde?
Die Medikamente wirkten wie erwartet
The drugs killed more people than they saved
Die Medikamente zeigten keine Wirkung
Der Prozess verlief ergebnislos
Was bedeutet es, wenn die Zahlen „nackt“ sind?
They are displayed without formatting
Es handelt sich um Näherungswerte
They have no proof of where they came from
Sie sind in der falschen Währung
A minister receives a TruthCert report marked "EXPOSED." What should she do?
Lehnen Sie das Programm vollständig ab
Gehen Sie so vor, als wären die Beweise stichhaltig
Present scenarios ("if A then X, if B then Y") and consider a pilot
Warten Sie auf weitere internationale Studien
Why does TruthCert insist on local currency?
To make calculations easier
Because ministers budget in local currency and shouldn't have to convert
To avoid exchange rate fluctuations
It's an arbitrary requirement
✔
Course Complete
„Und als die Zahlen bekleidet waren,
when every claim carried its proof,
als die Beweise in dem Land geprüft wurden, in dem sie verwendet werden sollten –
dann lebten die Mütter,
und die Kinder gediehen,
und die Entscheidungsträger könnten nachts schlafen.“
when every claim carried its proof,
als die Beweise in dem Land geprüft wurden, in dem sie verwendet werden sollten –
dann lebten die Mütter,
und die Kinder gediehen,
und die Entscheidungsträger könnten nachts schlafen.“
This is TruthCert.
Folie 10.1: Moduleröffnung
Folie 10.3: Reinhart-Rogoff-Geschichte
Folie 10.7: Duke-Krebsgeschichte
Folie 10.11: RIAT Geschichte
Folie 10.15: Replikationskrisengeschichte
Folie 10.19: Modulzusammenfassung
What if history had given us warnings—
in Tabellen geschrieben, in Daten versteckt,
buried in files no one thought to check?
in Tabellen geschrieben, in Daten versteckt,
buried in files no one thought to check?
Dies sind Geschichten über Gewissheit, Irrtümer und den Preis, den die Nichtüberprüfung mit sich bringt.
What if a spreadsheet error
prägt das Schicksal der Nationen?
prägt das Schicksal der Nationen?
Die Tabellenkalkulation, die die Geschichte veränderte
DIE ECHTEN DATEN
In 2010, Harvard economists Reinhart and Rogoff published "Growth in a Time of Debt".
Their claim: when a country's debt exceeds 90% of GDP, economic growth collapses.
Politicians worldwide cited this to justify austerity measures—cutting public spending, reducing services, freezing wages.
Then in 2013, a graduate student named Thomas Herndon asked for their spreadsheet. He found: an Excel error that excluded 5 countries, selektive Datengewichtung und unkonventionelle Methoden. Die wahre Beziehung war much weaker.
Politicians worldwide cited this to justify austerity measures—cutting public spending, reducing services, freezing wages.
Then in 2013, a graduate student named Thomas Herndon asked for their spreadsheet. He found: an Excel error that excluded 5 countries, selektive Datengewichtung und unkonventionelle Methoden. Die wahre Beziehung war much weaker.
Herndon, Ash & Pollin (2014). Cambridge Journal of Economics.
Die zwei Wege
Sie sind Politikberater. Reinhart-Rogoff liegt auf Ihrem Schreibtisch. Was machst du?
Weg A: Vertrauen Sie dem Ergebnis
Akzeptieren Sie die 90 %-Grenze als Tatsache
↓
Advocate austerity policies
↓
Millions suffer from unnecessary budget cuts, unemployment rises, recovery stalls
Weg B: Fordern Sie die Daten an
Fragen Sie nach der Tabelle und den Methoden
↓
Entdecken Sie den Excel-Fehler
↓
Make evidence-based policy das dient tatsächlich den Bürgern
THE REVELATION
Der Excel-Tabellenfehler ist der Grund, warum wir Reproduzierbarkeit benötigen. Hätten Reinhart und Rogoff ihre Tabelle weitergeben müssen, wäre der Fehler im Jahr 2010 und nicht im Jahr 2013 gefunden worden.
Three years of policy built on a formula that missed five cells.
Three years of policy built on a formula that missed five cells.
THE LESSON
Reproduzierbarkeit ist keine Bürokratie. Es ist der Unterschied zwischen der Entdeckung eines Fehlers, bevor Nationen darauf reagieren – und danach.
What happens when genomic signatures
sind auf Sand gebaut?
sind auf Sand gebaut?
Die auf Betrug basierenden Studien
DIE ECHTEN DATEN
Dr. Anil Potti at Duke University published genomic predictors claiming to match
cancer patients to the chemotherapy most likely to help them.
In klinische Studien wurden Patienten aufgenommen. Die Behandlungen wurden auf der Grundlage seiner Algorithmen ausgewählt. Das Versprechen: personalized medicine that could revolutionize cancer care.
Then investigations revealed: fabrizierte Daten, unmögliche Ergebnisse, manipulierte Zahlen. Die Prozesse wurden abgebrochen. Patienten hatten Behandlungen erhalten, die auf Betrug beruhten.
In klinische Studien wurden Patienten aufgenommen. Die Behandlungen wurden auf der Grundlage seiner Algorithmen ausgewählt. Das Versprechen: personalized medicine that could revolutionize cancer care.
Then investigations revealed: fabrizierte Daten, unmögliche Ergebnisse, manipulierte Zahlen. Die Prozesse wurden abgebrochen. Patienten hatten Behandlungen erhalten, die auf Betrug beruhten.
Baggerly & Coombes (2009). Annals of Applied Statistics. IOM Report (2012).
Die zwei Wege
Sie sind Krebspatient im Jahr 2010. Ihnen wird eine Potti-gesteuerte Behandlung angeboten. Was tun Sie?
Pfad A: Der Veröffentlichung vertrauen
Accept the prestigious journal's findings
↓
An der klinischen Studie anmelden
↓
Receive treatment based on fraud—potentially harmful, definitely not personalized
Pfad B: Nach Validierung fragen
Nachweis einer unabhängigen Replikation anfordern
↓
Discover none exists
↓
Avoid harmful treatment—wait for properly validated approaches
THE REVELATION
Reproducibility is not bureaucracy. It is patient protection.
The Duke Der Skandal führte dazu, dass das Institute of Medicine empfahl: omics-based tests require independent validation before clinical use.
Die Richtlinie kam für die Patienten in diesen Studien zu spät.
The Duke Der Skandal führte dazu, dass das Institute of Medicine empfahl: omics-based tests require independent validation before clinical use.
Die Richtlinie kam für die Patienten in diesen Studien zu spät.
THE LESSON
Independent validation saves lives. Eine renommierte Institution, ein berühmter Forscher, eine Spitzenzeitschrift – nichts davon ersetzt den einfachen Akt, die Arbeit von jemand anderem überprüfen zu lassen.
Can dead trials
be brought back to life?
be brought back to life?
Die Wiederauferstehung vergrabener Beweise
DIE ECHTEN DATEN
Die RIAT-Initiative (Restoring Invisible and Abandoned Trials) identifizierte klinische Studien mit unveröffentlichten oder falsch gemeldeten Ergebnissen.
Study 329 (Paroxetin gegen Depressionen bei Jugendlichen): In der Originalveröffentlichung von 2001 wurde behauptet Das Medikament war „sicher und wirksam“. 14 Jahre lang verschrieben Ärzte es aufgrund dieser Behauptung.
RIAT-Forscher erhielten die vollständigen Daten. Ihre erneute Analyse aus dem Jahr 2015 ergab: Das Medikament war neither safe nor effective für diese Population. Die ursprünglichen Autoren hatten selektiv über Ergebnisse berichtet.
Study 329 (Paroxetin gegen Depressionen bei Jugendlichen): In der Originalveröffentlichung von 2001 wurde behauptet Das Medikament war „sicher und wirksam“. 14 Jahre lang verschrieben Ärzte es aufgrund dieser Behauptung.
RIAT-Forscher erhielten die vollständigen Daten. Ihre erneute Analyse aus dem Jahr 2015 ergab: Das Medikament war neither safe nor effective für diese Population. Die ursprünglichen Autoren hatten selektiv über Ergebnisse berichtet.
Le Noury et al. (2015). BMJ. RIAT Project: riat-support.org
Die zwei Wege
Sie stellen fest, dass vor 15 Jahren eine Studie falsch gemeldet wurde. Es kann immer noch zu Schäden kommen. Was tun Sie?
Path A: Accept It Is Too Late
Assume the moment has passed
↓
Die fehlerhafte Studie bleibt der Datensatz
↓
Old harms continue—doctors keep prescribing based on false evidence
Weg B: Suche nach den Originaldaten
Obtain raw data through legal/regulatory means
↓
Erneute Analyse und Veröffentlichung der Korrektur
↓
Prevent future harm—update guidelines, change practice
THE REVELATION
It is never too late to correct the record.
RIAT hat dies mit Entschlossenheit und Daten bewiesen Zugriff, even decades-old deceptions can be overturned.
Die Wahrheit verfällt nicht. Ebenso wenig gilt die Verpflichtung, danach zu suchen.
RIAT hat dies mit Entschlossenheit und Daten bewiesen Zugriff, even decades-old deceptions can be overturned.
Die Wahrheit verfällt nicht. Ebenso wenig gilt die Verpflichtung, danach zu suchen.
THE LESSON
Datenzugriff ermöglicht Gerechtigkeit. Wenn Originaldaten weggesperrt werden, werden Fehler und Betrug dauerhaft. Wenn Daten zugänglich sind, können die wissenschaftlichen Aufzeichnungen immer korrigiert werden.
What fraction of published findings
sind tatsächlich wahr?
sind tatsächlich wahr?
Die Replikationskrise
DIE ECHTEN DATEN
The Open Science Collaboration (2015) attempted to replicate
100 veröffentlichte Psychologie Studien.
Original studies: 97 % berichteten über statistisch signifikante Ergebnisse.
Replications: Only 36% achieved significance. Effect sizes dropped by half on average.
Die „Replikationskrise“ wurde zum Mainstream. Was wir zu wissen glaubten – über Priming, Ego-Depletion, Power-Posing – war weitaus unsicherer als veröffentlicht.
Original studies: 97 % berichteten über statistisch signifikante Ergebnisse.
Replications: Only 36% achieved significance. Effect sizes dropped by half on average.
Die „Replikationskrise“ wurde zum Mainstream. Was wir zu wissen glaubten – über Priming, Ego-Depletion, Power-Posing – war weitaus unsicherer als veröffentlicht.
Open Science Collaboration (2015). Science. doi:10.1126/science.aac4716
The Numbers
97%
Original studies
significant
significant
36%
Replications
significant
significant
50%
Average effect
size drop
size drop
WAS DAS BEDEUTET
Für jeweils 3 psychologische Erkenntnisse, über die Sie gelesen haben, 2 repliziert sich möglicherweise nicht. Nicht wegen Betrug – sondern wegen Lärm, Flexibilität bei der Analyse und dem Druck, positive Ergebnisse zu veröffentlichen.
Die zwei Wege
Sie entwerfen ein klinisches Programm auf der Grundlage veröffentlichter psychologischer Forschungsergebnisse. Was machst du?
Path A: Trust Original Publications
Build your program on published findings
↓
Invest resources in implementation
↓
Entdecken Sie, dass die Grundlage unzuverlässig ist—program fails to produce expected outcomes
Pfad B: Auf Replikationen prüfen
Search for independent replications first
↓
Ermitteln Sie die Replikationsrate von 36 %
↓
Fordern Sie stärkere Beweise—pilot test, require multi-site replication before scale
THE REVELATION
"Published" does not mean "true."
Replikation ist kein Zweifel –it Funktioniert die wissenschaftliche Methode wie beabsichtigt?.
Die Krise bestand nicht darin, dass die Wissenschaft versagt hat. Die Krise bestand darin, dass wir herausfanden, wie selten wir überprüft hatten.
Replikation ist kein Zweifel –it Funktioniert die wissenschaftliche Methode wie beabsichtigt?.
Die Krise bestand nicht darin, dass die Wissenschaft versagt hat. Die Krise bestand darin, dass wir herausfanden, wie selten wir überprüft hatten.
THE LESSON
Einzelstudien sind Hypothesen, keine Fakten. Bevor Sie eine Forschungspolitik entwickeln, fragen Sie: Wurde dies wiederholt? Von wem? Mit welchem Ergebnis?
Four Stories, One Truth
1
Reinhart-Rogoff
Teilen Sie Ihre Daten. Ein Excel-Fehler prägte jahrelang die Sparpolitik.
2
Duke Cancer Scandal
Require independent validation. Prestige does not equal truth.
3
RIAT Initiative
It is never too late. Buried evidence can be resurrected.
4
Replication Crisis
Published does not mean true. Replication is how science works.
„Und als sie nicht überprüften,
when they trusted without checking,
als sie davon ausgingen, dass die Prestigeträchtigen unfehlbar seien –
die Zahlen blieben nackt,
und die Leute zahlten Preis.“
when they trusted without checking,
als sie davon ausgingen, dass die Prestigeträchtigen unfehlbar seien –
die Zahlen blieben nackt,
und die Leute zahlten Preis.“
"But when they demanded proof,
when they shared their data,
when they replicated before they trusted—
die Wahrheit kam ans Licht
und der Schaden wurde verhindert
und das Wissen erweiterte sich.“
when they shared their data,
when they replicated before they trusted—
die Wahrheit kam ans Licht
und der Schaden wurde verhindert
und das Wissen erweiterte sich.“
1 / 6