MODUL 0: DIE BERUFUNG

Einige bauen das Haus. Andere sorgen dafür, dass das Fundament hält.

Haben Sie sich jemals gefragt, wer die Prüfer überprüft?

Wer sorgt dafür, dass die Methoden hinter medizinischen Entscheidungen solide sind?

Die unsichtbaren Architekten

Die Geschichte der Brücke Inspektor:

A city built a magnificent bridge. Engineers celebrated. Citizens crossed daily. But one woman spent her days beneath, checking welds, measuring stress, documenting cracks.

"Why don't you build bridges?" they asked.

"Because," she said, "I ensure every bridge built will stand."

Methodologen sind die Inspektoren medizinischer Beweise. Sie führen die Studien nicht durch – sie stellen sicher, dass die Studien uns die Wahrheit sagen.
$2.6B
Saved when RECOVERY trial methods proved dexamethasone works
15K+
Überzählige Todesfälle durch fehlerhafte Aprotinin-Studien vor der Überprüfung der Methoden
85%
Of medical research has methodological limitations

Die Arbeit mit Methoden ist nicht glamourös. Aber es ist der Unterschied zwischen Medizin, die heilt, und Medizin, die schadet.

Denken Sie an die Geschichte von Dr. Doug Altman...

Doug Altman (1948-2018): The Scandal of Poor Medical Research

In 1994, a statistician published an editorial in BMJ titled "The Scandal of Poor Medical Research." He wrote:

„Wir brauchen weniger Forschung, bessere Forschung und Forschung aus den richtigen Gründen.“

Doug Altman hat keine neuen Medikamente entdeckt. Er hat keine Operationen durchgeführt. Er verbrachte seine Karriere damit, Berichtsrichtlinien (CONSORT, STROBE, PRISMA) zu entwickeln, die die Art und Weise veränderten, wie die Welt Beweise präsentiert.

Seine Zitate: 500.000+. Seine Werkzeuge werden in jeder großen Zeitschrift verwendet. Er hat keine Brücken gebaut – aber jede Brücke verwendet jetzt seine Inspektionsstandards.
Altman DG. The scandal of poor medical research. BMJ 1994;308:283-4. Citations: 6,000+

What They Do

• Entwerfen Sie strenge Studienmethoden

• Develop reporting guidelines

• Erstellen Sie Tools für das Risiko von Verzerrungen

• Advance statistical techniques

• Trainieren Sie die nächste Generation

What They Don't Do

• Normalerweise keine Primärdaten Sammlung

• Normalerweise keine Patientenversorgung

• Selten in den Schlagzeilen

• Oft nicht „Erstautor“

• Nicht das Gesicht von Durchbrüchen

Methodologen sind die Architekten von Beweise, nicht die Ersteller einzelner Studien.

Die Geschichte von John Snows Cholera-Karte:

Im Jahr 1854 glaubten Londoner Ärzte, dass sich Cholera durch „Miasma“ (schlechte Luft) ausbreitet. Ihre Karten waren wunderschön und zeigten Windmuster und Höhen.

Dr. John Snow hat eine einfache Karte erstellt – nur Punkte, die die Todesfälle rund um die Zapfsäule in der Broad Street zeigen. Seine einfache, methodisch fundierte Karte identifizierte kontaminiertes Wasser als Quelle.

Die Miasmakarten waren elegant, aber falsch. Die einfache Karte von Snow hat Leben gerettet.

Methodik statt Präsentation.

Sie sind ein Londoner Arzt im Jahr 1854. Cholera breitet sich aus. Was wählen Sie?

Path A: Folgen Sie der Miasma-Theorie – erstellen Sie wunderschöne Karten von Windmustern und Luftqualität.
→ Patienten sterben, während Sie die Luft untersuchen. Die Krankheit setzt sich unkontrolliert fort.
Path B: Kartieren Sie die Todesfälle systematisch – zeichnen Sie Fälle auf und suchen Sie nach Mustern in den Daten.
→ Finden Sie die Broad Street-Pumpe. Entfernen Sie den Griff. Retten Sie Leben durch methodisches Denken.
+340%
Growth in HTA positions since 2015
$95K-$180K
Salary range for senior methodologists
72%
Report high job satisfaction

Die Nachfrage steigt. Regulierungsbehörden, Pharmaunternehmen und Gesundheitssysteme brauchen alle Menschen, die die Qualität von Beweisen verstehen.

Der Weg ist frei für diejenigen, die bereit sind, ihn zu gehen.

Modul 1: Was Methodologen tun

MODUL 1: WAS METHODOLOGEN TUN

Sie bauen das Schiff nicht. Sie sorgen dafür, dass es nicht sinkt.

Stellen Sie sich einen Tag im Leben vor...

Not one life—many lives, in many settings.

The Methodologist Who Changed Medicine: Archie Cochrane

In 1972, a physician named Archie Cochrane published Effektivität und Effizienzund argumentierte, dass den meisten medizinischen Entscheidungen Beweise aus kontrollierten Studien fehlten. Er forderte die gesamte medizinische Einrichtung auf, zu beweisen, dass die Behandlungen tatsächlich funktionierten.

Vor Cochranes Eintreten war die überwiegende Mehrheit der medizinischen Behandlungen nie in randomisierten kontrollierten Studien getestet worden. Als die Cochrane Collaboration 1993 gegründet wurde, waren systematische Übersichten zum Goldstandard der evidenzbasierten Medizin geworden.

Das Beharren eines Methodologen auf Genauigkeit schuf die Infrastruktur, auf die die moderne Medizin heute angewiesen ist.

Sie sind ein junger Forscher im Jahr 1975. Ein leitender Professor lehnt Ihren Vorschlag ab, eine systematische Übersicht durchzuführen, und sagt: „Wir wissen bereits aus klinischer Erfahrung, was funktioniert.“

Path A: Gehorchen Sie der Autorität – akzeptieren Sie, dass klinische Erfahrung ausreicht, und geben Sie die Idee einer systematischen Evidenzsynthese auf.
→ Ungetestete Behandlungen bleiben unangefochten bestehen. Patienten werden durch ineffektive oder gefährliche Behandlung geschädigt, von der „jeder weiß, dass sie funktioniert.“
Path B: Folgen Sie der Vision von Cochrane – bestehen Sie darauf, die Beweise systematisch zu sammeln und zu bewerten, auch wenn sie unpopulär sind.
→ Sie helfen beim Aufbau der Methodik, die die Medizin weltweit verändert. Systematische Überprüfungen werden weltweit zur Grundlage klinischer Richtlinien.

Setting 1: Academic Medical Center

Dr. Sarah Chen, Associate Professor of Biostatistics
McMaster University, Hamilton, Canada

8:00 AM: Überprüft den Entwurf eines systematischen Überprüfungsprotokolls eines Doktoranden. Fängt einen fatalen Fehler auf: Sie planten ein einziges Screening. Empfiehlt Pilotkalibrierungsübungen.

10:00 AM: Unterrichtet den GRADE-Workshop für 40 Kliniker. Die Hälfte ist durch die „Indirektheit“ verwirrt. Sie verwendet das Beispiel „Aspirin gegen Kopfschmerzen vs. Herzinfarkt“. Die Lichter gehen weiter.

2:00 PM: Co-Autorentreffen für ein Methodenpapier zur Netzwerk-Metaanalyse-Inkonsistenz. Plädiert für einen neuen Visualisierungsansatz.

4:00 PM: Reviews grant application as methodologist. Flags sample size calculation error that would doom a $2M trial.

Auswirkungen: Verhinderung einer fehlerhaften Studie, Schulung von 40 künftigen Evidenzanwendern, Weiterentwicklung des Fachgebiets.

Setting 2: Health Technology Assessment Agency

Ahmed Al-Rashid, Senior HTA Analyst
Saudi Food and Drug Authority, Riyadh

8:30 AM: Erhält Herstellerdossier für neues Diabetesmedikament. 847 Seiten. Seine Aufgabe: die Evidenzqualität in 3 Wochen beurteilen.

10:00 AM: Spots a problem: the pivotal trial used a surrogate endpoint (HbA1c) but claims mortality benefit. Surrogate ≠ patient-relevant outcome.

1:00 PM: Treffen mit klinischen Experten. „Das Medikament wirkt“, sagen sie. „Aber spielt es für die Patienten eine Rolle?“ er fragt. Beweislücke festgestellt.

3:00 PM: Entwürfe des Bewertungsberichts. Empfiehlt eine bedingte Genehmigung mit der Anforderung, Beweise aus der Praxis zu sammeln.

Auswirkung: Die Entscheidung eines Landes über die Arzneimittelabdeckung basiert jetzt auf strengen Methoden und nicht auf Marketingversprechen.

Setting 3: Pharmaceutical Industry

Dr. Maria Santos, Director of Evidence Strategy
Global Pharmaceutical Company, Basel

9:00 AM: Entwirft ein Phase-III-Studienprotokoll. Kämpft für pragmatisches Design statt erklärendes – schwieriger zu rekrutieren, aber die Ergebnisse werden auf echte Patienten anwendbar sein.

11:00 AM: Reviews competitor's published trial. Notes: open-label, subjective outcomes, high attrition. Prepares competitive landscape briefing.

2:00 PM: Trainiert das klinische Team bei der Vorbesprechung der FDA. „Sie werden nach Ihrem primären Endpunkt fragen. Halten Sie die Sensitivitätsanalysen bereit.“

4:30 PM: Nehmt am globalen Aufruf zur Netzwerk-Metaanalyse für HTA-Einreichungen teil. Debatte über Transitivitätsannahmen für 90 Minuten.

Auswirkungen: Besser konzipierte Studien, saubererer Regulierungsweg, Beweise, die Patienten und Unternehmen dienen.

Setting 4: WHO/Global Health

Dr. Kwame Asante, Technical Officer
World Health Organization, Geneva

8:00 AM: Morgengespräch mit der AFRO-Region. Aktualisierung der Malaria-Richtlinie erforderlich. Überprüfungen, bei denen schnelle Überprüfungen angepasst werden können oder neue Erkenntnisse benötigen.

10:30 AM: Treffen der Richtlinienentwicklungsgruppe. 14 Experten sind sich über eine Intervention nicht einig. Seine Aufgabe: Sicherstellen, dass die Beweise objektiv präsentiert werden, unabhängig davon, wer am lautesten ist.

1:00 PM: Entwurf eines GRADE-Evidenzprofils für HIV-Testempfehlungen. „Sehr niedrige Sicherheit“ bedeutet nicht „nicht empfehlen“ – er schreibt die Zusammenfassung im Klartext.

4:00 PM: Bewertungen leben im systematischen Bewertungs-Dashboard. Drei neue RCTs seit letztem Monat. Löst das Aktualisierungsprotokoll aus.

Impact: Guidelines used by 194 member states. Methods decisions affect millions.

Design

Creating study protocols, sample size calculations, endpoint selection

Appraise

Risk of bias assessment, GRADE ratings, critical appraisal

Synthesize

Meta-analysis, network meta-analysis, qualitative synthesis

Develop

New tools, guidelines, reporting standards, software

Teach

Training researchers, clinicians, policymakers

Advise

Consultations on specific studies, grants, submissions

Consider what happens when methods fail...

Die Aprotinin-Katastrophe

1993-2007: A drug that should have been stopped years earlier

Aprotinin wurde in der Herzchirurgie eingesetzt, um Blutungen zu reduzieren. Frühe Studien deuteten darauf hin, dass es funktionierte. Aber Methodiker bemerkten Probleme:

• Observational studies had severe confounding
• RCTs waren zu klein für Sicherheitsergebnisse
• Meta-analyses pooled incompatible populations

2007: BART trial finally showed increased mortality. Drug withdrawn.

Estimate: 15,000-22,000 excess deaths while methodological concerns were ignored.
Fergusson et al. NEJM 2008. Shaw et al. BMJ 2014.

Der RECOVERY-Triumph

2020: Methods done right, lives saved

Die RECOVERY-Studie verwendete vom ersten Tag an strenge Methoden:

• Pragmatic design embedded in routine care
• Adequate sample size (thousands, not dozens)
• Vorab festgelegte Endpunkte und Analysen Plan
• Unabhängiges Datenüberwachungskomitee

Result: Dexamethasone proven in 100 days. Estimated 1 million lives saved globally.

Die Methodiker, die dieses Protokoll entworfen haben, gehören zu den einflussreichsten Wissenschaftlern unserer Zeit – doch nur wenige kennen ihre Namen.
RECOVERY Collaborative Group. NEJM 2021. Horby P, Landray M (co-chief investigators).

A methodologist's primary role is to:

Scenario
Der Aprotinin-Fall führte zu schätzungsweise 15.000–22.000 zusätzlichen Todesfällen. Die primären methodischen Fehler waren:

Wählen Sie die genaueste Antwort:

Methoden sind nicht abstrakt. Methoden sind Leben und Tod.

Modul 2: Der Skill Stack

MODUL 2: DER SKILL STACK

A methodologist is not one thing. A methodologist is many things woven together.

Welche Fähigkeiten unterscheiden den Methodologen vom Forscher?

Not depth in one area—but bridges between many.

1. Statistik und quantitative Methoden

• Regression, Überlebensanalyse

• Meta-analysis (pairwise, network)

• Bayes'sche Methoden (zunehmend)

• Fehlende Daten, Sensitivitätsanalyse

2. Epidemiologie und Studiendesign

• Bias recognition (selection, information, confounding)

• RCT-Design und CONSORT

• Einschränkungen von Beobachtungsstudien

• Causal inference frameworks

3. Domain Expertise

• Clinical knowledge (enough to ask right questions)

• Understanding healthcare systems

• Kontext von Politik und Entscheidungsfindung

• Patient-relevant outcomes

4. Communication

• Translating complexity to clarity

• Schreiben für unterschiedliche Zielgruppen

• Lehre und Mentoring

• Diplomatic disagreement

Die Geschichte der Entdeckung der DNA:

In 1953, discovering DNA's structure required four disciplines:

Rosalind Franklin's X-ray crystallography revealed the helix shape.
Erwin Chargaff's chemistry showed base-pairing rules.
Linus Pauling's modeling expertise suggested the spiral.
Watsons und Cricks biologische Erkenntnisse fügten die Einzelteile zusammen.

No single specialist could have solved it alone. The double helix emerged only when disciplines converged.

Ein Methodologe ist der Übersetzer zwischen Spezialisten. Nicht der tiefste in einem Fachgebiet, aber fließend genug in allen Bereichen.

Sie verfügen über wichtige Röntgendaten zur DNA-Struktur. Was wählen Sie?

Path A: Arbeiten Sie isoliert – perfektionieren Sie Ihre Analyse alleine, schützen Sie Ihre Daten sorgfältig.
→ Andere sehen Ihre Daten über Backchannels, veröffentlichen Sie sie zuerst. Ihr Beitrag wird in der Geschichte mit Fußnoten versehen.
Path B: Interdisziplinäre Zusammenarbeit – Austausch von Erkenntnissen, Austausch mit Biologen und Chemikern.
→ Kollektive Entdeckung. Der Durchbruch entsteht aus der Synthese. Die Wissenschaft schreitet gemeinsam voran.

Core Competencies (Must Have)

Regression fundamentals: Linear, logistic, interpretation of coefficients

Survival analysis: Kaplan-Meier, Cox regression, hazard ratios

Meta-analysis: Fixed/random effects, heterogeneity (I², τ²), forest plots

Missing data: MCAR/MAR/MNAR, multiple imputation basics

Growth Areas (Increasingly Valuable)

• Network meta-analysis and indirect comparisons

• Bayesian approaches (priors, credible intervals)

• Machine learning for prediction models

• Causal inference methods (IPW, G-methods)

Die Geschichte von John Ioannidis

Vom Kliniker zum Methodenrevolutionär

John Ioannidis trained as an infectious disease physician. He could have spent his career treating patients.

Stattdessen veröffentlichte er 2005 „Why Most Published Research Findings Are.“ „Falsch“ – ein statistisches Argument dafür, dass die meisten behaupteten Forschungsergebnisse falsch sind.

Das Papier wurde über 15,000 timeszitiert. Es veränderte die Art und Weise, wie Zeitschriften, Geldgeber und Forscher über Beweise denken.

Er musste nicht der beste Statistiker der Welt sein. Er musste Statistiken gut genug verstehen, um die Frage zu stellen, die niemand sonst stellte.
Ioannidis JPA. PLoS Medicine 2005;2(8):e124. Most-accessed article in journal history.

Selection Bias

Wer nimmt an der Studie teil? Zielgruppe

Example: Trials excluding elderly patients, then applied to nursing homes

Information Bias

Measurement error, recall bias, detection bias

Example: Unblinded outcome assessors rating subjective endpoints

Confounding

Third variable creates spurious association

Example: Vitamin D and COVID—sick people stay indoors

Die Frage des Methodologen

„Welche Vorurteile könnten dieses Ergebnis erklären – und wie viel müssten sie tun?“ erklären?“

Die Geschichte von Kaffee und Herzerkrankungen:

Jahrzehntelang zeigten Beobachtungsstudien, dass Kaffeetrinker häufiger an Herzerkrankungen litten. Leitlinien warnten vor Kaffee.

Dann fiel den Methodologen auf: Kaffeetrinker rauchten auch mehr. Als die Studien auf das Rauchen angepasst wurden, verschwand der Zusammenhang.

Spätere Studien mit besseren Methoden zeigten, dass Kaffee tatsächlich schützend wirken könnte.

Die Aufgabe des Methodologen besteht nicht darin, die Wahrheit zu verkünden – er muss fragen: „Was könnte das sonst noch erklären?“

50%
Of methodologist time spent communicating with non-methodologists
1
Slide that explains GRADE better than 100 papers
Impact multiplier when clinicians understand methods
The test: Können Sie einem Patienten „sehr niedrige Vertrauenswürdigkeit der Evidenz“ in einem Satz erklären?

„Wir sind von diesen Ergebnissen nicht überzeugt – der tatsächliche Effekt könnte ganz anders sein als in Studien gezeigt.“
Entscheidungsbaum: Können Sie einem Kliniker ein Konfidenzintervall erklären? Wenn ja, können Sie in einer Beobachtungsstudie drei Verzerrungen identifizieren? Wenn beides zutrifft, sind Sie mit dem Fundament fertig. Wenn Sie keine Vorurteile erkennen können, nehmen Sie an einem Studiendesign-Kurs teil. Wenn Sie Konfidenzintervalle nicht erklären können, belegen Sie zunächst einen Biostatistikkurs.

Die vier Säulen methodischer Fähigkeiten sind:

Scenario
Eine Studie zeigt, dass Menschen, die Bio-Lebensmittel essen, niedrigere Krebsraten haben. Die Studie ist eine Beobachtungsstudie mit 50.000 Teilnehmern. Wie sollte die erste Frage eines Methodologen lauten?

Wählen Sie die beste methodische Frage aus:

Fähigkeiten sind die Grundlage. Nun – wo werden Sie aufbauen?

Modul 3: Karrierewege

MODUL 3: KARRIEREWEGE

Viele Wege führen zu Methoden. Jeder Weg prägt, was Sie werden.

Where do methodologists work?

Die Antwort wird Sie vielleicht überraschen.

Academia

Universities, research institutes

$80K-$180K

HTA Agencies

NICE, CADTH, IQWIG, regional authorities

$70K-$140K

Cochrane/JBI

Evidenzsyntheseorganisationen

$65K-$120K

WHO/Global Health

International organizations, NGOs

$90K-$160K

Pharmaceutical

Branche Evidenzteams, CROs

$100K-$220K

Consulting

Independent or boutique firms

$120K-$300K+

Salary ranges approximate, USD, vary by region and seniority. Source: Industry surveys 2023-2024.

Path 1: Academia

The Profile

Day-to-day: Teaching, research, supervision, grant writing, committee work
Autonomy: Hoch (Sie Wählen Sie Ihre Fragen)
Stability: Variable (tenure track vs. soft money)
Impact timeline: Long (publications take years)

Who thrives here: Diejenigen, die gerne lehren, Forschungsfreiheit wollen, langsames Tempo und akademische Politik tolerieren können

Achten Sie auf: Publish-or-perish pressure, grant uncertainty, limited practical application
Academic Methodologist, 15 years
"I've published 300 papers. Maybe 10 changed practice. But the students I've trained? They're changing practice every day."

Path 2: HTA Agencies

The Profile

Day-to-day: Reviewing manufacturer submissions, writing assessment reports, guideline development
Autonomy: Medium (structured processes)
Stability: High (government/quasi-government)
Impact timeline: Immediate (decisions affect coverage)

Who thrives here: Diejenigen, die direkten Einfluss auf die Politik haben möchten, strukturierte Arbeit genießen und sich mit Verantwortung auskennen

Achten Sie auf: Political pressure, tight deadlines, less research creativity
NICE Senior Analyst, UK
"Every report I write might determine whether 100,000 patients get a treatment. That focus keeps me sharp."

Path 3: WHO & Global Health

The Profile

Day-to-day: Guideline development, evidence reviews, technical assistance to countries
Autonomy: Medium (diplomatic constraints)
Stability: Medium (contract-based, but renewable)
Impact timeline: Variable (guidelines can take years; emergency response is immediate)

Who thrives here: Those who want global impact, enjoy cross-cultural work, can navigate bureaucracy

Achten Sie auf: Slow decision-making, political considerations, frequent travel
WHO Technical Officer, Geneva
"Our malaria guideline is used by 40 countries. But getting 15 experts to agree on one sentence can take six months."

Path 4: Pharmaceutical Industry

The Profile

Day-to-day: Trial design, HTA submissions, competitive intelligence, medical affairs support
Autonomy: Medium (business objectives)
Stability: Medium (restructuring common)
Impact timeline: Medium (product lifecycle)

Who thrives here: Diejenigen, die eine hohe Vergütung wünschen, schnelles Tempo genießen und sich wohl fühlen kommerzieller Kontext

Achten Sie auf: Wahrnehmung von Interessenkonflikten, Druck, „die richtige Antwort zu finden“, weniger Veröffentlichungsfreiheit
Director of Evidence Strategy, Global Pharma
„Ja, wir wollen, dass unsere Medikamente zugelassen werden. Aber ein schlechtes Studiendesign, das Phase III scheitert, kostet 500 Millionen US-Dollar. Strenge ist ein gutes Geschäft.“
Decision tree: Is direct policy impact more important than research freedom? If impact, choose between global scope (WHO/NGO) or national focus (HTA agency). If freedom, choose between compensation priority (Pharma/Consulting) or autonomy priority (Academia).

Die Geschichte von drei Methodologen:

Doug Altman verbrachte 40 Jahre in Oxford und baute langsam CONSORT, PRISMA und Berichtsstandards auf – sein Einfluss erstreckt sich über Jahrzehnte. David Sackett verließ die akademische Welt, um in Hamilton direkt mit Patienten evidenzbasierte Medizin zu praktizieren – mit unmittelbarem klinischem Nutzen. Hans Rosling nutzte seine epidemiologische Ausbildung, um Gapminder zu entwickeln – und erreichte Millionen mit Datenvisualisierung.

Same training, three paths.

Altman the Canyon (tiefe, langsame Wirkung), Sackett the Mill (tägliche klinische Anwendung), Rosling the Delta (große öffentliche Reichweite).

Sie haben Fachwissen in der Evidenzsynthese entwickelt. Wählen Sie Ihren Weg:

Path A (Academia): Like Altman—build standards, shape methodology over 40 years.
→ CONSORT, PRISMA, EQUATOR. Deep, slow, lasting impact. You change how science is reported.
Path B (Clinical Practice): Like Sackett—bring evidence directly to patient care.
→ Sofortiger klinischer Nutzen. Jeder Patient profitiert. Sie sehen die Auswirkungen täglich.
Path C (Public Communication): Wie Rosling – übersetzen Sie Daten für Millionen.
→ Gapminder, TED-Vorträge, globale Reichweite. Sie verändern, wie die Welt Daten sieht.

Years 1-5: Foundation

Graduate degree (MPH, MSc, PhD). First job often academic or junior HTA role.

Years 5-10: Specialization

Develop niche expertise. May move sectors. Build publication record and network.

Years 10-15: Leadership

Leitende Rollen. Oftmals auch nebenbei beratend tätig. Eingeladener Experte für Richtlinien.

Years 15+: Influence

Gestalten Sie das Feld. Schreiben Sie die Lehrbücher. Bilden Sie die nächste Generation aus.

Most senior methodologists have worked in 2-3 sectors. Mobility is an asset.

Welcher Karriereweg bietet normalerweise die höchste Vergütung, erfordert aber Sicherheit im kommerziellen Kontext?

Der Weg ist gewählt. Nun – wie werden Sie sichtbar?

Modul 4: Aufbau Ihres Portfolios

MODUL 4: AUFBAU IHRES PORTFOLIOS

In a field of invisible architects, how do you become known?

A methodologist without visibility is a methodologist without impact.

Your work must speak—but first, people must hear it.

Die Geschichte des unbekannten Statistikers

The Methodologist Who Changed Medicine—Anonymously:

In 1996, a statistician named David Moher led a group to create CONSORT—guidelines for reporting randomized trials.

He wasn't famous. He wasn't at Harvard. He was a methodologist at a Canadian research institute.

Today, CONSORT is required by 600+ journals. It's cited 35,000+ times. It's arguably saved more lives than most drugs—by ensuring we know which drugs actually work.

Moher built his reputation not through brilliance alone, but through relentless, visible contribution to a problem everyone faced.

1. Publications

• Methodenartikel in guten Zeitschriften

• Collaborative applied papers (methods role)

• Kommentare und Briefe

• Tutorials und Anleitungen

2. Tools & Resources

• Software packages (R, Stata)

• Checklisten und Berichtsrichtlinien

• Teaching materials (open access)

• Rechner und Entscheidungshilfen

3. Presence

• Conference presentations

• Workshops und Schulungen

• Social media (X/Twitter, LinkedIn)

• Blogbeiträge und Newsletter

4. Network

• Cochrane/Campbell involvement

• Guideline panel memberships

• Journal editorial boards

• Mentorship relationships

Die Macht der Tools

metafor
R package by Wolfgang Viechtbauer. 10,000+ citations.
ROB 2
Risiko von Bias-Tool. Standard für Cochrane-Reviews weltweit.
GRADE
Framework by Guyatt et al. Used by 100+ organizations.
Tools-Skala. Eine Arbeit wird einmal gelesen. Ein Tool wird tausende Male verwendet.

Wenn Sie ein wiederkehrendes Problem lösen und es gut verpacken können, vervielfacht sich Ihre Wirkung.

Die Methodenpapierformel

Problem: Identify a recurring methodological challenge

Solution: Propose a clear, implementable approach

Demonstration: Wenden Sie sie auf reale Daten oder Simulationen an

Accessibility: Stellen Sie Code, Tools usw. bereit Vorlagen

Validation: Show it works better than status quo

Target journals: BMJ, JAMA, Annals of Internal Medicine (Methodenabschnitte), Statistics in Medicine, Research Synthesis Methods, Journal of Clinical Epidemiology

Der Kooperationsmultiplikator

How Georgia Salanti Built a Methods Empire:

Georgia Salanti hat nicht nur über Netzwerk-Metaanalyse geschrieben – sie arbeitete mit klinischen Teams zusammen, die Bedarf hatten it.

Jede Zusammenarbeit brachte Folgendes hervor: (1) eine angewandte Arbeit zur Lösung einer klinischen Frage, (2) Methodeneinblicke für ihre nächste Methodenarbeit, (3) eine dankbare Kollegin, die sie anderen empfohlen hat.

Ihr Netzwerk wuchs exponentiell. Jetzt leitet sie eine der produktivsten Evidenzsynthesegruppen in Europa.

Lektion: Warten Sie nicht, bis Sie gefragt werden. Bieten Sie Teams mit wichtigen klinischen Fragen Ihre Methodenkompetenz an.
Salanti G, University of Bern. 500+ publications. Developed CINeMA framework for NMA confidence.

What Works

• Sharing useful content (tutorials, explainers)

• Nehmen Sie respektvoll an Methodendebatten teil

• Celebrating others' work

• Making complex ideas accessible

• Zeigen Sie Ihren Lernweg

What Doesn't

• Self-promotion without value

• Angriffe auf die Methoden anderer öffentlich

• Jargon-heavy posts

• Inconsistent presence

• Ignoring engagement

Best methodologist accounts: @EpiEllie, @statsepi, @CochraneCollab, @GRADEWorkingGrp

Die Geschichte von Rosalind Franklin:

Rosalind Franklins Röntgenbild (Foto 51) war entscheidend für die Entdeckung der DNA-Struktur. Aber sie veröffentlichte vorsichtig und machte keine Eigenwerbung.

Watson und Crick sahen ihre Daten, wurden zuerst veröffentlicht und gewannen den Nobelpreis. Franklin starb im Alter von 37 Jahren, weitgehend unbemerkt.

Jahrzehnte später enthüllten ihre Notizbücher, dass sie die Struktur nur noch wenige Wochen selbst gelöst hatte. Brillante Arbeit, die zu leise geteilt wurde, wurde in den Schatten gestellt.

Impact requires not just discovery, but communication.

You've made a crucial discovery. What do you choose?

Path A: Vorsichtig veröffentlichen – auf perfekte Daten warten, Eigenwerbung vermeiden.
→ Others see your work, publish first. You're remembered as a footnote, vindicated only decades later.
Path B: Share findings actively—engage the community, present at conferences, collaborate openly.
→ Risk being scooped, but ensure your contribution is visible. Credit follows communication.

Die skalierbarste Möglichkeit für einen Methodiker, die Wirkung zu steigern, ist:

Visibility without substance is noise. Substance without visibility is silence.

Modul 5: Das Toolkit

MODUL 5: DAS TOOLKIT

Ein Handwerker ist nur so gut wie seine Werkzeuge – und wie er sie beherrscht.

What software do methodologists use?

What resources shape their thinking?

R (Essential)

metafor: Goldstandard für Metaanalyse

netmeta: Network meta-analysis

robvis: Risk of bias visualization

tidyverse: Data manipulation

Free, open source, reproducible

Stata (Common)

metan/admetan: Meta-analysis

network: NMA

• Stark in der Überlebensanalyse

• Preferred by some HTA agencies

Commercial license required

RevMan (Cochrane)

• Offizielles Cochrane-Tool

• User-friendly interface

• Limited customization

• Gut für Standardüberprüfungen

Kostenlos für Cochrane-Überprüfungen

Python (Growing)

PyMeta: Meta-analysis

• ML-Integration für Screening

• Text mining capabilities

• Automation scripts

Kostenlos, gut für die KI-Integration

Covidence

Screening, extraction, collaboration

$$

Rayyan

AI-assisted screening, free tier

Free

ASReview

Active learning screening

Free

EPPI-Reviewer

Full workflow, text mining

$$

DistillerSR

Enterprise, AI features

$$$

SysRev

Open source option

Free

Essential Resources

Das Bücherregal des Methodologen:

Cochrane Handbook: The gold standard reference. Free online. Read chapters 6-10 closely.

Higgins & Green → Higgins et al.: Wird regelmäßig aktualisiert. Ihre Referenz für alle SR-Fragen.

Borenstein et al. "Introduction to Meta-Analysis": Best statistical foundation.

Guyatt et al. JAMA Users' Guides: Clinical epidemiology essentials.

IOM "Finding What Works in Health Care": Standards für systematische Überprüfungen.

Read one chapter per week. In two years, you'll have a graduate education in methods.

Cochrane

Largest SR producer. Training. Methods groups. Volunteer opportunities.

Campbell Collaboration

Social science SRs. Growing. Less competitive to join.

JBI (Joanna Briggs)

Nursing/allied health focus. Strong training program.

GRADE Working Group

Certainty assessment. Influential. Membership by invitation.

EQUATOR Network

Reporting guidelines hub. Guideline development opportunities.

HTAi

HTA professional society. Annual conference. Interest groups.

Die Geschichte der Grafiken von Florence Nightingale:

Florence Nightingale verfügte über eine grundlegende statistische Ausbildung – weit weniger als Universitätsmathematiker ihrer Zeit. Aber sie beherrschte ein Werkzeug: das Polargebietsdiagramm.

Ihre „Coxcomb“-Diagramme zeigten, dass Soldaten häufiger an Infektionen als an Kampfwunden starben. Das Parlament, das Zahlentabellen ignorierte, verstand ihre Grafiken sofort.

Sie verfügte nicht über die besten Werkzeuge. Sie meisterte, was sie hatte, und veränderte die Militärmedizin für immer.

Sie haben Daten, die belegen, dass Soldaten an Infektionen und nicht an Kampfwunden sterben. Das Parlament muss handeln. Was wählen Sie?

Path A: Präsentieren Sie Zahlentabellen – die Daten sprechen für sich, zeigen Sie die rohen Statistiken.
→ Das Parlament ignoriert Sie. Zahlen ohne Visualisierung sind für vielbeschäftigte Politiker unsichtbar.
Path B: Erstellen Sie visuelle Diagramme – verwandeln Sie Daten in Bilder, die die Geschichte auf einen Blick erzählen.
→ Das Parlament versteht sofort. Richtlinienänderungen. Militärkrankenhäuser werden reformiert. Leben werden gerettet.

Das am weitesten verbreitete R-Paket für Metaanalysen ist:

Tools werden erlernt. Nun – worauf werden Sie sich spezialisieren?

Modul 6: Finden Sie Ihre Nische

MODUL 6: FINDEN SIE IHRE NISCHE

Der Generalist weiß etwas über alles. Der Spezialist weiß alles über etwas. Der Methodologe weiß, welche Fragen er zu beiden stellen muss.

Sie können nicht alle Methoden beherrschen.

Aber Sie können zum Weltexperten in einer werden.

Network Meta-Analysis

Indirect comparisons, complex interventions

High demand

Diagnostic Test Accuracy

Sensitivity/specificity, SROC curves

Specialized

IPD Meta-Analysis

Individual patient data, advanced stats

Growing

Living Systematic Reviews

Continuous updating, automation

Emerging

Qualitative Synthesis

Meta-ethnography, framework synthesis

Underserved

Risiko der Verzerrung Tools

Tool-Entwicklung, Validierung

Influential

Reporting Guidelines

CONSORT, PRISMA extensions

High impact

AI/ML in Evidence Synthesis

Automation, screening, extraction

Frontier

Deep Dive: Network Meta-Analysis

Warum diese Nische?

The problem: Policymakers need to compare 10 drugs. We have trials of A vs B, B vs C, C vs D... but not A vs D directly.

NMA solves: Borrows strength across the network to estimate all comparisons.

The opportunity: HTA agencies require NMA for reimbursement decisions. Pharma needs NMA experts. Few people truly understand it.

The barrier: Requires Bayesian statistics, graph theory, and deep understanding of transitivity. 2-3 year learning curve.

Key names: Salanti, Caldwell, Dias, Welton. Key resource: NICE DSU Technical Support Documents.

Deep Dive: KI/ML in der Evidenzsynthese

Warum diese Nische?

The problem: Das manuelle Screening von 50.000 Abstracts dauert Monate. Das Extrahieren von Daten aus 200 Artikeln ist mühsam und fehleranfällig.

AI/ML offers: Aktives Lernen für das Screening (Reduzierung des Arbeitsaufwands um 50–90 %). NLP zur Datenextraktion. GPT für die Protokollerstellung.

The opportunity: Feld ist neu. Standards existieren noch nicht. Wer auch immer die Validierungsframeworks schreibt, prägt das Feld.

The barrier: Erfordert sowohl ML-Kenntnisse als auch ein tiefes Verständnis von SR-Methoden. Die meisten ML-Leute kennen SR nicht; Die meisten SR-Leute kennen sich mit ML nicht aus.

Key names: Marshall, Wallace, Thomas. Key tools: ASReview, RobotReviewer, Trialstreamer.
Entscheidungsbaum: Interessieren Sie sich für statistische Komplexität oder Prozessverbesserung? Wenn es um Statistik geht, sind Sie mit Bayes'schen Methoden vertraut? Wenn ja, ziehen Sie eine NMA- oder IPD-Metaanalyse in Betracht. Falls noch nicht geschehen, ziehen Sie DTA oder Vorhersagemodelle in Betracht. Wenn Sie prozessorientiert sind, haben Sie Interesse an Technik/Programmierung? Wenn ja, ziehen Sie KI/ML oder lebende systematische Überprüfungen in Betracht. Wenn nein, ziehen Sie Richtlinien oder Risikovoreingenommenheitstools in Betracht.

Die Geschichte von Archie Cochrane:

Archie Cochrane hätte Allgemeinarzt bleiben können. Stattdessen verbrachte er Jahrzehnte damit, eine Frage zu stellen: „Wo sind die Beweise?“

Er befürwortete randomisierte Studien, wenn Kollegen der klinischen Intuition vertrauten. Er wurde verspottet, ignoriert und als obsessiv bezeichnet. Als er 1988 starb, war seine „Besessenheit“ zur Grundlage der evidenzbasierten Medizin geworden.

Die Cochrane Collaboration trägt seinen Namen. Tiefes Fachwissen in einer Frage hat das Gesundheitswesen für immer verändert.

Ihre Kollegen vertrauen der klinischen Intuition statt Studien. Sie glauben, dass Beweise die Praxis leiten sollten. Was wählen Sie?

Path A: Akzeptieren Sie den Status quo – klinische Erfahrung wird geschätzt, folgen Sie der etablierten Praxis.
→ Medizin bleibt meinungsbasiert. Die Behandlungen werden ohne Beweise fortgesetzt. Patienten erhalten Pflege auf der Grundlage von Traditionen und nicht auf der Grundlage von Beweisen.
Path B: Fordern Sie weiterhin Beweise – fragen Sie immer wieder: „Wo ist der Beweis?“ trotz Spott.
→ Werde jahrzehntelang als obsessiv bezeichnet. Verwandeln Sie schließlich die Medizin. Eine globale Zusammenarbeit trägt Ihren Namen.

Network meta-analysis is particularly valuable when:

Die Nische ist ausgewählt. Jetzt – lernen Sie von denen, die zuvor gelaufen sind.

Modul 7: Echte Reisen

MODUL 7: ECHTE REISEN

Every methodologist was once a beginner who didn't quit.

How did they actually get here?

Die Wege sind selten gerade.

Journey 1: The Clinician Who Asked Why

Gordon Guyatt: From Physician to GRADE Creator

Gordon Guyatt war praktizierender Internist in der 1980er Jahre. Er bemerkte, dass leitende Ärzte zuversichtliche Aussagen machten – ihre Beweise waren jedoch schwach.

Der Wendepunkt: He coined "Evidence-Based Medicine" in 1991. But he didn't stop there. He realized clinicians needed frameworks to assess evidence quality.

The path: MD → Clinical practice → Frustration with dogma → Methodological training → GRADE working group leadership

Today: GRADE ist der globale Standard für die Bewertung der Sicherheit. Wird von der WHO, Cochrane und mehr als 100 Organisationen verwendet.

Lesson: Clinical frustration can become methodological innovation.

Journey 2: The Statistician Who Saw Chaos

Doug Altman: From Numbers to Standards

Doug Altman hat eine Ausbildung als Statistiker und nicht als Kliniker absolviert. Aber als er sich medizinische Fachzeitschriften ansah, sah er statistisches Chaos – falsche Tests, falsch gemeldete Ergebnisse, unmögliche Zahlen.

Der Wendepunkt: His 1994 "Scandal of Poor Medical Research" editorial in BMJ. He could have complained. Instead, he built solutions.

The path: Statistics degree → Medical statistics unit → Frustration with reporting → CONSORT, STROBE, PRISMA, EQUATOR Network

Today: His reporting guidelines changed scientific communication. Cited 500,000+ times across his work.

Lesson: Identify a widespread problem, then systematically solve it.

Journey 3: The Outsider Who Found a Gap

From PhD Student to NMA Pioneer

Georgia Salanti war Doktorandin in Griechenland, als Netzwerk-Metaanalyse ein Nischenkuriosum war. Nur wenige Leute haben es verstanden. Weniger könnten es lehren.

Der Wendepunkt: Sie erkannte, dass NMA für HTA unverzichtbar werden würde. Sie positionierte sich an der Grenze.

The path: Statistics PhD → Postdoc at Cambridge → Deep NMA focus → Own research group at Bern → CINeMA framework developer

Today: One of the most cited NMA methodologists globally. Consulted by WHO, NICE, pharmaceutical companies.

Lektion: Finden Sie die neue Methode, die jeder brauchen wird – und beherrschen Sie sie, bevor sie es tun.

Reise 4: Der regionale Pionier

Aufbau von Methodenkapazitäten im Nahen Osten

Im Jahr 2010 systematisch In der MENA-Region gab es kaum Schulungen zu Überprüfungsmethoden. Die meisten Methodologen wurden in Europa oder Nordamerika ausgebildet.

The pioneers: Clinicians and researchers who sought training abroad, then returned to build local capacity.

The path: Local medical degree → International methods fellowship → Return home → Establish training programs → Become regional experts

Today: Jordan, Lebanon, Iran, Saudi Arabia, Oman have growing evidence synthesis capacity. Regional Cochrane branches emerging.

Lektion: Methodenkompetenz ist übertragbar. Wenn Sie es nach Hause bringen, vervielfacht sich Ihre Wirkung.

They All Had...

• Eine Frustration, die zur Mission wurde

• Willingness to learn continuously

• Collaborators who believed in them

• Persistence through rejection

• Ein Fokus, der sich mit der Zeit vertiefte

They Didn't Have...

• Perfect pedigrees

• Von Anfang an klare Wege

• Instant recognition

• Freiheit von Rückschlägen

• All skills from day one

Die Geschichte von Ignaz Semmelweis:

Im Jahr 1847 entdeckte Ignaz Semmelweis, dass Händewaschen die Müttersterblichkeit von 18 % auf 2 % senken konnte. Das medizinische Establishment lehnte ihn ab.

Er wurde entlassen, verspottet und schließlich in eine Anstalt eingewiesen, wo er im Alter von 47 Jahren starb. Es dauerte weitere 20 Jahre, bis die Keimtheorie ihn rechtfertigte.

Semmelweis sah seine Auswirkungen nicht. Aber jeder Chirurg, der heute schrubbt, geht seinen Weg. Der Fluss erreichte das Meer – nach seinem Tod.

You've discovered handwashing saves lives, but colleagues reject it. What do you choose?

Path A: Give up—accept rejection, stop fighting the establishment.
→ Stirb vergessen und mit gebrochenem Herzen. Lassen Sie sich posthum rehabilitieren, aber sehen Sie niemals Ihre Wirkung.
Path B: Dokumentieren Sie alles – bleiben Sie trotz Ablehnung bestehen, stellen Sie sicher, dass die Beweise erhalten bleiben.
→ Selbst wenn Sie zu Ihren Lebzeiten abgelehnt werden, bleiben Ihre dokumentierten Beweise bestehen. Zukünftige Generationen erben die Wahrheit.

Gordon Guyatt's path to creating GRADE began with:

Best Entry Points

Research Assistant über systematische Überprüfung Team

Junior HTA Analyst at national/regional agencies

Cochrane/JBI Fellow (competitive but career-defining)

Postdoc mit etabliertem Methodiker

What Employers Want

• Evidence of SR/MA experience (even one published)

• R or Stata proficiency

• GRADE or risk of bias training certificates

• Strong writing samples

Pro tip: Arbeiten Sie ehrenamtlich als Screener bei einem Cochrane-Review. Es handelt sich um eine kostenlose Schulung und eine Veröffentlichungsgutschrift.

The Reading List: Priority Order

Start Here (Month 1-3):
1. Cochrane Handbook — Chapters 6-10 (free online)
2. Borenstein "Introduction to Meta-Analysis" — Statistical foundation

Then (Month 4-6):
3. Guyatt's JAMA Users' Guides — Clinical epidemiology
4. GRADE Handbook — Certainty assessment (free online)

Specialize (Month 7-12):
5. NICE DSU Technical Support Documents — For NMA
6. Ioannidis papers collection — Meta-research classics

One chapter per week = graduate-level education in 2 years.

Regional Pathway: MENA & Global South

Aufbau von Methodenkapazitäten in der Golfregion und im Nahen Osten:

The Challenge: Limited local training programs. Most methodologists trained abroad.

The Opportunity: Growing demand. Saudi FDA, Qatar PHCC, UAE DOH all building HTA capacity. First-mover advantage is real.

Pathway:
• Complete international training (McMaster, Oxford, JBI)
• Rückkehr mit Zertifizierung und Netzwerk
• Arbeiten Sie mit regionalen Institutionen zusammen
• Become the local expert others consult

Regional conferences: ISPE Middle East, Dubai Health Forum, Gulf HTA Network meetings.

McMaster GRADE/EBM

Gold standard. Online + in-person options.

Essential

Cochrane Training

Free online modules. Certificate tracks available.

Free

JBI Programs

Comprehensive SR training. Strong in qualitative.

Respected

Oxford CEBM

Short courses and MSc options.

Prestigious

Coursera/edX

Epidemiology, Biostatistics foundations.

Affordable

AHRQ EPC Fellowships

US-based. Competitive but career-defining.

Elite

Sie haben die Reisen gesehen. Jetzt – sind Sie bereit, mit Ihrem zu beginnen?

Final Assessment

MODUL 8: ABSCHLUSSBEWERTUNG

Sie sind durch die Welt der Methoden gereist.

Die fünf Prinzipien des Methodologen

1. Strenge ist nicht optional – sie ist die Grundlage des Vertrauens.

2. Invisible work has visible consequences.

3. Depth in one area enables breadth in impact.

4. Werkzeuge dienen Methoden; Methoden dienen der Wahrheit.

5. Der Methodologe fragt: „Was könnte das sonst noch erklären?“

Doug Altman's CONSORT guidelines have been cited over:

The aprotinin case (15,000-22,000 excess deaths) illustrates:

Bei der Auswertung einer Beobachtungsstudie, die zeigt, dass Kaffeetrinker häufiger an Herzerkrankungen leiden, sollte die erste Frage eines Methodologen lauten:

Die skalierbarste Möglichkeit für einen Methodiker, seine Wirkung zu vervielfachen, ist:

Der Karriereweg, der normalerweise die höchste Vergütung bietet, aber Sicherheit im kommerziellen Kontext erfordert, ist:

Verpflichten Sie sich zu Ihrem Entwicklung. Kreuzen Sie jeden Meilenstein an, wenn Sie ihn abgeschlossen haben:

Ihr Fortschritt wird automatisch in diesem Browser gespeichert.

Sie haben die Reise abgeschlossen.

Gehen Sie weiter und bauen Sie die Grundlagen, auf denen andere stehen werden.

Remember:
Methoden sind unsichtbar. Auswirkungen gibt es nicht.
Werkzeuge werden erlernt. Urteil ist verdient.
Der weniger befahrene Weg ist aus gutem Grund weniger überfüllt. Geh es trotzdem.