Alcuni costruiscono la casa. Altri assicurano che le fondamenta reggeranno.
Vi siete mai chiesti chi controlla le pedine?
Chi garantisce che i metodi alla base delle decisioni mediche siano validi?
Gli architetti invisibili
A city built a magnificent bridge. Engineers celebrated. Citizens crossed daily. But one woman spent her days beneath, checking welds, measuring stress, documenting cracks.
"Why don't you build bridges?" they asked.
"Because," she said, "I ensure every bridge built will stand."
I metodologi sono gli ispettori delle prove mediche. Non conducono i test: si assicurano che i test ci dicano la verità.
L'impatto nascosto
Il lavoro dei metodi non è affascinante. Ma è la differenza tra la medicina che guarisce e la medicina che danneggia.
Consideriamo la storia del dottor Doug Altman...
In 1994, a statistician published an editorial in BMJ titled "The Scandal of Poor Medical Research." He wrote:
"Abbiamo bisogno di meno ricerca, di una migliore ricerca e di una ricerca condotta per le giuste ragioni."
Doug Altman non ha scoperto nuovi farmaci. Non ha eseguito interventi chirurgici. Ha trascorso la sua carriera sviluppando linee guida per il reporting (CONSORT, STROBE, PRISMA) che hanno cambiato il modo in cui il mondo presenta le prove.
Le sue citazioni: oltre 500.000. I suoi strumenti sono utilizzati in tutte le principali riviste. Non ha costruito ponti, ma ogni ponte ora utilizza i suoi standard di ispezione.
What Is a Methodologist?
What They Do
• Progetta metodi di studio rigorosi
• Develop reporting guidelines
• Crea strumenti a rischio di bias
• Advance statistical techniques
• Forma la prossima generazione
What They Don't Do
• Di solito non sono dati primari raccolta
• Solitamente non cura del paziente
• Raramente nei titoli
• Spesso non è il "primo autore"
• Non è il volto delle scoperte
I metodologi sono gli architetti di prove, non i costruttori di studi individuali.
La storia della mappa del colera di John Snow:
Nel 1854, i medici londinesi credevano che il colera si diffondesse attraverso il "miasma" (aria cattiva). Le loro mappe erano bellissime, mostravano la distribuzione del vento e l'elevazione.
Dr. John Snow ha creato una mappa semplice: solo punti che mostrano i decessi raggruppati attorno alla pompa di Broad Street. La sua mappa semplice e metodologicamente valida identificava l'acqua contaminata come fonte.
Le mappe del miasma erano eleganti ma sbagliate. La mappa della pianura innevata ha salvato vite umane.
Metodologia più che presentazione.
Sei un medico londinese nel 1854. Il colera si sta diffondendo. Cosa scegli?
La realtà del mercato
La domanda è in aumento. Le agenzie di regolamentazione, il settore farmaceutico e i sistemi sanitari hanno tutti bisogno di persone che comprendano la qualità delle evidenze.
Il percorso è chiaro per coloro che sono disposti a percorrerlo.
Modulo 1: cosa fanno i metodologi
Non costruiscono la nave. Garantiscono che non affonderà.
Immaginate un giorno nella vita...
Not one life—many lives, in many settings.
The Methodologist Who Changed Medicine: Archie Cochrane
In 1972, a physician named Archie Cochrane published Efficacia ed efficienza, sostenendo che la maggior parte delle decisioni mediche mancavano di prove provenienti da studi controllati. Ha sfidato l'intero establishment medico a dimostrare che i trattamenti funzionassero davvero.
Prima del sostegno di Cochrane, la stragrande maggioranza dei trattamenti medici non era mai stata testata in studi randomizzati e controllati. Quando fu fondata la Cochrane Collaboration nel 1993, le revisioni sistematiche erano diventate il gold standard della medicina basata sull'evidenza.
L'insistenza di un metodologo sul rigore ha creato l'infrastruttura da cui dipende ora la medicina moderna.
Sei un giovane ricercatore nel 1975. Un professore senior respinge il tuo suggerimento di condurre una revisione sistematica, dicendo: "Lo sappiamo già ciò che funziona dall'esperienza clinica."
Setting 1: Academic Medical Center
McMaster University, Hamilton, Canada
8:00 AM: Revisiona una bozza di protocollo di revisione sistematica da parte di uno studente di dottorato. Coglie un difetto fatale: avevano previsto la proiezione unica. Raccomanda esercizi di calibrazione pilota.
10:00 AM: Insegna seminari GRADE a 40 medici. La metà è confusa dalla "indirettazza". Usa l'esempio dell'aspirina per il mal di testa contro l'infarto. Le lampadine si accendono.
2:00 PM: Riunione dei coautori per un documento metodologico sull'incoerenza della meta-analisi di rete. Sostiene un nuovo approccio di visualizzazione.
4:00 PM: Reviews grant application as methodologist. Flags sample size calculation error that would doom a $2M trial.
Impatto: impedito uno studio viziato, formato 40 futuri utilizzatori di prove, fatto avanzare il campo.
Setting 2: Health Technology Assessment Agency
Saudi Food and Drug Authority, Riyadh
8:30 AM: Riceve il dossier del produttore per un nuovo farmaco per il diabete. 847 pagine. Il suo compito: valutare la qualità delle prove in 3 settimane.
10:00 AM: Spots a problem: the pivotal trial used a surrogate endpoint (HbA1c) but claims mortality benefit. Surrogate ≠ patient-relevant outcome.
1:00 PM: Incontra esperti clinici. "Il farmaco funziona", dicono. "Ma è importante per i pazienti?" chiede. Individuata lacuna nelle prove.
3:00 PM: Bozze di rapporto di valutazione. Raccomanda l'approvazione condizionata con requisiti di raccolta di prove reali.
Impatto: la decisione nazionale sulla copertura dei farmaci si basa ora su metodi rigorosi e non su affermazioni di marketing.
Setting 3: Pharmaceutical Industry
Global Pharmaceutical Company, Basel
9:00 AM: Progetta un protocollo di sperimentazione di Fase III. Si batte per una progettazione pragmatica anziché esplicativa: è più difficile reclutare, ma i risultati si applicheranno a pazienti reali.
11:00 AM: Reviews competitor's published trial. Notes: open-label, subjective outcomes, high attrition. Prepares competitive landscape briefing.
2:00 PM: Coaching del team clinico durante la riunione di pre-presentazione alla FDA. "Chiederanno informazioni sul tuo endpoint primario. Tieni pronte le analisi di sensibilità."
4:30 PM: Si unisce alla chiamata globale sulla meta-analisi di rete per le proposte HTA. Discute i presupposti di transitività per 90 minuti.
Impatto: studi meglio progettati, percorso normativo più pulito, prove al servizio dei pazienti e delle imprese.
Setting 4: WHO/Global Health
World Health Organization, Geneva
8:00 AM: Chiamata mattutina con la regione AFRO. Necessario aggiornamento delle linee guida sulla malaria. Revisioni che possono essere adattate in tempi rapidi e che necessitano di nuove prove.
10:30 AM: Riunione del gruppo di sviluppo delle linee guida. 14 esperti non sono d'accordo sull'intervento. Il suo ruolo: garantire che le prove siano presentate in modo obiettivo, indipendentemente da chi parla più forte.
1:00 PM: Bozza il profilo delle prove GRADE per la raccomandazione sul test HIV. "Certezza molto bassa" non significa "non consiglio": scrive il riepilogo in un linguaggio semplice.
4:00 PM: Dashboard di revisione sistematica vivente delle recensioni. Tre nuovi RCT dal mese scorso. Attiva il protocollo di aggiornamento.
Impact: Guidelines used by 194 member states. Methods decisions affect millions.
Le attività principali
Design
Creating study protocols, sample size calculations, endpoint selection
Appraise
Risk of bias assessment, GRADE ratings, critical appraisal
Synthesize
Meta-analysis, network meta-analysis, qualitative synthesis
Develop
New tools, guidelines, reporting standards, software
Teach
Training researchers, clinicians, policymakers
Advise
Consultations on specific studies, grants, submissions
Consider what happens when methods fail...
Il disastro dell'aprotinina
L'aprotinina è stata utilizzata in chirurgia cardiaca per ridurre il sanguinamento. I primi studi suggerivano che funzionasse. Ma i metodologi hanno notato dei problemi:
• Observational studies had severe confounding
• Gli RCT erano troppo piccoli per i risultati sulla sicurezza
• Meta-analyses pooled incompatible populations
2007: BART trial finally showed increased mortality. Drug withdrawn.
Estimate: 15,000-22,000 excess deaths while methodological concerns were ignored.
Il trionfo RECOVERY
Lo studio RECOVERY ha utilizzato metodi rigorosi fin dal primo giorno:
• Pragmatic design embedded in routine care
• Adequate sample size (thousands, not dozens)
• Endpoint e analisi pre-specificati piano
• Comitato indipendente per il monitoraggio dei dati
Result: Dexamethasone proven in 100 days. Estimated 1 million lives saved globally.
I metodologi che hanno progettato questo protocollo sono tra gli scienziati di maggior impatto della nostra epoca, ma pochi conoscono i loro nomi.
Module 1 Quiz
A methodologist's primary role is to:
Module 1 Quiz (2)
Selezionare la risposta più accurata:
I metodi non sono astratti. I metodi sono vita e morte.
Modulo 2: Lo Skill Stack
A methodologist is not one thing. A methodologist is many things woven together.
Quali competenze separano il metodologo dal ricercatore?
Not depth in one area—but bridges between many.
Le Quattro Pilastri
1. Statistiche e metodi quantitativi
• Regressione, analisi di sopravvivenza
• Meta-analysis (pairwise, network)
• Metodi bayesiani (sempre più)
• Dati mancanti, analisi di sensibilità
2. Epidemiologia e progettazione dello studio
• Bias recognition (selection, information, confounding)
• Progettazione di RCT e CONSORT
• Limitazioni dello studio osservazionale
• Causal inference frameworks
3. Domain Expertise
• Clinical knowledge (enough to ask right questions)
• Understanding healthcare systems
• Contesto politico e decisionale
• Patient-relevant outcomes
4. Communication
• Translating complexity to clarity
• Scrittura per pubblici diversi
• Insegnamento e mentoring
• Diplomatic disagreement
La storia della scoperta del DNA:
In 1953, discovering DNA's structure required four disciplines:
Rosalind Franklin's X-ray crystallography revealed the helix shape.
Erwin Chargaff's chemistry showed base-pairing rules.
Linus Pauling's modeling expertise suggested the spiral.
L'intuizione biologica di Watson e Crick ha messo insieme i pezzi.
No single specialist could have solved it alone. The double helix emerged only when disciplines converged.
Un metodologo è il traduttore tra gli specialisti. Non il più approfondito in nessun campo, ma abbastanza fluente in tutti.
Hai dati cruciali a raggi X sulla struttura del DNA. Cosa scegli?
Statistiche: di cosa hai bisogno
Core Competencies (Must Have)
• Regression fundamentals: Linear, logistic, interpretation of coefficients
• Survival analysis: Kaplan-Meier, Cox regression, hazard ratios
• Meta-analysis: Fixed/random effects, heterogeneity (I², τ²), forest plots
• Missing data: MCAR/MAR/MNAR, multiple imputation basics
Growth Areas (Increasingly Valuable)
• Network meta-analysis and indirect comparisons
• Bayesian approaches (priors, credible intervals)
• Machine learning for prediction models
• Causal inference methods (IPW, G-methods)
La storia di John Ioannidis
John Ioannidis trained as an infectious disease physician. He could have spent his career treating patients.
Invece, nel 2005, ha pubblicato "Perché i risultati della ricerca più pubblicati sono Falso": un argomento statistico secondo cui i risultati della ricerca più affermati sono errati.
L'articolo è stato citato 15,000 times. Ha cambiato il modo in cui riviste, finanziatori e ricercatori pensano alle prove.
Non aveva bisogno di essere il miglior statistico del mondo. Aveva bisogno di comprendere le statistiche abbastanza bene da porre la domanda che nessun altro si poneva.
Epidemiology: The Bias Hunter's Toolkit
Selection Bias
Chi partecipa allo studio ≠ popolazione target
Example: Trials excluding elderly patients, then applied to nursing homes
Information Bias
Measurement error, recall bias, detection bias
Example: Unblinded outcome assessors rating subjective endpoints
Confounding
Third variable creates spurious association
Example: Vitamin D and COVID—sick people stay indoors
La domanda del metodologo
"Quali pregiudizi potrebbero spiegare questa scoperta e quanto avrebbero bisogno di spiegare?"
La storia del caffè e delle malattie cardiache:
Per decenni, studi osservazionali hanno dimostrato che i bevitori di caffè avevano più malattie cardiache. Le linee guida mettono in guardia contro il caffè.
Poi i metodologi hanno notato: anche i bevitori di caffè fumano di più. Quando gli studi hanno corretto il fumo, l'associazione è scomparsa.
Studi successivi, con metodi migliori, hanno dimostrato che il caffè potrebbe effettivamente essere protettivo.
Il compito del metodologo non è dichiarare la verità, ma chiedersi: "Cos'altro potrebbe spiegare questo?"
Comunicazione: il sottovalutato Abilità
"Non siamo sicuri di questi risultati: il vero effetto potrebbe essere molto diverso da quello mostrato dagli studi."
Albero decisionale: hai le basi?
Foundation in place
È necessario un corso sulla progettazione dello studio
Prima un corso di biostatistica
Module 2 Quiz
I quattro pilastri delle competenze del metodologo sono:
Module 2 Quiz (2)
Selezionare la migliore domanda metodologica:
Le competenze sono il fondamento. Ora, dove costruirai?
Modulo 3: Percorsi di carriera
Molte strade portano a metodi. Ogni strada modella ciò che diventi.
Where do methodologists work?
La risposta potrebbe sorprenderti.
I sei percorsi di carriera
Academia
Universities, research institutes
HTA Agencies
NICE, CADTH, IQWIG, regional authorities
Cochrane/JBI
Organizzazioni di sintesi delle prove
WHO/Global Health
International organizations, NGOs
Pharmaceutical
Team di prova del settore, CRO
Consulting
Independent or boutique firms
Salary ranges approximate, USD, vary by region and seniority. Source: Industry surveys 2023-2024.
Path 1: Academia
Day-to-day: Teaching, research, supervision, grant writing, committee work
Autonomy: Alto (tu scegli le tue domande)
Stability: Variable (tenure track vs. soft money)
Impact timeline: Long (publications take years)
Who thrives here: Coloro che amano insegnare, desiderano la libertà di ricerca, possono tollerare ritmi lenti e la politica accademica
Fai attenzione a: Publish-or-perish pressure, grant uncertainty, limited practical application
Path 2: HTA Agencies
Day-to-day: Reviewing manufacturer submissions, writing assessment reports, guideline development
Autonomy: Medium (structured processes)
Stability: High (government/quasi-government)
Impact timeline: Immediate (decisions affect coverage)
Who thrives here: Coloro che desiderano un impatto politico diretto, amano il lavoro strutturato, si sentono a proprio agio con la responsabilità
Fai attenzione a: Political pressure, tight deadlines, less research creativity
Path 3: WHO & Global Health
Day-to-day: Guideline development, evidence reviews, technical assistance to countries
Autonomy: Medium (diplomatic constraints)
Stability: Medium (contract-based, but renewable)
Impact timeline: Variable (guidelines can take years; emergency response is immediate)
Who thrives here: Those who want global impact, enjoy cross-cultural work, can navigate bureaucracy
Fai attenzione a: Slow decision-making, political considerations, frequent travel
Path 4: Pharmaceutical Industry
Day-to-day: Trial design, HTA submissions, competitive intelligence, medical affairs support
Autonomy: Medium (business objectives)
Stability: Medium (restructuring common)
Impact timeline: Medium (product lifecycle)
Who thrives here: Coloro che desiderano un compenso elevato, apprezzano il ritmo veloce, si sentono a proprio agio con contesto commerciale
Fai attenzione a: Percezione di conflitti di interessi, pressione per "trovare la risposta giusta", minore libertà di pubblicazione
Decision Tree: Which Path Fits You?
La storia di tre metodologi:
Doug Altman ha trascorso 40 anni a Oxford, costruendo lentamente CONSORT, PRISMA e standard di reporting: il suo impatto abbraccia decenni. David Sackett lasciò il mondo accademico per praticare la medicina basata sull'evidenza direttamente con i pazienti a Hamilton: utilità clinica immediata. Hans Rosling ha utilizzato la sua formazione in epidemiologia per creare Gapminder, raggiungendo milioni di persone con la visualizzazione dei dati.
Same training, three paths.
Altman il canyon (impatto profondo e lento), Sackett il mulino (uso clinico quotidiano), Rosling il delta (ampia portata di pubblico).
Hai sviluppato competenze nella sintesi delle prove. Scegli il tuo percorso:
The Hybrid Path: Most Common
Years 1-5: Foundation
Graduate degree (MPH, MSc, PhD). First job often academic or junior HTA role.
Years 5-10: Specialization
Develop niche expertise. May move sectors. Build publication record and network.
Years 10-15: Leadership
Ruoli senior. Spesso consulenza secondaria. Esperto invitato per linee guida.
Years 15+: Influence
Modella il campo. Scrivi i libri di testo. Formare la generazione successiva.
Most senior methodologists have worked in 2-3 sectors. Mobility is an asset.
Module 3 Quiz
Quale percorso di carriera offre in genere il compenso più elevato ma richiede comfort nel contesto commerciale?
Il percorso viene scelto. Ora, come puoi diventare visibile?
Modulo 4: Costruisci il tuo portafoglio
In a field of invisible architects, how do you become known?
A methodologist without visibility is a methodologist without impact.
Your work must speak—but first, people must hear it.
La storia dello statistico sconosciuto
In 1996, a statistician named David Moher led a group to create CONSORT—guidelines for reporting randomized trials.
He wasn't famous. He wasn't at Harvard. He was a methodologist at a Canadian research institute.
Today, CONSORT is required by 600+ journals. It's cited 35,000+ times. It's arguably saved more lives than most drugs—by ensuring we know which drugs actually work.
Moher built his reputation not through brilliance alone, but through relentless, visible contribution to a problem everyone faced.
La visibilità Stack
1. Publications
• Metodi e documenti in buone riviste
• Collaborative applied papers (methods role)
• Commenti e lettere
• Tutorial e guide pratiche
2. Tools & Resources
• Software packages (R, Stata)
• Liste di controllo e linee guida per il reporting
• Teaching materials (open access)
• Calcolatori e decisioni aiuti
3. Presence
• Conference presentations
• Workshop e formazione
• Social media (X/Twitter, LinkedIn)
• Post di blog e newsletter
4. Network
• Cochrane/Campbell involvement
• Guideline panel memberships
• Journal editorial boards
• Mentorship relationships
Il potere degli strumenti
Se riesci a risolvere un problema ricorrente e a impacchettarlo bene, il tuo impatto si moltiplica.
Publication Strategy: Quality Over Quantity
La formula del documento sui metodi
Problem: Identify a recurring methodological challenge
Solution: Propose a clear, implementable approach
Demonstration: Applicalo a dati reali o simulazioni
Accessibility: Fornisci codice, strumenti o modelli
Validation: Show it works better than status quo
Target journals: BMJ, JAMA, Annals of Internal Medicine (sezioni dei metodi), Statistics in Medicine, Research Synthesis Methods, Journal of Clinical Epidemiology
Il Moltiplicatore di Collaborazioni
Georgia Salanti non si è limitata a scrivere sulla meta-analisi di rete: ha collaborato con team clinici che avevano bisogno it.
Ogni collaborazione ha prodotto: (1) un documento applicato che risolve un problema clinico, (2) approfondimenti sui metodi per il successivo documento sui metodi, (3) un collega riconoscente che l'ha consigliata ad altri.
La sua rete è cresciuta in modo esponenziale. Ora guida uno dei gruppi di sintesi delle prove più produttivi in Europa.
Lezione: non aspettare che ti venga chiesto. Offri la tua esperienza sui metodi ai team con importanti domande cliniche.
Costruire la tua presenza online
What Works
• Sharing useful content (tutorials, explainers)
• Partecipare ai dibattiti sui metodi con rispetto
• Celebrating others' work
• Making complex ideas accessible
• Mostrare il tuo percorso di apprendimento
What Doesn't
• Self-promotion without value
• Attaccare i metodi degli altri pubblicamente
• Jargon-heavy posts
• Inconsistent presence
• Ignoring engagement
Best methodologist accounts: @EpiEllie, @statsepi, @CochraneCollab, @GRADEWorkingGrp
La storia di Rosalind Franklin:
La fotografia a raggi X di Rosalind Franklin (foto 51) è stata cruciale per scoprire la struttura del DNA. Ma pubblicava con cautela e non si autopromuoveva.
Watson e Crick videro i suoi dati, li pubblicarono per primi e vinsero il Premio Nobel. Franklin morì a 37 anni, in gran parte non accreditata.
Decenni dopo, i suoi taccuini rivelarono che mancavano settimane alla risoluzione della struttura da sola. Un lavoro brillante, condiviso troppo silenziosamente, è stato messo in ombra.
Impact requires not just discovery, but communication.
You've made a crucial discovery. What do you choose?
Module 4 Quiz
Il modo più scalabile a disposizione di un metodologo per aumentare l'impatto è:
Visibility without substance is noise. Substance without visibility is silence.
Modulo 5: Il Toolkit
Un artigiano è bravo quanto i suoi strumenti e la loro padronanza con essi.
What software do methodologists use?
What resources shape their thinking?
Statistical Software
R (Essential)
• metafor: Gold standard per meta-analisi
• netmeta: Network meta-analysis
• robvis: Risk of bias visualization
• tidyverse: Data manipulation
Free, open source, reproducible
Stata (Common)
• metan/admetan: Meta-analysis
• network: NMA
• Forte nell'analisi di sopravvivenza
• Preferred by some HTA agencies
Commercial license required
RevMan (Cochrane)
• Strumento ufficiale Cochrane
• User-friendly interface
• Limited customization
• Buono per le revisioni standard
Gratuito per le revisioni Cochrane
Python (Growing)
• PyMeta: Meta-analysis
• Integrazione ML per screening
• Text mining capabilities
• Automation scripts
Gratuito, ottimo per l'integrazione dell'intelligenza artificiale
Strumenti di revisione sistematica
Covidence
Screening, extraction, collaboration
Rayyan
AI-assisted screening, free tier
ASReview
Active learning screening
EPPI-Reviewer
Full workflow, text mining
DistillerSR
Enterprise, AI features
SysRev
Open source option
Essential Resources
Cochrane Handbook: The gold standard reference. Free online. Read chapters 6-10 closely.
Higgins & Green → Higgins et al.: Aggiornato regolarmente. Il tuo riferimento per qualsiasi domanda SR.
Borenstein et al. "Introduction to Meta-Analysis": Best statistical foundation.
Guyatt et al. JAMA Users' Guides: Clinical epidemiology essentials.
IOM "Finding What Works in Health Care": Standard per le revisioni sistematiche.
Read one chapter per week. In two years, you'll have a graduate education in methods.
Key Organizations & Networks
Cochrane
Largest SR producer. Training. Methods groups. Volunteer opportunities.
Campbell Collaboration
Social science SRs. Growing. Less competitive to join.
JBI (Joanna Briggs)
Nursing/allied health focus. Strong training program.
GRADE Working Group
Certainty assessment. Influential. Membership by invitation.
EQUATOR Network
Reporting guidelines hub. Guideline development opportunities.
HTAi
HTA professional society. Annual conference. Interest groups.
La storia della grafica di Florence Nightingale:
Florence Nightingale aveva una formazione statistica di base, molto inferiore a quella dei matematici universitari della sua epoca. Ma conosceva a fondo uno strumento: il diagramma dell'area polare.
I suoi grafici "coxcomb" mostravano che i soldati morivano più per infezioni che per ferite in battaglia. Il Parlamento, che ignorava le tabelle numeriche, capì immediatamente i suoi grafici.
Non aveva gli strumenti migliori. Ha imparato ciò che aveva e ha cambiato per sempre la medicina militare.
Disponi di dati che mostrano che i soldati muoiono per infezioni, non per ferite di battaglia. Il Parlamento deve agire. Cosa scegli?
Module 5 Quiz
Il pacchetto R più utilizzato per la meta-analisi è:
Gli strumenti vengono appresi. Ora, dove ti specializzerai?
Modulo 6: Trovare la tua nicchia
Il generalista sa qualcosa su tutto. Lo specialista sa tutto di qualcosa. Il metodologo sa quali domande porre su entrambi.
Non è possibile padroneggiare tutti i metodi.
Ma puoi diventare l'esperto mondiale di uno.
Le nicchie principali
Network Meta-Analysis
Indirect comparisons, complex interventions
Diagnostic Test Accuracy
Sensitivity/specificity, SROC curves
IPD Meta-Analysis
Individual patient data, advanced stats
Living Systematic Reviews
Continuous updating, automation
Qualitative Synthesis
Meta-ethnography, framework synthesis
Rischio di bias Strumenti
Sviluppo e validazione di strumenti
Reporting Guidelines
CONSORT, PRISMA extensions
AI/ML in Evidence Synthesis
Automation, screening, extraction
Deep Dive: Network Meta-Analysis
The problem: Policymakers need to compare 10 drugs. We have trials of A vs B, B vs C, C vs D... but not A vs D directly.
NMA solves: Borrows strength across the network to estimate all comparisons.
The opportunity: HTA agencies require NMA for reimbursement decisions. Pharma needs NMA experts. Few people truly understand it.
The barrier: Requires Bayesian statistics, graph theory, and deep understanding of transitivity. 2-3 year learning curve.
Key names: Salanti, Caldwell, Dias, Welton. Key resource: NICE DSU Technical Support Documents.
Approfondimento: AI/ML nella sintesi delle prove
The problem: Lo screening manuale di 50.000 abstract richiede mesi. L'estrazione dei dati da 200 articoli è noiosa e soggetta a errori.
AI/ML offers: Apprendimento attivo per lo screening (riduzione del carico di lavoro del 50-90%). PNL per l'estrazione dei dati. GPT per la stesura del protocollo.
The opportunity: Il campo è nuovo. Gli standard non esistono ancora. Chiunque scriva i framework di validazione modella il campo.
The barrier: Richiede sia conoscenze di machine learning che una profonda comprensione dei metodi SR. La maggior parte delle persone ML non conosce SR; la maggior parte delle persone SR non conosce il machine learning.
Key names: Marshall, Wallace, Thomas. Key tools: ASReview, RobotReviewer, Trialstreamer.
Decision Tree: Finding Your Niche
La storia di Archie Cochrane:
Archie Cochrane avrebbe potuto rimanere un medico generale. Invece, ha passato decenni a porsi una domanda: "Dove sono le prove?"
Ha sostenuto studi randomizzati quando i colleghi si fidavano dell'intuizione clinica. È stato deriso, ignorato, definito ossessivo. Quando morì nel 1988, la sua "ossessione" era diventata il fondamento della medicina basata sull'evidenza.
La Cochrane Collaboration porta il suo nome. La profonda esperienza in una domanda ha cambiato per sempre l'assistenza sanitaria.
I tuoi colleghi si affidano all'intuizione clinica piuttosto che alle sperimentazioni. Credi che le prove dovrebbero guidare la pratica. Cosa scegli?
Module 6 Quiz
Network meta-analysis is particularly valuable when:
La nicchia viene scelta. Ora impara da coloro che hanno camminato prima.
Modulo 7: Viaggi reali
Every methodologist was once a beginner who didn't quit.
How did they actually get here?
I percorsi sono raramente rettilinei.
Journey 1: The Clinician Who Asked Why
Gordon Guyatt era un internista praticante nel Anni '80. Notò che i medici esperti rilasciavano dichiarazioni sicure, ma le loro prove erano deboli.
Il punto di svolta: He coined "Evidence-Based Medicine" in 1991. But he didn't stop there. He realized clinicians needed frameworks to assess evidence quality.
The path: MD → Clinical practice → Frustration with dogma → Methodological training → GRADE working group leadership
Today: GRADE è lo standard globale per la valutazione della certezza. Utilizzato da OMS, Cochrane e oltre 100 organizzazioni.
Lesson: Clinical frustration can become methodological innovation.
Journey 2: The Statistician Who Saw Chaos
Doug Altman ha studiato statistica, non clinico. Ma quando guardava le riviste mediche, vedeva il caos statistico: test sbagliati, risultati errati, numeri impossibili.
Il punto di svolta: His 1994 "Scandal of Poor Medical Research" editorial in BMJ. He could have complained. Instead, he built solutions.
The path: Statistics degree → Medical statistics unit → Frustration with reporting → CONSORT, STROBE, PRISMA, EQUATOR Network
Today: His reporting guidelines changed scientific communication. Cited 500,000+ times across his work.
Lesson: Identify a widespread problem, then systematically solve it.
Journey 3: The Outsider Who Found a Gap
Georgia Salanti era una dottoranda in Grecia quando la meta-analisi di rete era una curiosità di nicchia. Poche persone lo hanno capito. Meno di loro potrebbero insegnarlo.
Il punto di svolta: Ha riconosciuto che l'NMA sarebbe diventata essenziale per l'HTA. Si è posizionata alla frontiera.
The path: Statistics PhD → Postdoc at Cambridge → Deep NMA focus → Own research group at Bern → CINeMA framework developer
Today: One of the most cited NMA methodologists globally. Consulted by WHO, NICE, pharmaceutical companies.
Lezione: trovare il metodo emergente di cui tutti avranno bisogno e padroneggiarlo prima di loro.
Viaggio 4: il pioniere regionale
Nel 2010, sistematica revisione dei metodi di formazione nella regione MENA era scarsa. La maggior parte dei metodologi ha ricevuto formazione in Europa o Nord America.
The pioneers: Clinicians and researchers who sought training abroad, then returned to build local capacity.
The path: Local medical degree → International methods fellowship → Return home → Establish training programs → Become regional experts
Today: Jordan, Lebanon, Iran, Saudi Arabia, Oman have growing evidence synthesis capacity. Regional Cochrane branches emerging.
Lezione: la competenza sui metodi è trasferibile. Portarlo a casa moltiplica il tuo impatto.
Common Patterns Across Journeys
They All Had...
• Una frustrazione diventata una missione
• Willingness to learn continuously
• Collaborators who believed in them
• Persistence through rejection
• Un focus che si è approfondito nel tempo
They Didn't Have...
• Perfect pedigrees
• Percorsi chiari fin dall'inizio
• Instant recognition
• Libertà dalle battute d'arresto
• All skills from day one
La storia di Ignaz Semmelweis:
Nel 1847, Ignaz Semmelweis scoprì che il lavaggio delle mani poteva ridurre la mortalità materna dal 18% al 2%. L'establishment medico lo rifiutò.
Fu licenziato, deriso e alla fine rinchiuso in un manicomio, dove morì a 47 anni. Ci vollero altri 20 anni perché la teoria dei germi lo confermasse.
Semmelweis non vide il suo impatto. Ma ogni chirurgo che fa lo scrub oggi segue la sua strada. Il fiume raggiunse il mare, dopo la sua morte.
You've discovered handwashing saves lives, but colleagues reject it. What do you choose?
Module 7 Quiz
Gordon Guyatt's path to creating GRADE began with:
Your First Job: Where to Start
Best Entry Points
• Research Assistant sulla revisione sistematica team
• Junior HTA Analyst at national/regional agencies
• Cochrane/JBI Fellow (competitive but career-defining)
• Postdoc con un metodologo affermato
What Employers Want
• Evidence of SR/MA experience (even one published)
• R or Stata proficiency
• GRADE or risk of bias training certificates
• Strong writing samples
Pro tip: Offrirsi volontario come screening in una revisione Cochrane. È una formazione gratuita e un credito per la pubblicazione.
The Reading List: Priority Order
1. Cochrane Handbook — Chapters 6-10 (free online)
2. Borenstein "Introduction to Meta-Analysis" — Statistical foundation
Then (Month 4-6):
3. Guyatt's JAMA Users' Guides — Clinical epidemiology
4. GRADE Handbook — Certainty assessment (free online)
Specialize (Month 7-12):
5. NICE DSU Technical Support Documents — For NMA
6. Ioannidis papers collection — Meta-research classics
One chapter per week = graduate-level education in 2 years.
Regional Pathway: MENA & Global South
The Challenge: Limited local training programs. Most methodologists trained abroad.
The Opportunity: Growing demand. Saudi FDA, Qatar PHCC, UAE DOH all building HTA capacity. First-mover advantage is real.
Pathway:
• Complete international training (McMaster, Oxford, JBI)
• Ritorno con certificazione e rete
• Partnership con istituzioni regionali
• Become the local expert others consult
Regional conferences: ISPE Middle East, Dubai Health Forum, Gulf HTA Network meetings.
Training Programs & Fellowships
McMaster GRADE/EBM
Gold standard. Online + in-person options.
Cochrane Training
Free online modules. Certificate tracks available.
JBI Programs
Comprehensive SR training. Strong in qualitative.
Oxford CEBM
Short courses and MSc options.
Coursera/edX
Epidemiology, Biostatistics foundations.
AHRQ EPC Fellowships
US-based. Competitive but career-defining.
Hai visto i viaggi. Ora, sei pronto per iniziare il tuo?
Final Assessment
Hai viaggiato attraverso il mondo dei metodi.
I cinque principi del metodologo
1. Il rigore non è un optional: è il fondamento della fiducia.
2. Invisible work has visible consequences.
3. Depth in one area enables breadth in impact.
4. Gli strumenti servono metodi; i metodi sono al servizio della verità.
5. Il metodologo chiede: "Cos'altro potrebbe spiegare questo?"
Final Quiz (1/5)
Doug Altman's CONSORT guidelines have been cited over:
Final Quiz (2/5)
The aprotinin case (15,000-22,000 excess deaths) illustrates:
Final Quiz (3/5)
Quando si valuta uno studio osservazionale che mostra che i bevitori di caffè hanno più malattie cardiache, la prima domanda del metodologo dovrebbe essere:
Final Quiz (4/5)
Il modo più scalabile a disposizione di un metodologo per moltiplicare il proprio impatto è:
Final Quiz (5/5)
Il percorso di carriera che in genere offre la retribuzione più alta ma richiede dimestichezza con il contesto commerciale è:
Il tuo piano d'azione di 6 mesi
Impegnati nel tuo sviluppo. Spunta ogni traguardo una volta completato:
I tuoi progressi vengono salvati automaticamente in questo browser.
Hai completato il viaggio.
Vai avanti e costruisci le basi su cui gli altri potranno poggiare.
Remember:
I metodi sono invisibili. L'impatto no.
Gli strumenti si apprendono. Il giudizio è guadagnato.
Il sentiero meno battuto è meno affollato per un motivo. Cammina comunque.