L'IA che ha imparato senza vedere i dati di nessuno

L'IA che ha imparato senza vedere i dati di nessuno

Un modello di intelligenza artificiale allenato in 20 ospedali senza utilizzare un solo documento medico è riuscito a prevedere la necessità di ossigeno dei pazienti COVID con una precisione superiore del 16% rispetto ai metodi tradizionali.

Lucía NavarroLucía Navarro17 marzo 20267 min
Condividi

Il problema che nessun ospedale poteva risolvere da solo

Durante i mesi più critici della pandemia, gli ospedali di tutto il mondo affrontavano la stessa contraddizione operativa: avevano dati sufficienti per allenare modelli di intelligenza artificiale per prevedere quali pazienti avrebbero avuto un aggravamento, ma non potevano condividerli. HIPAA negli Stati Uniti, GDPR in Europa e regolamenti equivalenti in decine di paesi rendevano ogni trasferimento di file un rischio legale con potenziali responsabilità per decine di milioni di dollari. Il risultato è stata una frammentazione assurda: ogni istituzione allenava i propri modelli con campioni ristretti, creando strumenti che funzionarono bene all'interno delle loro mura ma collassavano a pochi metri di distanza.

EXAM – il modello sviluppato in modo collaborativo tra 20 ospedali – ha affrontato questa contraddizione dalla sua architettura. Non ha richiesto i dati. Ha richiesto qualcosa di più intelligente: le lezioni che quei dati avevano generato.

Utilizzando l'apprendimento federato, ogni ospedale ha allenato il modello localmente sulle proprie radiografie toraciche e sulla storia clinica, condividendo solo gli aggiornamenti matematici del modello, non i registri dei pazienti. Il modello globale ha assorbito l'apprendimento distribuito da 20 fonti distinte senza che alcun dato oltrepassasse i confini istituzionali. Il risultato è stato un aumento del 16% in precisione e del 38% in generalizzazione rispetto ai modelli allenati in modo centralizzato con insiemi di dati omogenei. Questa differenza non è statisticamente marginale: nel triage delle cure intensive, ogni punto percentuale di precisione ha un nome e un cognome.

Perché la generalizzazione conta di più della precisione locale

L'indicatore che più mi interessa di EXAM non è il 16% di miglioramento in precisione. È il 38% di miglioramento in generalizzazione. Qui si trova l'argomento strategico che la maggior parte delle analisi di questo strumento trascura.

Un modello di IA in salute che funziona bene nell'ospedale dove è stato addestrato ma fallisce in un altro centro ha un valore commerciale vicino a zero al di fuori di quel contesto. È, in termini pratici, un asset non trasferibile. Quando il NYU Langone ha sviluppato il proprio modello con 5.200 radiografie e ha raggiunto fino all'80% di precisione nella previsione dell'aggravamento severo del COVID-19, ha costruito un potente strumento per NYU Langone. La domanda rimasta senza risposta è quanto di quella performance sopravviva al cambiamento della demografia del paziente, del protocollo di imaging o dell'attrezzatura radiologica.

EXAM, essendo stato addestrato simultaneamente sulla eterogeneità di 20 istituzioni diverse con popolazioni diverse, costruisce un modello che ha già visto variabilità. Non ha bisogno di generalizzarla in seguito perché l'ha ingoiata durante l'addestramento. Questo ha un impatto diretto per qualsiasi ospedale che stia valutando l'adozione di strumenti di questo tipo: un modello con il 38% di maggiore generalizzazione riduce sostanzialmente il costo di riaddestramento locale, che in progetti di IA medica può rappresentare tra il 30% e il 60% del budget di implementazione.

L'architettura federata non è solo un meccanismo di privacy. È un meccanismo di riduzione dei costi variabili per ogni nodo partecipante.

L'economia della collaborazione senza fiducia

Ciò che EXAM ha costruito è, in termini di struttura di incentivi, qualcosa che l'industria farmaceutica sta cercando di realizzare da decenni senza successo: collaborazione competitiva senza cessione di asset strategici. Ogni ospedale ha ceduto l'apprendimento ma ha mantenuto i dati, che sono la materia prima proprietaria che sostiene la propria posizione in futuri modelli.

Questa architettura risolve un problema di governance che ha paralizzato decine di iniziative simili. Gli ospedali universitari non condividono dati clinici con istituzioni concorrenti, non perché siano organizzazioni maligne, ma perché i dati dei pazienti sono simultaneamente un attivo regolato, un attivo di ricerca e un passivo legale. Qualsiasi modello di collaborazione che richieda di cedere tale attivo affronta una barriera istituzionale che nessun contratto di buona volontà può superare.

L'apprendimento federato elimina questa barriera. E, eliminandola, apre la possibilità di costruire modelli su scala globale basati su dati che altrimenti rimarrebbero in silos perpetui. Il Massachusetts General Hospital ha sviluppato il proprio sistema di punteggio della gravità polmonare pre-addestrato su oltre 224.000 radiografie dal dataset CheXpert di Stanford, perfezionato su 314 casi COVID. Uno sforzo considerevole di ingegneria dei dati per un campione che, nel contesto di EXAM, sarebbe stato un nodo in più nella rete.

La differenza di scala non è solo tecnica. È una differenza nel tipo di domande a cui ogni modello può rispondere in modo affidabile. I modelli addestrati su decine di migliaia di radiografie di una sola fonte rispondono bene a domande su quella fonte. I modelli addestrati sulla eterogeneità di 20 sistemi ospedalieri diversi rispondono a domande sulla condizione umana in generale.

Una meta-analisi di nove studi su IA applicata alle radiografie toraciche per il COVID-19 ha riportato un'area sotto la curva di 0.98, un numero che in qualsiasi altro contesto diagnostico sarebbe straordinario. La stessa analisi segnala che solo il 22% degli studi esaminati ha utilizzato validazione esterna. Quel restante 78% ha costruito strumenti che nessuno ha testato al di fuori del contesto in cui sono nati.

Il modello che il settore sanitario deve copiare

C'è uno schema strutturale in come la digitalizzazione della salute tende a fallire che EXAM interrompe direttamente. L'inerzia abituale genera un'industria in cui ogni grande centro ospedaliero sviluppa il proprio strumento di IA, generalmente con finanziamenti di ricerca non recuperabili, senza architettura di monetizzazione e con scarsa capacità di manutenzione post-pubblicazione. Il risultato è un cimitero di modelli accademicamente solidi ma operativamente morti.

L'architettura federata apre una logica diversa. Un consorzio di ospedali che condivide aggiornamenti di modello —non dati— può mantenere un attivo collettivo il cui costo di manutenzione si distribuisce tra tutti i partecipanti mentre il beneficio scala con ogni nodo aggiuntivo. Questo è un modello di costi con proprietà molto diverse rispetto allo sviluppo proprietario isolato.

Per i dirigenti del settore sanitario che valutano investimenti in IA clinica, la domanda operativa non è se adottare questi strumenti. È se la loro istituzione sta progettando questi strumenti per rimanere intrappolata all'interno delle proprie mura o per diventare più accurata con ogni nuovo partner che si unisce alla rete. Un modello che migliora nel tempo senza compromettere la privacy del paziente non è solo un vantaggio tecnologico; è l'unica architettura finanziariamente sostenibile per l'IA medica a lungo termine.

I leader che oggi prendono decisioni su architettura tecnologica in sanità stanno scegliendo tra costruire asset che si svalutano in isolamento o costruire asset che si apprezzano con la collaborazione. L'evidenza di EXAM è che la seconda opzione rende di più, costa meno da mantenere e non richiede di sacrificare alcun asset sensibile per realizzarlo. Questa è l'audit che ogni livello dirigenziale del settore dovrebbe effettuare prima di firmare il prossimo contratto di IA: se il loro modello di investimento tecnologico utilizza i dati dei pazienti come materia prima estrattiva che rimane intrappolata, o ha l'architettura per convertire quella stessa informazione in combustibile che eleva la capacità diagnostica di tutta la rete che li circonda.

Condividi
0 voti
Vota per questo articolo!

Commenti

...

Potrebbe interessarti anche