Note operative Osservatorio

Come si misura se un sistema ha funzionato davvero

6 min di lettura

Primo piano del quadrante di un orologio da parete con un secondo strumento a lancetta al suo interno, in bianco e nero
Sullo stesso quadrante convivono due misure diverse. Sceglierne una è già metà del risultato.

Il 26 luglio 2026 la Health Foundation — fondazione indipendente britannica di ricerca sui servizi sanitari — ha pubblicato un’analisi descrittiva sul rapporto fra l’adozione di OPTICA e i ritardi nelle dimissioni dagli ospedali inglesi, con la lettera inviata il 22 luglio dalla sua amministratrice delegata, Jennifer Dixon, al direttore generale dell’Office for Statistics Regulation, Ed Humpherson. Lo stesso 22 luglio l’OSR — regolatore britannico delle statistiche ufficiali — chiudeva con una dichiarazione pubblica l’istruttoria sulle metriche di performance che NHS England ricava dalla Federated Data Platform.

Due fatti distinti: una misura di esito che non conferma il beneficio atteso, e un regolatore che chiede cautela nel modo in cui i benefici si dichiarano. Insieme spiegano come si verifica se un sistema del genere ha funzionato — e riguarda anche noi, che facciamo lo stesso mestiere.

Una precisazione che i titoli saltano: OPTICA (Optimised Patient Tracking & Intelligent Choices Application) è, sulle pagine di NHS England, un prodotto «commissionato a livello nazionale e sviluppato localmente», realizzato da North of England Care System Support (NECS) per la pianificazione delle dimissioni; gira sulla Federated Data Platform, la piattaforma il cui fornitore è Palantir.

Che cosa è stato misurato, e con quale disegno

Nel sistema inglese il «ritardo nella dimissione» è una rilevazione: ogni giorno gli ospedali comunicano, negli Acute Discharge Situation Reports, quanti pazienti restano ricoverati pur essendo stati dichiarati clinicamente pronti a uscire. Su quella base si costruiscono metriche diverse: è lì che si gioca tutto.

NHS England pubblica la variazione percentuale della media dei «giorni di ritardo» per coorti di degenza, confrontando i dodici mesi prima dell’adozione con i dodici successivi. Al 31 marzo 2026 il sito riporta 25 ospedali che ne traggono benefici e un calo del 13,58% oltre i 7 giorni di degenza e del 15,25% oltre i 21.

La Health Foundation ha misurato un’altra grandezza: per ogni ospedale e per ogni mese, la mediana giornaliera dei pazienti pronti e non dimessi, divisa per i posti letto occupati — la quota di letti tenuta da chi potrebbe già essere altrove. Periodo 1° dicembre 2021 – 31 maggio 2026; 25 ospedali adottanti e 91 non adottanti, con dodici mesi di dati prima e dopo per 21 dei 25; nomi e date di adozione forniti da NHS England stessa.

Risultato: nessuna differenza rilevante fra chi ha adottato e chi no, né nei livelli né nell’andamento. Nei 21 ospedali con serie completa la quota scende da circa il 14,5% un anno prima dell’adozione al 12,5% quattro mesi dopo, risale a circa il 14% al nono mese e torna a calare: il miglioramento graduale era già in corso prima e prosegue allo stesso ritmo. Del caso di studio citato da NHS England — un ospedale del Nord-Est con un calo del 37% dei giorni di ritardo per le lunghe degenze — l’analisi dichiara di non riuscire a replicare il valore dai dati pubblici: trova 3.575 giorni medi al mese fra febbraio e novembre 2023 contro 3.725 a gennaio-febbraio 2024, cioè +4,2%.

Che cosa l’analisi non dice

Il documento è descrittivo e lo dichiara: una valutazione causale «richiederebbe dati aggiuntivi ed è fuori dal perimetro» del lavoro. Non attribuisce cause né giudica la qualità del software. La lettera di trasmissione è esplicita: «Questa non è una critica a OPTICA — potrebbe benissimo essere uno strumento utile, apprezzato dal personale che lo usa». E chiude con l’ipotesi più interessante: lo strumento potrebbe agire su un fattore — la comunicazione fra operatori — mentre altri, come la capacità dell’assistenza territoriale, ne limitano l’effetto sull’indicatore finale.

Il regolatore non ha giudicato il software

L’OSR entra nel merito delle frasi, non della tecnologia. Ricostruisce che il 6 giugno 2026 NHS England ha aggiunto alla pagina metodologica, in tutte le sezioni fondate su confronti prima/dopo, l’avvertenza «non possiamo quindi trarre conclusioni su causa ed effetto, perché altre variabili non sono state controllate»: la definisce «benvenuta» e registra gli impegni assunti — stessa avvertenza sulla pagina principale dei benefici, etichettatura esplicita dei confronti prima/dopo in ogni comunicazione pubblica, valutazione accademica indipendente affidata all’Imperial College con i ricercatori della Health Foundation invitati a contribuire, pubblicazione dei dati disaggregati per ospedale, chiarimento che i casi di studio li scrivono le organizzazioni che usano la piattaforma, non NHS England. E si attende che le cifre citate da ministri o in note ufficiali siano comunicate «in modo chiaro e accurato».

La domanda che quasi nessuno pone

Fra «lo strumento non funziona» e «l’organizzazione non ha cambiato ciò che il dato suggeriva» la differenza è enorme, e i dati pubblici non permettono di distinguerle. Quel che segue non descrive nessuna organizzazione reale: sono schemi ricorrenti, dichiarati per tali.

  • Linea di base non concordata prima. Se il punto di partenza si ricostruisce a posteriori, la finestra di confronto diventa una scelta, e ogni scelta dà un numero diverso. Va registrata e datata prima dell’avvio, con il criterio per cui il sistema si dirà «adottato».
  • Esito dedotto dal contratto invece che dal reparto. L’indicatore va scelto con chi userà lo strumento. Un capitolato chiede «riduzione dei ritardi»; il reparto sa se il collo di bottiglia è la comunicazione interna o un posto che manca fuori dall’ospedale: due misure diverse.
  • Previsione corretta che non sposta nulla. Un sistema può individuare in anticipo, e bene, chi si bloccherà. Se a valle nessun processo cambia — nessuno che riconvochi, riallochi, prenoti — l’indicatore resta identico: il modello ha ragione e il numero non si muove.
  • Un numero senza contesto non è una prova. Il confronto prima/dopo su chi ha adottato descrive un andamento; solo il confronto con chi non ha adottato separa l’effetto dallo sfondo.

Le posizioni

La Health Foundation ha pubblicato analisi e lettera, copiate alla presidenza della commissione parlamentare competente e all’amministratore delegato di NHS England. NHS England ha aggiunto l’avvertenza, mantiene online cifre e metodologia e ha assunto gli impegni elencati dall’OSR. Alla data di questo articolo non risulta pubblica una replica specifica all’analisi del 26 luglio da parte di NHS England, Palantir, NECS o dell’ospedale del caso di studio.

Il punto.

Nessuno dei due documenti dimostra che lo strumento sia inutile, né il contrario: dimostrano che il beneficio dichiarato non è stato verificato con un disegno capace di reggerlo. È una lezione sul metodo, non sul prodotto, e vale identica per noi. Un fornitore serio accetta tre condizioni prima della firma: esito scelto insieme a chi lavorerà con il sistema, linea di base registrata e datata prima dell’avvio, misura finale affidata a un terzo. Se non stanno per iscritto, restano invendibili come prova.

Sul resto stiamo su ciò che sappiamo garantire: due modalità, e solo due. On-premise, con l’AI installata nell’ambiente del cliente, oppure su un cloud dedicato riservato al singolo cliente, con VPN dedicata, data center in Italia e locali presidiati direttamente da noi. È la parte architetturale: come è costruita, che cosa significa in sanità e la catena che assegna un appuntamento, già smontata pezzo per pezzo.

Se state per avviare un sistema e non avete ancora fissato l’esito da misurare, parliamone in una sessione di trenta minuti: si comincia dalla linea di base.

Fonti