Il prossimoProssima guida
ChatGPT per i Farmacisti
Applicazioni
GUIDA alle applicazioni
Modelli linguistici di grandi dimensioni come GPT-4 possono produrre elenchi di diagnosi differenziali plausibili dalla descrizione di un caso e negli studi pubblicati spesso includono la diagnosi corretta.
Ascolta questa guidaNarrato dall'IA · ~3 min
Non sono dispositivi diagnostici validati. Il loro utilizzo più sicuro è come un brainstorming strutturato di seconda opinione che un medico confronta con il paziente e i medici che ne comprendono sia i punti di forza che le modalità di fallimento ne ottengono il massimo.
Gran parte delle prove provengono da vignette di casi. In una lettera di ricerca JAMA del 2023, Kanjee e colleghi hanno testato GPT-4 su 70 casi difficili delle conferenze clinicopatologiche del New England Journal of Medicine. La diagnosi finale è apparsa nel differenziale del modello in circa il 64% dei casi ed è stata la diagnosi principale in circa il 39%. Uno studio randomizzato di Goh e colleghi, pubblicato su JAMA Network Open nel 2024, ha fornito a 50 medici GPT-4 più le solite risorse o solo le solite risorse per casi diagnostici strutturati. L'accesso a GPT-4 non ha migliorato significativamente i punteggi del ragionamento diagnostico dei medici. GPT-4 che lavorava da solo, tuttavia, ha ottenuto punteggi sostanzialmente più alti rispetto ai medici che hanno utilizzato solo le risorse abituali. Un'interpretazione è che i medici non sapevano come utilizzare bene lo strumento o non si fidavano di esso quando non era d'accordo con loro. Sistemi di ricerca come AMIE di Google sono stati testati anche sul dialogo diagnostico e sulla generazione differenziale, con ottimi risultati in studi controllati. Questi risultati necessitano di un’attenta lettura. Le serie di casi pubblicate potrebbero trovarsi nei dati di training di un modello. Le vignette arrivano già ripulite, con i risultati rilevanti scelti e riassunti, mentre i pazienti reali portano informazioni incomplete, contraddittorie e non dichiarate. Il punteggio "diagnosi corretta da qualche parte nell'elenco" premia elenchi lunghi, che possono richiedere test aggiuntivi. L’idea sbagliata comune è che l’accuratezza del benchmark equivalga all’accuratezza del posto letto. Non è così. Le modalità di fallimento note includono ragionamenti fiduciosi ma sbagliati, riferimenti inventati o soglie di laboratorio, ancoraggio a qualsiasi diagnosi a cui l'utente accenna, ponderazione eccessiva delle presentazioni comuni dei libri di testo e mancanza di condizioni critiche in termini di tempo quando la descrizione tralascia i segni vitali. La privacy è una questione separata. L'inserimento di informazioni identificabili sul paziente in un chatbot di consumo senza un contratto di società in affari può violare l'HIPAA, pertanto i medici dovrebbero utilizzare gli strumenti approvati dalla loro organizzazione.
Un ospedaliero digita un riepilogo anonimo di febbre, eruzione cutanea, eosinofilia e un nuovo anticonvulsivante nello strumento di intelligenza artificiale approvato dal suo sistema sanitario e richiede diagnosi imperdibili. DRESS appare nell'elenco e lei esamina la sequenza temporale dei farmaci.
Un residente chiede al modello quali risultati distinguerebbero meglio le sue tre principali diagnosi di dispnea acuta, quindi utilizza la risposta per pianificare un esame e test mirati, non per stabilire una diagnosi.
Un medico di base che sospetta una malattia virale chiede alla modella di argomentare contro la sua diagnosi principale ed elencare cosa potrebbe perdere. Questo è un controllo deliberato sull'ancoraggio.
Un medico ottiene due elenchi diversi dopo aver posto la stessa domanda due volte con una formulazione leggermente diversa e lo considera un segno che l'ordinamento del modello non è una stima della probabilità.
L’intelligenza artificiale diagnostica si sta spostando da chatbot generali verso strumenti integrati nelle cartelle cliniche elettroniche e nelle piattaforme di prova, dove possono vedere dati strutturati e citare fonti. Ciò potrebbe ridurre alcuni errori, ma aggiunge il rischio che i medici si rimandino a un suggerimento fiducioso. Il processo Goh mette in luce la questione aperta: come i medici e i modelli dovrebbero lavorare insieme, non solo quanto sia accurato il modello da solo. Gli studi prospettici con pazienti reali e risultati reali sono ancora scarsi rispetto ai benchmark vignette. Finché non ne esisteranno altri, la posizione difendibile è che questi strumenti possono ampliare il differenziale e sollecitare una riconsiderazione. Il clinico possiede ancora la diagnosi.
Newsletter gratuita
Tre storie verificate sull'IA ogni mattina nei giorni feriali, scritte in un inglese semplice. Gratuito per sempre, senza pubblicità.
Un'email ogni giorno feriale. Disiscriviti con un clic. Non vendiamo né condividiamo mai il tuo indirizzo.
Mettiti alla prova
Feedback immediato su ogni risposta e un certificato condivisibile con un ID verificabile una volta superato un corso.
Sostieni l'istruzione gratuita sull'IA. AI Understanding è un'organizzazione non profit 501(c)(3) — nessun annuncio, nessun paywall, mai. Fai una donazione
Modelli linguistici di grandi dimensioni come GPT-4 possono produrre elenchi di diagnosi differenziali plausibili dalla descrizione di un caso e negli studi pubblicati spesso includono la diagnosi corretta. Non sono dispositivi diagnostici validati. Il loro utilizzo più sicuro è come un brainstorming strutturato di seconda opinione che un medico confronta con il paziente e i medici che ne comprendono sia i punti di forza che le modalità di fallimento ne ottengono il massimo.
La diagnosi finale era differenziale in circa il 64% dei casi ed era la diagnosi migliore in circa il 39%.
I medici con GPT-4 non hanno sovraperformato significativamente i medici con risorse abituali, ma il modello da solo ha ottenuto punteggi più alti. Ciò indica il modo in cui le persone utilizzano lo strumento.
I risultati pre-organizzati e la possibile contaminazione dei dati di formazione rendono entrambi le vignette più facili rispetto agli incontri reali e disordinati.
Models tend to agree with the framing they are given, so hinting at a diagnosis pulls the differential toward it.
A longer list is more likely to contain the answer, but long differentials in practice can lead to extra and unnecessary workups.
Continua a imparare
Altre guide selezionate per questo argomento
Il prossimoProssima guida
ChatGPT per i Farmacisti
Applicazioni