Diagnosi mediche: ChatGPT-4 batte i dottori ma non riesce ad aiutarli

Un recente studio pubblicato su JAMA Network Open ha rivelato risultati piuttosto interessanti sull'utilizzo dell'intelligenza artificiale in ambito medico, in particolare nella diagnosi delle patologie. La ricerca, che ha coinvolto 50 medici tra specializzandi e strutturati di diversi sistemi ospedalieri americani, ha dimostrato come ChatGPT-4 sia stato in grado di superare le abilità diagnostiche dei medici stessi.

Il chatbot di OpenAI ha ottenuto un punteggio medio del 90% nella diagnosi di condizioni mediche basate su casi clinici, mentre i medici che hanno utilizzato il supporto dell'IA hanno raggiunto il 76% e quelli che non lo hanno utilizzato il 74%.

La sperimentazione si è basata su sei casi clinici reali, mai pubblicati in precedenza, facenti parte di un set di 105 casi utilizzati dai ricercatori fin dagli anni '90. Questo ha garantito che ChatGPT non fosse stato precedentemente addestrato su questi specifici casi.

Lo studio ha evidenziato due problematiche principali nell'utilizzo dell'IA da parte dei medici. In primo luogo, molti professionisti hanno mostrato una certa resistenza ad accettare le diagnosi suggerite dal chatbot quando queste differivano dalle loro conclusioni. In secondo luogo, è emerso che la maggior parte dei medici non sa sfruttare appieno le potenzialità degli strumenti di IA.

Il Dr. Adam Rodman, esperto di medicina interna presso il Beth Israel Deaconess Medical Center di Boston, suggerisce che i sistemi di IA dovrebbero fungere da "estensioni del medico", offrendo preziose seconde opinioni sulle diagnosi. Tuttavia lo studio ha mostrato come sia necessario un percorso di "alfabetizzazione all'IA" prima che questo potenziale possa essere pienamente realizzato.

Ad esempio solo una piccola parte dei professionisti ha compreso che era possibile sottoporre al chatbot l'intera storia clinica per ottenere una risposta completa e articolata, mentre la maggioranza ha utilizzato l'IA come un semplice motore di ricerca per domande specifiche.

Gli autori dello studio evidenziano comunque che esso presenta alcune limitazioni: anzitutto l'indagine si è focalizzata su un singolo LLM, data la sua disponibilità commerciale e l'integrazione nella pratica clinica. Inoltre partecipanti è stato concesso l'accesso al chatbot senza una formazione esplicita sulle tecniche di progettazione rapida che avrebbero potuto migliorare la qualità delle loro interazioni con il sistema.