Intelligenza artificiale: il chatbot medico di Google supera un esame medico
Pubblicato da Angelo Domeneghini in Intelligenza Artificiale - AI · 17 Luglio 2023
Tags: #IA, #AI, #chatbot, #Google
Tags: #IA, #AI, #chatbot, #Google
Intelligenza artificiale: il chatbot medico di Google supera un esame medico
Google ha presentato a dicembre il suo strumento di intelligenza artificiale dedicato alle questioni mediche, chiamato Med-PaLM. Riuscì a superare la visita medica negli Stati Uniti.
Google non ha aperto al pubblico il suo strumento di intelligenza artificiale Med-PaLM.
Il chatbot medico di intelligenza artificiale di Google ha superato l'esame medico negli Stati Uniti, ma i suoi risultati sono ancora inferiori a quelli degli umani, afferma uno studio pubblicato mercoledì su "Nature".
L'anno scorso, il rilascio di ChatGPT, il cui sviluppatore OpenAI è supportato dal rivale di Google Microsoft, ha scatenato una gara tra i giganti della tecnologia nel fiorente campo dell'intelligenza artificiale.
L'assistenza sanitaria è un settore in cui la tecnologia ha già mostrato progressi tangibili, con alcuni algoritmi che si sono dimostrati in grado di leggere le scansioni mediche meglio degli umani. Google aveva svelato il suo strumento di intelligenza artificiale dedicato alle questioni mediche, chiamato Med-PaLM, in un articolo pre-pubblicazione a dicembre.
A differenza di ChatGPT, non è stato rilasciato al pubblico in generale.
Risultati “incoraggianti”.
Google afferma che Med-PaLM è stato il primo modello di linguaggio di grandi dimensioni, una tecnica di intelligenza artificiale addestrata su grandi quantità di testo generato dall'uomo, a superare l'USMLE (US Medical Licensing Examination).
Il superamento di questo esame consente di esercitare la professione medica negli Stati Uniti. Per raggiungere questo obiettivo, è necessario ottenere un punteggio di circa il 60%. A febbraio, uno studio ha rivelato che ChatGPT si è comportato abbastanza bene durante l'esame.
In un nuovo studio peer-reviewed pubblicato mercoledì sulla rivista Nature, i ricercatori di Google hanno affermato che Med-PaLM ha ottenuto un punteggio del 67,6% quando ha risposto a domande a scelta multipla in stile USMLE.
Questi risultati sono "incoraggianti, ma comunque inferiori a quelli degli esseri umani", afferma lo studio.
Ridurre le "allucinazioni"
Per identificare e ridurre le cosiddette "allucinazioni" - la parola per una risposta ovviamente sbagliata offerta da un modello di intelligenza artificiale - Google ha affermato di aver sviluppato un nuovo benchmark. Karan Singhal, ricercatore di Google e autore principale del nuovo studio, ha dichiarato ad AFP che il suo team ha testato una versione più recente del modello.
Secondo quanto riferito, Med-PaLM 2 ha ottenuto l'86,5% all'esame USMLE, superando la versione precedente di quasi il 20%, secondo uno studio pubblicato a maggio che non è stato sottoposto a revisione paritaria. Secondo il "Wall Street Journal", Med-PaLM 2 è in fase di test presso il prestigioso ospedale di ricerca americano Mayo Clinic da aprile.
Qualsiasi test eseguito con Med-PaLM 2 non sarà "clinico, rivolto al paziente o suscettibile di danneggiare i pazienti", ha assicurato Karan Singhal.
Invece, il modello sarà testato per "compiti amministrativi che possono essere automatizzati in modo relativamente semplice, con una posta in gioco bassa", ha aggiunto.