Faut-il voir le verre à moitié plein ou à moitié vide ? Une nouvelle étude réalisée par le docteur Adam Rodman, expert en médecine interne au Beth Israel Deaconess Medical Center de Boston, s’est penchée sur la manière dont les chatbots tels que ChatGPT pouvaient aider les médecins à diagnostiquer des maladies.Si ce dernier obtient lui-même d’excellents résultats, il semble que les praticiens ne profitent pas correctement de son potentiel. Faisons le point.
Dans le détail, les chercheurs de cette étude publiée dans la revue JAMA Network Open, ont rassemblé 50 médecins opérant dans des hôpitaux américains. Ils se sont penchés sur 105 cas cliniques basés sur des patients réels utilisés par des scientifiques depuis les années 90.
Des résultats troublants
Les conclusions de cette expérience sont pour le moins surprenantes. En effet, elles ont même choqué le docteur Rodman. Sans surprise, ChatGPT a obtenu un score moyen satisfaisant de 90 % dans l’établissement du diagnostic. Les médecins qui n’utilisaient pas cet outil ont obtenu une évaluation de 74 %, tandis que ceux qui recouraient à cette IA n’ont fait qu’à peine mieux : 76 %.
La question principale était donc de savoir pourquoi ces praticiens ne profitaient pas des capacités de ChatGPT ? La réponse est simple : les médecins ne faisaient pas confiance à l’IA lorsqu’elle établissait un diagnostic différent du leur. Ils s’accrochaient fermement à leur idée sans chercher à la questionner ou à la confronter à l’analyse de l’IA.
De même, les docteurs utilisaient très mal le modèle de langage d’OpenAI. Ainsi, ces derniers avaient tendance à l’employer comme un moteur de recherche en lui posant certaines questions précises sur un cas. Seule une infirme partie d’entre eux a compris qu’ils pouvaient lui demander un point de vue global sur un dossier de patient.
Un apprentissage semble donc nécessaire si l’on veut que les professionnels de santé profitent des capacités de cette technologie, même si ces derniers devront toujours conserver leur esprit critique.
Les internautes font-ils (trop ?) confiance à ChatGPT ?
Pour rappel, la confiance des utilisateurs dans les compétences de ChatGPT est au contraire étonnamment élevée. D’après une étude récente réalisée par l’Institut Life Span de l’Université du Kansas, les parents sont incapables de distinguer les réponses produites par des IA de celles produites par des docteurs humains.
De même, la majorité d’entre eux ont jugé que les textes produits par les chatbots étaient les plus fiables dans le cadre de cette expérimentation. Plus d’informations dans notre précédent article ici.
📍 Pour ne manquer aucune actualité de Presse-citron, suivez-nous sur Google Actualités et WhatsApp.
