Analyse de cas cliniques

Des LLM plus précis qu’un étudiant en médecine mais moins que des radiologues juniors

icon réservé aux abonnésArticle réservé aux abonnés
Le 03/02/25 à 7:00

Les auteurs de l’étude ont par conséquent constaté que GPT-4o était le plus précis des LLM, avec une précision de 59,6, surpassant un étudiant en médecine, mais n'a pas surpassé les professeurs juniors ou le radiologue en formation. (Photo d'illustration).

Les grands modèles de langage multimodaux (LLM), capables de traiter des données textuelles et visuelles, sont de plus en plus expérimentés dans le domaine de la radiologie. Dans une étude parue dans la revue Radiology, des chercheurs de l’Université Yonsei de Séoul, en Corée du Sud, ont évalué la précision de plusieurs d'entre eux face à celle de lecteurs humains, ayant différents niveaux d’expérience, dans des cas cliniques issus d'articles de la revue New England Journal of Medicine (NEJM), publiés de 2005 à 2024.

272 cas test avec des données textuelles et visuelles

Les LLM, dont GPT-4V, GPT-4 Omni (GPT-4o), DeepMind Gemini 1.5 Pro et Claude 3, ont été mis à l'épreuve sur 272 cas, avec des données textuelles et visuelles. Le groupe de lecteurs humains incluait sept radiologues juniors, deux cliniciens, un radiologue en formation et un étudiant en médecine, en aveugle face aux réponses publiées.

GPT-4o plus précis qu’un étudiant en médecine

Premier constat : GPT-4o était le plus

Il vous reste 49% de l’article à lire

Docteur Imago réserve cet article à ses abonnés

S'abonner à l'édition
  • Tous les contenus « abonnés » en illimité
  • Le journal numérique en avant-première
  • Newsletters exclusives, club abonnés

Abonnez-vous !

Docteur Imago en illimité sur desktop, tablette, smartphone, une offre 100% numérique

Offre mensuelle 100 % numérique

23 €

par mois

S’abonner à Docteur Imago

Auteurs

Solenn Duplessy

Voir la fiche de l’auteur

Bibliographie

    Suh PS, Shim WH, Suh CH, et al (2024) Comparing Large Language Model and Human Reader Accuracy with New England Journal of Medicine Image Challenge Case Image Inputs. Radiology 313:e241668. https://doi.org/10.1148/radiol.241668

Mots-clés

intelligence artificielle ChatGPT

Discussion

Aucun commentaire

Laisser un commentaire

Sur le même thème

Dans le dossier

L’intelligence artificielle en langage naturel

Voir le dossier

Le fil Docteur Imago

26 Fév

15:23

Une revue narrative analyse l’état actuel de l’intelligence artificielle en neuroradiologie pédiatrique et fœtale, en mettant en évidence ses performances prometteuses en segmentation, détection, classification et pronostic, notamment grâce à l’apprentissage profond. Malgré ces avancées, son adoption clinique demeure limitée en raison de coûts élevés, du manque de grandes bases de données pédiatriques et de défis éthiques et réglementaires, nécessitant des efforts collaboratifs pour favoriser son intégration sécurisée.  
25 Fév

14:00

Un collectif d'hommes étudiants ou professionnels en santé a publié le 17 février une tribune dans le journal Le Monde pour « dénoncer publiquement le sexisme systémique dans le monde médical hospitalier et universitaire », à la faveur d'une enquête du conseil national de l'ordre des médecins publiée en novembre dernier qui évaluait dans une enquête que 49 % des femmes médecins actives répondantes déclaraient avoir subi des violences sexistes et sexuelles perpétrées par un autre médecin (contre 3% des hommes médecins actifs répondants).
26 Fév

13:16

La société allemande BioNTech a annoncé le développement d'un vaccin thérapeutique personnalisé à base d'ARN messager destiné aux patientes atteintes d'un cancer du sein triple négatif à un stade précoce. Un essai expérimental a été publié le 18 février dans la revue Nature, offrant des informations essentielles pour les thérapies futures.

7:11

Dans une étude publiée dans la revue Alzheimer Association, la TEP ont révélé que des niveaux plus élevés de protéine tau cérébrale sont associés à un déclin cognitif plus rapide chez les femmes atteintes de la maladie d’Alzheimer que chez les hommes.

7:00

25 Fév

16:52

Selon une étude publiée dans la revue Journal of the American College of Radiology, l'intelligence artificielle permet d'augmenter le taux de détection des cancers de 22 % et le taux de détection des cancers invasifs de 26 %.
✕
Docteur Imago

GRATUIT
VOIR