La nouvelle version de ChatGPT a répondu correctement à des questions d’examen de comité de radiologie

Dans une étude prospective exploratoire présentée dans la revue Radiology, des chercheurs de l’université de Toronto, au Canada, ont évalué la performance de la dernière version du modèle d’intelligence artificielle ChatGPT sur des questions d’examen de type « comité de radiologie » sans images [1]. Les résultats ont mis en évidence le potentiel de ce logiciel de traitement du langage naturel en radiologie, pré-entraîné sur de grandes quantités de données mais sans aucune formation préalable supplémentaire spécifique à l’imagerie.

150 questions

Dans cette étude réalisée de février à mars 2023, les chercheurs ont testé la version la plus couramment utilisée de ChatGPT, basée sur GPT-3.5, afin d’évaluer sa performance face à des questions de type « examen du comité de radiologie ». 150 questions à choix multiples ont été incluses. Au moins 10 % provenaient de chacune des neuf catégories énumérées par le Collège royal du Canada et comprenaient également des sujets abordés lors des examens d