Une récente Rapports scientifiques L’étude a examiné la compétence de ChatGPT pour répondre aux questions liées au cancer colorectal (CRC).
Étude: Évaluation de l’IA en médecine : une analyse comparative des réponses des experts et de ChatGPT aux questions sur le cancer colorectal. Crédit d’image : Miha Creative/Shutterstock.com
Sommaire
Arrière-plan
À l’échelle mondiale, le CCR est l’une des principales causes de décès par cancer. Malgré les progrès réalisés dans le domaine de la médecine, les taux de survie des patients atteints de CCR sont faibles.
Pour réduire les taux de mortalité associés au CCR, il est impératif de diagnostiquer la maladie à un stade précoce et de fournir un traitement et des soins complets.
L’un des principaux facteurs entravant la détection précoce du CCR est le manque de sensibilisation aux symptômes du CCR. De nombreux patients négligent les signes critiques du CCR en raison du manque de connaissances accessibles, ce qui retarde leur possibilité de demander l’aide d’un médecin en temps opportun.
Il convient également de noter que de nombreuses informations en ligne concernant le CRC sont trompeuses. La plupart des ressources évaluées par des pairs, telles que UpToDate et MSD Manuals, sont conçues pour les professionnels de la santé et non pour le grand public.
Il est important de développer une plateforme fiable que les patients peuvent utiliser facilement pour obtenir des informations fiables sur les maladies. Ces plateformes doivent offrir des informations médicales facilement compréhensibles et fournir des conseils essentiels sur le moment où consulter un médecin.
ChatGPT est un système d’IA gratuit basé sur l’apprentissage en profondeur et les grands modèles de langage (LLM). Étant donné que ChatGPT répond à un large éventail de demandes, il peut être appliqué à de nombreux domaines, y compris les soins de santé.
Cette technologie peut être utilisée pour sensibiliser le grand public à différentes maladies. Par conséquent, cette plateforme basée sur l’IA peut permettre aux patients de prendre des décisions éclairées en matière de santé. Par la suite, cette technologie peut conduire à un diagnostic précoce de la maladie et à de meilleurs résultats thérapeutiques.
À propos de l’étude
De nombreuses études ont indiqué l’efficacité de ChatGPT en médecine, mais d’autres sont nécessaires pour évaluer son exactitude. À cet effet, la présente étude a examiné les compétences de ChatGPT en matière de diagnostic et de traitement du CCR.
Un livre sur « Cancer colorectal : réponses à vos questions » publié en Chine a été consulté pour évaluer l’exactitude de ChatGPT, c’est-à-dire la version GPT-3.5, concernant les réponses aux questions sur le CRC.
Un total de 131 questions couvrant différents aspects du CCR, tels que la gestion chirurgicale, la radiothérapie, les traitements de médecine interne, les soins des stomies, les traitements interventionnels, le contrôle de la douleur et les soins des veines profondes, ont été posées à ChatGPT.
Pour tester l’exactitude de ChatGPT, des experts ont déjà répondu aux questions du test. La réponse de ChatGPT à chaque question a été évaluée et notée par des médecins cliniciens spécialisés dans le CCR.
Résultats de l’étude
La reproductibilité des résultats de ChatGPT a été examinée, indiquant un niveau élevé d’uniformité en termes d’exactitude et d’exhaustivité. La reproductibilité constante de la réponse de ChatGPT indique la fiabilité de ce système dans la fourniture d’informations médicales précises.
Bien que ChatGPT indique un degré de précision prometteur, il manque d’exhaustivité. Cette lacune de ChatGPT pourrait être liée à la formation du modèle d’IA avec des données larges et non spécifiques.
Par conséquent, la mise à jour des modèles d’IA comme ChatGPT avec des données spécifiques ou spécialisées améliorerait considérablement la profondeur et l’étendue de la réponse du modèle.
Le score global de ChatGPT indique une performance exceptionnellement bonne du modèle, en particulier pour la radiothérapie, les soins des stomies, le contrôle de la douleur et les soins veineux.
Bien que ChatGPT ait bien réussi à fournir des réponses valides aux questions liées au CCR, il ne disposait toujours pas de connaissances spécialisées, notamment en matière de prise en charge chirurgicale, d’informations de base et de médecine interne. Cette sous-performance devrait empêcher le déploiement de modèles d’IA comme ChatGPT dans la pratique clinique.
Conclusions
L’étude actuelle présente des limites, notamment le nombre insuffisant de questions valides liées au CRC. De plus, cette étude a utilisé le livre de santé publique du CRC comme source de données, ce qui a essentiellement limité les types de questions basées sur le CRC.
Étant donné que les questions ont été méticuleusement sélectionnées par les auteurs, toutes les questions que les patients et leurs familles se posent dans la vie réelle pourraient ne pas être incluses. Une autre limite de cette étude réside dans l’utilisation des réponses du livre comme référence pour noter les réponses de ChatGPT aux questions basées sur le CRC.
L’étude actuelle a mis en évidence le potentiel et les limites de ChatGPT en ce qui concerne les questions CRC.
Les informations présentées ici pourraient servir de base à une future version améliorée de ChatGPT qui pourrait aider à diagnostiquer le CCR avec précision et à promouvoir un traitement précoce.
Les recherches futures doivent utiliser des échantillons de plus grande taille pour étudier l’efficacité réelle de ChatGPT. En outre, les chercheurs doivent explorer les moyens d’intégrer les informations personnelles sur la santé et les modèles d’IA pour fournir des informations personnalisées aux patients.
