Une étude publiée dans le Journal of Pediatrics de l’American Medical Association a montré que GPT-4 n’était précis qu’à 17% dans le diagnostic des cas médicaux pédiatriques, contre 39% des cas de médecine générale l’année dernière, comme l’a rapporté Webmaster’s House le 5 janvier. Dans l’étude, menée par le Cohen Children’s Medical Center de New York, ChatGPT-4 a été utilisé pour analyser 100 cas pédiatriques publiés par JAMA Pediatrics et NEJM entre 2013 et 2023. Les chercheurs ont collé le texte des cas pertinents dans les invites de ChatGPT, et les réponses générées par l’IA ont été notées par deux chercheurs médicaux qualifiés. ChatGPT n’avait que 17 diagnostics corrects sur 100 cas, 72 faux diagnostics et 11 cas où le diagnostic n’était pas entièrement capturé. Parmi ceux-ci, 57 % des erreurs de diagnostic sont concentrées dans le même système organique. Ce faible taux de réussite montre qu’il est peu probable que les pédiatres humains perdent leur emploi dans un court laps de temps, et l’étude souligne la nature irremplaçable de l’expérience clinique dans le domaine médical. Les chercheurs ont souligné que le taux d’erreur élevé de ChatGPT était principalement dû à son manque d’identification des relations entre les maladies, et ont suggéré que la précision du modèle pourrait être améliorée en s’entraînant de manière sélective sur une littérature médicale précise et crédible, ainsi qu’en fournissant davantage de données médicales en temps réel.
Voir l'original
Cette page peut inclure du contenu de tiers fourni à des fins d'information uniquement. Gate ne garantit ni l'exactitude ni la validité de ces contenus, n’endosse pas les opinions exprimées, et ne fournit aucun conseil financier ou professionnel à travers ces informations. Voir la section Avertissement pour plus de détails.
Une étude publiée dans le Journal of Pediatrics de l’American Medical Association a montré que GPT-4 n’était précis qu’à 17% dans le diagnostic des cas médicaux pédiatriques, contre 39% des cas de médecine générale l’année dernière, comme l’a rapporté Webmaster’s House le 5 janvier. Dans l’étude, menée par le Cohen Children’s Medical Center de New York, ChatGPT-4 a été utilisé pour analyser 100 cas pédiatriques publiés par JAMA Pediatrics et NEJM entre 2013 et 2023. Les chercheurs ont collé le texte des cas pertinents dans les invites de ChatGPT, et les réponses générées par l’IA ont été notées par deux chercheurs médicaux qualifiés. ChatGPT n’avait que 17 diagnostics corrects sur 100 cas, 72 faux diagnostics et 11 cas où le diagnostic n’était pas entièrement capturé. Parmi ceux-ci, 57 % des erreurs de diagnostic sont concentrées dans le même système organique. Ce faible taux de réussite montre qu’il est peu probable que les pédiatres humains perdent leur emploi dans un court laps de temps, et l’étude souligne la nature irremplaçable de l’expérience clinique dans le domaine médical. Les chercheurs ont souligné que le taux d’erreur élevé de ChatGPT était principalement dû à son manque d’identification des relations entre les maladies, et ont suggéré que la précision du modèle pourrait être améliorée en s’entraînant de manière sélective sur une littérature médicale précise et crédible, ainsi qu’en fournissant davantage de données médicales en temps réel.