Évaluation de la prise de décision en utilisant le chatppt-4 parmi les stagiaires en chirurgie (EDuCATe)

Arrière-plan:

L'intelligence artificielle (IA) transforme rapidement le paysage médical, offrant de nouvelles possibilités dans l'éducation, le diagnostic et l'aide à la décision. En chirurgie, la prise de décision clinique est une compétence de base développée progressivement par la formation. ChatGPT-4, un modèle de grande langue de pointe développé par OpenAI, a démontré sa compétence dans la gestion des requêtes médicales et des tâches de raisonnement clinique. Cependant, sa performance dans la prise de décision chirurgicale complexe par rapport aux stagiaires humains reste largement inexplorée.

Objectif:

L'étude de l'éducation vise à évaluer la précision et la fiabilité des réponses de ChatGPT-4 aux scénarios cliniques impliquant des cas de chirurgie générale. Plus précisément, l'étude compare les performances du modèle à celles des résidents juniors, des résidents seniors et des chirurgiens participants pour comprendre si le chatppt-4 peut servir d'outil éducatif sûr et efficace pour les stagiaires chirurgicaux.

Méthodes:

Sept scénarios cliniques seront construits en utilisant des données réelles de patients anonymisées représentant des conditions de chirurgie générale communes. Chaque cas sera présenté étape par étape, imitant le processus de prise de décision clinique. Les participants répondront à une question liée au choix du traitement.

Les participants comprendront des résidents subalternes (PGY1-2), des résidents seniors (PGY3 +) et des chirurgiens participants d'un seul service chirurgical. ChatGPT-4 sera invité avec les mêmes scénarios. Tous les participants seront invités à compléter les cas sans utiliser de ressources externes telles que des outils d'IA ou des recherches sur Internet, en s'appuyant uniquement sur leurs connaissances cliniques.

L'analyse statistique comparera les performances entre les groupes à l'aide de tests non paramétriques (par exemple, la somme de rang de Wilcoxon).

Résultats attendus:

L'étude émet l'hypothèse que le chatppt-4 fonctionnera à un niveau comparable aux résidents seniors ou aux chirurgiens assistés et surpassera les résidents subalternes dans la prise de décision. S'il est confirmé, ces résultats pourraient soutenir l'utilisation sûre de ChatGPT-4 comme aide à la formation pour les résidents chirurgicaux juniors, améliorant potentiellement les résultats éducatifs et les compétences de raisonnement clinique.

Importance:

Cette étude fournira de nouveaux informations sur le rôle de l'IA dans l'éducation chirurgicale. En comparant rigoureusement les capacités de prise de décision de ChatGPT-4 à celles des chirurgiens humains à différents niveaux, l'étude espère définir son utilité, ses limites et son utilisation appropriée dans les programmes de formation en résidence.