Ocena podejmowania decyzji za pomocą CHATGPT-4 wśród stażystów w chirurgii (EDuCATe)

Tło:

Sztuczna inteligencja (AI) szybko przekształca krajobraz medyczny, oferując nowe możliwości edukacji, diagnostyki i wsparcia decyzji. Podczas operacji podejmowanie decyzji klinicznych jest podstawową kompetencją rozwiniętą stopniowo poprzez szkolenie. CHATGPT-4, najnowocześniejszy duży model językowy opracowany przez Openai, wykazał kompetencje w obsłudze zapytań medycznych i zadań klinicznych. Jednak jego wydajność w złożonym chirurgicznym podejmowaniu decyzji w porównaniu do ludzkich stażystów pozostaje w dużej mierze niezbadana.

Cel:

Badanie edukacyjne ma na celu ocenę dokładności i wiarygodności odpowiedzi Chatgpt-4 na scenariusze kliniczne obejmujące ogólne przypadki chirurgii. W szczególności badanie porównuje wydajność modelu z wydajnością młodszych mieszkańców, starszych mieszkańców i uczęszczających do chirurgów w celu zrozumienia, czy Chatgpt-4 może służyć jako bezpieczne i skuteczne narzędzie edukacyjne dla stacjonariuszy chirurgicznych.

Metody:

Siedem scenariuszy klinicznych zostanie skonstruowanych przy użyciu rzeczywistych anonimowych danych pacjentów reprezentujących wspólne warunki operacji ogólnej. Każdy przypadek zostanie przedstawiony krok po kroku, naśladując kliniczny proces decyzyjny. Uczestnicy odpowiedzą na pytanie związane z wyborem leczenia.

Uczestnikami będą mieszkańcy juniorów (PGY1-2), starsi mieszkańcy (PGY3+) i uczęszczanie do chirurgów z jednego działu chirurgicznego. CHATGPT-4 zostanie wyświetlony z tych samych scenariuszy. Wszyscy uczestnicy zostaną poinstruowani, aby ukończyć przypadki bez korzystania z zasobów zewnętrznych, takich jak narzędzia AI lub wyszukiwania w Internecie, polegając wyłącznie na ich wiedzy klinicznej.

Analiza statystyczna porównuje wydajność między grupami przy użyciu testów nieparametrycznych (np. Suma rang Wilcoxona).

Oczekiwane wyniki:

W badaniu pojawia się hipoteza, że ​​CHATGPT-4 będzie działać na poziomie porównywalnym z wyższymi mieszkańcami lub uczęszcza na chirurgów i przewyższa młodszych mieszkańców w podejmowaniu decyzji. W przypadku potwierdzenia wyniki te mogą wspierać bezpieczne wykorzystanie CHATGPT-4 jako pomocy szkoleniowej dla młodszych mieszkańców chirurgicznych, potencjalnie poprawiając wyniki edukacyjne i umiejętności rozumowania klinicznego.

Znaczenie:

To badanie zapewni nowatorski wgląd w rolę AI w edukacji chirurgicznej. Rygorystyczne porównywanie możliwości decyzyjnych Chatgpt-4 z możliwościami ludzkich chirurgów na różnych poziomach, badanie ma nadzieję zdefiniować jego użyteczność, ograniczenia i odpowiednie wykorzystanie w programach szkolenia pobytu.