Evaluatie van besluitvorming met behulp van chatgpt-4 bij stagiairs in een operatie (EDuCATe)

Achtergrond:

Kunstmatige intelligentie (AI) transformeert snel het medische landschap en biedt nieuwe mogelijkheden in onderwijs, diagnostiek en beslissingsondersteuning. Tijdens een operatie is klinische besluitvorming een kerncompetentie die geleidelijk wordt ontwikkeld door training. CHATGPT-4, een state-of-the-art groot taalmodel ontwikkeld door OpenAI, heeft de competentie aangetoond bij het omgaan met medische vragen en klinische redeneringstaken. De prestaties ervan in complexe chirurgische besluitvorming in vergelijking met menselijke stagiairs blijven echter grotendeels onontgonnen.

Objectief:

Het Educate-onderzoek is bedoeld om de nauwkeurigheid en betrouwbaarheid van de antwoorden van Chatgpt-4 op klinische scenario's met algemene chirurgische gevallen te evalueren. In het bijzonder vergelijkt de studie de prestaties van het model met die van junior bewoners, senior bewoners en het bezoeken van chirurgen om te begrijpen of chatgpt-4 kan dienen als een veilig en effectief educatief hulpmiddel voor chirurgische stagiairs.

Methoden:

Zeven klinische scenario's worden geconstrueerd met behulp van echte geanonimiseerde patiëntgegevens die gemeenschappelijke algemene chirurgie -omstandigheden vertegenwoordigen. Elk geval zal stap voor stap worden gepresenteerd en het klinische besluitvormingsproces nabootst. Deelnemers zullen een vraag beantwoorden met betrekking tot behandelingskeuze.

Deelnemers omvatten junior inwoners (PGY1-2), senior bewoners (PGY3+) en het bijwonen van chirurgen van een enkele chirurgische afdeling. Chatgpt-4 wordt gevraagd met dezelfde scenario's. Alle deelnemers zullen worden geïnstrueerd om de cases te voltooien zonder externe bronnen te gebruiken, zoals AI -tools of zoekopdrachten op internet, die uitsluitend afhankelijk zijn van hun klinische kennis.

Statistische analyse zal de prestaties tussen groepen vergelijken met behulp van niet-parametrische tests (bijv. Wilcoxon rang som).

Verwachte resultaten:

De studie veronderstelt dat chatgpt-4 zal presteren op een niveau dat vergelijkbaar is met senior bewoners of het bezoeken van chirurgen en beter presteren dan junior bewoners bij de besluitvorming. Indien bevestigd, kunnen deze resultaten het veilige gebruik van chatgpt-4 ondersteunen als een trainingshulpmiddel voor junior chirurgische bewoners, mogelijk het verbeteren van de educatieve resultaten en klinische redeneervaardigheden.

Betekenis:

Deze studie zal nieuw inzicht bieden in de rol van AI in chirurgisch onderwijs. Door de besluitvormingscapaciteiten van Chatgpt-4 rigoureus te vergelijken met die van menselijke chirurgen op verschillende niveaus, hoopt de studie haar nut, beperkingen en passend gebruik in residentieopleidingsprogramma's te definiëren.