Valutazione del processo decisionale usando CHATGPT-4 tra i tirocinanti in chirurgia (EDuCATe)

Sfondo:

L'intelligenza artificiale (AI) sta trasformando rapidamente il panorama medico, offrendo nuove possibilità di istruzione, diagnostica e supporto decisionale. In chirurgia, il processo decisionale clinico è una competenza fondamentale sviluppata progressivamente attraverso la formazione. CHATGPT-4, un modello linguistico di grandi dimensioni all'avanguardia sviluppato da Openi, ha dimostrato competenza nella gestione di query mediche e attività di ragionamento clinico. Tuttavia, le sue prestazioni nel processo decisionale chirurgico complesso rispetto ai tirocinanti umani rimangono in gran parte inesplorati.

Obiettivo:

Lo studio Educate mira a valutare l'accuratezza e l'affidabilità delle risposte di CHATGPT-4 agli scenari clinici che coinvolgono casi di chirurgia generale. In particolare, lo studio confronta le prestazioni del modello con quelle dei residenti junior, dei residenti senior e dei chirurghi per capire se CHATGPT-4 può servire da strumento educativo sicuro ed efficace per i tirocinanti chirurgici.

Metodi:

Sette scenari clinici saranno costruiti utilizzando dati di pazienti anonimi reali che rappresentano condizioni di chirurgia generale comuni. Ogni caso verrà presentato passo dopo passo, imitando il processo decisionale clinico. I partecipanti risponderanno a una domanda relativa alla scelta del trattamento.

I partecipanti includeranno i residenti junior (PGY1-2), i residenti senior (PGY3+) e la frequenza dei chirurghi di un singolo dipartimento chirurgico. CHATGPT-4 verrà richiesto con gli stessi scenari. A tutti i partecipanti verranno istruiti a completare i casi senza utilizzare risorse esterne come strumenti di intelligenza artificiale o ricerche su Internet, basandosi esclusivamente sulle loro conoscenze cliniche.

L'analisi statistica confronterà le prestazioni tra i gruppi utilizzando test non parametrici (ad esempio, la somma del rango di Wilcoxon).

Risultati previsti:

Lo studio ipotizza che CHATGPT-4 si esibirà a un livello paragonabile ai residenti senior o alla partecipazione a chirurghi e supera i residenti junior nel processo decisionale. Se confermati, questi risultati potrebbero supportare l'uso sicuro di CHATGPT-4 come aiuto per la formazione per i residenti chirurgici junior, migliorando potenzialmente i risultati educativi e le capacità di ragionamento clinico.

Significato:

Questo studio fornirà nuove informazioni sul ruolo dell'IA nell'educazione chirurgica. Confrontando rigorosamente le capacità decisionali di CHATGPT-4 con quelle dei chirurghi umani a vari livelli, lo studio spera di definire la sua utilità, limitazioni e uso adeguato nei programmi di formazione di residenza.