Evaluar la toma de decisiones utilizando ChatGPT-4 entre los alumnos en cirugía (EDuCATe)

Fondo:

La inteligencia artificial (IA) está transformando rápidamente el panorama médico, ofreciendo nuevas posibilidades en educación, diagnóstico y apoyo a la decisión. En la cirugía, la toma de decisiones clínicas es una competencia central desarrollada progresivamente a través de la capacitación. ChatGPT-4, un modelo de lenguaje grande de última generación desarrollado por OpenAI, ha demostrado competencia en el manejo de consultas médicas y tareas de razonamiento clínico. Sin embargo, su desempeño en la toma de decisiones quirúrgicas complejas en comparación con los aprendices humanos permanece en gran medida inexplorado.

Objetivo:

El estudio Educate tiene como objetivo evaluar la precisión y confiabilidad de las respuestas de ChatGPT-4 a escenarios clínicos que involucran casos de cirugía general. Específicamente, el estudio compara el rendimiento del modelo con el de los residentes junior, los residentes superiores y los cirujanos que asisten a comprender si ChatGPT-4 puede servir como una herramienta educativa segura y efectiva para los aprendices quirúrgicos.

Métodos:

Se construirán siete escenarios clínicos utilizando datos de pacientes anonimizados reales que representan condiciones de cirugía general comunes. Cada caso se presentará paso a paso, imitando el proceso de toma de decisiones clínicas. Los participantes responderán una pregunta relacionada con la elección del tratamiento.

Los participantes incluirán residentes junior (PGY1-2), residentes superiores (PGY3+) y asistentes a cirujanos de un solo departamento quirúrgico. CHATGPT-4 se solicitará con los mismos escenarios. Todos los participantes recibirán instrucciones de completar los casos sin utilizar recursos externos, como herramientas de IA o búsquedas en Internet, dependiendo únicamente de su conocimiento clínico.

El análisis estadístico comparará el rendimiento entre los grupos utilizando pruebas no paramétricas (por ejemplo, suma de rango de Wilcoxon).

Resultados esperados:

El estudio plantea la hipótesis de que ChatGPT-4 funcionará a un nivel comparable a los residentes superiores o asistir a cirujanos y superar a los residentes junior en la toma de decisiones. Si se confirman, estos resultados podrían respaldar el uso seguro de ChatGPT-4 como una ayuda de capacitación para residentes quirúrgicos junior, mejorando potencialmente los resultados educativos y las habilidades de razonamiento clínico.

Significado:

Este estudio proporcionará una visión novedosa del papel de la IA en la educación quirúrgica. Al comparar rigurosamente las capacidades de toma de decisiones de ChatGPT-4 con las de los cirujanos humanos en varios niveles, el estudio espera definir su utilidad, limitaciones y uso apropiado en los programas de capacitación de residencia.