Оценка принятия решений с использованием CHATGPT-4 среди стажеров в хирургии (EDuCATe)
Оценка CHATGPT-4 как инструмента поддержки принятия решений для слушателей хирургических лиц
Обзор исследования
Статус
Вмешательство/лечение
Подробное описание
Фон:
Искусственный интеллект (ИИ) быстро преобразует медицинский ландшафт, предлагает новые возможности в области образования, диагностики и поддержки принятия решений. В ходе хирургии принятие клинических решений является основной компетенцией, развивающейся постепенно благодаря обучению. CHATGPT-4, современная большая языковая модель, разработанная OpenAI, продемонстрировала компетентность в обработке медицинских запросов и задач клинических рассуждений. Тем не менее, его успеваемость в сложном хирургическом принятии решений по сравнению с учениками-людьми остается в значительной степени неисследованной.
Цель:
Обучающее исследование направлено на оценку точности и надежности ответов CHATGPT-4 на клинические сценарии, связанные с общей хирургическими случаями. В частности, исследование сравнивает показатели модели с показателями младших жителей, старших жителей и посещения хирургов, чтобы понять, может ли CHATGPT-4 служить безопасным и эффективным образовательным инструментом для слушателей хирургических лиц.
Методы:
Семь клинических сценариев будут построены с использованием реальных анонимных данных пациентов, представляющих общие условия общей хирургии. Каждый случай будет представлен шаг за шагом, имитируя процесс принятия клинических решений. Участники отвечают на вопрос, связанный с выбором лечения.
Участники будут включать младших жителей (PGY1-2), старших жителей (PGY3+) и посещения хирургов из одного хирургического департамента. CHATGPT-4 будет предложено с теми же сценариями. Все участники будут поручены завершить случаи без использования внешних ресурсов, таких как инструменты искусственного интеллекта или поиск в Интернете, полагаясь исключительно на их клинические знания.
Статистический анализ сравнит производительность между группами, используя непараметрические тесты (например, сумма ранга Уилкоксона).
Ожидаемые результаты:
Исследование предполагает, что CHATGPT-4 будет работать на уровне, сравнимом со старшими жителями, или посещения хирургов, и превзойти младших жителей в принятии решений. В случае подтверждения эти результаты могут поддерживать безопасное использование CHATGPT-4 в качестве учебной помощи для младших хирургических жителей, потенциально улучшая образовательные результаты и навыки клинических рассуждений.
Значение:
Это исследование даст новое понимание роли ИИ в хирургическом образовании. Строгое сравнение возможностей принятия решений CHATGPT-4 с возможностями хирургов на разных уровнях, исследование надеется определить его полезность, ограничения и надлежащее использование в программах обучения на резидентуре.
Тип исследования
Регистрация (Оцененный)
Контакты и местонахождение
Контакты исследования
- Имя: Manuela Mastronardi
- Номер телефона: 0403994152
- Электронная почта: manuela.mastronardi@gmail.com
Места учебы
-
-
-
Trieste, Италия
- University of Trieste
-
Контакт:
- Manuela Mastronardi
- Номер телефона: 0403994152
- Электронная почта: manuela.mastronardi@gmail.com
-
Главный следователь:
- Silvia Palmisano
-
Главный следователь:
- Manuela Mastronardi
-
Младший исследователь:
- Paola Germani
-
Младший исследователь:
- Margherita Sandano
-
-
Критерии участия
Критерии приемлемости
Возраст, подходящий для обучения
- Ребенок
- Взрослый
- Пожилой взрослый
Принимает здоровых добровольцев
Метод выборки
Исследуемая популяция
Описание
Критерии включения:
- Активно зарегистрирован или занят в общей хирургии резиденции или департамента участвующего учреждения
- Готовность участвовать и завершить все сценарии клинических случаев
- Согласие на участие в исследовании
Критерии исключения:
- Неполные ответы
- Использование внешней помощи (например, поиск в Интернете, инструменты искусственного интеллекта) при ответе
Учебный план
Как устроено исследование?
Детали дизайна
Когорты и вмешательства
Группа / когорта |
Вмешательство/лечение |
|---|---|
|
Жители
Младшие и старшие жители общей хирургии
|
Семь клинических случаев, которые необходимо проанализировать
|
|
Консультанты
Старшие генеральные хирурги
|
Семь клинических случаев, которые необходимо проанализировать
|
|
Chatgpt 4
Система искусственного интеллекта
|
Семь клинических случаев, которые необходимо проанализировать
|
Что измеряет исследование?
Первичные показатели результатов
Мера результата |
Мера Описание |
Временное ограничение |
|---|---|---|
|
Доля правильных ответов
Временное ограничение: Базовый уровень
|
Бинарный результат (правильный против неправильного решения)
|
Базовый уровень
|
Вторичные показатели результатов
Мера результата |
Мера Описание |
Временное ограничение |
|---|---|---|
|
Сравнение точности между уровнями опыта
Временное ограничение: Базовый уровень
|
Доля правильных ответов группы: младшие жители, старшие жители, посещающие хирурги, Chatgpt-4
|
Базовый уровень
|
|
Уровень уверенности
Временное ограничение: Базовый уровень
|
Участники и Chatgpt просят оценить, насколько они уверены в своем ответе (1-5 Scale, где 1 не означает никакого уверенности и 5 очень уверенно)
|
Базовый уровень
|
|
Процент использования ИИ для оценки клинических случаев
Временное ограничение: Базовый уровень
|
Участников спрашивают, используют ли они или нет в их клинической деятельности
|
Базовый уровень
|
Соавторы и исследователи
Спонсор
Даты записи исследования
Изучение основных дат
Начало исследования (Оцененный)
Первичное завершение (Оцененный)
Завершение исследования (Оцененный)
Даты регистрации исследования
Первый отправленный
Впервые представлено, что соответствует критериям контроля качества
Первый опубликованный (Действительный)
Обновления учебных записей
Последнее опубликованное обновление (Действительный)
Последнее отправленное обновление, отвечающее критериям контроля качества
Последняя проверка
Дополнительная информация
Термины, связанные с этим исследованием
Ключевые слова
Другие идентификационные номера исследования
- AI-Surgical training
Планирование данных отдельных участников (IPD)
Планируете делиться данными об отдельных участниках (IPD)?
Информация о лекарствах и устройствах, исследовательские документы
Изучает лекарственный продукт, регулируемый FDA США.
Изучает продукт устройства, регулируемый Управлением по санитарному надзору за качеством пищевых продуктов и медикаментов США.
Эта информация была получена непосредственно с веб-сайта clinicaltrials.gov без каких-либо изменений. Если у вас есть запросы на изменение, удаление или обновление сведений об исследовании, обращайтесь по адресу register@clinicaltrials.gov. Как только изменение будет реализовано на clinicaltrials.gov, оно будет автоматически обновлено и на нашем веб-сайте. .