Междисциплинарное рассмотрение антропоморфизма больших языковых моделей (MDTALLM)
3 октября 2024 г. обновлено: Zining Luo, North Sichuan Medical College
Междисциплинарное рассмотрение антропоморфизма больших языковых моделей: параллельное контролируемое исследование
Это ретроспективное клиническое исследование направлено на лучшее изучение потенциала больших языковых моделей в медицине путем сравнения эффективности консультаций MDT, проводимых врачами-людьми, с консультациями, проводимыми с использованием больших языковых моделей.
Основными вопросами, которые необходимо решить, являются:
Дает ли использование больших языковых моделей для проведения антропоморфных консультаций MDT лучшие результаты, чем использование неантропоморфных процессов? Существует ли значительный разрыв в производительности между консультациями MDT, проводимыми с помощью больших языковых моделей, и консультациями, проводимыми людьми? Насколько больше экономическая выгода от консультаций MDT с использованием больших языковых моделей по сравнению с консультациями, проводимыми людьми?
Ретроспективно соберите записи консультаций MDT за последние 20 лет в северной провинции Сычуань в Китае, а также анонимные медицинские записи пациентов. Группа 1: Разным большим языковым моделям поручаются функции врачей разных отделений и секретарей МДТ для подведения итогов консультаций. Группа 2: Большая языковая модель напрямую выводит рекомендации по диагностике и лечению для пациентов. Ретроспективно сравните результаты групп 1 и 2 с человеческими показателями, оцените их и выберите лучшую модель из каждого отдела для повторной оценки посредством антропоморфных консультаций MDT, еще раз сравнив их с человеческими результатами.
Обзор исследования
Статус
Еще не набирают
Тип исследования
Наблюдательный
Регистрация (Оцененный)
300
Контакты и местонахождение
В этом разделе приведены контактные данные лиц, проводящих исследование, и информация о том, где проводится это исследование.
Контакты исследования
- Имя: Zining Luo, Doctor
- Номер телефона: 86 + 18161007029
- Электронная почта: cblzn@nsmc.edu.cn
Места учебы
-
-
Sichuan
-
Nanchong, Sichuan, Китай, 637000
- The Affiliated Hospital of North Sichuan Medical College
-
Контакт:
- Zining Luo
- Номер телефона: 86 + 18161007029
- Электронная почта: cblzn@nsmc.edu.cn
-
-
Критерии участия
Исследователи ищут людей, которые соответствуют определенному описанию, называемому критериям приемлемости. Некоторыми примерами этих критериев являются общее состояние здоровья человека или предшествующее лечение.
Критерии приемлемости
Возраст, подходящий для обучения
- Ребенок
- Взрослый
- Пожилой взрослый
Принимает здоровых добровольцев
Нет
Метод выборки
Невероятностная выборка
Исследуемая популяция
Из больницы
Описание
Критерии включения:
- 1. Медицинские записи включают записи междисциплинарных консультаций с рекомендациями специалистов различных отделений и хорошо документированным окончательным заключением.
- 2. Медицинские записи содержат данные как минимум за год до и за год после консультации (включая неповрежденные отчеты и записи изображений).
- 3. Состояние выписки пациента улучшилось благодаря мультидисциплинарному плану лечения после консультации.
Критерии исключения:
- 1. Медицинские записи не включают записи многопрофильных консультаций или рекомендации врачей различных отделений, а окончательные итоговые записи являются неполными или неадекватными.
- 2. В медицинских записях отсутствуют данные за 1 год до и после консультации или отсутствуют необходимые отчеты и данные визуализации, что приводит к неполноте документации.
- 3. Состояние больного при выписке после применения мультидисциплинарного плана лечения не улучшилось или состояние ухудшилось.
Учебный план
В этом разделе представлена подробная информация о плане исследования, в том числе о том, как планируется исследование и что оно измеряет.
Как устроено исследование?
Детали дизайна
Когорты и вмешательства
Группа / когорта |
Вмешательство/лечение |
|---|---|
|
Антропоморфизированный процесс. Большая языковая модель. Многопрофильная группа лечения.
Используя локально развернутый MedicalGPT, коммерчески доступный онлайн-GPT-4o, Claude-3.5.
Sonnet, GPT-4o mini и Claude 3 Haiku последовательно будут играть роль врачей из разных отделений, участвующих в многопрофильном процессе лечения.
Затем они последовательно возьмут на себя роль обобщателя и обобщают свои рекомендации в окончательное предложение или план лечения.
|
Вводите все медицинские записи пациентов, включая текст, отчеты об обследованиях и данные изображений, в GPT-4o.
Используйте предварительно протестированные подсказки для определения ролей отдела, что позволит предоставлять рекомендации по диагностике и лечению, относящиеся к соответствующему отделению.
Вводите все медицинские записи пациентов, включая текст, отчеты об обследованиях и данные изображений, в GPT-4o mini.
Используйте предварительно протестированные подсказки для определения ролей отдела, что позволит предоставлять рекомендации по диагностике и лечению, относящиеся к соответствующему отделению.
Введите все медицинские записи пациентов, включая текст, отчеты об обследованиях и данные изображений, в MedicalGPT.
Используйте предварительно протестированные подсказки для определения ролей отдела, что позволит предоставлять рекомендации по диагностике и лечению, относящиеся к соответствующему отделению.
Введите все медицинские записи пациентов, включая текст, отчеты об исследованиях и данные изображений, в Claude-3.5.
Сонет.
Используйте предварительно протестированные подсказки для определения ролей отдела, что позволит предоставлять рекомендации по диагностике и лечению, относящиеся к соответствующему отделению.
Введите все медицинские записи пациентов, включая текст, отчеты об обследованиях и данные изображений, в Claude 3 Haiku.
Используйте предварительно протестированные подсказки для определения ролей отдела, что позволит предоставлять рекомендации по диагностике и лечению, относящиеся к соответствующему отделению.
|
|
Неантропоморфизированный процесс. Большая языковая модель. Многопрофильная лечебная группа.
Используя локально развернутый MedicalGPT, коммерческий онлайн-GPT-4o, Claude-3.5.
Sonnet, GPT-4o mini и Claude 3 Haiku для вывода результатов междисциплинарных консультаций в одном экземпляре, без отдельного распределения ролей для каждого отдела и последующей компиляции результатов.
|
Вводите все медицинские записи пациентов, включая текст, отчеты об обследованиях и данные изображений, в GPT-4o.
Используйте предварительно протестированные подсказки для определения ролей отдела, что позволит предоставлять рекомендации по диагностике и лечению, относящиеся к соответствующему отделению.
Вводите все медицинские записи пациентов, включая текст, отчеты об обследованиях и данные изображений, в GPT-4o mini.
Используйте предварительно протестированные подсказки для определения ролей отдела, что позволит предоставлять рекомендации по диагностике и лечению, относящиеся к соответствующему отделению.
Введите все медицинские записи пациентов, включая текст, отчеты об обследованиях и данные изображений, в MedicalGPT.
Используйте предварительно протестированные подсказки для определения ролей отдела, что позволит предоставлять рекомендации по диагностике и лечению, относящиеся к соответствующему отделению.
Введите все медицинские записи пациентов, включая текст, отчеты об исследованиях и данные изображений, в Claude-3.5.
Сонет.
Используйте предварительно протестированные подсказки для определения ролей отдела, что позволит предоставлять рекомендации по диагностике и лечению, относящиеся к соответствующему отделению.
Введите все медицинские записи пациентов, включая текст, отчеты об обследованиях и данные изображений, в Claude 3 Haiku.
Используйте предварительно протестированные подсказки для определения ролей отдела, что позволит предоставлять рекомендации по диагностике и лечению, относящиеся к соответствующему отделению.
|
|
Многопрофильная лечебная группа Real Doctors
При традиционном мультидисциплинарном лечении результаты документируются в записях консультаций участвующих пациентов, включая рекомендации врачей различных отделений, участвовавших в консультации, и окончательное заключение секретаря.
|
Ретроспективно собрать диагностические и лечебные рекомендации соответствующих отделений, занимающихся мультидисциплинарным лечением прошлых пациентов, а также общие рекомендации.
|
|
Лучшая междисциплинарная лечебная группа с большой языковой моделью
После сопоставления результатов многопрофильной лечебной группы «Антропоморфизированный процесс с большой языковой моделью» с результатами многопрофильной лечебной группы настоящих врачей по каждому отделению были выбраны лучшие модели-заменители и лучшие сводные модели для каждого отделения. .
Эти топ-модели возьмут на себя роль в консультации по многопрофильному лечению.
|
Вводите все медицинские записи пациентов, включая текст, отчеты об обследованиях и данные изображений, в GPT-4o.
Используйте предварительно протестированные подсказки для определения ролей отдела, что позволит предоставлять рекомендации по диагностике и лечению, относящиеся к соответствующему отделению.
Вводите все медицинские записи пациентов, включая текст, отчеты об обследованиях и данные изображений, в GPT-4o mini.
Используйте предварительно протестированные подсказки для определения ролей отдела, что позволит предоставлять рекомендации по диагностике и лечению, относящиеся к соответствующему отделению.
Введите все медицинские записи пациентов, включая текст, отчеты об обследованиях и данные изображений, в MedicalGPT.
Используйте предварительно протестированные подсказки для определения ролей отдела, что позволит предоставлять рекомендации по диагностике и лечению, относящиеся к соответствующему отделению.
Введите все медицинские записи пациентов, включая текст, отчеты об исследованиях и данные изображений, в Claude-3.5.
Сонет.
Используйте предварительно протестированные подсказки для определения ролей отдела, что позволит предоставлять рекомендации по диагностике и лечению, относящиеся к соответствующему отделению.
Введите все медицинские записи пациентов, включая текст, отчеты об обследованиях и данные изображений, в Claude 3 Haiku.
Используйте предварительно протестированные подсказки для определения ролей отдела, что позволит предоставлять рекомендации по диагностике и лечению, относящиеся к соответствующему отделению.
|
Что измеряет исследование?
Первичные показатели результатов
Мера результата |
Временное ограничение |
|---|---|
|
Стоимость консультации ($)
Временное ограничение: От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
|
Время консультации (мин)
Временное ограничение: От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
|
Комплексность результатов мультидисциплинарного лечения (процентная шкала)
Временное ограничение: От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
|
Ясность результатов многопрофильного лечения (процентная шкала)
Временное ограничение: От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
|
Корректность результатов мультидисциплинарного лечения (процентная шкала)
Временное ограничение: От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
|
Оценка практики межпрофессиональной командной работы (CPAT)
Временное ограничение: От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
|
Рейтинговая шкала для обобщения
Временное ограничение: От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
|
Тест на читаемость Флеша-Кинкейда
Временное ограничение: От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
Вторичные показатели результатов
Мера результата |
Временное ограничение |
|---|---|
|
Этическое соответствие (логическое значение)
Временное ограничение: От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
От процесса многопрофильного лечения до процесса многопрофильного лечения до тех пор, пока не будут выведены все поля json, время, затрачиваемое врачами-людьми на запись времени с использованием Его системы, обычно не превышает 12 часов.
|
Соавторы и исследователи
Здесь вы найдете людей и организации, участвующие в этом исследовании.
Публикации и полезные ссылки
Лицо, ответственное за внесение сведений об исследовании, добровольно предоставляет эти публикации. Это может быть что угодно, связанное с исследованием.
Даты записи исследования
Эти даты отслеживают ход отправки отчетов об исследованиях и сводных результатов на сайт ClinicalTrials.gov. Записи исследований и сообщаемые результаты проверяются Национальной медицинской библиотекой (NLM), чтобы убедиться, что они соответствуют определенным стандартам контроля качества, прежде чем публиковать их на общедоступном веб-сайте.
Изучение основных дат
Начало исследования (Оцененный)
1 октября 2024 г.
Первичное завершение (Оцененный)
1 ноября 2024 г.
Завершение исследования (Оцененный)
1 ноября 2024 г.
Даты регистрации исследования
Первый отправленный
1 октября 2024 г.
Впервые представлено, что соответствует критериям контроля качества
3 октября 2024 г.
Первый опубликованный (Действительный)
4 октября 2024 г.
Обновления учебных записей
Последнее опубликованное обновление (Действительный)
4 октября 2024 г.
Последнее отправленное обновление, отвечающее критериям контроля качества
3 октября 2024 г.
Последняя проверка
1 октября 2024 г.
Дополнительная информация
Термины, связанные с этим исследованием
Дополнительные соответствующие термины MeSH
Другие идентификационные номера исследования
- 1426887-2024-3
Планирование данных отдельных участников (IPD)
Планируете делиться данными об отдельных участниках (IPD)?
ДА
Совместное использование IPD Поддерживающий тип информации
- STUDY_PROTOCOL
- САП
- МКФ
- АНАЛИТИЧЕСКИЙ_КОД
- КСО
Информация о лекарствах и устройствах, исследовательские документы
Изучает лекарственный продукт, регулируемый FDA США.
Нет
Изучает продукт устройства, регулируемый Управлением по санитарному надзору за качеством пищевых продуктов и медикаментов США.
Нет
Эта информация была получена непосредственно с веб-сайта clinicaltrials.gov без каких-либо изменений. Если у вас есть запросы на изменение, удаление или обновление сведений об исследовании, обращайтесь по адресу register@clinicaltrials.gov. Как только изменение будет реализовано на clinicaltrials.gov, оно будет автоматически обновлено и на нашем веб-сайте. .