- ICH GCP
- Реестр клинических исследований США
- Клиническое испытание NCT06434220
Влияние прогностической модели на оценку состояния пациентов врачами отделения неотложной помощи
Цель этого исследования — измерить влияние алгоритмов, учитывающих справедливость, на прогнозы врачей о госпитализации пациентов в отделении неотложной помощи. Используя экспериментально проверенную модель машинного обучения, настроенную на справедливые результаты, исследователи количественно оценили влияние рекомендаций модели на оценку риска госпитализации врачами отделения неотложной помощи в молчаливом проспективном исследовании. Исследователи опрашивают врачей отделения неотложной помощи, которые в настоящее время не лечат пациентов, используя данные в реальном времени. Чтобы количественно оценить влияние модели на оценку риска госпитализации врачами отделения неотложной помощи, исследователи собирают оценки врачей до и после консультации с прогнозом модели (исходным или обновленным).
Исследователи измеряют приверженность врачей отделения неотложной помощи рекомендациям модели, а также точность прогнозирования и объективность последующих результатов лечения пациентов. Результатом этого исследования является эмпирическая оценка того, в какой степени справедливые модели ОД могут влиять на решения о приеме в учреждения для смягчения неравенства в сфере здравоохранения.
Обзор исследования
Статус
Условия
Подробное описание
Конкретные цели/задачи:
- Измерьте влияние обмена модельным прогнозом госпитализации на оценку лечащим врачом состояния пациента в течение одного часа с момента поступления в третичную академическую педиатрическую больницу.
- Измерьте влияние совместного использования прогноза модели из модели, настроенной на равную производительность подгрупп, на оценку лечащим врачом состояния пациента в течение одного часа с момента обращения в третичную академическую педиатрическую больницу.
Предыстория и значение:
Модели машинного обучения (МО) все чаще обеспечивают поддержку принятия клинических решений (CDS) для медицинских бригад, помогая расставить приоритеты для отдельных пациентов в зависимости от их прогнозируемых потребностей в отношении здоровья и результатов. Методы искусственного интеллекта и машинного обучения могут оказать особенно сильное влияние на распределение ресурсов в отделениях неотложной помощи (ED) по всей территории США, которые, по мнению Института медицины, «приближаются к критической точке» избыточной мощности. К сожалению, модели часто плохо работают на дезинвестированных группах населения по сравнению с населением в целом. В результате модели ОД могут усугубить неравенство в состоянии здоровья на последующих этапах, поскольку они неэффективны для маргинализированных групп пациентов, особенно когда модели распространяются на несколько центров ухода или используются без мониторинга подгрупп в течение длительных периодов времени.
В последние годы было разработано множество моделей прогнозирования для прогнозирования расположения пациентов в отделениях неотложной помощи, включая инструмент прогнозирования, разработанный нашей группой и в настоящее время находящийся на стадии пилотного проекта в Бостонской детской больнице, больнице Саут-Шор и детской больнице Лос-Анджелеса. Наш инструмент прогнозирования, Predictor of Patient Placement (POPP), обеспечивает точную вероятность госпитализации в режиме реального времени на основе данных, доступных в электронной медицинской карте на момент посещения. Предварительное уведомление о вероятной госпитализации может оказать важное влияние на время ожидания и посадки в отделение неотложной помощи, что потенциально может улучшить поток пациентов и удовлетворенность пациентов.
С этой целью исследовательская группа подала заявку на грант в Национальную медицинскую библиотеку (NLM) [1R01LM014300 - 01A1], которая исследует разработку и проверку моделей прогнозирования приема пациентов, учитывающих справедливость. Цель 2 этого гранта изучает влияние этих моделей на оценку состояния пациентов врачами отделения неотложной помощи и соответствует этому протоколу. НОД заявил о своем намерении профинансировать это предложение, и следователи находятся в процессе подачи документов для завершения решения. Этот компонент исследования запланирован на 3-й год исследования.
Предварительные исследования
Исследователи провели серию первоначальных ретроспективных исследований, которые установили, что госпитализация пациентов может быть предсказана с помощью моделей машинного обучения заранее в отделении неотложной помощи BCH, постепенно во время визита, а также в других медицинских центрах с хорошей точностью (AUROC 0,9-0,93). .
Затем исследователи обнаружили, что точность POPP в прогнозировании вероятности госпитализации повышает ценность гештальт-оценки лечащих врачей отделения неотложной помощи. Положительная прогностическая ценность прогноза госпитализации составила 66% для врачей, 73% для POPP и 86% для гибридной модели, объединяющей эти две модели.
Наконец, исследователи разработали методы последующей обработки моделей прогнозирования ЭД, чтобы сделать их хорошо откалиброванными по демографическим группам пациентов, определяемым по расе, полу и страховому продукту.
Прогнозы модели в настоящее время используются для координации работы койки, но, учитывая их высокую ценность, они также могут улучшить процесс принятия решений у постели больного. С помощью этого исследования наша цель — проверить в смоделированных, безопасных и реалистичных условиях, как рекомендации модели влияют на оценку вероятности госпитализации лечащими врачами отделения неотложной помощи.
Тип исследования
Регистрация (Оцененный)
Фаза
- Непригодный
Контакты и местонахождение
Контакты исследования
- Имя: William La Cava, PhD
- Номер телефона: 4133200544
- Электронная почта: william.lacava@childrens.harvard.edu
Учебное резервное копирование контактов
- Имя: Andrew Fine, MD
- Номер телефона: 617-355-9696
- Электронная почта: andrew.fine@childrens.harvard.edu
Критерии участия
Критерии приемлемости
Возраст, подходящий для обучения
- Взрослый
- Пожилой взрослый
Принимает здоровых добровольцев
Описание
Критерии включения:
- Сертифицированные Советом врачи отделения неотложной помощи, которые в настоящее время работают в Бостонской детской больнице.
Критерий исключения:
- Врачи полностью исключаются из опросов пациентов, за которыми они в настоящее время ухаживают.
Учебный план
Как устроено исследование?
Детали дизайна
- Основная цель: Другой
- Распределение: Рандомизированный
- Интервенционная модель: Последовательное назначение
- Маскировка: Тройной
Оружие и интервенции
Группа участников / Армия |
Вмешательство/лечение |
|---|---|
|
Без вмешательства: Осмотр врача перед вмешательством
Никакого вмешательства.
Врач опрашивается для оценки состояния пациента.
|
|
|
Активный компаратор: Оценка врача после вмешательства базовой модели
Врачу демонстрируются рекомендации по базовой модели поведения пациента, включая описание факторов, влияющих на прогноз модели.
|
Прогнозирование модели поведения пациента, включая оценки важности функций, способствующие прогнозированию.
|
|
Активный компаратор: Оценка врача после вмешательства модели, ориентированной на справедливость
Врачу демонстрируются рекомендации по модели, формирующие модель, настроенную для работы подгруппы в зависимости от характера пациента, включая описание факторов, влияющих на прогноз модели.
|
Прогнозирование модели поведения пациента, включая оценки важности функций, способствующие прогнозированию.
Эта модель была настроена для минимизации ошибок калибровки подгруппы.
|
Что измеряет исследование?
Первичные показатели результатов
Мера результата |
Мера Описание |
Временное ограничение |
|---|---|---|
|
Распространение неотложной помощи по оценке врача (вероятность госпитализации)
Временное ограничение: В течение 24 часов после опроса
|
Первичный результат — это оцененное врачом расположение отделения неотложной помощи (классифицированное как госпитализация или выписка) до и после просмотра прогноза модели по сравнению с окончательным расположением пациента.
|
В течение 24 часов после опроса
|
|
Окончательное решение о пациенте (госпитализирован/выписан)
Временное ограничение: В течение 24 часов после опроса
|
Окончательное решение о пациенте независимо от того, госпитализирован ли он в стационар или выписан
|
В течение 24 часов после опроса
|
Вторичные показатели результатов
Мера результата |
Мера Описание |
Временное ограничение |
|---|---|---|
|
Распространение неотложной помощи по модели
Временное ограничение: В течение 24 часов после опроса
|
Оценка прогнозируемой модели расположения отделения неотложной помощи по сравнению с окончательным расположением пациента
|
В течение 24 часов после опроса
|
Соавторы и исследователи
Спонсор
Публикации и полезные ссылки
Общие публикации
- Barak-Corren Y, Israelit SH, Reis BY. Progressive prediction of hospitalisation in the emergency department: uncovering hidden patterns to improve patient flow. Emerg Med J. 2017 May;34(5):308-314. doi: 10.1136/emermed-2014-203819. Epub 2017 Feb 10.
- Barak-Corren Y, Agarwal I, Michelson KA, Lyons TW, Neuman MI, Lipsett SC, Kimia AA, Eisenberg MA, Capraro AJ, Levy JA, Hudgins JD, Reis BY, Fine AM. Prediction of patient disposition: comparison of computer and human approaches and a proposed synthesis. J Am Med Inform Assoc. 2021 Jul 30;28(8):1736-1745. doi: 10.1093/jamia/ocab076.
- Barak-Corren Y, Chaudhari P, Perniciaro J, Waltzman M, Fine AM, Reis BY. Prediction across healthcare settings: a case study in predicting emergency department disposition. NPJ Digit Med. 2021 Dec 15;4(1):169. doi: 10.1038/s41746-021-00537-x.
- Barak-Corren Y, Fine AM, Reis BY. Early Prediction Model of Patient Hospitalization From the Pediatric Emergency Department. Pediatrics. 2017 May;139(5):e20162785. doi: 10.1542/peds.2016-2785.
- La Cava WG, Lett E, Wan G. Fair admission risk prediction with proportional multicalibration. Proc Mach Learn Res. 2023;209:350-378.
Даты записи исследования
Изучение основных дат
Начало исследования (Оцененный)
Первичное завершение (Оцененный)
Завершение исследования (Оцененный)
Даты регистрации исследования
Первый отправленный
Впервые представлено, что соответствует критериям контроля качества
Первый опубликованный (Действительный)
Обновления учебных записей
Последнее опубликованное обновление (Действительный)
Последнее отправленное обновление, отвечающее критериям контроля качества
Последняя проверка
Дополнительная информация
Термины, связанные с этим исследованием
Другие идентификационные номера исследования
- IRB-P00048537
Планирование данных отдельных участников (IPD)
Планируете делиться данными об отдельных участниках (IPD)?
Информация о лекарствах и устройствах, исследовательские документы
Изучает лекарственный продукт, регулируемый FDA США.
Изучает продукт устройства, регулируемый Управлением по санитарному надзору за качеством пищевых продуктов и медикаментов США.
Эта информация была получена непосредственно с веб-сайта clinicaltrials.gov без каких-либо изменений. Если у вас есть запросы на изменение, удаление или обновление сведений об исследовании, обращайтесь по адресу register@clinicaltrials.gov. Как только изменение будет реализовано на clinicaltrials.gov, оно будет автоматически обновлено и на нашем веб-сайте. .