LLM-генерируемые понятные резюме для отчетов МРТ головного мозга (CLEAR-HEAD)

Фон Головные боли составляют приблизительно от 2% до 4% обращений в отделения неотложной помощи, что соответствует около 450 000 консультаций ежегодно во Франции. Хотя 95% этих случаев являются доброкачественными первичными головными болями, выявление вторичных причин, требующих неотложного лечения, имеет критическое значение и часто приводит к увеличению использования нейровизуализации, такой как МРТ. Однако радиологические заключения часто содержат сложную медицинскую терминологию, которую пациентам и врачам-неспециалистам может быть трудно понять, что потенциально вызывает путаницу или тревогу. Большие языковые модели (LLM) продемонстрировали потенциал для упрощения сложных медицинских текстов. Хотя существуют коммерческие модели, модели с открытыми весами (которые могут быть развернуты локально для обеспечения безопасности данных) предлагают многообещающий путь для клинической интеграции. Цель данного исследования — оценить эффективность сгенерированного ИИ резюме на простом языке в улучшении понимания пациентами заключений МРТ головного мозга.

Дизайн исследования Это рандомизированное, контролируемое, простое слепое исследование, вложенное в электронную когорту COMPARE. В исследовании используется дизайн параллельных групп с соотношением распределения 1:1. Все исследование проводится удаленно через защищенные онлайн-формы.

Участники В исследовании участвуют взрослые добровольцы, уже включенные в электронную когорту COMPARE. Участники должны обладать достаточным знанием письменного французского языка для чтения заключений и заполнения анкет. Для включения не требуется наличия конкретного медицинского состояния, так как в исследовании используются вымышленные клинические случаи.

Вмешательство и процедуры Участники рандомизируются в одну из двух групп с помощью процедуры минимизации, балансирующей по анамнезу МРТ головного мозга и известной неврологической патологии. Каждого участника просят прочитать шесть вымышленных заключений МРТ головного мозга, моделирующих типичные сценарии неотложной головной боли. Шесть заключений охватывают три клинические ситуации: два с нормальными результатами, два со случайными находками, не объясняющими головную боль, и два с отклонениями, объясняющими головную боль. В экспериментальной группе участники получают стандартное заключение МРТ, дополненное структурированным абзацем-резюме, сгенерированным LLM с открытыми весами, вставленным под разделом «Резюме для пациента и врача-нерадиолога». В контрольной группе участники получают стандартное заключение МРТ в его исходной версии без сгенерированного ИИ резюме.

Критерии оценки Сразу после прочтения каждого заключения участники заполняют стандартизированную анкету. Первичным критерием является понимание заключения, измеряемое точностью ответа на бинарный вопрос: Найдено ли в данном заключении вероятное объяснение головной боли? Вторичные критерии включают удовлетворенность участника, измеряемую по шкале Лайкерта, воспринимаемую потребность в профессиональном разъяснении, воспринимаемую способность объяснить результаты родственнику и прогнозируемые уровни тревожности.

Статистический анализ Первичный анализ сравнит долю правильных ответов между группами с использованием смешанной модели логистической регрессии. Эта модель будет включать группу вмешательства в качестве фиксированного эффекта и учитывать перекрестные случайные эффекты (участник и заключение) для управления внутрииндивидуальной корреляцией и вариабельностью между клиническими случаями. Размер выборки рассчитан на 412 участников (206 в каждой группе) для обнаружения разницы в понимании в 10% с мощностью 95%.