Эта страница была переведена автоматически, точность перевода не гарантируется. Пожалуйста, обратитесь к английской версии для исходного текста.

Улучшение междисциплинарного понимания заметок по офтальмологии с помощью локальной модели большого языка

1 октября 2024 г. обновлено: John J Chen
В этом проспективном рандомизированном контролируемом исследовании оценивалась эффективность добавления кратких изложений на простом языке (PLS), созданных с помощью модели большого языка (LLM), к стандартным офтальмологическим заметкам (SON) в улучшении понимания среди поставщиков услуг, не являющихся офтальмологами. В исследовании использовались опросы для оценки понимания и удовлетворенности медицинских работников, не являющихся офтальмологами, записями, а также оценки офтальмологов точности, безопасности и временных затрат PLS. Также был проведен объективный семантический и лингвистический анализ СПЛ.

Обзор исследования

Тип исследования

Интервенционный

Регистрация (Действительный)

851

Фаза

  • Непригодный

Контакты и местонахождение

В этом разделе приведены контактные данные лиц, проводящих исследование, и информация о том, где проводится это исследование.

Места учебы

Критерии участия

Исследователи ищут людей, которые соответствуют определенному описанию, называемому критериям приемлемости. Некоторыми примерами этих критериев являются общее состояние здоровья человека или предшествующее лечение.

Критерии приемлемости

Возраст, подходящий для обучения

  • Взрослый
  • Пожилой взрослый

Принимает здоровых добровольцев

Нет

Описание

Критерии включения:

  • Осмотр офтальмолога офтальмологического отделения клиники Мэйо в Рочестере, штат Миннесота, в стационарном или амбулаторном режиме в период с 1 февраля 2024 г. по 31 мая 2024 г.

Критерии исключения:

  • В медицинской документации нет внутрисетевых поставщиков медицинских услуг, не являющихся офтальмологами.
  • Посещения только для процедур, содержащие только примечания к процедуре

Учебный план

В этом разделе представлена ​​подробная информация о плане исследования, в том числе о том, как планируется исследование и что оно измеряет.

Как устроено исследование?

Детали дизайна

  • Основная цель: Исследования в области здравоохранения
  • Распределение: Рандомизированный
  • Интервенционная модель: Параллельное назначение
  • Маскировка: Нет (открытая этикетка)

Оружие и интервенции

Группа участников / Армия
Вмешательство/лечение
Без вмешательства: Контроль
Участники получают стандартные офтальмологические конспекты без каких-либо дополнений.
Экспериментальный: Вмешательство
Участники получают стандартные офтальмологические заметки с приложенным кратким изложением, созданным LLM, простым языком, проверенным и отредактированным офтальмологом. Краткое изложение, написанное простым языком, четко помечено как созданное в рамках инициативы по улучшению качества.
Проспективное рандомизированное исследование по улучшению качества с реальным внедрением кратких изложений офтальмологических заметок на простом языке, созданных с помощью модели большого языка.

Что измеряет исследование?

Первичные показатели результатов

Мера результата
Мера Описание
Временное ограничение
Понимание и удовлетворенность записок, не являющихся офтальмологами
Временное ограничение: От регистрации до 8 недель после регистрации

Оценивается с помощью ответов на опрос, оценивающих понимание офтальмологического диагноза пациента, удовлетворенность примечанием и общее предпочтение между «Стандартной офтальмологической запиской» и «Стандартной офтальмологической запиской + простым языком».

Степень понимания оценивалась по следующей шкале Лайкерта:

Совсем не нейтрально Умеренно Очень много

Удовлетворенность оценивалась по следующей шкале Лайкерта:

Совсем не удовлетворен Скорее не удовлетворен Нейтрально Скорее удовлетворен Удовлетворен

Предпочтение между типами банкнот оценивалось по следующей шкале Лайкерта:

Стандартное примечание, много Стандартное примечание, в некоторой степени нейтральное Краткое изложение простым языком, в некоторой степени Краткое изложение простым языком, много

От регистрации до 8 недель после регистрации

Вторичные показатели результатов

Мера результата
Мера Описание
Временное ограничение
Оценка офтальмологом точности сводных данных и временных затрат
Временное ограничение: Оценено в один момент времени <24 часов после регистрации

Оценивается с помощью ответов на опрос относительно точности краткого изложения на простом языке, отражающего результаты Стандартных офтальмологических заметок, времени, затраченного на просмотр/редактирование, и воспринимаемой нагрузки.

Точность отражения результатов оценивалась по следующей шкале Лайкерта:

Совсем не нейтрально Немного Очень много

Время, затраченное на просмотр/редактирование, учитывалось с использованием следующих опций:

<1 минута

  1. минута
  2. минуты
  3. минуты
  4. минуты
  5. или больше минут

Воспринимаемое бремя оценивалось по следующей шкале Лайкерта:

Совсем не нейтрально Немного Очень много

Оценено в один момент времени <24 часов после регистрации
Семантическое и лингвистическое качество резюме на простом языке
Временное ограничение: Оценено в один момент времени <24 часов после регистрации

Легкость чтения Flesh

Шкала: от 0 (плохо) до 100 (хорошо).

Оценено в один момент времени <24 часов после регистрации
Семантическое и лингвистическое качество резюме на простом языке
Временное ограничение: Оценено в один момент времени <24 часов после регистрации

Уровень обучения Флеша-Кинкейда

Шкала: от 0 (самый трудный для чтения, самый высокий уровень успеваемости) до 80 (самый легкий для чтения, самый низкий уровень в классе).

Оценено в один момент времени <24 часов после регистрации
Семантическое и лингвистическое качество резюме на простом языке
Временное ограничение: Оценено в один момент времени <24 часов после регистрации

Индекс семантической меры тарабарщины (SMOG)

Шкала: от 0 (самый легкий для чтения) до 11 (самый трудный для чтения)

Оценено в один момент времени <24 часов после регистрации
Семантическое и лингвистическое качество резюме на простом языке
Временное ограничение: Оценено в один момент времени <24 часов после регистрации

BERTScore – мера лингвистического сходства

Шкала: от -1 (наименее похоже) до +1 (наиболее похоже).

Оценено в один момент времени <24 часов после регистрации
Семантическое и лингвистическое качество резюме на простом языке
Временное ограничение: Оценено в один момент времени <24 часов после регистрации

SBERT Косинусная мера языкового сходства

Шкала: от -1 (наименее похоже) до +1 (наиболее похоже).

Оценено в один момент времени <24 часов после регистрации

Другие показатели результатов

Мера результата
Мера Описание
Временное ограничение
Наличие ошибок, тип ошибок и потенциальный вред ошибок
Временное ограничение: Оценивается в один момент времени <24 часа после регистрации и снова в один момент времени через 8 недель после регистрации.

Наличие какой-либо неверной или отсутствующей информации в кратком изложении на простом языке, уровень ошибок, типы ошибок и рейтинг потенциального вреда.

Сообщалось о типах ошибок:

Результаты обследования HPI План диагностики Объяснение общего состояния здоровья глаз пациента Другое Н/Д

Вероятность причинения вреда оценивалась по следующей шкале:

Низкий риск Средний риск Высокий риск Н/Д

Рейтинг потенциального вреда оценивался по следующей шкале:

Легкий или средний вред Смерть или серьезный вред

Оценивается в один момент времени <24 часа после регистрации и снова в один момент времени через 8 недель после регистрации.

Соавторы и исследователи

Здесь вы найдете людей и организации, участвующие в этом исследовании.

Спонсор

Следователи

  • Директор по исследованиям: John J Chen, MD, PhD, Mayo Clinic

Даты записи исследования

Эти даты отслеживают ход отправки отчетов об исследованиях и сводных результатов на сайт ClinicalTrials.gov. Записи исследований и сообщаемые результаты проверяются Национальной медицинской библиотекой (NLM), чтобы убедиться, что они соответствуют определенным стандартам контроля качества, прежде чем публиковать их на общедоступном веб-сайте.

Изучение основных дат

Начало исследования (Действительный)

1 февраля 2024 г.

Первичное завершение (Действительный)

31 мая 2024 г.

Завершение исследования (Действительный)

31 мая 2024 г.

Даты регистрации исследования

Первый отправленный

30 сентября 2024 г.

Впервые представлено, что соответствует критериям контроля качества

1 октября 2024 г.

Первый опубликованный (Действительный)

3 октября 2024 г.

Обновления учебных записей

Последнее опубликованное обновление (Действительный)

3 октября 2024 г.

Последнее отправленное обновление, отвечающее критериям контроля качества

1 октября 2024 г.

Последняя проверка

1 октября 2024 г.

Дополнительная информация

Термины, связанные с этим исследованием

Другие идентификационные номера исследования

  • 24-000550

Планирование данных отдельных участников (IPD)

Планируете делиться данными об отдельных участниках (IPD)?

ДА

Описание плана IPD

Все собрано IPD.

Сроки обмена IPD

Начало после публикации без даты окончания

Критерии совместного доступа к IPD

Основные данные, подтверждающие выводы этого исследования, могут быть предоставлены клиническим исследователям и исследователям по запросу. Перед утверждением потребуются письменные запросы на обмен данными, включая план анализа. Эти запросы будут оцениваться индивидуально после консультаций с руководителями исследовательских групп и соисследователями, в зависимости от обстоятельств. Если другие исследователи заинтересованы в проведении дополнительных анализов, эти запросы можно направить соответствующему автору (PDT), и анализы будут выполнены в сотрудничестве с клиникой Майо. Во всех случаях любые данные и материалы, подлежащие совместному использованию, будут передаваться по соглашению о передаче материалов. Данные на индивидуальном уровне будут доступны, а обмен данными будет гарантировать, что права и конфиденциальность лиц, участвующих в исследовании, всегда будут защищены. Ожидаемый срок ответа на первоначальные запросы данных составляет 1 месяц.

Совместное использование IPD Поддерживающий тип информации

  • STUDY_PROTOCOL
  • АНАЛИТИЧЕСКИЙ_КОД
  • КСО

Информация о лекарствах и устройствах, исследовательские документы

Изучает лекарственный продукт, регулируемый FDA США.

Нет

Изучает продукт устройства, регулируемый Управлением по санитарному надзору за качеством пищевых продуктов и медикаментов США.

Нет

продукт, произведенный в США и экспортированный из США.

Нет

Эта информация была получена непосредственно с веб-сайта clinicaltrials.gov без каких-либо изменений. Если у вас есть запросы на изменение, удаление или обновление сведений об исследовании, обращайтесь по адресу register@clinicaltrials.gov. Как только изменение будет реализовано на clinicaltrials.gov, оно будет автоматически обновлено и на нашем веб-сайте. .

Подписаться