Сравнение производительности больших языковых моделей при интерпретации ультразвуковых изображений для блока TAP: двойное слепое проспективное исследование
Сравнение эффективности крупных языковых моделей в интерпретации ультразвуковых изображений при TAP-блокаде: двойное слепое проспективное исследование
Цель данного исследования — изучить, насколько точно две модели искусственного интеллекта (ИИ), Gemini 2.5 Pro и ChatGPT-5.1, могут интерпретировать ультразвуковые видео блока поперечной мышцы живота (TAP-блока) — техники регионарной анестезии, используемой для контроля боли после операции.
Основные вопросы, на которые направлено это исследование:
Насколько точно каждая модель ИИ может идентифицировать анатомические структуры на ультразвуковых видео TAP-блока? Могут ли модели ИИ правильно оценить распространение местного анестетика и определить, успешен ли блок? Насколько близко ответы моделей ИИ соответствуют оценкам экспертов-анестезиологов? Никаких дополнительных процедур с пациентами проводиться не будет. TAP-блоки будут выполнены в рамках стандартной клинической помощи, а ультразвуковые видео будут записаны и обезличены.
Участникам не потребуется делать ничего дополнительного для исследования. Опытные анестезиологи просмотрят видео и предоставят экспертные ответы. Моделям ИИ будут предоставлены те же видео и заданы те же вопросы. Второй эксперт, не знающий, какие ответы принадлежат людям, а какие — ИИ, сравнит все ответы.
Результаты помогут исследователям понять, могут ли передовые системы ИИ безопасно поддерживать клиницистов в интерпретации ультразвуковых процедур регионарной анестезии и улучшить обучение и принятие решений в анестезиологической практике.
Обзор исследования
Статус
Условия
Вмешательство/лечение
Подробное описание
Данное исследование направлено на оценку того, как две передовые модели искусственного интеллекта (ИИ), Gemini 2.5 Pro и ChatGPT-5.1, интерпретируют ультразвуковые видео процедур блокады поперечной мышцы живота (TAP). Блокады TAP выполняются в рамках рутинной клинической практики опытными анестезиологами. Ультразвуковые видео, записанные во время этих процедур, служат источником данных для данного исследования. Никаких дополнительных процедур или участия пациентов, помимо стандартного ухода, не требуется.
Обработка ультразвукового видео Все ультразвуковые записи будут полностью обезличены путем удаления имен пациентов, дат и любой другой идентифицирующей информации.
Gemini 2.5 Pro получит исходные видеофайлы. ChatGPT-5.1 получит сегменты в формате GIF высокого разрешения, сгенерированные из тех же записей.
Обе модели получат идентичные структурированные запросы, состоящие из восьми клинически значимых вопросов об анатомических структурах, размещении иглы, распространении местного анестетика, дерматомных эффектах и потенциальных проблемах безопасности.
Участие экспертов
Два эксперта-анестезиолога будут участвовать независимо:
Эксперт A просмотрит каждое ультразвуковое видео и ответит на тот же набор из восьми клинических вопросов. Эти ответы будут служить основным клиническим ориентиром, предоставленным человеком.
Эксперт B независимо оценит все ответы — от Эксперта A, Gemini и ChatGPT-5.1, после того как они будут обезличены и случайным образом упорядочены. Эксперт B не будет знать, исходит ли ответ от модели ИИ или от эксперта-человека. Эксперт B оценит анатомическую точность, ясность, клиническую уместность и общее качество содержания для каждого ответа.
Если Эксперт A и Эксперт B не согласятся в интерпретации или оценке качества любого ответа, третий эксперт (Эксперт C), также опытный в ультразвуковой регионарной анестезии, независимо рассмотрит соответствующие ответы. Оценка Эксперта C будет использована для разрешения расхождений и установления окончательного консенсуса.
Собранные данные
Для каждого видео блокады TAP будет записана следующая информация:
Детали ультразвукового исследования и процедуры. Демографические описатели пациента (возраст, пол, ИМТ, классификация ASA), используемые только для общей характеристики выборки.
Характеристики, связанные с производительностью ИИ, такие как полнота ответа, релевантность, уровень уверенности и время ответа.
Тип исследования
Регистрация (Оцененный)
Контакты и местонахождение
Контакты исследования
- Имя: Engin ihsan Turan, principal investigator
- Номер телефона: +905382431114
- Электронная почта: enginihsan@hotmail.com
Места учебы
-
-
Istanbul
-
Istanbul, Istanbul, Турция (Туркие), 34303
- Рекрутинг
- Health Science University İstanbul Kanuni Sultan Süleyman Education and Training Hospital
-
Контакт:
- Engin ihsan Turan
- Номер телефона: 05382431114
- Электронная почта: enginihsan@hotmail.com
-
-
Критерии участия
Критерии приемлемости
Возраст, подходящий для обучения
- Взрослый
- Пожилой взрослый
Принимает здоровых добровольцев
Метод выборки
Исследуемая популяция
Описание
Критерии включения:
- Взрослые в возрасте 18-85 лет
- Физическое состояние по ASA I-III
- Плановое хирургическое вмешательство с выполнением латерального TAP-блока в рамках стандартной анестезиологической помощи
- Полная процедура ультразвукового контроля блока записана на видео
- Способность предоставить письменное информированное согласие
Критерии исключения:
- Неудачная или неполная процедура TAP-блока
- Некачественное ультразвуковое видео (кончик иглы или распространение анестетика не видно)
- Отсутствие демографических или клинических данных
- Отзыв согласия в любое время
Учебный план
Как устроено исследование?
Детали дизайна
Что измеряет исследование?
Первичные показатели результатов
Мера результата |
Мера Описание |
Временное ограничение |
|---|---|---|
|
Точность анатомической интерпретации
Временное ограничение: На момент анализа видео
|
Для каждого ультразвукового видео будет оцениваться способность обеих моделей ИИ (ChatGPT-5.1 и Gemini 2.5 Pro) корректно идентифицировать ключевые анатомические структуры латерального TAP-блока (внутренняя косая мышца, поперечная мышца живота, фасциальная плоскость, кончик иглы).
Точность каждой модели будет сравниваться с эталонным ответом, определенным экспертами.
|
На момент анализа видео
|
Вторичные показатели результатов
Мера результата |
Мера Описание |
Временное ограничение |
|---|---|---|
|
Интерпретация успешного блокирования
Временное ограничение: На момент анализа видео.
|
Оценка того, правильно ли каждая модель ИИ определяет успешность блока на основе расположения иглы и распространения местного анестетика, по сравнению с экспертным референсным оцениванием.
|
На момент анализа видео.
|
|
Оценка плоскости иглы
Временное ограничение: В момент анализа видео.
|
Определение того, правильно ли оценивают модели ИИ расположение кончика иглы и находится ли он в правильной межфасциальной плоскости (фасция IO-TA), по сравнению с эталонным мнением эксперта.
|
В момент анализа видео.
|
|
Предсказание дерматомного уровня
Временное ограничение: В момент видеоанализа.
|
Сравнение прогнозируемого каждым ИИ-моделью дерматомного покрытия (например, T10-T12) с эталонным дерматомным уровнем, предоставленным экспертом.
|
В момент видеоанализа.
|
|
Оценка осведомлённости о рисках
Временное ограничение: В момент анализа видео.
|
Оценка того, правильно ли каждая модель ИИ идентифицирует потенциальные риски на ультразвуковых изображениях (например, близость брюшины, сосудистые структуры). 0 = отсутствие осведомлённости о рисках, 1 = частичная, 2 = полная и соответствующая идентификация рисков. |
В момент анализа видео.
|
|
Качество рекомендаций
Временное ограничение: В момент анализа видео.
|
Оценка целесообразности предложений каждой модели (например, необходимость дополнительной инъекции, репозиционирования) на основе ультразвуковой картины. Качественная оценка экспертом (0-10). |
В момент анализа видео.
|
|
Соглашение между экспертами
Временное ограничение: На этапе экспертной оценки.
|
Оценить, дают ли Эксперт A и Эксперт B согласованные оценки по каждому параметру; и разрешить расхождения с помощью Эксперта C при необходимости. Согласие / Несогласие разрешается третьим экспертом. |
На этапе экспертной оценки.
|
|
Время ответа ИИ
Временное ограничение: Захвачено автоматически во время вывода модели.
|
Время, необходимое каждой модели ИИ для генерации ответов на восемь стандартизированных вопросов. Секунды (непрерывная переменная). |
Захвачено автоматически во время вывода модели.
|
Соавторы и исследователи
Даты записи исследования
Изучение основных дат
Начало исследования (Действительный)
Первичное завершение (Оцененный)
Завершение исследования (Оцененный)
Даты регистрации исследования
Первый отправленный
Впервые представлено, что соответствует критериям контроля качества
Первый опубликованный (Действительный)
Обновления учебных записей
Последнее опубликованное обновление (Действительный)
Последнее отправленное обновление, отвечающее критериям контроля качества
Последняя проверка
Дополнительная информация
Термины, связанные с этим исследованием
Ключевые слова
Другие идентификационные номера исследования
- SUCCESS OF LLMs in TAP BLOCK
Планирование данных отдельных участников (IPD)
Планируете делиться данными об отдельных участниках (IPD)?
Информация о лекарствах и устройствах, исследовательские документы
Изучает лекарственный продукт, регулируемый FDA США.
Изучает продукт устройства, регулируемый Управлением по санитарному надзору за качеством пищевых продуктов и медикаментов США.
Эта информация была получена непосредственно с веб-сайта clinicaltrials.gov без каких-либо изменений. Если у вас есть запросы на изменение, удаление или обновление сведений об исследовании, обращайтесь по адресу register@clinicaltrials.gov. Как только изменение будет реализовано на clinicaltrials.gov, оно будет автоматически обновлено и на нашем веб-сайте. .