Ретроспективное исследование для нескольких читателей, посвященное внедрению Carebot AI CXR 2.0.21-v2.01 в повседневную клиническую рентгенологическую практику

Ретроспективный сборник за период 18 октября 2022 г. и 17 ноября 2022 г.

Всего за указанный период в отделении было получено 1073 рентгенографии органов грудной клетки. Сбор данных оставался нетронутым и неизменным на протяжении всего этапа тестирования, что обеспечивает целостность набора данных. Собранная выборка точно отражает распространенность результатов в наблюдаемой популяции. После исключения неприемлемых исследований, таких как рентгенограммы пациентов моложе 18 лет, рентгенограммы в боковой проекции и сканы недостаточного качества, для дальнейшей оценки было идентифицировано в общей сложности 956 соответствующих рентгенограмм.

Устройство: Carebot AI CXR

Предлагаемый DLAD (Carebot AI CXR) представляет собой медицинское устройство, основанное на глубоком обучении, предназначенное для помощи радиологам в интерпретации рентгеновских изображений грудной клетки, полученных в переднезадней (AP) или заднепередней (PA) проекции. Используя передовые алгоритмы глубокого обучения, это решение позволяет автоматически обнаруживать аномальные результаты путем анализа визуальных паттернов, связанных с определенными условиями. Целевые аномалии включают ателектаз (ATE), консолидацию (CON), плевральный выпот (EFF), поражение легких (LES), подкожную эмфизему (SCE), кардиомегалию (CMG) и пневмоторакс (PNO). DLAD функционирует как алгоритм прогнозирования, дополненный различными периферийными приложениями, такими как веб-инструменты связи, возможности преобразования файлов DICOM, а также библиотеки хранения и отчетности, поддерживающие форматы структурированного отчета DICOM и состояния презентации DICOM.

Тест производительности

Основная цель состоит в том, чтобы оценить рабочие параметры предлагаемого DLAD (Carebot AI CXR) по сравнению с отдельными радиологами. Тест производительности включает в себя чувствительность и специфичность, положительное и отрицательное отношение правдоподобия, а также положительную и отрицательную прогностическую ценность. Вышеупомянутые параметры статистически сравниваются с использованием доверительных интервалов (ДИ) и p-значений. Процедура сравнения состоит из двух этапов: проводится глобальная проверка гипотезы, чтобы определить, существуют ли существенные различия между DLAD и радиологами. Если проверка глобальной гипотезы дает значимый результат, выполняются проверки отдельных гипотез. Кроме того, для контроля общей частоты ошибок применяются множественные методы сравнения, такие как метод Макнемара с поправкой на непрерывность для Se и Sp, метод Холма для LR и статистика взвешенных обобщенных баллов для PV. Все тесты выполняются как двусторонние тесты с уровнем значимости 5%.