- ICH GCP
- Registr klinických studií v USA
- Klinická studie NCT06434220
Vliv prediktivního modelu na hodnocení dispozice pacienta lékařem ED
Cílem této studie je změřit dopad algoritmů uvědomujících si spravedlnost na předpovědi lékaře o přijetí pacienta s ED. Pomocí experimentálně ověřeného modelu strojového učení vyladěného pro spravedlivé výsledky vyšetřovatelé kvantifikují dopad modelových doporučení na hodnocení rizika přijetí lékařem ED v tiché prospektivní studii. Vyšetřovatelé zkoumají lékaře na ED, kteří se v současné době nestarají o pacienty, pomocí živých dat z místa. Aby bylo možné kvantifikovat dopad modelu na hodnocení rizika přijetí lékařem ED, vyšetřovatelé shromažďují hodnocení lékařů před a po konzultaci (původní nebo aktualizované) predikce modelu.
Vyšetřovatelé měří přilnavost lékařů ED k návrhům modelu spolu s prediktivní přesností a rovností následných výsledků pacientů. Výsledkem této studie je empirické měřítko toho, do jaké míry mohou spravedlivé modely ML ovlivnit rozhodnutí o přijetí ke zmírnění rozdílů ve zdravotní péči.
Přehled studie
Postavení
Podmínky
Detailní popis
Konkrétní cíle/cíle:
- Změřte vliv sdílení modelové predikce přijetí na posouzení dispozice pacienta ošetřujícím lékařem do jedné hodiny od prezentace v terciární akademické pediatrické nemocnici.
- Změřte vliv sdílení modelové predikce z modelu vyladěného pro stejný výkon podskupiny na hodnocení dispozice pacienta ošetřujícím lékařem do jedné hodiny od prezentace v terciární akademické pediatrické nemocnici.
Pozadí a význam:
Modely strojového učení (ML) stále více poskytují podporu klinického rozhodování (CDS) pečovatelským týmům, aby pomohly upřednostňovat jednotlivce pro konkrétní péči na základě jejich předpokládaných zdravotních potřeb a výsledků. Metody AI/ML mohou mít obzvláště velký dopad na přidělování zdrojů na pohotovostních odděleních (ED) po celých Spojených státech, která byla podle Institutu pro lékařství popsána jako „blízko bodu zlomu“ nadměrné kapacity. Bohužel modely často fungují špatně na deinvestovaných subpopulacích ve vztahu k populaci jako celku. V důsledku toho mohou modely ML zhoršit disparity ve zdravotním stavu navazujících na nižší výkony u marginalizovaných subpopulací pacientů, zejména pokud jsou modely rozšířeny na více center péče a nebo jsou používány bez dlouhodobého sledování podskupin.
V posledních letech bylo vyvinuto mnoho predikčních modelů pro predikci pacientových dispozic z ED, včetně predikčního nástroje vyvinutého naší skupinou a v současné době ve zkušebních fázích v Boston Children's Hospital, South Shore Hospital a Children's Hospital of Los-Angeles. Náš predikční nástroj, Predictor of Patient Placement (POPP), poskytuje přesnou pravděpodobnost přijetí v reálném čase na základě údajů dostupných v elektronickém zdravotním záznamu v době návštěvy. Předběžné oznámení o pravděpodobných přijetích může mít významný dopad na dobu čekání a nástupu na ED s potenciálem zlepšit průtok a spokojenost pacientů.
Za tímto účelem výzkumný tým předložil návrh grantu Národní lékařské knihovně (NLM) [1R01LM014300 - 01A1], která zkoumá vývoj a validaci predikčních modelů přijímání pacientů s ohledem na spravedlnost. Cíl 2 tohoto grantu studuje účinek těchto modelů na hodnocení dispozice pacienta lékařem ED a odpovídá tomuto protokolu. NLM oznámilo svůj záměr financovat tento návrh a vyšetřovatelé v současné době předkládají dokumenty k dokončení ocenění. Tato část studia je určena pro 3. ročník studia.
Předběžné studie
Vyšetřovatelé provedli řadu počátečních retrospektivních studií, které prokázaly, že přijetí pacienta lze předvídat pomocí modelů strojového učení předem v BCH ED, postupně během návštěvy, stejně jako v jiných lékařských centrech s dobrou přesností (AUROC 0,9-0,93). .
Dále vyšetřovatelé zjistili, že přesnost POPP v predikci pravděpodobnosti přijetí přidala hodnotu gestalt hodnocením ošetřujících lékařů ED. Pozitivní prediktivní hodnota pro predikci přijetí byla 66 % pro klinické lékaře, 73 % pro POPP a 86 % pro hybridní model kombinující obojí.
Nakonec výzkumníci vyvinuli metody pro následné zpracování predikčních modelů ED, aby byly dobře kalibrované napříč demografickými skupinami pacientů definovanými podle rasy, pohlaví a pojistného produktu.
Modelové predikce se v současnosti používají jako pomoc při koordinaci lůžka, ale vzhledem k jejich vysoké hodnotě mohou také zlepšit rozhodování u lůžka. Naším cílem je nyní pomocí této studie otestovat v simulovaném, bezpečném a realistickém prostředí, jak modelová doporučení ovlivňují hodnocení pravděpodobnosti přijetí ošetřujícími lékaři na ED.
Typ studie
Zápis (Odhadovaný)
Fáze
- Nelze použít
Kontakty a umístění
Studijní kontakt
- Jméno: William La Cava, PhD
- Telefonní číslo: 4133200544
- E-mail: william.lacava@childrens.harvard.edu
Studijní záloha kontaktů
- Jméno: Andrew Fine, MD
- Telefonní číslo: 617-355-9696
- E-mail: andrew.fine@childrens.harvard.edu
Kritéria účasti
Kritéria způsobilosti
Věk způsobilý ke studiu
- Dospělý
- Starší dospělý
Přijímá zdravé dobrovolníky
Popis
Kritéria pro zařazení:
- Board certifikované pohotovostní oddělení ošetřujících lékařů, kteří jsou v současné době zaměstnáni Boston Children's Hospital
Kritéria vyloučení:
- Lékaři jsou vyloučeni z úplných průzkumů u pacientů, o které se aktuálně starají
Studijní plán
Jak je studie koncipována?
Detaily designu
- Primární účel: Jiný
- Přidělení: Randomizované
- Intervenční model: Sekvenční přiřazení
- Maskování: Trojnásobný
Zbraně a zásahy
Skupina účastníků / Arm |
Intervence / Léčba |
|---|---|
|
Žádný zásah: Posouzení lékařem před zákrokem
Žádný zásah.
Lékař je dotázán, aby poskytl posouzení stavu pacienta.
|
|
|
Aktivní komparátor: Hodnocení lékařem po intervenci základního modelu
Lékaři je ukázáno doporučení základního modelu pro dispozice pacienta včetně popisu faktorů ovlivňujících predikci modelu.
|
Modelová predikce pacientových dispozic včetně skóre důležitosti vlastností řídící predikci.
|
|
Aktivní komparátor: Posouzení lékařem po zásahu modelu s vědomím poctivosti
Lékaři je ukázáno modelové doporučení z modelu vyladěného pro výkon podskupiny pro dispozice pacienta včetně popisu faktorů ovlivňujících modelovou predikci.
|
Modelová predikce pacientových dispozic včetně skóre důležitosti vlastností řídící predikci.
Tento model byl vyladěn tak, aby se minimalizovaly chyby kalibrace podskupiny.
|
Co je měření studie?
Primární výstupní opatření
Měření výsledku |
Popis opatření |
Časové okno |
|---|---|---|
|
Dispozice k ED (pravděpodobnost přijetí)
Časové okno: Do 24 hodin od průzkumu
|
Primárním výsledkem je lékařem zhodnocená dispozice ED (kategorizovaná jako přijetí nebo propuštění), před a po zobrazení modelové predikce, ve srovnání s konečnou dispozicí pacienta
|
Do 24 hodin od průzkumu
|
|
Konečná dispozice pacienta (přijatý/propuštěný)
Časové okno: Do 24 hodin od průzkumu
|
Konečná dispozice pacienta, zda je přijat do lůžkové služby nebo propuštěn
|
Do 24 hodin od průzkumu
|
Sekundární výstupní opatření
Měření výsledku |
Popis opatření |
Časové okno |
|---|---|---|
|
Modelově hodnocená ED dispozice
Časové okno: Do 24 hodin od průzkumu
|
Modelová predikce je hodnocení dispozice ED ve srovnání s konečnou dispozicí pacienta
|
Do 24 hodin od průzkumu
|
Spolupracovníci a vyšetřovatelé
Sponzor
Publikace a užitečné odkazy
Obecné publikace
- Barak-Corren Y, Israelit SH, Reis BY. Progressive prediction of hospitalisation in the emergency department: uncovering hidden patterns to improve patient flow. Emerg Med J. 2017 May;34(5):308-314. doi: 10.1136/emermed-2014-203819. Epub 2017 Feb 10.
- Barak-Corren Y, Agarwal I, Michelson KA, Lyons TW, Neuman MI, Lipsett SC, Kimia AA, Eisenberg MA, Capraro AJ, Levy JA, Hudgins JD, Reis BY, Fine AM. Prediction of patient disposition: comparison of computer and human approaches and a proposed synthesis. J Am Med Inform Assoc. 2021 Jul 30;28(8):1736-1745. doi: 10.1093/jamia/ocab076.
- Barak-Corren Y, Chaudhari P, Perniciaro J, Waltzman M, Fine AM, Reis BY. Prediction across healthcare settings: a case study in predicting emergency department disposition. NPJ Digit Med. 2021 Dec 15;4(1):169. doi: 10.1038/s41746-021-00537-x.
- Barak-Corren Y, Fine AM, Reis BY. Early Prediction Model of Patient Hospitalization From the Pediatric Emergency Department. Pediatrics. 2017 May;139(5):e20162785. doi: 10.1542/peds.2016-2785.
- La Cava WG, Lett E, Wan G. Fair admission risk prediction with proportional multicalibration. Proc Mach Learn Res. 2023;209:350-378.
Termíny studijních záznamů
Hlavní termíny studia
Začátek studia (Odhadovaný)
Primární dokončení (Odhadovaný)
Dokončení studie (Odhadovaný)
Termíny zápisu do studia
První předloženo
První předloženo, které splnilo kritéria kontroly kvality
První zveřejněno (Aktuální)
Aktualizace studijních záznamů
Poslední zveřejněná aktualizace (Aktuální)
Odeslaná poslední aktualizace, která splnila kritéria kontroly kvality
Naposledy ověřeno
Více informací
Termíny související s touto studií
Další identifikační čísla studie
- IRB-P00048537
Plán pro data jednotlivých účastníků (IPD)
Plánujete sdílet data jednotlivých účastníků (IPD)?
Informace o lécích a zařízeních, studijní dokumenty
Studuje lékový produkt regulovaný americkým FDA
Studuje produkt zařízení regulovaný americkým úřadem FDA
Tyto informace byly beze změn načteny přímo z webu clinicaltrials.gov. Máte-li jakékoli požadavky na změnu, odstranění nebo aktualizaci podrobností studie, kontaktujte prosím register@clinicaltrials.gov. Jakmile bude změna implementována na clinicaltrials.gov, bude automaticky aktualizována i na našem webu .
Klinické studie na Hodnocení výsledku pacienta
-
Mead Johnson NutritionChulalongkorn University; Ministry of Health, ThailandZatím nenabírámeOutcome Assessment
-
National Taiwan University HospitalNábor
-
Derince Training and Research HospitalDokončenoSpokojenost pacienta | Outcome Assessment
-
University of ZurichDokončenoOutcome Assessment, Health CareŠvýcarsko
-
University of Texas Southwestern Medical CenterDokončenoInterrater Reliability mezi pupillary Assessment
-
Chang Gung Memorial HospitalNeznámýHemodynamické monitorování | Peroperační péče | Outcome Assessment
-
RANDAktivní, ne náborOutcome Assessment | Zdravotní služby pro matkyNigérie
-
National Cancer Institute (NCI)DokončenoNovotvar | Rozdíly ve zdravotnictví | Dostupnost zdravotnických služeb | Outcome AssessmentSpojené státy
-
Dana-Farber Cancer InstituteNational Cancer Institute (NCI)DokončenoKvalita života | Paliativní péče | Outcome Assessment | Dětský novotvarSpojené státy
-
University of California, Los AngelesDokončenoOutcome Assessment | Anestézie bez opiátů | Opioidní analgezie | Kvalita obnovy (QoR-15)Spojené státy