- ICH GCP
- Registr klinických studií v USA
- Klinická studie NCT07438743
Randomizovaná kontrolovaná studie o sumarizaci ambulantních záznamů pomocí AI Epic
Epický nástroj pro shrnutí grafů pomocí generativní umělé inteligence ke snížení kognitivní zátěže ambulantních poskytovatelů zdravotní péče: Randomizovaná kontrolovaná studie
Přehled studie
Detailní popis
Primárním cílem této studie je vyhodnotit dopad nástroje pro sumarizaci ambulantních záznamů vyvinutého pomocí generativní umělé inteligence v elektronické zdravotní dokumentaci na skóre sebehodnoceného pracovního zatížení lékařů (PTL), přičemž bude nástroj porovnán s kontrolní skupinou. Mezi průzkumné výsledky patří časové metriky odvozené z elektronické zdravotní dokumentace (Caboodle a Signal), index profesního naplnění (PFI), použitelnost (SUS), spokojenost a produktivita poskytovatelů a výsledky položek zkušenosti pacientů z CG-CAHPS. Také vyhodnotíme, zda znalost umělé inteligence modifikuje adopci a účinek nástroje pomocí krátké verze škály znalostí umělé inteligence Meta (MAILS). Na průzkumném základě také provedeme úpravy na základě specializace poskytovatele, přístupu k AI asistentovi s ambientním poslechem, složitosti panelu, věkové skupiny poskytovatele, pohlaví poskytovatele a časově proměnných účinků podle měsíce během studie.
Zapsaní účastníci jsou randomizováni do jedné ze dvou skupin. Randomizace bude stratifikována podle toho, zda má účastník aktivní licenci AI asistenta, a v rámci strat bude provedena randomizace s omezením kovariát, aby se zlepšila rovnováha na základním PTL (skóre přizpůsobené NASA-TLX) a upraveném základním času revize záznamů (odvozeném z Caboodle). Vzhledem k povaze intervence nelze účastníky zaslepit k přiřazení skupiny.
Primárním cílem této iniciativy je zlepšit kvalitu, efektivitu a obchodní operace v University of California, Los Angeles (UCLA) Health a poskytne informace pro provozní implementaci nástroje u všech poskytovatelů v rámci zdravotního systému UCLA Health. Přesto se výzkumný tým UCLA plánuje důkladně prozkoumat a publikovat dopad této intervence v celém zdravotním systému, což je důvod, proč výzkumný tým iniciativu předregistroval.
Typ studie
Zápis (Odhadovaný)
Fáze
- Nelze použít
Kontakty a umístění
Studijní místa
-
-
California
-
Los Angeles, California, Spojené státy, 90095
- University of California, Los Angeles
-
-
Kritéria účasti
Kritéria způsobilosti
Věk způsobilý ke studiu
- Dítě
- Dospělý
- Starší dospělý
Přijímá zdravé dobrovolníky
Popis
Kriteria pro zařazení:
- Ambulantní poskytovatelé péče v rámci systému UCLA Health včetně lékařů a pokročilých poskytovatelů praxe (APPs), jako jsou praktické sestry a lékaři asistenti s minimálně jednou polodenní klinickou sezí týdně.
- Poskytovatelé vyplní vstupní předprůzkum
Kriteria pro vyloučení:
• Poskytovatelé ve výcviku (např. rezidenti, medici) a psychologové
Studijní plán
Jak je studie koncipována?
Detaily designu
- Primární účel: Výzkum zdravotnických služeb
- Přidělení: Randomizované
- Intervenční model: Paralelní přiřazení
- Maskování: Singl
Zbraně a zásahy
Skupina účastníků / Arm |
Intervence / Léčba |
|---|---|
|
Experimentální: Intervenční rameno
Účastníci v této skupině budou mít přístup k nástroji Epic pro shrnutí ambulantní dokumentace a budou pokračovat ve své běžné klinické praxi, podporované generativním AI nástrojem, který je integrován v rámci EHR.
Nástroj poskytuje shrnutí pro poskytovatele a neposkytuje podporu klinického rozhodování. Mají přístup k výukovému modulu a tipům, a týdenním setkáním, které pomohou s jakýmikoli otázkami během prvních tří týdnů studie. |
Epicův generativní nástroj AI pro shrnutí grafů sumarizuje podmnožinu poznámek o pacientovi.
Použití nástroje je volitelné a je určeno výhradně k poskytnutí shrnutí pro poskytovatele a neposkytuje podporu klinického rozhodování.
Systém automaticky vybere nedávné poznámky nebo může poskytovatel ručně vybrat konkrétní poznámky, které ho zajímají.
Počet shrnutých poznámek je omezen omezeními počtu znaků v EHR, 24 000 anglických znaků nebo 30 poznámek.
Systém využívá AI k vytvoření krátkého shrnutí relevantních informací.
Shrnutí mají sloužit jako nástroj na pomoc poskytovatelům a nejsou určena k umístění do klinických poznámek.
Vytvořená shrnutí se aktuálně neukládají do pacientovy dokumentace.
|
|
Žádný zásah: Standardní péče
Účastníci v této větvi nebudou mít přístup k nástroji pro shrnutí grafů a budou pokračovat ve své obvyklé klinické praxi.
|
Co je měření studie?
Primární výstupní opatření
Měření výsledku |
Popis opatření |
Časové okno |
|---|---|---|
|
Změna od výchozí hodnoty zátěže úkolu lékaře
Časové okno: Výchozí hodnota a 90 dnů po počáteční expozici intervenci
|
Zátěž lékařských úkolů adaptovaná z NASA Task Load Index (TLX), validovaného nástroje pro hodnocení kognitivní zátěže související s EHR ve čtyřech dílčích škálách (mentální nároky, časové nároky, fyzické nároky a úsilí).
Tento výsledek je přizpůsoben tak, aby zachytil úkol předcházejícího zpracování dokumentace, definovaného pro tuto studii jako praxe prohlížení informací o pacientovi v EHR před návštěvou pacienta za účelem přípravy na setkání. Každá dílčí škála je hodnocena od 0 (nízká) do 100 (vysoká) a je agregována do škály 0–400 bodů. Pro tento výsledek nebudou shromažďovány žádné informace na úrovni pacienta. |
Výchozí hodnota a 90 dnů po počáteční expozici intervenci
|
Sekundární výstupní opatření
Měření výsledku |
Popis opatření |
Časové okno |
|---|---|---|
|
Změna v upraveném celkovém čase grafu na setkání
Časové okno: Výchozí hodnota, po 60 dnech vystavení zásahu a po 90 dnech vystavení zásahu.
|
Pomocí Caboodle, podnikového datového skladu Epic, použijeme přizpůsobenou metriku k měření času, který klinici stráví prohlížením pacientovy dokumentace.
Na základě interní validace, při které měli klinici přístup k nástroji pro sumarizaci dokumentace, metrika zahrnuje aktivity Caboodle Tier 1 odpovídající klinickému přehledu (všechny aktivity), dokumentaci omezenou pouze na předvyplňování dokumentace a další aktivity omezené na činnosti související s Navigátorem, stejně jako aktivitu věnovanou nástroji pro sumarizaci dokumentace.
Všechny aktivity psaní poznámek, zadávání objednávek a podepisování setkání jsou vyloučeny.
Čas po odhlášení je také vyloučen.
Změna bude hodnocena ve vztahu k 6měsíční retrospektivní základní linii.
Pro tento výsledkový ukazatel nebudou shromažďovány žádné informace na úrovni pacienta.
|
Výchozí hodnota, po 60 dnech vystavení zásahu a po 90 dnech vystavení zásahu.
|
|
Změna oproti výchozímu skóre Indexu profesního naplnění
Časové okno: Výchozí stav a 90 dní po prvotní expozici intervenci
|
Profesionální index naplnění (PFI) je ověřený 16položkový nástroj, který používá 5bodovou Likertovu škálu (0-4) k měření profesionálního naplnění, pracovního vyčerpání a mezilidského odcizení.
Syndrom vyhoření je hlášen na základě kombinovaných výsledků podškál pracovního vyčerpání a mezilidského odcizení. Vyšší skóre indikuje vyšší úroveň vyčerpání. Pro toto výsledkové měření nebudou shromažďovány žádné informace na úrovni pacienta. |
Výchozí stav a 90 dní po prvotní expozici intervenci
|
|
Změna oproti výchozí hodnotě sebeposuzované účinnosti před zahájením záznamu
Časové okno: Výchozí stav a 90 dní od počáteční expozice intervenci
|
Poskytovatelé odpoví na otázky týkající se vlastního hodnocení účinnosti a efektivity při předběžném zpracování dokumentace.
Otázky využívají 5bodovou Likertovu škálu k měření těchto metrik, přičemž vyšší skóre indikuje větší vlastní hodnocení efektivity a účinnosti.
|
Výchozí stav a 90 dní od počáteční expozice intervenci
|
|
Skóre spokojenosti poskytovatelů
Časové okno: 90 dní po prvotní expozici intervenci
|
Průzkum spokojenosti založený na vlastním vyjádření, který zahrnuje hodnocení lékaře o vlivu nástroje pro shrnutí záznamů na efektivitu a účinnost předchozího zpracování záznamů a další potenciální nezamýšlené důsledky.
Pro tento výsledek nebudou shromažďovány žádné informace na úrovni pacienta.
|
90 dní po prvotní expozici intervenci
|
|
Škála použitelnosti systému
Časové okno: 90 dní od počátečního vystavení intervenci
|
Systémová škála použitelnosti (SUS) je dotazník s deseti položkami, který používá 5bodovou Likertovu škálu k měření různých aspektů použitelnosti systému.
Celková škála se pohybuje v rozmezí 0–100.
Vyšší skóre SUS indikuje vyšší použitelnost.
|
90 dní od počátečního vystavení intervenci
|
|
Bezpečnostní události
Časové okno: Během 90denního období po počáteční expozici intervenci
|
Hodnocená bezpečnost klinikem u přehledů generovaných umělou inteligencí, včetně vnímané četnosti klinicky významných chyb a výskytu závažných bezpečnostních událostí během intervenčního období.
K tomuto výsledku nebudou shromažďovány žádné informace na úrovni pacienta.
|
Během 90denního období po počáteční expozici intervenci
|
|
Kvalitativní zpětná vazba specifická pro nástroj EHR
Časové okno: Během 90 dnů po počáteční expozici intervenci
|
Agregovaná zpětná vazba v reálném čase předložená klinickými lékaři prostřednictvím nativního sumarizačního rozhraní EHR během intervenčního období, včetně hodnocení přesnosti, úplnosti a halucinací.
Na úrovni pacientů nebudou pro tento výsledek shromažďovány žádné informace.
|
Během 90 dnů po počáteční expozici intervenci
|
|
Změna od výchozí hodnoty Metrika průzkumu poskytovatelů a systémů zdravotní péče (CG-CAHPS) pro kliniky a skupiny
Časové okno: Výchozí stav a 90 dní po počáteční expozici intervenci
|
Průzkum spokojenosti pacientů s poskytovateli zdravotní péče a systémy pro kliniky a skupiny (CG-CAHPS) je standardizovaný průzkum zpětné vazby pacientů, který měří zkušenosti s poskytovateli péče.
Pro otázku "V posledních 6 měsících, jak často tento lékař znal důležité informace o vaší anamnéze" budeme zkoumat změny průměrných skóre CG-CAHPS ve srovnání s obdobím 6 měsíců před intervencí.
|
Výchozí stav a 90 dní po počáteční expozici intervenci
|
|
Změna od výchozí hodnoty metriky Epic Signal (Aktivita): Čas mimo plánované hodiny
Časové okno: Výchozí hodnoty a 90 dní po prvotní expozici intervenci
|
Prozkoumáme změnu od retrospektivní výchozí hodnoty 6 měsíců před zařazením do studie v metrikách Signal včetně času mimo naplánované hodiny na naplánovaný den.
Pomocí těchto údajů určíme, jak je čas poskytovatele využíván v EHR.
Pro toto výsledné měření nebudou shromažďovány žádné informace na úrovni pacienta.
|
Výchozí hodnoty a 90 dní po prvotní expozici intervenci
|
|
Klinické relativní hodnotové jednotky (RVU) týdně
Časové okno: 60 dní po vystavení intervenci a 90 dní po vystavení intervenci
|
Průměrné relativní hodnotové jednotky (RVU) za týden během intervenčních měsíců 2 a 3, upravené o výchozí hodnoty (6měsíční období před intervencí)
|
60 dní po vystavení intervenci a 90 dní po vystavení intervenci
|
Spolupracovníci a vyšetřovatelé
Vyšetřovatelé
- Vrchní vyšetřovatel: John N Mafi, MD, MPH, Division of General Internal Medicine & Health Services Research, David Geffen School of Medicine at the University of California, Los Angeles
- Vrchní vyšetřovatel: Paul J Lukac, MD, MBA, MS, UCLA Health Information Technology, UCLA Health
Publikace a užitečné odkazy
Obecné publikace
- Trockel M, Bohman B, Lesure E, Hamidi MS, Welle D, Roberts L, Shanafelt T. A Brief Instrument to Assess Both Burnout and Professional Fulfillment in Physicians: Reliability and Validity, Including Correlation with Self-Reported Medical Errors, in a Sample of Resident and Practicing Physicians. Acad Psychiatry. 2018 Feb;42(1):11-24. doi: 10.1007/s40596-017-0849-3. Epub 2017 Dec 1.
- Carolus, A., Koch, M. J., Straka, S., Latoschik, M. E., & Wienrich, C. (2023). MAILS-Meta AI literacy scale: Development and testing of an AI literacy questionnaire based on well-founded competency models and psychological change-and meta-competencies. Computers in Human Behavior: Artificial Humans, 1(2), 100014.
- Koch MJ, Carolus A, Wienrich C, Latoschik ME. Meta AI literacy scale: Further validation and development of a short version. Heliyon. 2024 Oct 22;10(21):e39686. doi: 10.1016/j.heliyon.2024.e39686. eCollection 2024 Nov 15.
- Quigley DD, Elliott MN, Qureshi N, Predmore Z, Hays RD. Associations of the Consumer Assessment of Healthcare Providers and Systems (CAHPS) Clinician and Group Survey Scores with Interventions and Site, Provider, and Patient Factors: A Systematic Review of the Evidence. J Patient Exp. 2024 Oct 13;11:23743735241283204. doi: 10.1177/23743735241283204. eCollection 2024.
- Melnick ER, Harry E, Sinsky CA, Dyrbye LN, Wang H, Trockel MT, West CP, Shanafelt T. Perceived Electronic Health Record Usability as a Predictor of Task Load and Burnout Among US Physicians: Mediation Analysis. J Med Internet Res. 2020 Dec 22;22(12):e23382. doi: 10.2196/23382.
- Lukac PJ, Turner W, Vangala S, Chin AT, Khalili J, Shih YT, Sarkisian C, Cheng EM, Mafi JN. Ambient AI Scribes in Clinical Practice: A Randomized Trial. NEJM AI. 2025 Dec;2(12):10.1056/aioa2501000. doi: 10.1056/aioa2501000. Epub 2025 Nov 26.
Termíny studijních záznamů
Hlavní termíny studia
Začátek studia (Aktuální)
Primární dokončení (Odhadovaný)
Dokončení studie (Odhadovaný)
Termíny zápisu do studia
První předloženo
První předloženo, které splnilo kritéria kontroly kvality
První zveřejněno (Aktuální)
Aktualizace studijních záznamů
Poslední zveřejněná aktualizace (Aktuální)
Odeslaná poslední aktualizace, která splnila kritéria kontroly kvality
Naposledy ověřeno
Více informací
Termíny související s touto studií
Klíčová slova
Další identifikační čísla studie
- IRB-26-0066
Plán pro data jednotlivých účastníků (IPD)
Plánujete sdílet data jednotlivých účastníků (IPD)?
Informace o lécích a zařízeních, studijní dokumenty
Studuje lékový produkt regulovaný americkým FDA
Studuje produkt zařízení regulovaný americkým úřadem FDA
Tyto informace byly beze změn načteny přímo z webu clinicaltrials.gov. Máte-li jakékoli požadavky na změnu, odstranění nebo aktualizaci podrobností studie, kontaktujte prosím register@clinicaltrials.gov. Jakmile bude změna implementována na clinicaltrials.gov, bude automaticky aktualizována i na našem webu .
Klinické studie na GenAI Shrnutí grafů
-
Genome & CompanyStaženoPokročilé pevné nádoryKorejská republika
-
Laureate Institute for Brain Research, Inc.Zápis na pozvánkuPorucha duševního zdraví | Problém duševního zdraví | Hodnocení, SebeSpojené státy
-
Sun Yat-Sen Memorial Hospital of Sun Yat-Sen UniversityNáborDeeskalovaná radioterapie; Rakovina hlavy a krkuČína
-
Superior UniversityAktivní, ne náborAkomodační nedostatečnostPákistán
-
Schön Klinik Berchtesgadener LandDokončenoChronická obstrukční plicní nemocNěmecko
-
Schön Klinik Berchtesgadener LandDokončenoChronická obstrukční plicní nemocNěmecko
-
New Valley UniversityAssiut UniversityAktivní, ne náborZrakové postiženíEgypt
-
Emory UniversityNational Cancer Institute (NCI)NáborAnatomický karcinom prsu stadia IV AJCC v8 | Metastatický triple-negativní karcinom prsuSpojené státy