- ICH GCP
- US Clinical Trials Registry
- Klinisk forsøg NCT07438743
Et Randomiseret Kontrolleret Studie af Epic AI Ambulante Journalopsummering
Episk Generativ Kunstig Intelligens Diagramopsummeringsværktøj til Reduktion af Ambulatorisk Behandlers Kognitive Opgavebelastning: Et Randomiseret Kontrolleret Studie
Studieoversigt
Status
Betingelser
Intervention / Behandling
Detaljeret beskrivelse
Formålet med denne undersøgelse er primært at evaluere effekten af et generativt AI-værktøj til sammenfatning af ambulante journaler, udviklet i et EHR-system, på selvrapporterede lægeopgavebelastningsscores (PTL), hvor værktøjet sammenlignes med en kontrolgruppe. Eksplorative resultater inkluderer EHR-afledte tidsmålinger (Caboodle og Signal), Professional Fulfillment Index (PFI), brugbarhed (SUS), tilfredshed og produktivitet blandt udbydere samt resultater af patientoplevelsespunkter fra CG-CAHPS. Vi vil også evaluere, om AI-kompetence påvirker adoptionen og effekten af værktøjet ved hjælp af den korte version af Meta AI Literacy Scale (MAILS). På et eksplorativt grundlag vil vi også foretage justeringer baseret på udbyderens speciale, adgang til en AI-skribent med omgivelseslyd, panelkompleksitet, udbyderens aldersgruppe, udbyderens køn og tidsvarierende effekter måned for måned i undersøgelsesperioden.
Indmeldte deltagere randomiseres til en af to grupper. Randomiseringen vil blive lagdelt efter, om deltageren har en aktiv AI-skribentlicens, og kovariatbegrænset randomisering vil blive udført inden for lag for at forbedre balancen i baseline-PTL (NASA-TLX-tilpasset score) og en modificeret baseline-journalgennemgangstid (afledt fra Caboodle). På grund af interventionens karakter kan deltagerne ikke blindes for gruppetildelingen.
Initiativets primære formål er at forbedre kvalitet, effektivitet og forretningsdrift ved University of California, Los Angeles (UCLA) Health og vil bidrage til den operationelle implementering af værktøjet hos alle udbydere i UCLA Health System. Ikke desto mindre planlægger UCLA-undersøgelsesteamet at strengt undersøge og offentliggøre effekten af denne intervention på tværs af sundhedssystemet, hvilket er grunden til, at undersøgelsesteamet præregistrerede initiativet.
Undersøgelsestype
Tilmelding (Anslået)
Fase
- Ikke anvendelig
Kontakter og lokationer
Studiesteder
-
-
California
-
Los Angeles, California, Forenede Stater, 90095
- University of California, Los Angeles
-
-
Deltagelseskriterier
Berettigelseskriterier
Aldre berettiget til at studere
- Barn
- Voksen
- Ældre voksen
Tager imod sunde frivillige
Beskrivelse
Inklusionskriterier:
- Ambulante behandlingsudbydere inden for UCLA Health-systemet, herunder læger og avancerede praksisudbydere (APPs), såsom sygeplejersker og lægeassistenter med mindst en halvdags kliniksession om ugen.
- Udbydere gennemfører baseline forundersøgelse
Eksklusionskriterier:
• Praktikantudbydere (f.eks. residenter, medicinstuderende) og psykologer
Studieplan
Hvordan er undersøgelsen tilrettelagt?
Design detaljer
- Primært formål: Sundhedstjenesteforskning
- Tildeling: Randomiseret
- Interventionel model: Parallel tildeling
- Maskning: Enkelt
Våben og indgreb
Deltagergruppe / Arm |
Intervention / Behandling |
|---|---|
|
Eksperimentel: Interventionsarm
Deltagere i denne arm vil have adgang til Epics ambulante journalopsummeringsværktøj og vil fortsætte deres sædvanlige kliniske praksis, understøttet af det generative AI-værktøj, som er integreret i EHR.
Værktøjet giver en oversigt for udbydere og giver ikke klinisk beslutningsstøtte.
De har adgang til et uddannelsesmodul og et tipark, samt ugentlige bymøder for at hjælpe med eventuelle spørgsmål i de første tre uger af forsøget.
|
Epics generativ AI-diagramopsummeringsværktøj opsummerer en delmængde af en patients notater.
Brug af værktøjet er valgfrit og beregnet udelukkende til at give en oversigt for behandlere og giver ikke klinisk beslutningsstøtte.
Systemet vælger automatisk seneste notater, eller en behandler kan manuelt vælge specifikke notater af interesse.
Antallet af opsummerede notater er begrænset af EHR's tegnbegrænsninger, 24.000 engelske tegn eller 30 notater.
Systemet bruger AI til at generere en kort oversigt over relevant information.
Opsummeringerne er beregnet til at bruges som et værktøj til at hjælpe behandlere og er ikke beregnet til at blive placeret i kliniske notater.
De oprettede opsummeringer gemmes i øjeblikket ikke i patientens journal.
|
|
Ingen indgriben: Sædvanlig behandling
Deltagerne i denne arm vil ikke have adgang til diagramopsummeringsværktøjet og vil fortsætte deres sædvanlige kliniske praksis.
|
Hvad måler undersøgelsen?
Primære resultatmål
Resultatmål |
Foranstaltningsbeskrivelse |
Tidsramme |
|---|---|---|
|
Ændring fra baseline i lægens arbejdsbyrde
Tidsramme: Baseline og 90 dage efter første eksponering for interventionen
|
Lægens opgavelast tilpasset fra NASA Task Load Index (TLX), et valideret værktøj til vurdering af EHR-relateret kognitiv opgavelast i fire underkategorier (mentalt krav, tidsmæssigt krav, fysisk krav og indsats).
Dette resultatmål er tilpasset for at fange opgaven med forudgående journalføring, defineret for dette studie som praksis med at gennemgå patientoplysninger i EHR før et patientbesøg for at forberede mødet. Hver underkategori vurderes fra 0 (lav) til 100 (høj) og aggregeres til en 0-400 point skala. Der indsamles ingen patientniveauoplysninger for dette resultatmål. |
Baseline og 90 dage efter første eksponering for interventionen
|
Sekundære resultatmål
Resultatmål |
Foranstaltningsbeskrivelse |
Tidsramme |
|---|---|---|
|
Ændring i Modificeret Total Tidsforbrug pr. Konsultation
Tidsramme: Baseline, efter 60 dages eksponering for interventionen, og efter 90 dages eksponering for interventionen.
|
Ved hjælp af Caboodle, Epics virksomhedsdatawarehouse, vil vi bruge en tilpasset metrik til at måle lægens tid brugt på at gennemgå patientens journal.
Baseret på intern validering, hvor læger kunne få adgang til journalopsummeringsværktøjet, inkluderer metrikken Caboodle Tier 1-aktiviteter svarende til Klinisk gennemgang (alle aktiviteter), Dokumentation begrænset til kun pre-charting-aktivitet, og Andet begrænset til Navigator-relateret aktivitet, samt aktiviteten dedikeret til journalopsummeringsværktøjet.
Alle noteskrivnings-, ordreindtastnings- og kontaktafskrivningsaktiviteter er udelukket.
Tid efter checkout er også udelukket.
Ændring vil blive vurderet i forhold til en 6-måneders retrospektiv baseline.
Der vil ikke blive indsamlet patientniveau-information for dette resultatmål.
|
Baseline, efter 60 dages eksponering for interventionen, og efter 90 dages eksponering for interventionen.
|
|
Ændring fra baseline Professional Fulfillment Index Score
Tidsramme: Baseline og 90 dage efter den første eksponering for interventionen
|
Professional Fulfillment Index (PFI) er et valideret 16-punkts instrument, der anvender en 5-punkts Likert-skala (0-4) til at måle professionel opfyldelse, arbejdsudmattelse og interpersonel frakobling.
Udbrændthed rapporteres baseret på kombinerede resultater af arbejdsudmattelses- og interpersonel frakoblingsunderskalaerne. En højere score indikerer et højere niveau af udmattelse. Der indsamles ikke patientniveauoplysninger for denne udfaldsmåling. |
Baseline og 90 dage efter den første eksponering for interventionen
|
|
Ændring fra baseline i selvrapporteret effektivitet før kortlægning
Tidsramme: Baseline og 90 dage fra første eksponering for interventionen
|
Udbydere vil besvare spørgsmål vedrørende selvrapporteret effektivitet og effektivitet i forudgående journalføring.
Spørgsmålene bruger en 5-punkts Likert-skala til at måle disse målinger, hvor en højere score indikerer større selvrapporteret effektivitet og effektivitet.
|
Baseline og 90 dage fra første eksponering for interventionen
|
|
Udbyder tilfredshedsscore
Tidsramme: 90 dage efter den første eksponering for interventionen
|
Selvrapporteret tilfredshedsundersøgelse, der omfatter lægens rapporterede effekt af diagramopsummeringsværktøjet på effektiviteten og effektiviteten af forudgående diagramoprettelse samt andre potentielle utilsigtede konsekvenser.
Der indsamles ingen patientniveauoplysninger for dette resultat.
|
90 dage efter den første eksponering for interventionen
|
|
System Usability Scale
Tidsramme: 90 dage fra første eksponering for interventionen
|
System Usability Scale (SUS) er et spørgeskema med ti emner, der bruger en 5-punkts Likert-skala til at måle forskellige aspekter af systemets brugervenlighed.
Den samlede skala spænder fra 0-100.
En højere SUS-score indikerer højere brugervenlighed.
|
90 dage fra første eksponering for interventionen
|
|
Sikkerhedshændelser
Tidsramme: I den 90-dages periode efter første eksponering for interventionen
|
Klinikerrapporteret sikkerhed af AI-genererede diagramopsummeringer, inklusive opfattet hyppighed af klinisk signifikante fejl og forekomst af større sikkerhedshændelser i interventionsperioden.
Der indsamles ingen patientniveau-information for dette udfald.
|
I den 90-dages periode efter første eksponering for interventionen
|
|
Kvalitativ feedback specifik for EHR-værktøj
Tidsramme: I de 90 dage efter første eksponering for interventionen
|
Samlet real-time feedback indsendt af klinikere via EHR-systemets indbyggede opsummeringsgrænseflade i interventionsperioden, herunder vurderinger af nøjagtighed, fuldstændighed og hallucinationer.
Ingen patientniveauoplysninger indsamles for dette resultat.
|
I de 90 dage efter første eksponering for interventionen
|
|
Ændring fra baseline for Consumer Assessment of Healthcare Providers and Systems Clinician & Group Survey (CG-CAHPS) måling
Tidsramme: Baseline og 90 dage efter første eksponering for interventionen
|
Consumer Assessment of Healthcare Providers and Systems Clinician & Group Survey (CG-CAHPS) er en standardiseret patienttilbagemeldingsundersøgelse, der måler oplevelser med behandlere.
Vi vil undersøge ændringer i CG-CAHPS-gennemsnitskaraktererne sammenlignet med 6 måneder før interventionen for spørgsmålet "Inden for de sidste 6 måneder, hvor ofte syntes denne læge at kende de vigtige oplysninger om din medicinske historie".
|
Baseline og 90 dage efter første eksponering for interventionen
|
|
Ændring fra baseline Epic Signal (Aktivitet) Metrik: Tid uden for planlagte timer
Tidsramme: Baseline og 90 dage efter den første eksponering for interventionen
|
Vi vil undersøge ændringen fra en retrospektiv baseline 6 måneder før tilmelding i Signal-mål, herunder tid uden for planlagte timer per planlagt dag.
Ved hjælp af disse data vil vi fastslå, hvordan en udbyders tid anvendes i EHR-systemet.
Der indsamles ingen patientniveauoplysninger for denne udfaldsmåling.
|
Baseline og 90 dage efter den første eksponering for interventionen
|
|
Klinikers Relative Værdisenheder (RVU'er) pr. Uge
Tidsramme: 60 dage efter eksponering for interventionen, og 90 dage efter eksponering for interventionen
|
Gennemsnitlige relative værdienheder (RVU) pr. uge i interventionsmånederne 2 og 3, justeret for baseline (6-måneders pre-interventionsperiode)
|
60 dage efter eksponering for interventionen, og 90 dage efter eksponering for interventionen
|
Samarbejdspartnere og efterforskere
Efterforskere
- Ledende efterforsker: John N Mafi, MD, MPH, Division of General Internal Medicine & Health Services Research, David Geffen School of Medicine at the University of California, Los Angeles
- Ledende efterforsker: Paul J Lukac, MD, MBA, MS, UCLA Health Information Technology, UCLA Health
Publikationer og nyttige links
Generelle publikationer
- Trockel M, Bohman B, Lesure E, Hamidi MS, Welle D, Roberts L, Shanafelt T. A Brief Instrument to Assess Both Burnout and Professional Fulfillment in Physicians: Reliability and Validity, Including Correlation with Self-Reported Medical Errors, in a Sample of Resident and Practicing Physicians. Acad Psychiatry. 2018 Feb;42(1):11-24. doi: 10.1007/s40596-017-0849-3. Epub 2017 Dec 1.
- Carolus, A., Koch, M. J., Straka, S., Latoschik, M. E., & Wienrich, C. (2023). MAILS-Meta AI literacy scale: Development and testing of an AI literacy questionnaire based on well-founded competency models and psychological change-and meta-competencies. Computers in Human Behavior: Artificial Humans, 1(2), 100014.
- Koch MJ, Carolus A, Wienrich C, Latoschik ME. Meta AI literacy scale: Further validation and development of a short version. Heliyon. 2024 Oct 22;10(21):e39686. doi: 10.1016/j.heliyon.2024.e39686. eCollection 2024 Nov 15.
- Quigley DD, Elliott MN, Qureshi N, Predmore Z, Hays RD. Associations of the Consumer Assessment of Healthcare Providers and Systems (CAHPS) Clinician and Group Survey Scores with Interventions and Site, Provider, and Patient Factors: A Systematic Review of the Evidence. J Patient Exp. 2024 Oct 13;11:23743735241283204. doi: 10.1177/23743735241283204. eCollection 2024.
- Melnick ER, Harry E, Sinsky CA, Dyrbye LN, Wang H, Trockel MT, West CP, Shanafelt T. Perceived Electronic Health Record Usability as a Predictor of Task Load and Burnout Among US Physicians: Mediation Analysis. J Med Internet Res. 2020 Dec 22;22(12):e23382. doi: 10.2196/23382.
- Lukac PJ, Turner W, Vangala S, Chin AT, Khalili J, Shih YT, Sarkisian C, Cheng EM, Mafi JN. Ambient AI Scribes in Clinical Practice: A Randomized Trial. NEJM AI. 2025 Dec;2(12):10.1056/aioa2501000. doi: 10.1056/aioa2501000. Epub 2025 Nov 26.
Datoer for undersøgelser
Studer store datoer
Studiestart (Faktiske)
Primær færdiggørelse (Anslået)
Studieafslutning (Anslået)
Datoer for studieregistrering
Først indsendt
Først indsendt, der opfyldte QC-kriterier
Først opslået (Faktiske)
Opdateringer af undersøgelsesjournaler
Sidste opdatering sendt (Faktiske)
Sidste opdatering indsendt, der opfyldte kvalitetskontrolkriterier
Sidst verificeret
Mere information
Begreber relateret til denne undersøgelse
Nøgleord
Andre undersøgelses-id-numre
- IRB-26-0066
Plan for individuelle deltagerdata (IPD)
Planlægger du at dele individuelle deltagerdata (IPD)?
Lægemiddel- og udstyrsoplysninger, undersøgelsesdokumenter
Studerer et amerikansk FDA-reguleret lægemiddelprodukt
Studerer et amerikansk FDA-reguleret enhedsprodukt
Disse oplysninger blev hentet direkte fra webstedet clinicaltrials.gov uden ændringer. Hvis du har nogen anmodninger om at ændre, fjerne eller opdatere dine undersøgelsesoplysninger, bedes du kontakte register@clinicaltrials.gov. Så snart en ændring er implementeret på clinicaltrials.gov, vil denne også blive opdateret automatisk på vores hjemmeside .
Kliniske forsøg med Kvalitetsforbedring
-
NorthShore University HealthSystemUkendt
-
Ankara Yildirim Beyazıt UniversityIkke rekrutterer endnuOrtopædkirurgi | Komfort | Sygepleje | Quality of Recovery 40
-
University Hospital, Clermont-FerrandAfsluttetOral Health Related Quality of Life (OHRQoL)Frankrig
-
Chinese University of Hong KongIkke rekrutterer endnuHepatektomi | Intertransversal procesblok | Quality of Recovery (QoR-15)
-
Marlene FischerAfsluttetPostoperativ Quality of Recovery på postanæstesiafdelingenTyskland
-
University Hospital, GrenobleUkendtHealth Care Quality Management (ingen betingelse).Frankrig
-
Ondokuz Mayıs UniversityAfsluttetKejsersnit | Intratekal morfin | Quality of Recovery 40Kalkun
-
Anqing Municipal HospitalAfsluttetDexmedetomidin | Lidokain | Quality of Recovery (QoR-40), præoperativ og postoperativKina
-
Universitätsklinikum Hamburg-EppendorfIkke rekrutterer endnuPostoperativ restitutionskvalitet | Postoperativ Quality of Recovery på postanæstesiafdelingen
-
Cairo UniversityRekrutteringQuality of Recovery (QoR-15) | Sadelblok-anæstesi | Klart til udskrivelseEgypten
Kliniske forsøg med GenAI Diagramopsummering
-
Wake Forest University Health SciencesNational Cancer Institute (NCI)Afsluttet
-
M.D. Anderson Cancer CenterAfsluttetHæmatopoietisk og lymfoid celle-neoplasma | Ondartet fast neoplasmaForenede Stater
-
Moorfields Eye Hospital NHS Foundation TrustAfsluttet
-
Mayo ClinicNational Cancer Institute (NCI)AfsluttetOndartet neoplasma i centralnervesystemet | Malignt kraniebase-neoplasmaForenede Stater
-
AIDS Malignancy ConsortiumNational Cancer Institute (NCI); University of Arkansas; The Emmes Company...AfsluttetHIV-infektion | Ondartet neoplasma | Tilbagevendende malign neoplasma | Humant immundefektvirus 1 positivMexico, Argentina, Brasilien
-
M.D. Anderson Cancer CenterNational Cancer Institute (NCI)Trukket tilbageHæmatopoietisk og lymfoid celle-neoplasma | Ondartet fast neoplasmaForenede Stater
-
Laureate Institute for Brain Research, Inc.Tilmelding efter invitationPsykisk lidelse | Psykisk sundhedsproblem | Vurdering, SelvForenede Stater
-
M.D. Anderson Cancer CenterRekrutteringKutant melanomForenede Stater
-
M.D. Anderson Cancer CenterNational Cancer Institute (NCI)Aktiv, ikke rekrutterendeHoved- og halskarcinomForenede Stater
-
Gynecologic Oncology GroupNational Cancer Institute (NCI)AfsluttetTilbagevendende livmoderkorpussarkom | Tilbagevendende livmoderkarcinom | Stadie I Livmoderkræft | Stadie II livmoderhalskræft | Stadie III livmoderkræft | Stadie IV Livmoderkræft | Tilbagevendende cervikal karcinom | Stadie III uterin sarkom | Stadium IV Uterin Sarkom | Stadie I uterin sarkom | Stadie II uterin... og andre forholdForenede Stater