- ICH GCP
- US Clinical Trials Registry
- Klinisk utprøving NCT07438743
En randomisert kontrollert studie av Epic AI-utgående journaloppsummering
Episk Generativ Kunstig Intelligens Diagramoppsummeringsverktøy for å Redusere Kognitiv Oppgavebelastning hos Ambulante Behandlere: En Randomisert Kontrollert Studie
Den 90 dagers studien vil observere effektene av verktøyet før systemomfattende utrulling av verktøyet.
Studieoversikt
Status
Forhold
Intervensjon / Behandling
Detaljert beskrivelse
Hovedmålet med denne studien er å evaluere effekten av et EHR-utviklet generativt AI-verktøy for sammendrag av polikliniske journaler på selvrapportert lege-oppgavebelastningsscore (PTL), ved å sammenligne verktøyet med en kontrollgruppe. Utforskende resultater inkluderer EHR-avledede tidsmål (Caboodle og Signal), Professional Fulfillment Index (PFI), brukervennlighet (SUS), tilfredshet og produktivitet hos behandlere, og pasientopplevelsesresultater fra CG-CAHPS. Vi vil også evaluere om AI-kunnskap endrer adopsjon og effekt av verktøyet ved hjelp av den kortfattede Meta AI Literacy Scale (MAILS). På utforskende grunnlag vil vi også utføre justeringer basert på behandlerspesialitet, tilgang til en AI-skribent for omgivelseslytting, pasientpanelkompleksitet, behandlerens aldersgruppe, behandlerens kjønn, og tidsvarierende effekter etter måned gjennom studieperioden.
Innmeldede deltakere randomiseres til en av to grupper. Randomiseringen vil bli stratifisert etter om deltakeren har en aktiv AI-skribentlisens, og kovariatbegrenset randomisering vil utføres innenfor stratene for å forbedre balansen på baseline PTL (NASA-TLX-tilpasset score) og en modifisert baseline journalgjennomgangstid (Caboodle-avledet). På grunn av intervensjonens natur kan ikke deltakerne være blindet for gruppetilordning.
Hovedformålet med initiativet er å forbedre kvalitet, effektivitet og forretningsdrift ved University of California, Los Angeles (UCLA) Health og vil informere den operative implementeringen av verktøyet hos alle behandlere innen UCLA Health System. Likevel planlegger UCLA-studiegruppen å strengt undersøke og publisere effekten av denne intervensjonen over hele helsesystemet, og det er derfor studiegruppen forhåndsregistrerte initiativet.
Studietype
Registrering (Antatt)
Fase
- Ikke aktuelt
Kontakter og plasseringer
Studiesteder
-
-
California
-
Los Angeles, California, Forente stater, 90095
- University of California, Los Angeles
-
-
Deltakelseskriterier
Kvalifikasjonskriterier
Alder som er kvalifisert for studier
- Barn
- Voksen
- Eldre voksen
Tar imot friske frivillige
Beskrivelse
Inkluderingskriterier:
- Ambulante omsorgsleverandører innen UCLA Health-systemet, inkludert leger og avanserte praksisleverandører (APPer), som sykepleiere med spesialkompetanse og legeassistenter med minst én halvdags kliniskøkt per uke.
- Leverandører fullfører grunnlinjeundersøkelsen før intervensjon
Ekskluderingskriterier:
• Praksisutdanningsleverandører (f.eks. turnusleger, medisinstudenter) og psykologer
Studieplan
Hvordan er studiet utformet?
Designdetaljer
- Primært formål: Helsetjenesteforskning
- Tildeling: Randomisert
- Intervensjonsmodell: Parallell tildeling
- Masking: Enkelt
Våpen og intervensjoner
Deltakergruppe / Arm |
Intervensjon / Behandling |
|---|---|
|
Eksperimentell: Intervensjonsarm
Deltakere i denne gruppen vil ha tilgang til Epics polikliniske journaloppsummeringsverktøy og vil fortsette sin vanlige kliniske praksis, støttet av det generative AI-verktøyet som er integrert i EHR.
Verktøyet gir en oppsummering for behandlere og gir ikke klinisk beslutningsstøtte.
De har tilgang til et undervisningsmodul og et tipsark, og ukentlige fellesmøter for å hjelpe med eventuelle spørsmål i de første tre ukene av forsøket.
|
Epics generative AI-verktøy for kartoppsummering oppsummerer en delmengde av en pasients notater.
Bruk av verktøyet er valgfritt og er kun ment å gi en oppsummering for behandlere og gir ikke klinisk beslutningsstøtte.
Systemet velger automatisk nylige notater eller en behandler kan manuelt velge spesifikke notater av interesse.
Antall notater som oppsummeres er begrenset av tegnbegrensningene i EHR, 24 000 engelske tegn eller 30 notater.
Systemet bruker AI for å generere en kort oppsummering av relevant informasjon.
Oppsummeringene er ment å brukes som et verktøy for å hjelpe behandlere og er ikke ment å plasseres i kliniske notater.
Oppsummeringene som opprettes lagres for øyeblikket ikke i pasientens journal.
|
|
Ingen inngripen: Vanlig behandling
Deltakerne i denne armen vil ikke ha tilgang til diagramoppsummeringsverktøyet og vil fortsette sin vanlige kliniske praksis.
|
Hva måler studien?
Primære resultatmål
Resultatmål |
Tiltaksbeskrivelse |
Tidsramme |
|---|---|---|
|
Endring fra baseline for legeoppgaves belastning
Tidsramme: Baseline og 90 dager etter første eksponering for intervensjonen
|
Fysikertjenestebelastning tilpasset fra NASA Task Load Index (TLX), et validert verktøy for å vurdere EHR-relatert kognitiv oppgavebelastning i fire underkategorier (mental etterspørsel, tidsmessig etterspørsel, fysisk etterspørsel og innsats).
Dette utfallet er tilpasset for å fange opp oppgaven med forhåndskartlegging, definert for denne studien som praksisen med å gjennomgå pasientinformasjon i EHR før et pasientbesøk for å forberede møtet.
Hver underkategori vurderes fra 0 (lav) til 100 (høy) og samles til en skala fra 0-400 poeng.
Ingen pasientnivåinformasjon vil bli samlet inn for denne utfallsmålingen.
|
Baseline og 90 dager etter første eksponering for intervensjonen
|
Sekundære resultatmål
Resultatmål |
Tiltaksbeskrivelse |
Tidsramme |
|---|---|---|
|
Endring i Modifisert Total Karttid Per Konsultasjon
Tidsramme: Utgangspunkt, etter 60 dagers eksponering for intervensjonen, og etter 90 dagers eksponering for intervensjonen.
|
Ved å bruke Caboodle, Epics bedriftsdatawarehouse, vil vi bruke en tilpasset metrikk for å måle klinikerens tid brukt på å gjennomgå pasientens journal.
Basert på intern validering der klinikere kunne få tilgang til journaloppsummeringsverktøyet, inkluderer metrikken Caboodle Tier 1-aktiviteter som tilsvarer klinisk gjennomgang (alle aktiviteter), dokumentasjon begrenset til kun pre-charting-aktivitet, og annet begrenset til Navigator-relatert aktivitet, samt aktiviteten dedikert til journaloppsummeringsverktøyet.
Alle notatskriving-, ordreinnleggings- og møtesigneringaktiviteter er ekskludert.
Tid etter utsjekking er også ekskludert.
Endring vil bli vurdert i forhold til en 6-måneders retrospektiv basislinje.
Ingen pasientnivåinformasjon vil bli samlet inn for denne resultatmålingen.
|
Utgangspunkt, etter 60 dagers eksponering for intervensjonen, og etter 90 dagers eksponering for intervensjonen.
|
|
Endring fra baseline Professional Fulfillment Index Score
Tidsramme: Baseline og 90 dager etter første eksponering for intervensjonen
|
Professional Fulfillment Index (PFI) er et valideret 16-punkts instrument som bruker en 5-punkts Likert-skala (0-4) for å måle profesjonell tilfredshet, arbeidsutmattelse og interpersonell frakobling.
Utbrenthet rapporteres basert på kombinerte resultater av arbeidsutmattelses- og interpersonell frakoblingsunderskalaer.
En høyere score indikerer et større nivå av utmattelse.
Ingen pasientnivåinformasjon vil bli samlet inn for dette resultatmålet.
|
Baseline og 90 dager etter første eksponering for intervensjonen
|
|
Endring fra baseline i selvrapportert effektivitet før kartlegging
Tidsramme: Utgangspunkt og 90 dager fra første eksponering for intervensjonen
|
Tjenestetilbydere vil svare på spørsmål om selvrapportert effektivitet og effektivitet i forhåndsjournalføring.
Spørsmålene bruker en 5-punkts Likert-skala for å måle disse målene, der en høyere poengsum indikerer større selvrapportert effektivitet og effektivitet.
|
Utgangspunkt og 90 dager fra første eksponering for intervensjonen
|
|
Tilfredshetsskår for leverandører
Tidsramme: 90 dager etter første eksponering for intervensjonen
|
Selvrapportert tilfredshetsundersøkelse som inkluderer legerapportert effekt av diagramoppsummeringsverktøy på effektivitet og effektivitet før diagramoppretting, og andre potensielle utilsiktede konsekvenser.
Ingen informasjon på pasientnivå vil bli samlet inn for dette resultatet.
|
90 dager etter første eksponering for intervensjonen
|
|
Systembruksbarhetsskala
Tidsramme: 90 dager fra første eksponering mot intervensjonen
|
System Usability Scale (SUS) er en spørreskjema med ti spørsmål som bruker en 5-punkts Likert-skala for å måle ulike aspekter av systemets brukervennlighet.
Den totale skalaen spenner fra 0-100.
En høyere SUS-poengsum indikerer høyere brukervennlighet.
|
90 dager fra første eksponering mot intervensjonen
|
|
Sikkerhetshendelser
Tidsramme: I løpet av 90-dagersperioden etter første eksponering for intervensjonen
|
Klinikerrapportert sikkerhet for AI-genererte kursoppsummeringer, inkludert oppfattet hyppighet av klinisk signifikante feil og forekomst av store sikkerhetshendelser i intervensjonsperioden.
Ingen pasientnivåinformasjon vil bli samlet inn for dette utfallet.
|
I løpet av 90-dagersperioden etter første eksponering for intervensjonen
|
|
Kvalitativ verktøyspesifikk EHR-tilbakemelding
Tidsramme: Over de 90 dagene etter første eksponering for intervensjonen
|
Aggregert sanntids-tilbakemelding innsendt av klinikere gjennom EHR-systemets innebygde sammenfatningsgrensesnitt under intervensjonsperioden, inkludert vurderinger av nøyaktighet, fullstendighet og hallusinasjoner.
Ingen pasientnivåinformasjon vil bli samlet inn for dette utfallet.
|
Over de 90 dagene etter første eksponering for intervensjonen
|
|
Endring fra baseline Consumer Assessment of Healthcare Providers and Systems Clinician & Group Survey (CG-CAHPS) Metric
Tidsramme: Baseline og 90 dager etter første eksponering for intervensjonen
|
Consumer Assessment of Healthcare Providers and Systems Clinician & Group Survey (CG-CAHPS) er en standardisert pasienttilbakemeldingsundersøkelse som måler erfaringer med helsepersonell.
Vi vil undersøke endringer i CG-CAHPS-gjennomsnittsskårene sammenlignet med 6 måneder før intervensjonen for spørsmålet «I løpet av de siste 6 månedene, hvor ofte virket det som om denne legen kjente til den viktige informasjonen om din medisinske historikk».
|
Baseline og 90 dager etter første eksponering for intervensjonen
|
|
Endring fra baseline Epic Signal (Activity)-metrikk: Tid utenfor planlagte timer
Tidsramme: Baseline og 90 dager etter den første eksponeringen for intervensjonen
|
Vi vil undersøke endring fra en retrospektiv utgangspunkt 6 måneder før påmelding i Signal-mål inkludert tid utenfor planlagte timer per planlagt dag.
Ved å bruke disse dataene vil vi fastslå hvordan en behandlers tid utnyttes i EHR.
Ingen pasientnivåinformasjon vil bli samlet inn for denne resultatmålingen.
|
Baseline og 90 dager etter den første eksponeringen for intervensjonen
|
|
Kliniker Relative Value Units (RVUs) per uke
Tidsramme: 60 dager etter eksponering for intervensjonen, og 90 dager etter eksponering for intervensjonen
|
Gjennomsnittlige relative verdi enheter (RVU) per uke i intervensjonsmånedene 2 og 3, justert for utgangspunktet (6-måneders pre-intervensjonsperiode)
|
60 dager etter eksponering for intervensjonen, og 90 dager etter eksponering for intervensjonen
|
Samarbeidspartnere og etterforskere
Etterforskere
- Hovedetterforsker: John N Mafi, MD, MPH, Division of General Internal Medicine & Health Services Research, David Geffen School of Medicine at the University of California, Los Angeles
- Hovedetterforsker: Paul J Lukac, MD, MBA, MS, UCLA Health Information Technology, UCLA Health
Publikasjoner og nyttige lenker
Generelle publikasjoner
- Trockel M, Bohman B, Lesure E, Hamidi MS, Welle D, Roberts L, Shanafelt T. A Brief Instrument to Assess Both Burnout and Professional Fulfillment in Physicians: Reliability and Validity, Including Correlation with Self-Reported Medical Errors, in a Sample of Resident and Practicing Physicians. Acad Psychiatry. 2018 Feb;42(1):11-24. doi: 10.1007/s40596-017-0849-3. Epub 2017 Dec 1.
- Carolus, A., Koch, M. J., Straka, S., Latoschik, M. E., & Wienrich, C. (2023). MAILS-Meta AI literacy scale: Development and testing of an AI literacy questionnaire based on well-founded competency models and psychological change-and meta-competencies. Computers in Human Behavior: Artificial Humans, 1(2), 100014.
- Koch MJ, Carolus A, Wienrich C, Latoschik ME. Meta AI literacy scale: Further validation and development of a short version. Heliyon. 2024 Oct 22;10(21):e39686. doi: 10.1016/j.heliyon.2024.e39686. eCollection 2024 Nov 15.
- Quigley DD, Elliott MN, Qureshi N, Predmore Z, Hays RD. Associations of the Consumer Assessment of Healthcare Providers and Systems (CAHPS) Clinician and Group Survey Scores with Interventions and Site, Provider, and Patient Factors: A Systematic Review of the Evidence. J Patient Exp. 2024 Oct 13;11:23743735241283204. doi: 10.1177/23743735241283204. eCollection 2024.
- Melnick ER, Harry E, Sinsky CA, Dyrbye LN, Wang H, Trockel MT, West CP, Shanafelt T. Perceived Electronic Health Record Usability as a Predictor of Task Load and Burnout Among US Physicians: Mediation Analysis. J Med Internet Res. 2020 Dec 22;22(12):e23382. doi: 10.2196/23382.
- Lukac PJ, Turner W, Vangala S, Chin AT, Khalili J, Shih YT, Sarkisian C, Cheng EM, Mafi JN. Ambient AI Scribes in Clinical Practice: A Randomized Trial. NEJM AI. 2025 Dec;2(12):10.1056/aioa2501000. doi: 10.1056/aioa2501000. Epub 2025 Nov 26.
Studierekorddatoer
Studer hoveddatoer
Studiestart (Faktiske)
Primær fullføring (Antatt)
Studiet fullført (Antatt)
Datoer for studieregistrering
Først innsendt
Først innsendt som oppfylte QC-kriteriene
Først lagt ut (Faktiske)
Oppdateringer av studieposter
Sist oppdatering lagt ut (Faktiske)
Siste oppdatering sendt inn som oppfylte QC-kriteriene
Sist bekreftet
Mer informasjon
Begreper knyttet til denne studien
Nøkkelord
Andre studie-ID-numre
- IRB-26-0066
Plan for individuelle deltakerdata (IPD)
Planlegger du å dele individuelle deltakerdata (IPD)?
Legemiddel- og utstyrsinformasjon, studiedokumenter
Studerer et amerikansk FDA-regulert medikamentprodukt
Studerer et amerikansk FDA-regulert enhetsprodukt
Denne informasjonen ble hentet direkte fra nettstedet clinicaltrials.gov uten noen endringer. Hvis du har noen forespørsler om å endre, fjerne eller oppdatere studiedetaljene dine, vennligst kontakt register@clinicaltrials.gov. Så snart en endring er implementert på clinicaltrials.gov, vil denne også bli oppdatert automatisk på nettstedet vårt. .