- ICH GCP
- US Clinical Trials Registry
- Klinisk utprøving NCT07491068
Nøyaktigheten og effektiviteten til storspråkmodell-skrivne sykehusforløpssammendrag (CLEAN)
25. mars 2026 oppdatert av: Martin Janičko, Pavol Jozef Safarik University
Sikkerhet og arbeidsflyt-påvirkning av stort språkmodell-assisterte sykehusforløpssammendrag: Protokoll for en randomisert, evalueringsblindet ikke-underlegenhetsstudie
Bakgrunn: Legeverdenen står overfor en økende administrativ byrde som fører bort tid fra direkte pasientbehandling. Blant innleggelsesdokumentasjonsoppgavene er utarbeidelse av sykehusforløpssammendrag spesielt tidkrevende og avgjørende for trygge overganger i behandlingen. Store språkmodeller (LLM-er) har vist potensial for klinisk tekstgenerering, men robuste beviser fra randomiserte, evaluatør-blindede studier utført i rutinemessig sykehuspraksis forblir begrenset. Mål: CLEAN-studien har som mål å vurdere om LLM-assistert, spesialistredigert generering av sykehusforløpssammendrag er ikke-underlegen i sikkerhet sammenlignet med standard kliniker-skrevet dokumentasjon i rutinemessig inneliggende behandling. Sekundære mål inkluderer ikke-underlegenhetsvurderinger av assistentleger-redigerte og uredigerte LLM-genererte sammendrag. Ytterligere mål er å evaluere sammendragskvalitet på tvers av forhåndsdefinerte domener, kvantifisere legens dokumentasjonstid, vurdere LLM-genereringsstabilitet, måle klinikeradopsjon etter den randomiserte fasen, og undersøke inter-, intra-observatør og test-retest pålitelighet av ekspertvurderinger. Metode: Dette er en enkelt-senter, dobbelt-campus, utforskende randomisert kontrollert ikke-underlegenhetsstudie utført på et tertiært universitetssykehus. Påfølgende sykehusutskrivelser på tvers av flere kliniske avdelinger randomiseres 1:1 til enten en LLM-assistert dokumentasjonsarbeidsflyt eller standard manuell forfatterskap. Intervensjonen integrerer en on-premise LLM i et parallelt sykehusinformasjonssystem, som genererer utkast til sykehusforløpssammendrag fra komplett, ukurert klinisk dokumentasjon, som leger kan gjennomgå og redigere før ferdigstillelse. Sikkerhet, det primære utfallet, definert som tilstedeværelse av all viktig informasjon og fravær av feilaktig/hallusinert informasjon, vurderes av en adjudikasjonskomité blindet for dokumentasjonsarbeidsflyt. Sekundære utfall inkluderer innholdsvaliditet, arbeidsflyteffektivitet, genereringsstabilitet, post-studie klinikeradopsjon og pålitelighetsmål. Totalt kreves 786 utskrivelsesepisoder for å vurdere ikke-underlegenhet ved bruk av en forhåndsdefinert margin på 5 prosentpoeng. Etikk og spredning: Studien vil bli utført i samsvar med Helsinkideklarasjonen, God klinisk praksis og den generelle databeskyttelsesforordningen. Fritak fra informert samtykke søkes på grunn av minimal risiko og utelukkende bruk av rutinemessige kliniske data. Resultater vil bli spredt gjennom fagfellevurdert publisering og engasjement med helsevesenets interessenter.
Studieoversikt
Status
Har ikke rekruttert ennå
Forhold
Intervensjon / Behandling
Detaljert beskrivelse
Verdens helseorganisasjon har identifisert en alvorlig global helsepersonellkrise, og estimerer en mangel på omtrent 12,7 millioner leger over hele verden i 2020.
Prognoser tyder på at dette underskuddet vil fortsette å forverres i de kommende årene [1].
Videre forekommer disse mangelene sammen med økende etterspørsel etter helsetjenester drevet av aldrende befolkning og økende forekomst av multimorbiditet.
Til tross for dette forblir administrativ byrde en vedvarende og systemisk utfordring i helsevesenet over hele verden.
Initiativer rettet mot å redusere legers ikke-kliniske arbeidsbelastning har bare oppnådd begrenset suksess, noe som fører til fortsatt omdirigering av klinisk ekspertise bort fra direkte pasientbehandling [2].
Blant administrative ansvar er utarbeidelsen av utskrivningsbrev en av de mest tidkrevende oppgavene for leger som behandler innlagte pasienter, men den er også sentral for å sikre kontinuitet i omsorgen etter utskrivelse.
Til tross for stor tidsallokering oppfyller utskrivningssammendrag ofte ikke forventede standarder, med mange leger som rapporterer mangler i både fullstendighet og kvalitet [3], [4].
Innføringen av elektroniske pasientjournaler har utløst forsøk på å lette denne byrden ved å overgå fra fullstendig manuell forfatterskap mot delvis automatisering, noe som gjør det mulig å generere utvalgte deler av utskrivningsbrev automatisk.
Imidlertid forblir sykehusforløpet - den mest klinisk informative komponenten i utskrivningsbrevet - nesten universelt avhengig av manuell narrativ dokumentasjon av den behandlende legen.
B. Målsettinger Den primære målet med denne studien er å evaluere om LLM-assistert, spesialistredigert generering av sykehusforløpssammendrag er trygt å bruke i rutinemessig inneliggende pleie, sammenlignet med standard kliniker-skrevet dokumentasjon.
Sekundære mål inkluderer å evaluere sikkerheten til assistentredigerte og uredigerte LLM-genererte sykehusforløpssammendrag.
Ytterligere mål er å vurdere kvaliteten på LLM-assisterte sammendrag på tvers av forhåndsdefinerte domener, evaluere stabiliteten til genererte utdata, kvantifisere virkningen av AI-assisterte arbeidsflyter på legens dokumentasjonstid, undersøke klinikerens adopsjon av LLM-støttet dokumentasjon etter fullføring av den randomiserte fasen, og vurdere påliteligheten til evaluatorvurderinger.
Samlet sett har disse målene til hensikt å fastslå sikkerheten og gjennomførbarheten av å integrere LLM-basert narrativ generering i virkelige sykehusutskrivningsarbeidsflyter.
Prognoser tyder på at dette underskuddet vil fortsette å forverres i de kommende årene [1].
Videre forekommer disse mangelene sammen med økende etterspørsel etter helsetjenester drevet av aldrende befolkning og økende forekomst av multimorbiditet.
Til tross for dette forblir administrativ byrde en vedvarende og systemisk utfordring i helsevesenet over hele verden.
Initiativer rettet mot å redusere legers ikke-kliniske arbeidsbelastning har bare oppnådd begrenset suksess, noe som fører til fortsatt omdirigering av klinisk ekspertise bort fra direkte pasientbehandling [2].
Blant administrative ansvar er utarbeidelsen av utskrivningsbrev en av de mest tidkrevende oppgavene for leger som behandler innlagte pasienter, men den er også sentral for å sikre kontinuitet i omsorgen etter utskrivelse.
Til tross for stor tidsallokering oppfyller utskrivningssammendrag ofte ikke forventede standarder, med mange leger som rapporterer mangler i både fullstendighet og kvalitet [3], [4].
Innføringen av elektroniske pasientjournaler har utløst forsøk på å lette denne byrden ved å overgå fra fullstendig manuell forfatterskap mot delvis automatisering, noe som gjør det mulig å generere utvalgte deler av utskrivningsbrev automatisk.
Imidlertid forblir sykehusforløpet - den mest klinisk informative komponenten i utskrivningsbrevet - nesten universelt avhengig av manuell narrativ dokumentasjon av den behandlende legen.
B. Målsettinger Den primære målet med denne studien er å evaluere om LLM-assistert, spesialistredigert generering av sykehusforløpssammendrag er trygt å bruke i rutinemessig inneliggende pleie, sammenlignet med standard kliniker-skrevet dokumentasjon.
Sekundære mål inkluderer å evaluere sikkerheten til assistentredigerte og uredigerte LLM-genererte sykehusforløpssammendrag.
Ytterligere mål er å vurdere kvaliteten på LLM-assisterte sammendrag på tvers av forhåndsdefinerte domener, evaluere stabiliteten til genererte utdata, kvantifisere virkningen av AI-assisterte arbeidsflyter på legens dokumentasjonstid, undersøke klinikerens adopsjon av LLM-støttet dokumentasjon etter fullføring av den randomiserte fasen, og vurdere påliteligheten til evaluatorvurderinger.
Samlet sett har disse målene til hensikt å fastslå sikkerheten og gjennomførbarheten av å integrere LLM-basert narrativ generering i virkelige sykehusutskrivningsarbeidsflyter.
Studietype
Intervensjonell
Registrering (Antatt)
786
Fase
- Ikke aktuelt
Kontakter og plasseringer
Denne delen inneholder kontaktinformasjon for de som utfører studien, og informasjon om hvor denne studien blir utført.
Studiekontakt
- Navn: Jakub Gazda, MD, PhD
- Telefonnummer: +421556403517
- E-post: jakub.gazda@upjs.sk
Studer Kontakt Backup
- Navn: Martin Janicko, MD, PhD
- Telefonnummer: +421556403527
- E-post: martin.janicko@upjs.sk
Studiesteder
-
-
Košice Region
-
Košice, Košice Region, Slovakia, 04001
- Louis Pasteur University Hospital Kosice
-
-
Deltakelseskriterier
Forskere ser etter personer som passer til en bestemt beskrivelse, kalt kvalifikasjonskriterier. Noen eksempler på disse kriteriene er en persons generelle helsetilstand eller tidligere behandlinger.
Kvalifikasjonskriterier
Alder som er kvalifisert for studier
- Voksen
- Eldre voksen
Tar imot friske frivillige
Nei
Beskrivelse
Inkluderingskriterier:
- Alle pasienter som ble utskrevet i rekkefølge, inkludert de som døde under innleggelsen, vil være kvalifisert for inkludering.
Ekskluderingskriterier:
- Ingen ekskluderingskriterier
Studieplan
Denne delen gir detaljer om studieplanen, inkludert hvordan studien er utformet og hva studien måler.
Hvordan er studiet utformet?
Designdetaljer
- Primært formål: Helsetjenesteforskning
- Tildeling: Randomisert
- Intervensjonsmodell: Parallell tildeling
- Masking: Enkelt
Våpen og intervensjoner
Deltakergruppe / Arm |
Intervensjon / Behandling |
|---|---|
|
Eksperimentell: LLM-assistert
Intervensjonen består av en LLM-assistert arbeidsflyt for å generere sykehusforløpssammendraget ved utskrivelse.
Behandlende lege initierer utskrivelse ved hjelp av en applikasjon - CorteVision Hospital Suite - koblet til sykehusets Informix-database.
Modellens utdata - generert utkast - returneres til applikasjonsgrensesnittet, hvor behandlende lege gjennomgår og kan redigere, korrigere, utvide eller forkorte teksten før endelig godkjenning.
Det endelige sykehusforløpssammendraget legges inn i pasientjournalen først etter legegjennomgang og bekreftelse.
|
Intervensjonen består av en LLM-assistert arbeidsflyt for å generere sykehusforløpssammendraget ved utskrivning.
Den behandlende legen starter utskrivningsprosessen via en applikasjon - CorteVision Hospital Suite - som er koblet til sykehusets Informix-database.
Utdataene fra modellen - den genererte utkastteksten - returneres til applikasjonsgrensesnittet, hvor den behandlende legen gjennomgår teksten og kan redigere, korrigere, utvide eller forkorte den før ferdigstilling.
Det ferdige sykehusforløpssammendraget registreres i pasientjournalen først etter at legen har gjennomgått og bekreftet innholdet.
|
|
Ingen inngripen: Kontroll
Standard, manuell generering av sykehusforløpssammendrag manuelt av ansvarlig lege.
|
Hva måler studien?
Primære resultatmål
Resultatmål |
Tiltaksbeskrivelse |
Tidsramme |
|---|---|---|
|
Sikkerhet vurdert av utfallsutvurderer på en ordinær skala (1,2,3)
Tidsramme: Vurdering på ett tidspunkt - sykehusutskrivelse (opptil 5 dager)
|
Sikkerhet vil bli vurdert ved bruk av en ordinal skala som spenner fra "akseptabel uten ytterligere endringer", via "akseptabel med mindre revisjoner", til ikke "uakseptabel i sin nåværende form" (en kombinasjon av enten fravær av viktig informasjon eller tilstedeværelse av feil/hallusinert informasjon)
|
Vurdering på ett tidspunkt - sykehusutskrivelse (opptil 5 dager)
|
Sekundære resultatmål
Resultatmål |
Tiltaksbeskrivelse |
Tidsramme |
|---|---|---|
|
Sikkerheten til de redigerte og uredigerte LLM-genererte kursoversiktene evaluert på en ordinal skala (1,2,3)
Tidsramme: Ved utskrivelse fra sykehus (opptil 5 dager)
|
Sikkerhet til LLM-genererte, fastlege-redigerte og uredigerte sykehusforløpssammendrag sammenlignet med standard spesialistskrevd dokumentasjon.
Sikkerhet vil bli vurdert ved bruk av en 3-kategoriers ordinær skala som strekker seg fra "akseptabel uten ytterligere endringer" (beste utfall), via "akseptabel med mindre revisjoner" (usikkert utfall), til "ikke uakseptabel i sin nåværende form" (mangel på viktig informasjon eller tilstedeværelse av feil/hallusinert informasjon; verste utfall)
|
Ved utskrivelse fra sykehus (opptil 5 dager)
|
|
Sekundært utfall: Innholdsvaliditet over de følgende forhåndsdefinerte domenene (5C).
Tidsramme: Ved utskriving fra sykehus (opptil 5 dager)
|
Sekundære resultatmål: detaljert evaluering av kvalitet innen følgende forhåndsdefinerte domener (5C): fullstendighet, konsishet, sammenheng, fravær av kritiske feil (inkludert hallusinasjoner), og kulturell og språklig trofasthet.
Enkeltdomener vil bli separat vurdert ved hjelp av en 5-punkts Likert-skala, (1 - fullstendig fravær av enighet, 2 - delvis fravær av enighet, 3 - nøytral enighet, 4 - delvis enighet, 5 - fullstendig enighet)
|
Ved utskriving fra sykehus (opptil 5 dager)
|
|
Tid for å fullføre hospitalsammendrag (sekunder)
Tidsramme: Ved utskrivelse fra sykehus (opptil 5 dager)
|
Arbeidsflytrelaterte sekundære utfall inkluderer tidsmessig effektivitet ved dokumentasjon av sykehusforløpet når man bruker LLM-generert arbeidsflyt sammenlignet med standard praksis.
Utfallsmålet vil være tiden det tar å fullføre oppsummeringen av sykehusforløpet (sekunder), fra start av utskriving til "klar til signering".
|
Ved utskrivelse fra sykehus (opptil 5 dager)
|
|
Generasjonsstabilitet vurdert på en ordinal skala (1,2,3)
Tidsramme: Fra utskrivning fra sykehus til 30 dager etter utskrivning fra sykehus
|
Generasjonsstabilitet vil vurdere konsistensen av LLM-genererte uredigerte sykehusforløpssammendrag når modellen brukes gjentatte ganger på identisk kildeklinisk dokumentasjon.
Generasjonsstabilitet vil bli evaluert av samme vurderingsutvalg på en skala fra 1 - stabil, 2 - akseptabel variasjon, 3 - uakseptabel variasjon
|
Fra utskrivning fra sykehus til 30 dager etter utskrivning fra sykehus
|
|
Adopsjon. Prosentandel av sykehusutskrivelser der LLM-generert behandlingsforløpssammendrag ble benyttet.
Tidsramme: Fra utskrivning fra sykehus til 30 dager etter utskrivning fra sykehus
|
Etter å ha fullført den randomiserte kontrollerte studien, vil innføringen av LLM-generert arbeidsflyt bli evaluert over en én måneds periode.
Utfallsmålet vil bli definert som andelen av kvalifiserte utskrivninger der LLM-avledet sammendragsgenerering ble brukt. |
Fra utskrivning fra sykehus til 30 dager etter utskrivning fra sykehus
|
|
Intervurderer pålitelighet. Prosentvis samsvar mellom to bedømmere av en sykehusforløpssammendrag om sikkerhets- og innholdsgyldighetsvurderinger.
Tidsramme: Fra utskrivning fra sykehus til 30 dager etter utskrivning fra sykehus
|
Pålitelighetsrelaterte resultater vil vurdere konsistensen i ekspertvurderinger av sammendrag av sykehusforløp.
Prosentandel vil kvantifisere enigheten mellom evaluatorer når det gjelder vurderinger av sikkerhet og innholdsgyldighet.
|
Fra utskrivning fra sykehus til 30 dager etter utskrivning fra sykehus
|
|
Intra-rater reliabilitet. Overensstemmelse av sikkerhets- og innholdsgyldighetsvurderinger mellom to evalueringer av samme sykehusforløp og samme bedømmer.
Tidsramme: Ved utskrivelse fra sykehus (opptil 5 dager)
|
Intrarater reliabilitet vil kvantifisere konsistensen av gjentatte evalueringer av samme evaluator basert på konkordansen av sikkerhets- og innholdsgyldighetsvurderinger (prosentvis samsvar)
|
Ved utskrivelse fra sykehus (opptil 5 dager)
|
|
Temporal stabilitet (test-retest reliabilitet) - overensstemmelse mellom vurderingene til samme bedømmer etter utvaskingsperiode.
Tidsramme: 30 dager etter utskrivelse fra sykehus
|
Temporal stabilitet av evaluatorvurderinger vil bli vurdert gjennom gjentatt evaluering av identiske sykehusforløpssammendrag av samme evaluator etter en forhåndsdefinert 30-dagers utvaskeperiode (test-retest reliabilitet).
Utfallsmål vil være basert på samsvar av sikkerhets- og innholdsgyldighetsvurderinger (prosentandel)
|
30 dager etter utskrivelse fra sykehus
|
Samarbeidspartnere og etterforskere
Det er her du vil finne personer og organisasjoner som er involvert i denne studien.
Sponsor
Samarbeidspartnere
Etterforskere
- Hovedetterforsker: Jakub Gazda, MD, PhD, Pavol Jozef Šafárik University
Publikasjoner og nyttige lenker
Den som er ansvarlig for å legge inn informasjon om studien leverer frivillig disse publikasjonene. Disse kan handle om alt relatert til studiet.
Generelle publikasjoner
- Kripalani S, LeFevre F, Phillips CO, Williams MV, Basaviah P, Baker DW. Deficits in communication and information transfer between hospital-based and primary care physicians: implications for patient safety and continuity of care. JAMA. 2007 Feb 28;297(8):831-41. doi: 10.1001/jama.297.8.831.
- Ganzinger M, Kunz N, Fuchs P, Lyu CK, Loos M, Dugas M, Pausch TM. Automated generation of discharge summaries: leveraging large language models with clinical data. Sci Rep. 2025 May 12;15(1):16466. doi: 10.1038/s41598-025-01618-7.
- Burden M, Astik G, Auerbach A, Bowling G, Kangelaris KN, Keniston A, Kochar A, Leykum LK, Linker AS, Sakumoto M, Rogers K, Schwatka N, Westergaard S. Identifying and Measuring Administrative Harms Experienced by Hospitalists and Administrative Leaders. JAMA Intern Med. 2024 Sep 1;184(9):1014-1023. doi: 10.1001/jamainternmed.2024.1890.
Studierekorddatoer
Disse datoene sporer fremdriften for innsending av studieposter og sammendragsresultater til ClinicalTrials.gov. Studieposter og rapporterte resultater gjennomgås av National Library of Medicine (NLM) for å sikre at de oppfyller spesifikke kvalitetskontrollstandarder før de legges ut på det offentlige nettstedet.
Studer hoveddatoer
Studiestart (Antatt)
1. juni 2026
Primær fullføring (Antatt)
31. desember 2026
Studiet fullført (Antatt)
31. desember 2027
Datoer for studieregistrering
Først innsendt
25. februar 2026
Først innsendt som oppfylte QC-kriteriene
19. mars 2026
Først lagt ut (Faktiske)
24. mars 2026
Oppdateringer av studieposter
Sist oppdatering lagt ut (Faktiske)
30. mars 2026
Siste oppdatering sendt inn som oppfylte QC-kriteriene
25. mars 2026
Sist bekreftet
1. mars 2026
Mer informasjon
Begreper knyttet til denne studien
Nøkkelord
Andre studie-ID-numre
- 2IK2026_1
Plan for individuelle deltakerdata (IPD)
Planlegger du å dele individuelle deltakerdata (IPD)?
UBESLUTTE
Legemiddel- og utstyrsinformasjon, studiedokumenter
Studerer et amerikansk FDA-regulert medikamentprodukt
Nei
Studerer et amerikansk FDA-regulert enhetsprodukt
Nei
Denne informasjonen ble hentet direkte fra nettstedet clinicaltrials.gov uten noen endringer. Hvis du har noen forespørsler om å endre, fjerne eller oppdatere studiedetaljene dine, vennligst kontakt register@clinicaltrials.gov. Så snart en endring er implementert på clinicaltrials.gov, vil denne også bli oppdatert automatisk på nettstedet vårt. .