- ICH GCP
- Register voor klinische proeven in de VS.
- Klinische proef NCT07491068
De nauwkeurigheid en effectiviteit van door grote taalmodellen geschreven ziekenhuisverloop samenvattingen (CLEAN)
25 maart 2026 bijgewerkt door: Martin Janičko, Pavol Jozef Safarik University
Veiligheid en impact op de werkstroom van door groot taalmodel ondersteunde samenvattingen van ziekenhuisverloop: protocol voor een gerandomiseerde, evaluator-verblinde non-inferioriteitstudie
Achtergrond: Artsen wereldwijd worden geconfronteerd met een toenemende administratieve last die tijd wegneemt van directe patiëntenzorg.
Onder de documentatietaken voor opgenomen patiënten is het opstellen van samenvattingen van het ziekenhuisverloop bijzonder tijdrovend en cruciaal voor veilige zorgoverdrachten.
Grote taalmodellen (LLM's) hebben potentie getoond voor het genereren van klinische teksten; echter, robuust bewijs uit gerandomiseerde, evaluator-gebindeerde onderzoeken uitgevoerd in de routinematige ziekenhuispraktijk blijft beperkt.
Doelstellingen: De CLEAN-studie heeft als doel te evalueren of LLM-ondersteunde, specialistisch bewerkte generatie van samenvattingen van het ziekenhuisverloop niet-inferieur is in veiligheid vergeleken met standaard door clinici geschreven documentatie in routinematige intramurale zorg.
Secundaire doelstellingen omvatten niet-inferioriteitsbeoordelingen van door assistenten bewerkte en onbewerkte LLM-gegenereerde samenvattingen.
Aanvullende doelstellingen zijn het evalueren van de samenvattingskwaliteit over vooraf gedefinieerde domeinen, het kwantificeren van artsdocumentatietijd, het beoordelen van de stabiliteit van LLM-generatie, het meten van de adoptie door clinici na de gerandomiseerde fase, en het onderzoeken van de inter-, intra-observer en test-hertest betrouwbaarheid van expertbeoordelingen.
Methoden: Dit is een single-centre, double-campus, verkennend gerandomiseerd gecontroleerd niet-inferioriteitsonderzoek uitgevoerd in een tertiair universitair ziekenhuis.
Opeenvolgende ziekenhuisontslagen over meerdere klinische afdelingen worden gerandomiseerd 1:1 naar een LLM-ondersteunde documentatieworkflow of standaard handmatige auteurschap.
De interventie integreert een on-premise LLM in een parallel ziekenhuisinformatiestysteem, dat concept samenvattingen van het ziekenhuisverloop genereert uit volledige, onbewerkte klinische documentatie, die artsen kunnen beoordelen en bewerken vóór definitieve vastlegging.
Veiligheid, de primaire uitkomst, gedefinieerd als de aanwezigheid van alle belangrijke informatie en afwezigheid van onjuiste/hallucinerende informatie, wordt beoordeeld door een beoordelingscommissie geblindeerd voor documentatieworkflow.
Secundaire uitkomsten omvatten inhoudsvaliditeit, workflowefficiëntie, generatiestabiliteit, post-trial adoptie door clinici en betrouwbaarheidsmetingen.
In totaal zijn 786 ontslagepisodes nodig om niet-inferioriteit te beoordelen met een vooraf gedefinieerde marge van 5 procentpunten.
Ethische aspecten en verspreiding: Het onderzoek zal worden uitgevoerd in overeenstemming met de Verklaring van Helsinki, Goede Klinische Praktijk en de Algemene Verordening Gegevensbescherming.
Een vrijstelling van geïnformeerde toestemming wordt aangevraagd vanwege minimaal risico en exclusief gebruik van routinematige klinische gegevens.
Resultaten zullen worden verspreid via peer-reviewed publicatie en betrokkenheid van zorgstakeholders.
Studie Overzicht
Toestand
Nog niet aan het werven
Conditie
Interventie / Behandeling
Gedetailleerde beschrijving
De Wereldgezondheidsorganisatie heeft een ernstige wereldwijde crisis in de gezondheidszorgarbeidsmarkt vastgesteld, met een geschat tekort van ongeveer 12,7 miljoen artsen wereldwijd in 2020.
Projecties geven aan dat dit tekort de komende jaren verder zal verslechteren [1].
Bovendien doen deze tekorten zich voor naast een toenemende vraag naar gezondheidszorg, gedreven door de vergrijzing van de bevolking en de toenemende prevalentie van multimorbiditeit.
Desondanks blijft administratieve last een hardnekkige en systemische uitdaging in gezondheidszorgsystemen wereldwijd.
Initiatieven gericht op het verminderen van de niet-klinische werklast van artsen hebben slechts beperkt succes geboekt, wat leidt tot de voortdurende afleiding van klinische expertise van directe patiëntenzorg [2].
Onder de administratieve verantwoordelijkheden is de voorbereiding van ontslagbrieven een van de meest tijdrovende taken voor artsen die voor opgenomen patiënten zorgen, maar het is ook essentieel voor het waarborgen van continuïteit van zorg na ontslag.
Ondanks een aanzienlijke tijdsbesteding voldoen ontslagsamenvattingen vaak niet aan de verwachte normen, waarbij veel artsen tekortkomingen rapporteren in zowel volledigheid als kwaliteit [3], [4].
De adoptie van elektronische medische dossiers heeft inspanningen op gang gebracht om deze last te verlichten door over te gaan van volledig handmatige auteurschap naar gedeeltelijke automatisering, waardoor geselecteerde secties van ontslagbrieven automatisch kunnen worden gegenereerd.
Echter, het ziekenhuisverloop - het meest klinisch informatieve onderdeel van de ontslagbrief - blijft bijna universeel afhankelijk van handmatige narratieve documentatie door de behandelend arts.
B. Doelstellingen De primaire doelstelling van deze studie is om te evalueren of LLM-ondersteunde, door specialisten bewerkte generatie van ziekenhuisverloopsamenvattingen veilig is voor gebruik in routinematige intramurale zorg, vergeleken met standaard door clinici geschreven documentatie.
Secundaire doelstellingen omvatten het evalueren van de veiligheid van door assistenten bewerkte en onbewerkte LLM-gegenereerde ziekenhuisverloopsamenvattingen.
Aanvullende doelstellingen zijn het beoordelen van de kwaliteit van LLM-ondersteunde samenvattingen in vooraf gedefinieerde domeinen, het evalueren van de stabiliteit van gegenereerde uitvoer, het kwantificeren van de impact van AI-ondersteunde workflows op de documentatietijd van artsen, het onderzoeken van de adoptie door clinici van LLM-ondersteunde documentatie na voltooiing van de gerandomiseerde fase, en het beoordelen van de betrouwbaarheid van evaluatorbeoordelingen.
Gezamenlijk zijn deze doelstellingen gericht op het bepalen van de veiligheid en haalbaarheid van het integreren van LLM-gebaseerde narratieve generatie in real-world ontslagworkflows in ziekenhuizen.
Studietype
Ingrijpend
Inschrijving (Geschat)
786
Fase
- Niet toepasbaar
Contacten en locaties
In dit gedeelte vindt u de contactgegevens van degenen die het onderzoek uitvoeren en informatie over waar dit onderzoek wordt uitgevoerd.
Studiecontact
- Naam: Jakub Gazda, MD, PhD
- Telefoonnummer: +421556403517
- E-mail: jakub.gazda@upjs.sk
Studie Contact Back-up
- Naam: Martin Janicko, MD, PhD
- Telefoonnummer: +421556403527
- E-mail: martin.janicko@upjs.sk
Studie Locaties
-
-
Košice Region
-
Košice, Košice Region, Slowakije, 04001
- Louis Pasteur University Hospital Kosice
-
-
Deelname Criteria
Onderzoekers zoeken naar mensen die aan een bepaalde beschrijving voldoen, de zogenaamde geschiktheidscriteria. Enkele voorbeelden van deze criteria zijn iemands algemene gezondheidstoestand of eerdere behandelingen.
Geschiktheidscriteria
Leeftijden die in aanmerking komen voor studie
- Volwassen
- Oudere volwassene
Accepteert gezonde vrijwilligers
Nee
Beschrijving
Inclusiecriteria:
- Alle opeenvolgend ontslagen patiënten, inclusief degenen die tijdens de ziekenhuisopname zijn overleden, komen in aanmerking voor inclusie.
Exclusiecriteria:
- Geen exclusiecriteria
Studie plan
Dit gedeelte bevat details van het studieplan, inclusief hoe de studie is opgezet en wat de studie meet.
Hoe is de studie opgezet?
Ontwerpdetails
- Primair doel: Onderzoek naar gezondheidsdiensten
- Toewijzing: Gerandomiseerd
- Interventioneel model: Parallelle opdracht
- Masker: Enkel
Wapens en interventies
Deelnemersgroep / Arm |
Interventie / Behandeling |
|---|---|
|
Experimenteel: LLM-ondersteund
De interventie bestaat uit een LLM-ondersteunde workflow voor het genereren van het ziekenhuisverloopoverzicht bij ontslag.
De behandelend arts start het ontslagproces met een applicatie - CorteVision Hospital Suite - die is verbonden met de Informix-database van het ziekenhuis.
De uitvoer van het model - het gegenereerde concept - wordt teruggestuurd naar de applicatie-interface, waar de behandelend arts de tekst beoordeelt en deze indien nodig kan bewerken, corrigeren, uitbreiden of inkorten voordat deze wordt afgerond.
Het definitieve ziekenhuisverloopoverzicht wordt pas in het medisch dossier opgenomen na beoordeling en bevestiging door de arts.
|
De interventie bestaat uit een door een LLM ondersteunde workflow voor het genereren van het ziekenhuisverloopoverzicht bij ontslag.
De behandelend arts initieert het ontslag met behulp van een applicatie - CorteVision Hospital Suite - die is verbonden met de Informix-database van het ziekenhuis.
De uitvoer van het model - het gegenereerde concept - wordt teruggegeven aan de applicatie-interface, waar de behandelend arts de tekst beoordeelt en deze eventueel kan bewerken, corrigeren, uitbreiden of inkorten voordat deze wordt afgerond.
Het definitieve ziekenhuisverloopoverzicht wordt pas in het medisch dossier ingevoerd nadat de arts dit heeft beoordeeld en bevestigd.
|
|
Geen tussenkomst: Controle
Standaard, handmatige generatie van het ziekenhuisverloopoverzicht door de behandelend arts.
|
Wat meet het onderzoek?
Primaire uitkomstmaten
Uitkomstmaat |
Maatregel Beschrijving |
Tijdsspanne |
|---|---|---|
|
Veiligheid beoordeeld door uitkomstbeoordelaar op een ordinale schaal (1,2,3)
Tijdsspanne: Beoordeling op één tijdstip - ziekenhuisontslag (tot 5 dagen)
|
De veiligheid wordt beoordeeld met behulp van een ordinale schaal die varieert van "acceptabel zonder verdere wijzigingen", via "acceptabel met kleine revisies", tot niet "onaanvaardbaar in de huidige vorm" (een combinatie van het ontbreken van belangrijke informatie of de aanwezigheid van onjuiste/hallucinatoire informatie)
|
Beoordeling op één tijdstip - ziekenhuisontslag (tot 5 dagen)
|
Secundaire uitkomstmaten
Uitkomstmaat |
Maatregel Beschrijving |
Tijdsspanne |
|---|---|---|
|
Veiligheid van de bewerkte en onbewerkte door LLM gegenereerde cursussamenvattingen geëvalueerd op een ordinale schaal (1,2,3)
Tijdsspanne: Bij ontslag uit het ziekenhuis (tot 5 dagen)
|
Veiligheid van door LLM gegenereerde, door arts-assistenten bewerkte en onbewerkte ziekenhuisverloopsamenvattingen vergeleken met standaard door specialisten geschreven documentatie.
Veiligheid wordt beoordeeld met behulp van een ordinale schaal met 3 categorieën, variërend van "acceptabel zonder verdere wijzigingen" (beste uitkomst), via "acceptabel met kleine revisies" (onzekere uitkomst), tot "niet acceptabel in zijn huidige vorm" (afwezigheid van belangrijke informatie of aanwezigheid van onjuiste/hallucinatie-informatie; slechtste uitkomst)
|
Bij ontslag uit het ziekenhuis (tot 5 dagen)
|
|
Secundaire uitkomstmaat: Inhoudsvaliditeit over de volgende vooraf gedefinieerde domeinen (5C).
Tijdsspanne: Bij ontslag uit het ziekenhuis (tot 5 dagen)
|
Secundaire uitkomstmaten: gedetailleerde evaluatie van de kwaliteit volgens de volgende vooraf gedefinieerde domeinen (5C): volledigheid, beknoptheid, samenhang, afwezigheid van kritieke fouten (inclusief hallucinaties), en culturele en taalkundige betrouwbaarheid.
Individuele domeinen worden afzonderlijk beoordeeld met behulp van een 5-punts Likert-schaal, (1 - volledige afwezigheid van overeenstemming, 2 - gedeeltelijke afwezigheid van overeenstemming, 3 - neutrale overeenstemming, 4 - gedeeltelijke overeenstemming, 5 - volledige overeenstemming)
|
Bij ontslag uit het ziekenhuis (tot 5 dagen)
|
|
Tijd om ziekenhuissamenvatting te voltooien (seconden)
Tijdsspanne: Bij ontslag uit het ziekenhuis (tot 5 dagen)
|
Werkstroom-gerelateerde secundaire uitkomsten omvatten de tijdefficiëntie van documentatie van het ziekenhuistraject bij gebruik van de LLM-gegenereerde werkstroom in vergelijking met de standaardpraktijk.
De uitkomstmaat zal de benodigde tijd zijn om het ziekenhuistrajectoverzicht te voltooien (seconden), van het starten van ontslag tot 'klaar voor ondertekening'.
|
Bij ontslag uit het ziekenhuis (tot 5 dagen)
|
|
Generatiestabiliteit beoordeeld op een ordinale schaal (1,2,3)
Tijdsspanne: Van ontslag uit het ziekenhuis tot 30 dagen na ontslag uit het ziekenhuis
|
Generatiestabiliteit zal de consistentie beoordelen van door LLM gegenereerde, onbewerkte ziekenhuisverloop samenvattingen wanneer het model herhaaldelijk wordt toegepast op identieke bronklinische documentatie.
Generatiestabiliteit zal door dezelfde beoordelaar worden geëvalueerd op een schaal van 1 - stabiel, 2 - acceptabele variatie, 3 - onacceptabele variatie
|
Van ontslag uit het ziekenhuis tot 30 dagen na ontslag uit het ziekenhuis
|
|
Adoptie. Percentage van ziekenhuisontslagen waarbij het door het LLM gegenereerde behandeloverzicht werd gebruikt.
Tijdsspanne: Van ziekenhuisontslag tot 30 dagen na ziekenhuisontslag
|
Na het voltooien van de gerandomiseerde gecontroleerde studie zal de adoptie van het door het LLM gegenereerde werkproces gedurende een periode van één maand worden geëvalueerd.
De uitkomstmaat wordt gedefinieerd als het aandeel van in aanmerking komende ontslagen waarbij gebruik is gemaakt van de door het LLM gegenereerde samenvatting. |
Van ziekenhuisontslag tot 30 dagen na ziekenhuisontslag
|
|
Interbeoordelaarsbetrouwbaarheid. Percentage overeenkomst tussen twee beoordelaars van een ziekenhuisverloop samenvatting over veiligheids- en inhoudsvaliditeitsbeoordelingen.
Tijdsspanne: Van ontslag uit het ziekenhuis tot 30 dagen na ontslag uit het ziekenhuis
|
Betrouwbaarheidsgerelateerde uitkomsten zullen de consistentie van deskundige evaluaties van ziekenhuisverloopssamenvattingen beoordelen.
Percentage zal de overeenstemming tussen beoordelaars over veiligheids- en inhoudsvaliditeitsbeoordelingen kwantificeren.
|
Van ontslag uit het ziekenhuis tot 30 dagen na ontslag uit het ziekenhuis
|
|
Intra-beoordelaarsbetrouwbaarheid. Overeenstemming van veiligheids- en inhoudsvaliditeitsoordelen tussen twee evaluaties van dezelfde ziekenhuiscursus en dezelfde beoordelaar.
Tijdsspanne: Bij ontslag uit het ziekenhuis (tot 5 dagen)
|
Intra-beoordelaarsbetrouwbaarheid zal de consistentie van herhaalde evaluaties door dezelfde beoordelaar kwantificeren op basis van de overeenkomst van veiligheids- en inhoudsvaliditeitbeoordelingen (percentage overeenstemming)
|
Bij ontslag uit het ziekenhuis (tot 5 dagen)
|
|
Temporele stabiliteit (test-hertest betrouwbaarheid) - overeenstemming tussen de beoordelingen van dezelfde beoordelaar na een wash-out periode.
Tijdsspanne: 30 dagen na ziekenhuisontslag
|
De temporele stabiliteit van beoordelaarsbeoordelingen wordt beoordeeld door herhaalde evaluatie van identieke ziekenhuisverloop samenvattingen door dezelfde beoordelaar na een vooraf bepaalde wash-out periode van 30 dagen (test-hertest betrouwbaarheid).
Uitkomstmaten zijn gebaseerd op de overeenstemming van veiligheids- en inhoudsvaliditeit beoordelingen (percentage)
|
30 dagen na ziekenhuisontslag
|
Medewerkers en onderzoekers
Hier vindt u mensen en organisaties die betrokken zijn bij dit onderzoek.
Sponsor
Medewerkers
Onderzoekers
- Hoofdonderzoeker: Jakub Gazda, MD, PhD, Pavol Jozef Šafárik University
Publicaties en nuttige links
De persoon die verantwoordelijk is voor het invoeren van informatie over het onderzoek stelt deze publicaties vrijwillig ter beschikking. Dit kan gaan over alles wat met het onderzoek te maken heeft.
Algemene publicaties
- Kripalani S, LeFevre F, Phillips CO, Williams MV, Basaviah P, Baker DW. Deficits in communication and information transfer between hospital-based and primary care physicians: implications for patient safety and continuity of care. JAMA. 2007 Feb 28;297(8):831-41. doi: 10.1001/jama.297.8.831.
- Ganzinger M, Kunz N, Fuchs P, Lyu CK, Loos M, Dugas M, Pausch TM. Automated generation of discharge summaries: leveraging large language models with clinical data. Sci Rep. 2025 May 12;15(1):16466. doi: 10.1038/s41598-025-01618-7.
- Burden M, Astik G, Auerbach A, Bowling G, Kangelaris KN, Keniston A, Kochar A, Leykum LK, Linker AS, Sakumoto M, Rogers K, Schwatka N, Westergaard S. Identifying and Measuring Administrative Harms Experienced by Hospitalists and Administrative Leaders. JAMA Intern Med. 2024 Sep 1;184(9):1014-1023. doi: 10.1001/jamainternmed.2024.1890.
Studie record data
Deze datums volgen de voortgang van het onderzoeksdossier en de samenvatting van de ingediende resultaten bij ClinicalTrials.gov. Studieverslagen en gerapporteerde resultaten worden beoordeeld door de National Library of Medicine (NLM) om er zeker van te zijn dat ze voldoen aan specifieke kwaliteitscontrolenormen voordat ze op de openbare website worden geplaatst.
Bestudeer belangrijke data
Studie start (Geschat)
1 juni 2026
Primaire voltooiing (Geschat)
31 december 2026
Studie voltooiing (Geschat)
31 december 2027
Studieregistratiedata
Eerst ingediend
25 februari 2026
Eerst ingediend dat voldeed aan de QC-criteria
19 maart 2026
Eerst geplaatst (Werkelijk)
24 maart 2026
Updates van studierecords
Laatste update geplaatst (Werkelijk)
30 maart 2026
Laatste update ingediend die voldeed aan QC-criteria
25 maart 2026
Laatst geverifieerd
1 maart 2026
Meer informatie
Termen gerelateerd aan deze studie
Trefwoorden
Andere studie-ID-nummers
- 2IK2026_1
Plan Individuele Deelnemersgegevens (IPD)
Bent u van plan om gegevens van individuele deelnemers (IPD) te delen?
ONBESLIST
Informatie over medicijnen en apparaten, studiedocumenten
Bestudeert een door de Amerikaanse FDA gereguleerd geneesmiddel
Nee
Bestudeert een door de Amerikaanse FDA gereguleerd apparaatproduct
Nee
Deze informatie is zonder wijzigingen rechtstreeks van de website clinicaltrials.gov gehaald. Als u verzoeken heeft om uw onderzoeksgegevens te wijzigen, te verwijderen of bij te werken, neem dan contact op met register@clinicaltrials.gov. Zodra er een wijziging wordt doorgevoerd op clinicaltrials.gov, wordt deze ook automatisch bijgewerkt op onze website .