Die Genauigkeit und Wirksamkeit von Zusammenfassungen des Krankenhausverlaufs, die von großen Sprachmodellen verfasst wurden (CLEAN)
Sicherheit und Auswirkung auf den Arbeitsablauf von zusammenfassenden Krankenhausverläufen mit Unterstützung durch große Sprachmodelle: Protokoll für eine randomisierte, auswerter-verblindete Nicht-Unterlegenheitsstudie
Studienübersicht
Status
Status
Bedingungen
Bedingungen
Intervention / Behandlung
Intervention / Behandlung
Detaillierte Beschreibung
Studientyp
Studientyp
Einschreibung (Geschätzt)
Einschreibung
Phase
Phase
- Unzutreffend
Kontakte und Standorte
Studienkontakt
Studienkontakt
- Name: Jakub Gazda, MD, PhD
- Telefonnummer: +421556403517
- E-Mail: jakub.gazda@upjs.sk
Studieren Sie die Kontaktsicherung
- Name: Martin Janicko, MD, PhD
- Telefonnummer: +421556403527
- E-Mail: martin.janicko@upjs.sk
Studienorte
-
-
Košice Region
-
Košice, Košice Region, Slowakei, 04001
- Louis Pasteur University Hospital Kosice
-
-
Teilnahmekriterien
Zulassungskriterien
Zulassungskriterien
Studienberechtigtes Alter
- Erwachsene
- Älterer Erwachsener
Akzeptiert gesunde Freiwillige
Beschreibung
Einschlusskriterien:
- Alle aufeinanderfolgend entlassenen Patienten, einschließlich derjenigen, die während des Krankenhausaufenthalts verstarben, sind für die Aufnahme berechtigt.
Ausschlusskriterien:
- Keine Ausschlusskriterien
Studienplan
Wie ist die Studie aufgebaut?
Designdetails
- Hauptzweck: Versorgungsforschung
- Zuteilung: Zufällig
- Interventionsmodell: Parallele Zuordnung
- Maskierung: Single
Anzahl der Arme
Waffen und Interventionen
Teilnehmergruppe / ArmTeilnehmergruppe / Arm |
Intervention / BehandlungIntervention / Behandlung |
|---|---|
|
Experimental: LLM unterstützt
Die Intervention besteht aus einem KI-gestützten Arbeitsablauf zur Erstellung des Krankenhausverlaufsberichts bei Entlassung.
Der behandelnde Arzt initiiert die Entlassung über eine Anwendung - CorteVision Hospital Suite - die mit der Krankenhaus-Informix-Datenbank verbunden ist.
Die Ausgabe des Modells - der generierte Entwurf - wird an die Anwendungsoberfläche zurückgegeben, wo der behandelnde Arzt den Text überprüft und ihn vor der endgültigen Fertigstellung gegebenenfalls bearbeiten, korrigieren, erweitern oder kürzen kann.
Der fertige Krankenhausverlaufsbericht wird erst nach ärztlicher Überprüfung und Bestätigung in die Patientenakte aufgenommen.
|
Die Intervention besteht aus einem LLM-unterstützten Workflow zur Erstellung des Krankenhausverlaufszusammenfassung bei der Entlassung.
Der behandelnde Arzt initiiert die Entlassung über eine Anwendung - CorteVision Hospital Suite - die mit der Krankenhaus-Informix-Datenbank verbunden ist.
Die Ausgabe des Modells - der generierte Entwurf - wird an die Anwendungsoberfläche zurückgegeben, wo der behandelnde Arzt den Text überprüft und gegebenenfalls bearbeitet, korrigiert, erweitert oder kürzt, bevor er finalisiert wird.
Die fertige Krankenhausverlaufszusammenfassung wird erst nach ärztlicher Überprüfung und Bestätigung in die Patientenakte eingetragen.
|
|
Kein Eingriff: Kontrolle
Standardmäßige, manuelle Erstellung des Krankenhausverlaufsberichts durch den verantwortlichen Arzt.
|
Was misst die Studie?
Primäre Ergebnismessungen
Primäre Ergebnismessungen
Ergebnis Maßnahme |
Maßnahmenbeschreibung |
Zeitfenster |
|---|---|---|
|
Sicherheit vom Ergebnisbewerter auf einer Ordinalskala (1,2,3) bewertet
Zeitfenster: Beurteilung zu einem Zeitpunkt - Krankenhausentlassung (bis zu 5 Tage)
|
Die Sicherheit wird anhand einer Ordinalskala bewertet, die von "akzeptabel ohne weitere Änderungen" über "akzeptabel mit geringfügigen Überarbeitungen" bis hin zu "in der vorliegenden Form nicht akzeptabel" reicht (eine Kombination aus entweder dem Fehlen wichtiger Informationen oder dem Vorhandensein falscher/halluzinierter Informationen).
|
Beurteilung zu einem Zeitpunkt - Krankenhausentlassung (bis zu 5 Tage)
|
Sekundäre Ergebnismessungen
Sekundäre Ergebnismessungen
Ergebnis Maßnahme |
Maßnahmenbeschreibung |
Zeitfenster |
|---|---|---|
|
Sicherheit der bearbeiteten und unbearbeiteten, von LLM generierten Kurszusammenfassungen, bewertet auf einer ordinalen Skala (1,2,3)
Zeitfenster: Bei Krankenhausentlassung (bis zu 5 Tage)
|
Sicherheit von LLM-generierten, von Bewohnern bearbeiteten und unbearbeiteten Krankenhausverlaufszusammenfassungen im Vergleich zu standardmäßiger, von Fachärzten verfasster Dokumentation.
Die Sicherheit wird anhand einer 3-stufigen ordinalen Skala bewertet, die von "ohne weitere Änderungen akzeptabel" (bester Outcome) über "mit geringfügigen Überarbeitungen akzeptabel" (unsicherer Outcome) bis hin zu "in der vorliegenden Form nicht akzeptabel" (Fehlen wichtiger Informationen oder Vorhandensein falscher/halluzinierter Informationen; schlechtester Outcome) reicht.
|
Bei Krankenhausentlassung (bis zu 5 Tage)
|
|
Sekundäres Ergebnis: Inhaltsvalidität in den folgenden vordefinierten Domänen (5C).
Zeitfenster: Bei der Krankenhausentlassung (bis zu 5 Tage)
|
Sekundäre Endpunkte: Detaillierte Bewertung der Qualität in den folgenden vordefinierten Bereichen (5C): Vollständigkeit, Prägnanz, Kohärenz, Fehlen kritischer Fehler (einschließlich Halluzinationen) sowie kulturelle und sprachliche Treue.
Einzelne Bereiche werden separat anhand einer 5-Punkte-Likert-Skala bewertet (1 – völlige Ablehnung, 2 – teilweise Ablehnung, 3 – neutrale Zustimmung, 4 – teilweise Zustimmung, 5 – vollständige Zustimmung).
|
Bei der Krankenhausentlassung (bis zu 5 Tage)
|
|
Zeit bis zur Fertigstellung des Krankenhausberichts (Sekunden)
Zeitfenster: Bei der Krankenhausentlassung (bis zu 5 Tage)
|
Arbeitsablaufbezogene sekundäre Endpunkte umfassen die Zeiteffizienz der Krankenhausverlaufsdokumentation bei Verwendung des KI-generierten Arbeitsablaufs im Vergleich zur Standardpraxis.
Das Ergebnis wird die Zeit sein, die für die Erstellung der Krankenhausverlaufzusammenfassung benötigt wird (Sekunden), vom Einleiten der Entlassung bis zum "bereit zur Unterschrift"-Status.
|
Bei der Krankenhausentlassung (bis zu 5 Tage)
|
|
Generationsstabilität auf einer ordinalen Skala (1,2,3) bewertet
Zeitfenster: Vom Krankenhausentlassungszeitpunkt bis 30 Tage nach Krankenhausentlassung
|
Die Generierungsstabilität bewertet die Konsistenz von uneditierten, durch LLM generierten Zusammenfassungen des Krankenhausverlaufs, wenn das Modell wiederholt auf identische klinische Ausgangsdokumentation angewendet wird.
Die Generierungsstabilität wird durch denselben Gutachter auf einer Skala von 1 - stabil, 2 - akzeptable Abweichung, 3 - inakzeptable Abweichung bewertet.
|
Vom Krankenhausentlassungszeitpunkt bis 30 Tage nach Krankenhausentlassung
|
|
Einführungsrate. Prozentsatz der Krankenhausentlassungen, bei denen die vom LLM erstellte Behandlungskurzfassung genutzt wurde.
Zeitfenster: Von der Krankenhausentlassung bis 30 Tage nach der Krankenhausentlassung
|
Nach Abschluss der randomisierten kontrollierten Studie wird die Einführung des KI-generierten Workflows über einen Zeitraum von einem Monat evaluiert.
Das Ergebnis wird als der Anteil der berechtigten Entlassungen definiert, für die die KI-generierte Zusammenfassung verwendet wurde.
|
Von der Krankenhausentlassung bis 30 Tage nach der Krankenhausentlassung
|
|
Inter-Rater-Reliabilität. Prozentuale Übereinstimmung zwischen zwei Gutachtern einer Krankenhausverlaufskurzzusammenfassung hinsichtlich der Bewertungen von Sicherheit und Inhaltsvalidität.
Zeitfenster: Von der Krankenhausentlassung bis zu 30 Tagen nach der Krankenhausentlassung
|
Zuverlässigkeitsbezogene Ergebnisse bewerten die Konsistenz der Expertenbewertungen von Krankenhausverlaufskurzfassungen.
Prozentsätze quantifizieren die Übereinstimmung zwischen den Bewertern hinsichtlich der Sicherheits- und Inhaltsvaliditätsbewertungen.
|
Von der Krankenhausentlassung bis zu 30 Tagen nach der Krankenhausentlassung
|
|
Intra-Rater-Reliabilität. Übereinstimmung der Bewertungen von Sicherheit und Inhaltsvalidität zwischen zwei Auswertungen desselben Krankenhausverlaufs und desselben Gutachters.
Zeitfenster: Bei der Krankenhausentlassung (bis zu 5 Tage)
|
Die Intra-Rater-Reliabilität quantifiziert die Konsistenz wiederholter Bewertungen durch denselben Bewerter basierend auf der Übereinstimmung der Sicherheits- und Inhaltsvaliditätsbewertungen (Prozentsatz der Übereinstimmung)
|
Bei der Krankenhausentlassung (bis zu 5 Tage)
|
|
Zeitliche Stabilität (Test-Retest-Reliabilität) - Übereinstimmung zwischen den Bewertungen desselben Prüfers nach der Washout-Periode.
Zeitfenster: 30 Tage nach der Krankenhausentlassung
|
Die zeitliche Stabilität der Bewerterurteile wird durch wiederholte Bewertung identischer Krankenhausverlaufszusammenfassungen durch denselben Bewerter nach einer vordefinierten 30-tägigen Auswaschperiode bewertet (Test-Retest-Reliabilität).
Die Ergebnisparameter basieren auf der Übereinstimmung der Sicherheits- und Inhaltsvaliditätsbewertungen (Prozentsatz).
|
30 Tage nach der Krankenhausentlassung
|
Mitarbeiter und Ermittler
Sponsor
Sponsor
Mitarbeiter
Mitarbeiter
Ermittler
Ermittler
- Hauptermittler: Jakub Gazda, MD, PhD, Pavol Jozef Šafárik University
Publikationen und hilfreiche Links
Allgemeine Veröffentlichungen
- Kripalani S, LeFevre F, Phillips CO, Williams MV, Basaviah P, Baker DW. Deficits in communication and information transfer between hospital-based and primary care physicians: implications for patient safety and continuity of care. JAMA. 2007 Feb 28;297(8):831-41. doi: 10.1001/jama.297.8.831.
- Ganzinger M, Kunz N, Fuchs P, Lyu CK, Loos M, Dugas M, Pausch TM. Automated generation of discharge summaries: leveraging large language models with clinical data. Sci Rep. 2025 May 12;15(1):16466. doi: 10.1038/s41598-025-01618-7.
- Burden M, Astik G, Auerbach A, Bowling G, Kangelaris KN, Keniston A, Kochar A, Leykum LK, Linker AS, Sakumoto M, Rogers K, Schwatka N, Westergaard S. Identifying and Measuring Administrative Harms Experienced by Hospitalists and Administrative Leaders. JAMA Intern Med. 2024 Sep 1;184(9):1014-1023. doi: 10.1001/jamainternmed.2024.1890.
Studienaufzeichnungsdaten
Haupttermine studieren
Studienbeginn (Geschätzt)
Studienbeginn
Primärer Abschluss (Geschätzt)
Primärer Abschluss
Studienabschluss (Geschätzt)
Studienabschluss
Studienanmeldedaten
Zuerst eingereicht
Zuerst eingereicht
Zuerst eingereicht, das die QC-Kriterien erfüllt hat
Zuerst eingereicht, das die QC-Kriterien erfüllt hat
Zuerst gepostet (Tatsächlich)
Zuerst gepostet
Studienaufzeichnungsaktualisierungen
Letztes Update gepostet (Tatsächlich)
Letztes Update gepostet
Letztes eingereichtes Update, das die QC-Kriterien erfüllt
Letztes eingereichtes Update, das die QC-Kriterien erfüllt
Zuletzt verifiziert
Zuletzt verifiziert
Mehr Informationen
Begriffe im Zusammenhang mit dieser Studie
Schlüsselwörter
Andere Studien-ID-Nummern
Andere Studien-ID-Nummern
- 2IK2026_1
Plan für individuelle Teilnehmerdaten (IPD)
Planen Sie, individuelle Teilnehmerdaten (IPD) zu teilen?
Arzneimittel- und Geräteinformationen, Studienunterlagen
Studiert ein von der US-amerikanischen FDA reguliertes Arzneimittelprodukt
Studiert ein von der US-amerikanischen FDA reguliertes Geräteprodukt
Diese Informationen wurden ohne Änderungen direkt von der Website clinicaltrials.gov abgerufen. Wenn Sie Ihre Studiendaten ändern, entfernen oder aktualisieren möchten, wenden Sie sich bitte an register@clinicaltrials.gov. Sobald eine Änderung auf clinicaltrials.gov implementiert wird, wird diese automatisch auch auf unserer Website aktualisiert .