Diese Seite wurde automatisch übersetzt und die Genauigkeit der Übersetzung wird nicht garantiert. Bitte wende dich an die englische Version für einen Quelltext.

Verbesserung des interdisziplinären Verständnisses ophthalmologischer Notizen durch ein lokales großes Sprachmodell

1. Oktober 2024 aktualisiert von: John J Chen
In dieser prospektiven, randomisierten, kontrollierten Studie wurde die Wirksamkeit der Hinzufügung von durch das Large Language Model (LLM) generierten Plain Language Summaries (PLSs) zu Standard Ophthalmology Notes (SONs) bei der Verbesserung des Verständnisses bei nicht-ophthalmologischen Anbietern bewertet. Die Studie nutzte Umfragen, um das Verständnis und die Zufriedenheit von nicht-ophthalmologischen Anbietern mit den Notizen sowie die Bewertung der PLS-Genauigkeit, -Sicherheit und des Zeitaufwands durch Augenärzte zu bewerten. Außerdem wurde eine objektive semantische und linguistische Analyse der PLSs durchgeführt.

Studienübersicht

Status

Abgeschlossen

Bedingungen

Intervention / Behandlung

Studientyp

Interventionell

Einschreibung (Tatsächlich)

851

Phase

  • Unzutreffend

Kontakte und Standorte

Dieser Abschnitt enthält die Kontaktdaten derjenigen, die die Studie durchführen, und Informationen darüber, wo diese Studie durchgeführt wird.

Studienorte

  • Vereinigte Staaten
    • Minnesota
      • Rochester, Minnesota, Vereinigte Staaten, 55905
        • Mayo Clinic

Teilnahmekriterien

Forscher suchen nach Personen, die einer bestimmten Beschreibung entsprechen, die als Auswahlkriterien bezeichnet werden. Einige Beispiele für diese Kriterien sind der allgemeine Gesundheitszustand einer Person oder frühere Behandlungen.

Zulassungskriterien

Studienberechtigtes Alter

  • Erwachsene
  • Älterer Erwachsener

Akzeptiert gesunde Freiwillige

Nein

Beschreibung

Einschlusskriterien:

  • Beurteilung durch einen Augenarzt in der Abteilung für Augenheilkunde der Mayo Clinic in Rochester, MN, entweder im stationären oder ambulanten Bereich zwischen dem 1. Februar 2024 und dem 31. Mai 2024.

Ausschlusskriterien:

  • In der Krankenakte sind keine netzinternen, nicht augenärztlichen Leistungserbringer aufgeführt
  • Nur verfahrensbezogene Besuche, die nur eine Verfahrensnotiz enthalten

Studienplan

Dieser Abschnitt enthält Einzelheiten zum Studienplan, einschließlich des Studiendesigns und der Messung der Studieninhalte.

Wie ist die Studie aufgebaut?

Designdetails

  • Hauptzweck: Versorgungsforschung
  • Zuteilung: Zufällig
  • Interventionsmodell: Parallele Zuordnung
  • Maskierung: Keine (Offenes Etikett)

Waffen und Interventionen

Teilnehmergruppe / Arm
Intervention / Behandlung
Kein Eingriff: Kontrolle
Die Teilnehmer erhalten Standardnotizen zur Augenheilkunde ohne jegliche Zusätze.
Experimental: Intervention
Die Teilnehmer erhalten Standardnotizen zur Augenheilkunde mit einer angehängten, von LLM erstellten Zusammenfassung in einfacher Sprache, die vom Augenarzt überprüft und bearbeitet wird. Die Zusammenfassung in einfacher Sprache ist deutlich als im Rahmen einer Qualitätsverbesserungsinitiative erstellt gekennzeichnet.
Sonstiges: Eine durch ein großes Sprachmodell generierte Zusammenfassung der ophthalmologischen Notizen in einfacher Sprache
Prospektive, randomisierte Studie zur Qualitätsverbesserung mit realer Implementierung von durch ein großes Sprachmodell generierten Zusammenfassungen von Ophthalmologie-Notizen in einfacher Sprache.

Was misst die Studie?

Primäre Ergebnismessungen

Ergebnis Maßnahme
Maßnahmenbeschreibung
Zeitfenster
Nicht-Ophthalmologe notieren Verständnis und Zufriedenheit
Zeitfenster: Von der Einschreibung bis 8 Wochen nach der Einschreibung

Bewertet anhand von Umfrageantworten, bei denen das Verständnis der ophthalmologischen Diagnose des Patienten, die Zufriedenheit mit dem Hinweis und die allgemeine Präferenz zwischen dem Standard-Ophthalmologie-Hinweis und dem Standard-Ophthalmologie-Hinweis + Zusammenfassung in einfacher Sprache bewertet wurden.

Der Grad des Verständnisses wurde anhand der folgenden Likert-Skala bewertet:

Überhaupt nicht Neutral Mäßig Ein tolles Angebot

Die Zufriedenheit wurde anhand der folgenden Likert-Skala bewertet:

Überhaupt nicht zufrieden. Eher unzufrieden. Neutral. Eher zufrieden. Zufrieden

Die Präferenz zwischen Notentypen wurde anhand der folgenden Likert-Skala bewertet:

Standardnotiz, sehr viel Standardnotiz, einigermaßen neutrale Zusammenfassung in einfacher Sprache, ziemlich einfache Zusammenfassung, sehr viel
Von der Einschreibung bis 8 Wochen nach der Einschreibung

Sekundäre Ergebnismessungen

Ergebnis Maßnahme
Maßnahmenbeschreibung
Zeitfenster
Augenärztliche Beurteilung der zusammenfassenden Genauigkeit und des Zeitaufwands
Zeitfenster: Bewertet zu einem einzigen Zeitpunkt <24 Stunden nach der Einschreibung

Bewertet anhand von Umfrageantworten hinsichtlich der Genauigkeit der Zusammenfassung in einfacher Sprache bei der Wiedergabe der Ergebnisse der Standard Ophthalmology Note, des Zeitaufwands für die Überprüfung/Bearbeitung und der wahrgenommenen Belastung.

Die Genauigkeit bei der Wiedergabe der Ergebnisse wurde anhand der folgenden Likert-Skala bewertet:

Überhaupt nicht neutral. Ein bisschen. Ein tolles Angebot

Die für die Überprüfung/Bearbeitung aufgewendete Zeit wurde mithilfe der folgenden Optionen gemeldet:

<1 Minute

  1. Minute
  2. Minuten
  3. Minuten
  4. Minuten
  5. oder mehr Minuten

Die wahrgenommene Belastung wurde anhand der folgenden Likert-Skala bewertet:

Überhaupt nicht neutral. Ein bisschen. Ein tolles Angebot
Bewertet zu einem einzigen Zeitpunkt <24 Stunden nach der Einschreibung
Semantische und sprachliche Qualität von Zusammenfassungen in einfacher Sprache
Zeitfenster: Bewertet zu einem einzigen Zeitpunkt <24 Stunden nach der Einschreibung

Flesch Lesefreundlichkeit

Skala: 0 (schlecht) bis 100 (gut)
Bewertet zu einem einzigen Zeitpunkt <24 Stunden nach der Einschreibung
Semantische und sprachliche Qualität von Zusammenfassungen in einfacher Sprache
Zeitfenster: Bewertet zu einem einzigen Zeitpunkt <24 Stunden nach der Einschreibung

Flesch-Kincaid-Klassenstufe

Skala: 0 (am schwierigsten zu lesen, höchste Notenstufe) bis 80 (am einfachsten zu lesen, niedrigste Notenstufe)
Bewertet zu einem einzigen Zeitpunkt <24 Stunden nach der Einschreibung
Semantische und sprachliche Qualität von Zusammenfassungen in einfacher Sprache
Zeitfenster: Bewertet zu einem einzigen Zeitpunkt <24 Stunden nach der Einschreibung

Semantisches Maß des Gobbledygook (SMOG)-Index

Skala: 0 (am einfachsten zu lesen) bis 11 (am schwierigsten zu lesen)
Bewertet zu einem einzigen Zeitpunkt <24 Stunden nach der Einschreibung
Semantische und sprachliche Qualität von Zusammenfassungen in einfacher Sprache
Zeitfenster: Bewertet zu einem einzigen Zeitpunkt <24 Stunden nach der Einschreibung

BERTScore-Maß für sprachliche Ähnlichkeit

Skala: -1 (am wenigsten ähnlich) bis +1 (am ähnlichsten)
Bewertet zu einem einzigen Zeitpunkt <24 Stunden nach der Einschreibung
Semantische und sprachliche Qualität von Zusammenfassungen in einfacher Sprache
Zeitfenster: Bewertet zu einem einzigen Zeitpunkt <24 Stunden nach der Einschreibung

SBERT-Kosinus-Ähnlichkeitsmaß für sprachliche Ähnlichkeit

Skala: -1 (am wenigsten ähnlich) bis +1 (am ähnlichsten)
Bewertet zu einem einzigen Zeitpunkt <24 Stunden nach der Einschreibung

Andere Ergebnismessungen

Ergebnis Maßnahme
Maßnahmenbeschreibung
Zeitfenster
Vorkommen von Fehlern, Art der Fehler und mögliche Schäden durch Fehler
Zeitfenster: Bewertet zu einem einzigen Zeitpunkt und 24 Stunden nach der Einschreibung und erneut zu einem einzigen Zeitpunkt 8 Wochen nach der Einschreibung

Vorhandensein falscher oder fehlender Informationen in der Zusammenfassung in einfacher Sprache, Fehlerraten, Fehlerarten und potenzielle Schadensbewertung.

Folgende Fehlerarten wurden gemeldet:

Befunde der HPI-Untersuchung Diagnoseplan Erläuterung der allgemeinen Augengesundheit des Patienten Sonstiges N/A

Die Schadenswahrscheinlichkeit wurde anhand der folgenden Skala bewertet:

Geringes Risiko Mittleres Risiko Hohes Risiko N/A

Die Bewertung des potenziellen Schadens wurde anhand der folgenden Skala bewertet:

Leichte oder mittelschwere Schädigung. Tod oder schwere Schädigung
Bewertet zu einem einzigen Zeitpunkt und 24 Stunden nach der Einschreibung und erneut zu einem einzigen Zeitpunkt 8 Wochen nach der Einschreibung

Mitarbeiter und Ermittler

Hier finden Sie Personen und Organisationen, die an dieser Studie beteiligt sind.

Sponsor

John J Chen

Ermittler

  • Studienleiter: John J Chen, MD, PhD, Mayo Clinic

Studienaufzeichnungsdaten

Diese Daten verfolgen den Fortschritt der Übermittlung von Studienaufzeichnungen und zusammenfassenden Ergebnissen an ClinicalTrials.gov. Studienaufzeichnungen und gemeldete Ergebnisse werden von der National Library of Medicine (NLM) überprüft, um sicherzustellen, dass sie bestimmten Qualitätskontrollstandards entsprechen, bevor sie auf der öffentlichen Website veröffentlicht werden.

Haupttermine studieren

Studienbeginn (Tatsächlich)

1. Februar 2024

Primärer Abschluss (Tatsächlich)

31. Mai 2024

Studienabschluss (Tatsächlich)

31. Mai 2024

Studienanmeldedaten

Zuerst eingereicht

30. September 2024

Zuerst eingereicht, das die QC-Kriterien erfüllt hat

1. Oktober 2024

Zuerst gepostet (Tatsächlich)

3. Oktober 2024

Studienaufzeichnungsaktualisierungen

Letztes Update gepostet (Tatsächlich)

3. Oktober 2024

Letztes eingereichtes Update, das die QC-Kriterien erfüllt

1. Oktober 2024

Zuletzt verifiziert

1. Oktober 2024

Mehr Informationen

Begriffe im Zusammenhang mit dieser Studie

Andere Studien-ID-Nummern

  • 24-000550

Plan für individuelle Teilnehmerdaten (IPD)

Planen Sie, individuelle Teilnehmerdaten (IPD) zu teilen?

JA

Beschreibung des IPD-Plans

Alle gesammelten IPD.

IPD-Sharing-Zeitrahmen

Beginnt nach der Veröffentlichung, ohne Enddatum

IPD-Sharing-Zugriffskriterien

Die zugrunde liegenden Daten, die die Ergebnisse dieser Studie stützen, können klinischen Prüfern und Forschern auf Anfrage zur Verfügung gestellt werden. Vor der Genehmigung sind schriftliche Anfragen zur Datenfreigabe einschließlich eines Analyseplans erforderlich. Diese Anfragen werden individuell in Absprache mit den Leitern des Studienteams und gegebenenfalls den Co-Ermittlern beurteilt. Wenn andere Forscher an der Durchführung zusätzlicher Analysen interessiert sind, können diese Anfragen an den entsprechenden Autor (PDT) gerichtet werden und die Analysen werden in Zusammenarbeit mit der Mayo Clinic durchgeführt. In allen Fällen werden alle Daten und Materialien, die weitergegeben werden sollen, im Rahmen einer Materialübertragungsvereinbarung freigegeben. Daten auf individueller Ebene werden verfügbar sein und der Datenaustausch stellt sicher, dass die Rechte und die Privatsphäre der an der Forschung teilnehmenden Personen stets geschützt bleiben. Der voraussichtliche Zeitrahmen für die Beantwortung erster Datenanfragen beträgt 1 Monat.

Art der unterstützenden IPD-Freigabeinformationen

  • STUDIENPROTOKOLL
  • ANALYTIC_CODE
  • CSR

Arzneimittel- und Geräteinformationen, Studienunterlagen

Studiert ein von der US-amerikanischen FDA reguliertes Arzneimittelprodukt

Nein

Studiert ein von der US-amerikanischen FDA reguliertes Geräteprodukt

Nein

Produkt, das in den USA hergestellt und aus den USA exportiert wird

Nein

Diese Informationen wurden ohne Änderungen direkt von der Website clinicaltrials.gov abgerufen. Wenn Sie Ihre Studiendaten ändern, entfernen oder aktualisieren möchten, wenden Sie sich bitte an register@clinicaltrials.gov. Sobald eine Änderung auf clinicaltrials.gov implementiert wird, wird diese automatisch auch auf unserer Website aktualisiert .

Abonnieren