Denne side blev automatisk oversat, og nøjagtigheden af ​​oversættelsen er ikke garanteret. Der henvises til engelsk version for en kildetekst.

Forbedring af tværfaglig forståelse af oftalmologiske notater gennem en lokal stor sprogmodel

1. oktober 2024 opdateret af: John J Chen

Forbedring af tværfaglig forståelse af oftalmologiske notater gennem lokal stor sprogmodel

Dette prospektive, randomiserede kontrollerede forsøg evaluerede effektiviteten af ​​at tilføje Large Language Model (LLM)-genererede Plain Language Summaries (PLS'er) til Standard Ophthalmology Notes (SONs) for at forbedre forståelsen blandt ikke-oftalmologiske udbydere. Undersøgelsen brugte undersøgelser til at vurdere ikke-oftalmologiske udbyderes forståelse og tilfredshed med notaterne og øjenlægers vurdering af PLS ​​nøjagtighed, sikkerhed og tidsbyrde. En objektiv semantisk og sproglig analyse af PLS'erne blev også udført.

Studieoversigt

Undersøgelsestype

Interventionel

Tilmelding (Faktiske)

851

Fase

  • Ikke anvendelig

Kontakter og lokationer

Dette afsnit indeholder kontaktoplysninger for dem, der udfører undersøgelsen, og oplysninger om, hvor denne undersøgelse udføres.

Studiesteder

    • Minnesota
      • Rochester, Minnesota, Forenede Stater, 55905
        • Mayo Clinic

Deltagelseskriterier

Forskere leder efter personer, der passer til en bestemt beskrivelse, kaldet berettigelseskriterier. Nogle eksempler på disse kriterier er en persons generelle helbredstilstand eller tidligere behandlinger.

Berettigelseskriterier

Aldre berettiget til at studere

  • Voksen
  • Ældre voksen

Tager imod sunde frivillige

Ingen

Beskrivelse

Inklusionskriterier:

  • Evaluering foretaget af en øjenlæge i Mayo Clinic Department of Ophthalmology i Rochester, MN i enten indlæggelse eller ambulant indstilling mellem 1. februar 2024 - 31. maj 2024.

Ekskluderingskriterier:

  • Ingen udbydere af ikke-øjenlæger i netværket i journalen
  • Procedurebesøg, der kun indeholder en procedurenotat

Studieplan

Dette afsnit indeholder detaljer om studieplanen, herunder hvordan undersøgelsen er designet, og hvad undersøgelsen måler.

Hvordan er undersøgelsen tilrettelagt?

Design detaljer

  • Primært formål: Sundhedstjenesteforskning
  • Tildeling: Randomiseret
  • Interventionel model: Parallel tildeling
  • Maskning: Ingen (Åben etiket)

Våben og indgreb

Deltagergruppe / Arm
Intervention / Behandling
Ingen indgriben: Kontrollere
Deltagerne modtager standard oftalmologiske notater uden tilføjelser.
Eksperimentel: Intervention
Deltagerne modtager standardophthalmologiske notater med et vedhæftet LLM-genereret almindeligt sprogresumé, gennemgået og redigeret af øjenlægen. Det almindelige sprogresumé er tydeligt markeret som genereret som en del af et kvalitetsforbedringsinitiativ.
Prospektivt, randomiseret kvalitetsforbedringsstudie med implementering i den virkelige verden af ​​store sprogmodelgenererede almindelige sprogresuméer af oftalmologiske notater.

Hvad måler undersøgelsen?

Primære resultatmål

Resultatmål
Foranstaltningsbeskrivelse
Tidsramme
Ikke-øjenlæge note forståelse og tilfredshed
Tidsramme: Fra tilmelding til 8 uger efter tilmelding

Vurderet via undersøgelsessvar, der evaluerer forståelsen af ​​patientens oftalmologiske diagnose, tilfredshed med notatet og overordnet præference mellem standardophthalmologisk note og standard oftalmologisk note + almindeligt sprogsammendrag.

Graden af ​​forståelse blev vurderet på følgende Likert-skala:

Slet ikke Neutral Moderat En hel del

Tilfredshed blev bedømt på følgende Likert-skala:

Slet ikke tilfreds Noget utilfreds Neutral Noget tilfreds Tilfreds

Præference mellem nodetyper blev vurderet på følgende Likert-skala:

Standardnote, en hel del Standardnote, noget neutralt almindeligt sprogresumé, noget almindeligt sprogresumé, en hel del

Fra tilmelding til 8 uger efter tilmelding

Sekundære resultatmål

Resultatmål
Foranstaltningsbeskrivelse
Tidsramme
Øjenlæge Evaluering af Resumé Nøjagtighed og Tidsbyrde
Tidsramme: Vurderet på et enkelt tidspunkt <24 timer efter tilmelding

Vurderet via spørgeundersøgelsessvar vedrørende præcision i almindeligt sprogsammendrag ved at afspejle resultaterne af standardophthalmologinotatet, tid brugt på gennemgang/redigering og opfattet byrde.

Nøjagtighed i at afspejle resultater blev bedømt på følgende Likert-skala:

Slet ikke Neutral Lidt En hel del

Tid brugt på gennemgang/redigering blev rapporteret ved hjælp af følgende muligheder:

<1 minut

  1. minut
  2. minutter
  3. minutter
  4. minutter
  5. eller flere minutter

Opfattet byrde blev bedømt på følgende Likert-skala:

Slet ikke Neutral Lidt En hel del

Vurderet på et enkelt tidspunkt <24 timer efter tilmelding
Semantisk og sproglig kvalitet af almindelige sprogresuméer
Tidsramme: Vurderet på et enkelt tidspunkt <24 timer efter tilmelding

Flesch læsevenlighed

Skala: 0 (dårlig) til 100 (god)

Vurderet på et enkelt tidspunkt <24 timer efter tilmelding
Semantisk og sproglig kvalitet af almindelige sprogresuméer
Tidsramme: Vurderet på et enkelt tidspunkt <24 timer efter tilmelding

Flesch-Kincaid klassetrin

Skala: 0 (sværest at læse, højeste klassetrin) til 80 (letest at læse, laveste klassetrin)

Vurderet på et enkelt tidspunkt <24 timer efter tilmelding
Semantisk og sproglig kvalitet af almindelige sprogresuméer
Tidsramme: Vurderet på et enkelt tidspunkt <24 timer efter tilmelding

Semantisk mål for Gobbledygook (SMOG) indeks

Skala: 0 (letest at læse) til 11 (sværest at læse)

Vurderet på et enkelt tidspunkt <24 timer efter tilmelding
Semantisk og sproglig kvalitet af almindelige sprogresuméer
Tidsramme: Vurderet på et enkelt tidspunkt <24 timer efter tilmelding

BERTScore Mål for sproglig lighed

Skala: -1 (mindst ens) til +1 (mest ens)

Vurderet på et enkelt tidspunkt <24 timer efter tilmelding
Semantisk og sproglig kvalitet af almindelige sprogresuméer
Tidsramme: Vurderet på et enkelt tidspunkt <24 timer efter tilmelding

SBERT Cosinus lighed Mål for sproglig lighed

Skala: -1 (mindst ens) til +1 (mest ens)

Vurderet på et enkelt tidspunkt <24 timer efter tilmelding

Andre resultatmål

Resultatmål
Foranstaltningsbeskrivelse
Tidsramme
Tilstedeværelse af fejl, type af fejl og potentiel skade ved fejl
Tidsramme: Vurderet på et enkelt tidspunkt &lt;24 timer efter tilmelding og igen på et enkelt tidspunkt 8 uger efter tilmelding

Tilstedeværelse af ukorrekte eller manglende oplysninger i almindeligt sprogoversigt, fejlprocenter, fejltyper og potentiel skadesvurdering.

Typer af fejl blev rapporteret som:

HPI-undersøgelsesresultater Diagnoseplan Forklaring af patientens generelle øjensundhed Andet N/A

Sandsynligheden for skade blev bedømt på følgende skala:

Lav risiko Middel risiko Høj risiko N/A

Potentiel skadevurdering blev bedømt på følgende skala:

Mild eller moderat skade Dødsfald eller alvorlig skade

Vurderet på et enkelt tidspunkt &lt;24 timer efter tilmelding og igen på et enkelt tidspunkt 8 uger efter tilmelding

Samarbejdspartnere og efterforskere

Det er her, du vil finde personer og organisationer, der er involveret i denne undersøgelse.

Sponsor

Efterforskere

  • Studieleder: John J Chen, MD, PhD, Mayo Clinic

Datoer for undersøgelser

Disse datoer sporer fremskridtene for indsendelser af undersøgelsesrekord og resumeresultater til ClinicalTrials.gov. Studieregistreringer og rapporterede resultater gennemgås af National Library of Medicine (NLM) for at sikre, at de opfylder specifikke kvalitetskontrolstandarder, før de offentliggøres på den offentlige hjemmeside.

Studer store datoer

Studiestart (Faktiske)

1. februar 2024

Primær færdiggørelse (Faktiske)

31. maj 2024

Studieafslutning (Faktiske)

31. maj 2024

Datoer for studieregistrering

Først indsendt

30. september 2024

Først indsendt, der opfyldte QC-kriterier

1. oktober 2024

Først opslået (Faktiske)

3. oktober 2024

Opdateringer af undersøgelsesjournaler

Sidste opdatering sendt (Faktiske)

3. oktober 2024

Sidste opdatering indsendt, der opfyldte kvalitetskontrolkriterier

1. oktober 2024

Sidst verificeret

1. oktober 2024

Mere information

Begreber relateret til denne undersøgelse

Andre undersøgelses-id-numre

  • 24-000550

Plan for individuelle deltagerdata (IPD)

Planlægger du at dele individuelle deltagerdata (IPD)?

JA

IPD-planbeskrivelse

Alle indsamlede IPD.

IPD-delingstidsramme

Begyndende efter offentliggørelse uden slutdato

IPD-delingsadgangskriterier

De underliggende data, der understøtter resultaterne af denne undersøgelse, kan efter anmodning stilles til rådighed for kliniske efterforskere og forskere. Skriftlige anmodninger om datadeling inklusive en analyseplan vil være påkrævet før godkendelse. Disse anmodninger vil blive individuelt vurderet i samråd med studieteamets ledere og co-investigatorer efter behov. Hvis andre efterforskere er interesserede i at udføre yderligere analyser, kan disse anmodninger rettes til den tilsvarende forfatter (PDT), og analyser vil blive udført i samarbejde med Mayo Clinic. I alle tilfælde vil alle data og materialer, der skal deles, blive frigivet via en materialeoverførselsaftale. Data på individuelt niveau vil være tilgængelige, og datadeling vil sikre, at rettighederne og privatlivets fred for personer, der deltager i forskningen, altid forbliver beskyttet. Den forventede tidsramme for at svare på indledende dataanmodninger er 1 måned.

IPD-deling Understøttende informationstype

  • STUDY_PROTOCOL
  • ANALYTIC_CODE
  • CSR

Lægemiddel- og udstyrsoplysninger, undersøgelsesdokumenter

Studerer et amerikansk FDA-reguleret lægemiddelprodukt

Ingen

Studerer et amerikansk FDA-reguleret enhedsprodukt

Ingen

produkt fremstillet i og eksporteret fra U.S.A.

Ingen

Disse oplysninger blev hentet direkte fra webstedet clinicaltrials.gov uden ændringer. Hvis du har nogen anmodninger om at ændre, fjerne eller opdatere dine undersøgelsesoplysninger, bedes du kontakte register@clinicaltrials.gov. Så snart en ændring er implementeret på clinicaltrials.gov, vil denne også blive opdateret automatisk på vores hjemmeside .

Abonner