- ICH GCP
- US Clinical Trials Registry
- Klinisk forsøg NCT06157944
Læge ræsonnerer om diagnostiske tilfælde med store sprogmodeller
Diagnostisk ræsonnement med store sprogmodelchatbots
Studieoversigt
Detaljeret beskrivelse
Kunstig intelligens (AI) teknologier, specifikt avancerede store sprogmodeller som OpenAIs ChatGPT, har potentialet til at forbedre medicinsk beslutningstagning. Selvom ChatGPT-4 ikke blev udviklet til dets brug i medicinsk-specifikke applikationer, har det vist lovende i forskellige sundhedsmæssige sammenhænge, herunder medicinsk noteskrivning, adressering af patienthenvendelser og facilitering af medicinsk konsultation. Der er dog lidt kendt om, hvordan ChatGPT øger klinikernes kliniske ræsonnementevner.
Klinisk ræsonnement er en kompleks proces, der involverer mønstergenkendelse, videnanvendelse og probabilistisk ræsonnement. At integrere AI-værktøjer som ChatGPT-4 i lægearbejdsgange kan potentielt hjælpe med at reducere klinikernes arbejdsbyrde og mindske sandsynligheden for manglende diagnoser. ChatGPT-4 blev dog ikke udviklet med henblik på klinisk ræsonnement og er heller ikke blevet valideret til dette formål. Yderligere kan det være underlagt desinformation, herunder overbevisende konfabulationer, der kan vildlede klinikere. Hvis klinikere misbruger dette værktøj, forbedrer det muligvis ikke diagnostisk ræsonnement og kan endda forårsage skade. Derfor er det vigtigt at studere, hvordan klinikere bruger store sprogmodeller til at øge klinisk ræsonnement forud for rutinemæssig inkorporering i patientbehandling.
I denne undersøgelse vil vi randomisere deltagere til at besvare diagnostiske tilfælde med eller uden adgang til ChatGPT-4. Deltagerne vil blive bedt om at give tre differentialdiagnoser for hvert tilfælde, med understøttende og modsatrettede fund for hver diagnose. Derudover vil de blive bedt om at give deres topdiagnose sammen med de næste diagnostiske trin. Svarene vil blive bedømt af uafhængige anmeldere, der er blindet for behandlingsopgave.
Undersøgelsestype
Tilmelding (Faktiske)
Fase
- Ikke anvendelig
Kontakter og lokationer
Studiesteder
-
-
California
-
Palo Alto, California, Forenede Stater, 94304
- Stanford University
-
-
Deltagelseskriterier
Berettigelseskriterier
Aldre berettiget til at studere
- Barn
- Voksen
- Ældre voksen
Tager imod sunde frivillige
Beskrivelse
Inklusionskriterier:
- Deltagerne skal være autoriserede læger og have gennemført mindst post-graduate år 2 (PGY2) af medicinsk uddannelse.
- Uddannelse i intern medicin, familiemedicin eller akutmedicin.
Ekskluderingskriterier:
- Praktiserer ikke klinisk i øjeblikket.
Studieplan
Hvordan er undersøgelsen tilrettelagt?
Design detaljer
- Primært formål: Diagnostisk
- Tildeling: Randomiseret
- Interventionel model: Parallel tildeling
- Maskning: Enkelt
Våben og indgreb
Deltagergruppe / Arm |
Intervention / Behandling |
---|---|
Aktiv komparator: GPT-4
Gruppen får adgang til GPT-4.
|
OpenAI's GPT-4 store sprogmodel med chatgrænseflade.
|
Ingen indgriben: Sædvanlige ressourcer
Gruppen vil ikke få adgang til GPT-4, men vil blive opfordret til at bruge alle de ressourcer, de ønsker udover store sprogmodeller (UpToDate, Dynamed, google osv.).
|
Hvad måler undersøgelsen?
Primære resultatmål
Resultatmål |
Foranstaltningsbeskrivelse |
Tidsramme |
---|---|---|
Diagnostisk ræsonnement
Tidsramme: Under evaluering
|
Det primære resultat vil være procenten korrekt (interval: 0 til 100) for hvert tilfælde.
For hver case vil deltagerne blive bedt om tre topdiagnoser og fund fra casen, der understøtter den diagnose og modsætter sig denne diagnose.
Deltagerne får 1 point for hver plausibel diagnose.
Fund, der understøtter diagnosen og fund, der modsætter sig diagnosen, vil ligeledes blive bedømt ud fra rigtigheden, med 1 point for delvist korrekte og 2 point for helt korrekte svar.
Deltagerne vil derefter blive bedt om at navngive deres topdiagnose, hvor de tjener et point for et rimeligt svar og to point for det mest korrekte svar.
Til sidst vil deltagerne blive bedt om at nævne op til 3 næste trin for yderligere at evaluere patienten med et point for et delvist korrekt svar og to point for et fuldstændigt korrekt svar.
Det primære resultat vil blive sammenlignet på case-niveau af de randomiserede grupper.
|
Under evaluering
|
Sekundære resultatmål
Resultatmål |
Foranstaltningsbeskrivelse |
Tidsramme |
---|---|---|
Tid brugt på diagnose
Tidsramme: Under evaluering
|
Vi vil sammenligne, hvor meget tid (i minutter) deltagerne bruger pr. case mellem de to undersøgelsesarme.
|
Under evaluering
|
Samarbejdspartnere og efterforskere
Sponsor
Efterforskere
- Ledende efterforsker: Jonathan H Chen, MD, PhD, Stanford University
- Ledende efterforsker: Adam Rodman, MD, Beth Israel Deaconess Medical Center
- Ledende efterforsker: Andrew Olson, MD, University of Minnesota
Datoer for undersøgelser
Studer store datoer
Studiestart (Faktiske)
Primær færdiggørelse (Faktiske)
Studieafslutning (Faktiske)
Datoer for studieregistrering
Først indsendt
Først indsendt, der opfyldte QC-kriterier
Først opslået (Faktiske)
Opdateringer af undersøgelsesjournaler
Sidste opdatering sendt (Faktiske)
Sidste opdatering indsendt, der opfyldte kvalitetskontrolkriterier
Sidst verificeret
Mere information
Begreber relateret til denne undersøgelse
Yderligere relevante MeSH-vilkår
Andre undersøgelses-id-numre
- 71319
Plan for individuelle deltagerdata (IPD)
Planlægger du at dele individuelle deltagerdata (IPD)?
Lægemiddel- og udstyrsoplysninger, undersøgelsesdokumenter
Studerer et amerikansk FDA-reguleret lægemiddelprodukt
Studerer et amerikansk FDA-reguleret enhedsprodukt
Disse oplysninger blev hentet direkte fra webstedet clinicaltrials.gov uden ændringer. Hvis du har nogen anmodninger om at ændre, fjerne eller opdatere dine undersøgelsesoplysninger, bedes du kontakte register@clinicaltrials.gov. Så snart en ændring er implementeret på clinicaltrials.gov, vil denne også blive opdateret automatisk på vores hjemmeside .
Kliniske forsøg med Diagnose
-
University Hospital, GrenobleSociété Française d'Anesthésie et de RéanimationAfslutteteFast Diagnosis Performance in Guiding First Aid Resuscitation and HemostasisFrankrig
-
Zagazig UniversityRekrutteringof Lung Ultrasound in Diagnosis of Acute Respiratory Distress SyndromeEgypten
Kliniske forsøg med GPT-4
-
Stanford UniversityBeth Israel Deaconess Medical Center; University of MinnesotaRekruttering
-
Wang ShalongCentral South UniversityAktiv, ikke rekrutterendeMedicinsk Uddannelse | Kunstig intelligens | Selvstyret læringKina
-
Taipei Veterans General Hospital, TaiwanRekrutteringCarcinom, hepatocellulærtTaiwan
-
Hoffmann-La RocheRekrutteringLymfom, Non-HodgkinForenede Stater, Belgien, Australien, Danmark, Italien, Spanien, Frankrig, Det Forenede Kongerige
-
Pharma Holdings ASCTC Clinical Trial Consultants ABAfsluttetNasal afkolonisering af Staphylococcus AureusSverige
-
Janssen Research & Development, LLCAfsluttet
-
Maisonneuve-Rosemont HospitalAfsluttet
-
University of WashingtonRekrutteringMultipel sclerose | TræthedForenede Stater
-
Jeffrey A. Cohen, MDJacobus PharmaceuticalAfsluttetMuskelsvaghedForenede Stater
-
University of UtahNovartisTrukket tilbageEndometriecancerForenede Stater