Evaluering av beslutninger ved hjelp av chatgpt-4 blant traineer i operasjonen (EDuCATe)
Evaluering av chatgpt-4 som et beslutningsstøtteverktøy for kirurgiske traineer
Studieoversikt
Status
Forhold
Intervensjon / Behandling
Detaljert beskrivelse
Bakgrunn:
Kunstig intelligens (AI) transformerer raskt det medisinske landskapet, og tilbyr nye muligheter innen utdanning, diagnostikk og beslutningsstøtte. I kirurgi er klinisk beslutningstaking en kjernekompetanse utviklet gradvis gjennom trening. ChatGPT-4, en topp moderne stor språkmodell utviklet av Openai, har vist kompetanse i håndtering av medisinske spørsmål og kliniske resonneringsoppgaver. Imidlertid er ytelsen i komplekse kirurgiske beslutninger sammenlignet med menneskelige traineer stort sett uutforsket.
Objektiv:
The Educate Study tar sikte på å evaluere nøyaktigheten og påliteligheten av ChatGPT-4s svar på kliniske scenarier som involverer generelle kirurgiske tilfeller. Spesifikt sammenligner studien modellens ytelse med den fra Junior-innbyggerne, eldre innbyggere og å delta på kirurger for å forstå om ChatGPT-4 kan tjene som et trygt og effektivt pedagogisk verktøy for kirurgiske praktikanter.
Metoder:
Syv kliniske scenarier vil bli konstruert ved hjelp av ekte anonymiserte pasientdata som representerer vanlige kirurgiske forhold. Hver sak vil bli presentert trinn for trinn, og etterligner den kliniske beslutningsprosessen. Deltakerne vil svare på et spørsmål relatert til valg av behandling.
Deltakerne vil inkludere juniorbeboere (PGY1-2), seniorboere (PGY3+) og delta på kirurger fra en enkelt kirurgisk avdeling. ChatGPT-4 vil bli bedt om med de samme scenariene. Alle deltakerne vil bli instruert om å fullføre sakene uten å bruke eksterne ressurser som AI -verktøy eller internettsøk, og utelukkende stoler på deres kliniske kunnskap.
Statistisk analyse vil sammenligne ytelse på tvers av grupper ved bruk av ikke-parametriske tester (f.eks. Wilcoxon rangsum).
Forventede utfall:
Studien antar at ChatGPT-4 vil prestere på et nivå som kan sammenlignes med eldre innbyggere eller delta på kirurger og overgå juniorbeboere i beslutninger. Hvis bekreftet, kan disse resultatene støtte sikker bruk av ChatGPT-4 som et treningshjelp for junior kirurgiske innbyggere, og potensielt forbedre utdanningsresultater og kliniske resonnementferdigheter.
Betydning:
Denne studien vil gi ny innsikt i rollen som AI i kirurgisk utdanning. Ved å sammenligne CHATGPT-4s beslutningsevner for menneskelige kirurger på forskjellige nivåer, håper studien å definere dens nytte, begrensninger og passende bruk i forskjellige nivåer.
Studietype
Registrering (Antatt)
Kontakter og plasseringer
Studiekontakt
- Navn: Manuela Mastronardi
- Telefonnummer: 0403994152
- E-post: manuela.mastronardi@gmail.com
Studiesteder
-
-
-
Trieste, Italia
- University of Trieste
-
Ta kontakt med:
- Manuela Mastronardi
- Telefonnummer: 0403994152
- E-post: manuela.mastronardi@gmail.com
-
Hovedetterforsker:
- Silvia Palmisano
-
Hovedetterforsker:
- Manuela Mastronardi
-
Underetterforsker:
- Paola Germani
-
Underetterforsker:
- Margherita Sandano
-
-
Deltakelseskriterier
Kvalifikasjonskriterier
Alder som er kvalifisert for studier
- Barn
- Voksen
- Eldre voksen
Tar imot friske frivillige
Prøvetakingsmetode
Studiepopulasjon
Beskrivelse
Inkluderingskriterier:
- Aktivt registrert eller ansatt i det generelle operasjonsoppholdet eller avdelingen ved den deltakende institusjonen
- Vilje til å delta og fullføre alle kliniske case -scenarier
- Samtykke til å delta i studien
Eksklusjonskriterier:
- Ufullstendige svar
- Bruk av ekstern assistanse (f.eks. Internett-søk, AI-verktøy) når du svarer på scenarier, som selvrapportert i instruksjoner
Studieplan
Hvordan er studiet utformet?
Designdetaljer
Kohorter og intervensjoner
Gruppe / Kohort |
Intervensjon / Behandling |
|---|---|
|
Beboere
Junior- og seniorbeboere i generell kirurgi
|
Syv kliniske tilfeller som må analyseres
|
|
Konsulenter
Senior generelle kirurger
|
Syv kliniske tilfeller som må analyseres
|
|
Chatgpt 4
Kunstig intelligenssystem
|
Syv kliniske tilfeller som må analyseres
|
Hva måler studien?
Primære resultatmål
Resultatmål |
Tiltaksbeskrivelse |
Tidsramme |
|---|---|---|
|
Andel riktige svar
Tidsramme: Baseline
|
Binært utfall (riktig kontra feil beslutning)
|
Baseline
|
Sekundære resultatmål
Resultatmål |
Tiltaksbeskrivelse |
Tidsramme |
|---|---|---|
|
Sammenligning av nøyaktighet på tvers av opplevelsesnivåer
Tidsramme: Baseline
|
Andel riktige svar fra gruppe: Juniorbeboere, eldre innbyggere, deltakende kirurger, chatgpt-4
|
Baseline
|
|
Tillitsnivå
Tidsramme: Baseline
|
Deltakere og chatgpt blir bedt om å vurdere hvor trygge de føler i svaret (1-5 Likert skala, der 1 betyr ingen selvsikker og 5 veldig selvsikker)
|
Baseline
|
|
Prosentandel av bruk av AI for evaluering av kliniske tilfeller
Tidsramme: Baseline
|
Deltakerne blir spurt om de bruker eller ikke chatgpt i sin kliniske aktivitet
|
Baseline
|
Samarbeidspartnere og etterforskere
Sponsor
Studierekorddatoer
Studer hoveddatoer
Studiestart (Antatt)
Primær fullføring (Antatt)
Studiet fullført (Antatt)
Datoer for studieregistrering
Først innsendt
Først innsendt som oppfylte QC-kriteriene
Først lagt ut (Faktiske)
Oppdateringer av studieposter
Sist oppdatering lagt ut (Faktiske)
Siste oppdatering sendt inn som oppfylte QC-kriteriene
Sist bekreftet
Mer informasjon
Begreper knyttet til denne studien
Nøkkelord
Andre studie-ID-numre
- AI-Surgical training
Plan for individuelle deltakerdata (IPD)
Planlegger du å dele individuelle deltakerdata (IPD)?
Legemiddel- og utstyrsinformasjon, studiedokumenter
Studerer et amerikansk FDA-regulert medikamentprodukt
Studerer et amerikansk FDA-regulert enhetsprodukt
Denne informasjonen ble hentet direkte fra nettstedet clinicaltrials.gov uten noen endringer. Hvis du har noen forespørsler om å endre, fjerne eller oppdatere studiedetaljene dine, vennligst kontakt register@clinicaltrials.gov. Så snart en endring er implementert på clinicaltrials.gov, vil denne også bli oppdatert automatisk på nettstedet vårt. .