Utvärdering av beslutsfattande med chatgpt-4 bland praktikanter i kirurgi (EDuCATe)
Utvärdera chatgpt-4 som ett beslutsfattande verktyg för kirurgiska praktikanter
Studieöversikt
Status
Betingelser
Intervention / Behandling
Detaljerad beskrivning
Bakgrund:
Artificiell intelligens (AI) förvandlar snabbt det medicinska landskapet och erbjuder nya möjligheter inom utbildning, diagnostik och beslutsstöd. I kirurgi är kliniskt beslutsfattande en kärnkompetens som utvecklats gradvis genom utbildning. Chatgpt-4, en modern stor språkmodell som utvecklats av OpenAI, har visat kompetens när det gäller att hantera medicinska frågor och kliniska resonemangsuppgifter. Emellertid är dess prestanda i komplex kirurgiskt beslutsfattande jämfört med mänskliga praktikanter i stort sett outforskade.
Mål:
Utbildningsstudien syftar till att utvärdera noggrannheten och tillförlitligheten i ChatGPT-4: s svar på kliniska scenarier som involverar allmänna kirurgiska fall. Specifikt jämför studien modellens prestanda med den för juniorboende, äldre invånare och att delta i kirurger för att förstå om chatgpt-4 kan fungera som ett säkert och effektivt utbildningsverktyg för kirurgiska praktikanter.
Metoder:
Sju kliniska scenarier kommer att konstrueras med verkliga anonymiserade patientdata som representerar vanliga allmänna kirurgiska förhållanden. Varje fall kommer att presenteras steg för steg och efterliknar den kliniska beslutsprocessen. Deltagarna kommer att besvara en fråga relaterad till behandlingsval.
Deltagarna kommer att inkludera juniorboende (PGY1-2), äldre invånare (PGY3+) och delta i kirurger från en enda kirurgisk avdelning. Chatgpt-4 kommer att uppmanas med samma scenarier. Alla deltagare kommer att instrueras att slutföra fallen utan att använda externa resurser som AI -verktyg eller internetsökningar, vilket bara förlitar sig på sin kliniska kunskap.
Statistisk analys kommer att jämföra prestanda mellan grupper med användning av icke-parametriska tester (t.ex. Wilcoxon rank SUM).
Förväntade resultat:
Studien antar att ChatGPT-4 kommer att prestera på en nivå som är jämförbar med äldre invånare eller delta i kirurger och överträffa juniorinvånare i beslutsfattande. Om det bekräftas kan dessa resultat stödja säker användning av chatgpt-4 som ett utbildningsstöd för juniorkirurgiska invånare, vilket potentiellt kan förbättra utbildningsresultaten och kliniska resonemang.
Betydelse:
Denna studie kommer att ge ny insikt i AI: s roll i kirurgisk utbildning. Genom att strikt jämföra ChatGPT-4: s beslutsfattande med mänskliga kirurger på olika nivåer hoppas studien att definiera dess användbarhet, begränsningar och lämplig användning i utbildningsprogram för bostäder.
Studietyp
Inskrivning (Beräknad)
Kontakter och platser
Studiekontakt
- Namn: Manuela Mastronardi
- Telefonnummer: 0403994152
- E-post: manuela.mastronardi@gmail.com
Studieorter
-
-
-
Trieste, Italien
- University of Trieste
-
Kontakt:
- Manuela Mastronardi
- Telefonnummer: 0403994152
- E-post: manuela.mastronardi@gmail.com
-
Huvudutredare:
- Silvia Palmisano
-
Huvudutredare:
- Manuela Mastronardi
-
Underutredare:
- Paola Germani
-
Underutredare:
- Margherita Sandano
-
-
Deltagandekriterier
Urvalskriterier
Åldrar som är berättigade till studier
- Barn
- Vuxen
- Äldre vuxen
Tar emot friska volontärer
Testmetod
Studera befolkning
Beskrivning
Inkluderingskriterier:
- Aktivt registrerad eller anställd i den allmänna kirurgiska hemvist eller avdelning vid den deltagande institutionen
- Villighet att delta och slutföra alla kliniska fallscenarier
- Samtycke till att delta i studien
Uteslutningskriterier:
- Ofullständiga svar
- Användning av externt hjälp (t.ex. Internet-sökning, AI-verktyg) när du svarar på scenarier, som självrapporteras i instruktioner
Studieplan
Hur är studien utformad?
Designdetaljer
Kohorter och interventioner
Grupp / Kohort |
Intervention / Behandling |
|---|---|
|
Invånare
Junior- och äldre invånare i allmän kirurgi
|
Sju kliniska fall som måste analyseras
|
|
Konsulter
Allmänna kirurger
|
Sju kliniska fall som måste analyseras
|
|
Chatgpt 4
Artificiell intelligenssystem
|
Sju kliniska fall som måste analyseras
|
Vad mäter studien?
Primära resultatmått
Resultatmått |
Åtgärdsbeskrivning |
Tidsram |
|---|---|---|
|
Andelen korrekta svar
Tidsram: Baslinje
|
Binärt resultat (korrekt mot felaktigt beslut)
|
Baslinje
|
Sekundära resultatmått
Resultatmått |
Åtgärdsbeskrivning |
Tidsram |
|---|---|---|
|
Jämförelse av noggrannhet mellan erfarenhetsnivåer
Tidsram: Baslinje
|
Andel av korrekta svar från grupp: Juniorinvånare, äldre invånare, deltar i kirurger, chatgpt-4
|
Baslinje
|
|
Förtroendenivå
Tidsram: Baslinje
|
Deltagare och chatgpt uppmanas att betygsätta hur säkra de känner sig i sitt svar (1-5 Likert-skala, där 1 betyder ingen säker och 5 mycket självsäker)
|
Baslinje
|
|
Procentandel av AI för utvärdering av kliniska fall
Tidsram: Baslinje
|
Deltagarna frågas om de använder eller inte chatgpt i sin kliniska aktivitet
|
Baslinje
|
Samarbetspartners och utredare
Sponsor
Studieavstämningsdatum
Studera stora datum
Studiestart (Beräknad)
Primärt slutförande (Beräknad)
Avslutad studie (Beräknad)
Studieregistreringsdatum
Först inskickad
Först inskickad som uppfyllde QC-kriterierna
Första postat (Faktisk)
Uppdateringar av studier
Senaste uppdatering publicerad (Faktisk)
Senaste inskickade uppdateringen som uppfyllde QC-kriterierna
Senast verifierad
Mer information
Termer relaterade till denna studie
Andra studie-ID-nummer
- AI-Surgical training
Plan för individuella deltagardata (IPD)
Planerar du att dela individuella deltagardata (IPD)?
Läkemedels- och apparatinformation, studiedokument
Studerar en amerikansk FDA-reglerad läkemedelsprodukt
Studerar en amerikansk FDA-reglerad produktprodukt
Denna information hämtades direkt från webbplatsen clinicaltrials.gov utan några ändringar. Om du har några önskemål om att ändra, ta bort eller uppdatera dina studieuppgifter, vänligen kontakta register@clinicaltrials.gov. Så snart en ändring har implementerats på clinicaltrials.gov, kommer denna att uppdateras automatiskt även på vår webbplats .