Het Grote Onbekende: Een Reis naar de Transformerende Impact van Generatieve AI op Medische Beroepen
Studie Overzicht
Toestand
Conditie
Interventie / Behandeling
Gedetailleerde beschrijving
Deze studie is een multi-country, parallelgroep, gerandomiseerde gecontroleerde studie die is ontworpen om te evalueren of toegang tot een groot taalmodel (LLM) de klinische besluitvorming van artsen verbetert. De studie gebruikt een superioriteitsraamwerk en vergelijkt artsen die willekeurig zijn toegewezen om gestandaardiseerde klinische vignetten te voltooien met toegang tot GPT-4o of zonder enige AI-ondersteuning.
Klinische vignetten simuleren veelvoorkomende eerstelijnszorgcondities zoals cardiovasculaire, respiratoire, musculoskeletale, vermoeidheidsgerelateerde en infectieziekten. Elk vignet omvat meerdere stappen in het klinisch redeneerproces, van initiële anamnese tot diagnose, behandeling en follow-up. De reacties van artsen worden beoordeeld met rubrics die zijn ontwikkeld op basis van evidence-based, context-specifieke best-practice richtlijnen.
De studie wordt uitgevoerd in drie landen - Indonesië, Kenia en Nederland - die verschillende inkomensniveaus en gezondheidssysteemcontexten vertegenwoordigen. De primaire uitkomstmaat is de prestaties op klinische vignetten, gedefinieerd als naleving van best-practice richtlijnen. Secundaire doelstellingen omvatten het onderzoeken van variatie in artsenprestaties tussen landen, variatie in prestatieverdelingen, en de rol van betrokkenheid bij het LLM in het vormgeven van uitkomsten.
Studietype
Inschrijving (Werkelijk)
Fase
- Niet toepasbaar
Contacten en locaties
Deelname Criteria
Geschiktheidscriteria
Leeftijden die in aanmerking komen voor studie
- Kind
- Volwassen
- Oudere volwassene
Accepteert gezonde vrijwilligers
Beschrijving
Insluitingscriteria:
- Geregistreerde medisch artsen
- Opleiding in interne of huisartsgeneeskunde
Uitsluitingscriteria:
- Momenteel niet klinisch werkzaam
Studie plan
Hoe is de studie opgezet?
Ontwerpdetails
- Primair doel: Diagnostisch
- Toewijzing: Gerandomiseerd
- Interventioneel model: Parallelle opdracht
- Masker: Enkel
Wapens en interventies
Deelnemersgroep / Arm |
Interventie / Behandeling |
|---|---|
|
Geen tussenkomst: Eigen Kennis
Groep krijgt geen toegang tot GPT-4 of andere online bronnen
|
|
|
Actieve vergelijker: GPT-4o
Groep met toegang tot GPT-4o
|
GPT-4o aangeboden via een iFrame in de online Qualtrics-omgeving
|
Wat meet het onderzoek?
Primaire uitkomstmaten
Uitkomstmaat |
Maatregel Beschrijving |
Tijdsspanne |
|---|---|---|
|
Percentage Correcte Score
Tijdsspanne: Tijdens Evaluatie
|
Volgens Peabody et al (2000) is de primaire uitkomst een percentage correcte score over alle stappen in een vignet.
Dit wordt gegenereerd door de gewogen totale som van rubriekitems die als aanwezig zijn beoordeeld te delen door het totale aantal mogelijke rubriekitems in een vignet.
Rubriekitems worden gewogen met betrekking tot hun relevantie door ons deskundigenpanel.
|
Tijdens Evaluatie
|
Secundaire uitkomstmaten
Uitkomstmaat |
Maatregel Beschrijving |
Tijdsspanne |
|---|---|---|
|
Kwaliteit Per Antwoord
Tijdsspanne: Tijdens Evaluatie
|
Dit resultaat wordt gegenereerd als het gemiddelde gewicht van rubriekitems die als aanwezig worden beoordeeld over alle vignetten.
Aangezien elk item een gewicht krijgt (0,33, 0,5, 1), is het gemiddelde gewicht de som van de gewichten gedeeld door het aantal antwoorden dat als aanwezig is gemarkeerd.
|
Tijdens Evaluatie
|
|
Aantal antwoorden
Tijdsspanne: Tijdens evaluatie
|
Dit resultaat wordt gegenereerd als het aantal van het totale aantal antwoorden dat door beoordelaars als aanwezig is beoordeeld per vignette
|
Tijdens evaluatie
|
|
Minder voor de hand liggende antwoorden
Tijdsspanne: Tijdens evaluatie
|
Dit resultaat wordt gegenereerd als het aantal gegeven antwoorden dat minder voor de hand ligt, d.w.z. minder vaak genoemd wordt door de controlegroep.
Als het antwoord door 25% of minder van de controlegroep wordt genoemd, wordt het als minder voor de hand liggend beschouwd.
|
Tijdens evaluatie
|
Medewerkers en onderzoekers
Sponsor
Onderzoekers
- Hoofdonderzoeker: Mark Levels, PhD, Maastricht University
Studie record data
Bestudeer belangrijke data
Studie start (Werkelijk)
Primaire voltooiing (Werkelijk)
Studie voltooiing (Werkelijk)
Studieregistratiedata
Eerst ingediend
Eerst ingediend dat voldeed aan de QC-criteria
Eerst geplaatst (Werkelijk)
Updates van studierecords
Laatste update geplaatst (Werkelijk)
Laatste update ingediend die voldeed aan QC-criteria
Laatst geverifieerd
Meer informatie
Termen gerelateerd aan deze studie
Trefwoorden
Aanvullende relevante MeSH-voorwaarden
Andere studie-ID-nummers
- ERCIC_572_25_04_2024
Informatie over medicijnen en apparaten, studiedocumenten
Bestudeert een door de Amerikaanse FDA gereguleerd geneesmiddel
Bestudeert een door de Amerikaanse FDA gereguleerd apparaatproduct
Deze informatie is zonder wijzigingen rechtstreeks van de website clinicaltrials.gov gehaald. Als u verzoeken heeft om uw onderzoeksgegevens te wijzigen, te verwijderen of bij te werken, neem dan contact op met register@clinicaltrials.gov. Zodra er een wijziging wordt doorgevoerd op clinicaltrials.gov, wordt deze ook automatisch bijgewerkt op onze website .