Evaluering af effektiviteten og anvendeligheden af ​​kunstig intelligens (ChatGPT) for sundhedsvidenskabelige studerende (AIHSS)

En randomiseringsstrategi i to trin vil blive vedtaget. Fordelingen af ​​deltagere i begivenhedsgruppe A og B vil blive bestemt ved computergenereret randomisering i et tildelingsforhold: 1:1. At adressere etiske bekymringer vedrørende magtdynamikker mellem professorer og studerende; efterforskerne har valgt at involvere en person, der er uafhængig af forskerholdet. Denne beslutning har til formål at minimere enhver potentiel skævhed eller indflydelse, der kunne opstå fra direkte professor involvering i interventionen. Denne tilgang er med til at sikre, at undersøgelsen udføres retfærdigt og uvildigt, hvilket fremmer et forskningsmiljø, der prioriterer lige muligheder for alle deltagere. Begge grupper vil samtidigt arbejde med en opgave (A og B).

Efterforskerne brugte et cross-over-design for at sikre lighed i læringsoplevelsen for alle elever. Dette indebar at tildele eleverne enten ChatGPD (A) eller de almindelige onlineværktøjer (B) til at få adgang til ressourcer og hjælpe dem med deres opgaver. I den indledende fase af interventionen vil deltagerne i gruppe A bruge ChatGPT til at udføre deres opgaver, mens deltagerne i gruppe B vil fungere som kontrolgruppen. I den efterfølgende periode vil indsatserne skifte mellem de to grupper. For at vurdere deltagernes teknologianvendelighed vil begge grupper udfylde præ- og post-spørgeskemaer. Derudover vil deltagerne blive bedt om at udfylde et post-intervention spørgeskema for at evaluere deres opfattelse af bistandsmetoderne. Efter en udvaskningsperiode på 13 dage/uge vil deltagere, der tidligere var allokeret til gruppe A, blive allokeret til gruppe B, og det samme med deltagere, der tidligere var allokeret til gruppe B, vil være til gruppe A. Dette crossover randomiserede kontrolforsøg vil omfatte 50 sundhedsvidenskabelige studerende, der er tilmeldt kurset Chronic Health Conditions and Disability (HLTH 3503), Carleton University. Under den første del af interventionen vil A-gruppe bruge ChatGPT til at udføre deres opgave, mens B-deltagere vil fungere som kontrolgruppe. I den anden uge går indgrebene over. Begge gruppers deltagere vil udfylde et præ- og post-spørgeskema for at vurdere deres viden. Deltagerne vil også udfylde et post-intervention spørgeskema for at evaluere deres opfattelser. System Usability Scale (SUS) vil blive administreret ved afslutningen af ​​interventionerne, og når deltagerne går over til det andet hjælpeværktøj. Dette giver mulighed for vurdering af resultater og sammenligninger inden for og mellem de to interventionsarme. Ved at indsamle data på flere punkter i undersøgelsen kan efterforskerne evaluere virkningerne af hver intervention og eventuelle potentielle overførselseffekter i overgangsperioden. Derudover giver det mulighed for at måle ændringer i resultater hos individuelle deltagere, når de skifter fra en intervention til en anden. Spørgeskemaet om socioøkonomiske spørgsmål, læsefærdigheder, fordele ved AI og risici og negative erfaringer forbundet med AI-brug.