Evaluatie van de werkzaamheid en bruikbaarheid van kunstmatige intelligentie (ChatGPT) voor studenten Gezondheidswetenschappen (AIHSS)

Er zal een randomiseringsstrategie in twee fasen worden toegepast. De toewijzing van deelnemers aan evenementgroepen A en B wordt bepaald door middel van computergegenereerde randomisatie in een toewijzingsverhouding: 1:1. Om ethische zorgen over machtsdynamiek tussen professoren en studenten aan te pakken; de onderzoekers hebben ervoor gekozen om een ​​persoon te betrekken die onafhankelijk is van het onderzoeksteam. Deze beslissing is bedoeld om mogelijke vooringenomenheid of invloed die zou kunnen voortvloeien uit directe betrokkenheid van professoren bij de interventie, tot een minimum te beperken. Deze aanpak helpt ervoor te zorgen dat het onderzoek eerlijk en onbevooroordeeld wordt uitgevoerd, waardoor een onderzoeksomgeving wordt bevorderd die prioriteit geeft aan gelijke kansen voor alle deelnemers. Beide groepen werken gelijktijdig aan een opdracht (A en B).

De onderzoekers gebruikten een cross-over ontwerp om gelijkheid in de leerervaring voor alle studenten te garanderen. Dit hield in dat studenten ofwel de ChatGPD (A) ofwel de reguliere online tools (B) kregen om toegang te krijgen tot bronnen en hen te helpen bij hun opdrachten. Tijdens de beginfase van de interventie zullen deelnemers in groep A ChatGPT gebruiken om hun opdrachten uit te voeren, terwijl deelnemers in groep B als controlegroep dienen. In de periode daarna wisselen de interventies tussen de twee groepen. Om de bruikbaarheid van de technologie van de deelnemers te beoordelen, zullen beide groepen voor- en navragenlijsten invullen. Bovendien zullen de deelnemers worden gevraagd een vragenlijst na de interventie in te vullen om hun perceptie van de hulpverleningsmethoden te evalueren. Na een wash-outperiode van 13 dagen/week worden deelnemers die eerder waren ingedeeld in groep A, ingedeeld in groep B en hetzelfde geldt voor deelnemers die eerder waren ingedeeld in groep B, in groep A. Deze cross-over gerandomiseerde controleproef zal omvatten 50 studenten gezondheidswetenschappen die zijn ingeschreven voor de cursus Chronic Health Conditions and Disability (HLTH 3503), Carleton University. Tijdens het eerste deel van de interventie gebruikt A-groep ChatGPT om hun opdracht te voltooien, terwijl B-deelnemers als controlegroep fungeren. In de tweede week kruisen de interventies elkaar. De deelnemers van beide groepen zullen een voor- en navragenlijst invullen om hun kennis te beoordelen. Deelnemers zullen ook een vragenlijst na de interventie invullen om hun percepties te evalueren. De System Usability Scale (SUS) wordt afgenomen aan het einde van de interventies en wanneer deelnemers overstappen op het andere hulpmiddel. Dit maakt de beoordeling van uitkomsten en vergelijkingen binnen en tussen de twee interventiearmen mogelijk. Door op meerdere punten in het onderzoek gegevens te verzamelen, kunnen de onderzoekers de effecten van elke interventie en mogelijke overdrachtseffecten tijdens de crossover-periode evalueren. Bovendien biedt het de mogelijkheid om veranderingen in uitkomsten bij individuele deelnemers te meten wanneer ze van de ene interventie naar de andere overschakelen. De vragenlijst over sociaaleconomische vragen, alfabetiseringsvragen, voordelen van AI en risico's en negatieve ervaringen in verband met AI-gebruik.