Evaluering af TESLA-G, en Gamified, telegram-leveret, quizzeplatform for kirurgisk uddannelse i medicinstuderende

Eksperimentel: TESLA-G

Deltagerne vil blive randomiseret i de to arme med et tildelingsforhold på 1:1 stratificeret efter studieår. Der vil være 25 deltagere i denne arm.

Andet: Gamified online quizze platform

TESLA-G er en ny gamified quizzeplatform designet baseret på Blooms taksonomi af læringsdomæner. Spørgsmålene vil blive oprettet i blokke, hvor hver blok vil teste et specifikt emne inden for et speciale (endokrin kirurgi er udvalgt til denne undersøgelse). Hver blok har 5 spørgsmål, og hvert spørgsmål svarer til hvert niveau i Blooms taksonomi og hvert niveau i spillet.

Til denne undersøgelse sigter vi mod at skabe 56 blokke af 5 spørgsmål, i alt 280 spørgsmål. Alle spørgsmål vil blive oprettet af to bestyrelsescertificerede generelle kirurger og en endokrinolog og valideret af forskerholdet.

Målet med spillet er, at spillere skal få så mange point, som de kan, før timeren løber ud. Gamification-elementer inkluderer niveauer, nedtællingstimer, liv, et pointmultiplikatorsystem, rangeringer på ranglisten og et personligt dashboard.

Deltagere i interventionsgruppen vil blive forsynet med et link til at få adgang til TESLA-G, sendt fra en automatiseret Telegram-bot; denne adgang vil blive givet i 14 dage.

Aktiv komparator: Styring

Deltagerne vil blive randomiseret i de to arme med et tildelingsforhold på 1:1 stratificeret efter studieår. Der vil være 25 deltagere i denne arm.

Andet: Konventionel quizzeplatform

Den konventionelle quizzeplatform vil være en modificeret version af TESLA-G med alle gamification-elementer fjernet. Det samme sæt spørgsmål som den gamificerede version vil blive brugt. Når du deltager i quizzen, vil en spørgsmålsstamme og fem valg blive vist. Når en mulighed er valgt, vil det rigtige svar sammen med dets forklaring blive vist. Det næste spørgsmål vil derefter blive sendt, og denne proces gentages, indtil deltageren forlader platformen eller har besvaret hvert spørgsmål.

Spørgsmålene vil blive sat i kø i blokke, hvor hver blok svarer til et bestemt emne inden for endokrin kirurgi. I modsætning til den gamificerede version vil spørgsmål inden for hver blok blive randomiseret, uanset deres niveau på Blooms taksonomi. Deltagerne vil heller ikke blive informeret om niveauet af Blooms taksonomi for individuelle spørgsmål. Adgangslinket til platformen vil blive sendt til deltagere fra en automatiseret Telegram-bot, og denne adgang vil vare i 14 dage.

Mulighed for intervention

Gennemførligheden af ​​interventionen vil blive vurderet kvantitativt. Disse er målene:

1. Tilmelding af 50 deltagere
2. Fastholdelse af mindst 75 % af de tilmeldte deltagere
3. Individuel quizgennemførelsesrate på 80 %

At nå alle disse mål vil bevise, at det er muligt at gennemføre et fuldskala randomiseret kontrolleret forsøg (RCT), mens opnåelse af to ud af tre mål vil indikere, at det sandsynligvis er muligt. At opnå mindre end to mål vil tyde på, at en fuldskala RCT ikke er mulig med den nuværende procedure.

Acceptabilitet af intervention

Interventionens acceptabilitet måles kvantitativt via en post-intervention elevtilfredshedsundersøgelse og kvalitativt via semistrukturerede interviews.

Forbedring af kirurgisk viden

Snesevis af quizzer før og efter intervention vil blive sammenlignet. Quizzerne, som handler om endokrin kirurgi, vil blive udarbejdet af to bestyrelsescertificerede almenkirurger og en endokrinolog. Alle spørgsmål vil også blive valideret af forskerholdet. Det skal dog bemærkes, at undersøgelseskraften vil være utilstrækkelig til at identificere den komparative effektivitet mellem kontrol- og interventionsgrupperne med hensyn til forbedring af kirurgisk viden. Derfor vil analysen primært blive udført for at identificere potentielle negative virkninger og øge den kirurgiske viden inden for hver gruppe, og sekundært mellem grupper. Dette vil blive gjort ved hjælp af et konfidensinterval på 95 % ved brug af en lille effektstørrelse på 0,2.

Deltagertilfredshed

Alle deltagere vil også gennemføre en elevtilfredshedsundersøgelse efter intervention i form af en Likert-skala tilpasset fra System Usability Survey (SUS) (Brooke et al., 1996) og Student Evaluation of Educational Quality (SEEQ) spørgeskemaet. Undersøgelsen vil vurdere, om eleverne i interventionsgruppen er mere tilfredse med deres oplevelse end eleverne i kontrolgruppen.

Fastholdelse af kirurgisk viden

Efter yderligere 14 dage skal deltagerne til en opfølgende videnstest, som igen består af 20 MCQ'er om endokrin kirurgi gennemført over 30 minutter. På dette tidspunkt vil deltagere i både kontrol- og interventionsgrupper ikke længere kunne få adgang til læringsplatformene. Sværhedsgraden for opfølgningstesten vil ligne den for post-interventionstesten som beskrevet tidligere. Forskellen i testresultater (post-intervention og opfølgning) vil indikere, at deltagerne fastholder kirurgisk viden.