- ICH GCP
- Registr klinických studií v USA
- Klinická studie NCT05520671
Hodnocení TESLA-G, gamifikované, telegramem dodané, kvízové platformy pro chirurgické vzdělávání studentů medicíny
Hodnocení TESLA-G, gamifikované, telegramem dodané, kvízové platformy pro chirurgické vzdělávání studentů medicíny: protokol pro pilotní randomizovanou kontrolovanou zkoušku
Telegram Education for Surgical Learning and Application Gamified (TESLA-G) je online gamifikovaná testovací platforma pro chirurgické vzdělávání studentů medicíny. Hlavním cílem této pilotní studie je posoudit proveditelnost a přijatelnost provedení úplné randomizované kontrolní studie zahrnující TESLA-G.
Bude provedena pilotní randomizovaná kontrolovaná studie zahrnující 50 vysokoškolských studentů medicíny. Budou randomizováni do intervenční skupiny a aktivní kontrolní skupiny.
Proveditelnost bude určena registrací účastníků, mírou udržení a dokončením kvízu. Přijatelnost bude měřena kvantitativně prostřednictvím pointervenčního průzkumu spokojenosti studentů a kvalitativně prostřednictvím polostrukturovaných rozhovorů. Kromě toho budou porovnána skóre účastníků v předintervenčních a pointervenčních znalostních testech.
Přehled studie
Postavení
Intervence / Léčba
Detailní popis
Online kvízy s otázkami s výběrem odpovědí (MCQ) jsou dobře zavedeným nástrojem pro souhrnné hodnocení v lékařském vzdělávání. Trpí však vysokou mírou opuštění, která je přisuzována slábnoucí motivaci uživatelů v průběhu času. Různé studie ukázaly, že začlenění gamifikovaných prvků do učení může podpořit zapojení a motivaci.
V této pilotní studii posoudíme proveditelnost a přijatelnost nové gamifikované testovací platformy, Telegram Education for Surgical Learning and Application Gamified (TESLA-G), abychom určili možnost budoucí rozsáhlejší randomizované kontrolované studie.
Tato studie zahrnuje randomizovanou kontrolovanou studii se dvěma rameny, intervenční skupinou (TESLA-G) a aktivní kontrolní skupinou (konvenční testovací platforma). 50 studentů prvního až pátého ročníku medicíny z Lee Kong Chian School of Medicine, Technologická univerzita Nanyang bude náhodně rozděleno do dvou ramen s poměrem alokace 1:1, stratifikovaných podle roku studia. Účastníci budou používat přidělenou kvízovou platformu k pokusům o otázky na konkrétní téma (endokrinní chirurgie) po dobu dvou týdnů.
Na konci studijního období bude vyhodnoceno několik výstupů. Proveditelnost bude určena registrací účastníků, mírou udržení a dokončením kvízu. Přijatelnost bude měřena kvantitativně prostřednictvím pointervenčního průzkumu spokojenosti studentů a kvalitativně prostřednictvím polostrukturovaných rozhovorů. Kromě toho budou porovnána skóre účastníků v předintervenčních a pointervenčních znalostních testech.
Typ studie
Zápis (Očekávaný)
Fáze
- Nelze použít
Kontakty a umístění
Studijní kontakt
- Jméno: Clement, Luck Khng Chia, MBBS, MS
- Telefonní číslo: +65 6602 2207
- E-mail: Chia.clement.lk@ktph.com.sg
Studijní záloha kontaktů
- Jméno: Matthew, Song Peng Ng, MBBS
- Telefonní číslo: +65 9644 1701
- E-mail: matthew.rocketmail@gmail.com
Kritéria účasti
Kritéria způsobilosti
Věk způsobilý ke studiu
Přijímá zdravé dobrovolníky
Pohlaví způsobilá ke studiu
Popis
Kritéria pro zařazení:
- V současné době je zapsán do denního 5letého bakalářského programu na lékařské fakultě, který vede k bakaláři medicíny a bakaláři chirurgie (MBBS)
- Ochota a schopnost poskytnout souhlas s účastí na celé době trvání studie včetně všech hodnocení před studiem a po něm
Kritéria vyloučení:
- NULA
Studijní plán
Jak je studie koncipována?
Detaily designu
- Primární účel: Jiný
- Přidělení: Randomizované
- Intervenční model: Paralelní přiřazení
- Maskování: Trojnásobný
Zbraně a zásahy
Skupina účastníků / Arm |
Intervence / Léčba |
---|---|
Experimentální: TESLA-G
Účastníci budou randomizováni do dvou ramen s alokačním poměrem 1:1 stratifikovaným podle roku studie.
V tomto rameni bude 25 účastníků.
|
TESLA-G je nová gamifikovaná kvízová platforma navržená na základě Bloomovy taxonomie výukových domén. Otázky budou vytvořeny v blocích, kde každý blok bude testovat konkrétní téma v rámci odbornosti (pro toto studium byla vybrána endokrinochirurgie). Každý blok má 5 otázek a každá otázka odpovídá každé úrovni Bloomovy taxonomie a každé úrovni ve hře. Pro tuto studii se snažíme vytvořit 56 bloků po 5 otázkách, celkem 280 otázek. Všechny otázky budou vytvořeny dvěma atestovanými všeobecnými chirurgy a jedním endokrinologem a budou ověřeny výzkumným týmem. Cílem hry je, aby hráči získali co nejvíce bodů, než vyprší časovač. Mezi prvky gamifikace patří úrovně, odpočítávací časovač, životy, systém násobení bodů, žebříčky žebříčků a personalizovaný dashboard. Účastníkům intervenční skupiny bude poskytnut odkaz pro přístup k TESLA-G odeslaný z automatizovaného telegramového bota; tento přístup bude poskytován po dobu 14 dnů. |
Aktivní komparátor: Řízení
Účastníci budou randomizováni do dvou ramen s alokačním poměrem 1:1 stratifikovaným podle roku studie.
V tomto rameni bude 25 účastníků.
|
Konvenční kvízová platforma bude upravená verze TESLA-G s odstraněnými všemi gamifikačními prvky. Použije se stejná sada otázek jako v gamifikované verzi. Po zadání kvízu se zobrazí kmen otázky a pět možností. Když je vybrána možnost, zobrazí se správná odpověď spolu s jejím vysvětlením. Poté bude odeslána další otázka a tento proces se opakuje, dokud účastník neopustí platformu nebo nezodpoví na všechny otázky. Otázky budou řazeny do fronty v blocích, přičemž každý blok bude odpovídat konkrétnímu tématu endokrinní chirurgie. Na rozdíl od gamifikované verze budou otázky v každém bloku randomizovány bez ohledu na jejich úroveň v Bloomově taxonomii. Účastníci také nebudou informováni o úrovni Bloomovy taxonomie u jednotlivých otázek. Přístupový odkaz na platformu bude účastníkům zaslán z automatizovaného telegramového robota a tento přístup bude trvat 14 dní. |
Co je měření studie?
Primární výstupní opatření
Měření výsledku |
Popis opatření |
Časové okno |
---|---|---|
Proveditelnost zásahu
Časové okno: 14 dní
|
Kvantitativně bude hodnocena proveditelnost zásahu. Toto jsou cíle:
Dosažení všech těchto cílů prokáže, že je možné provést úplnou randomizovanou kontrolovanou studii (RCT), zatímco dosažení dvou ze tří cílů ukáže, že je to pravděpodobně proveditelné. Dosažení méně než dvou cílů naznačuje, že RCT v plném rozsahu není při současném postupu proveditelné. |
14 dní
|
Přijatelnost zásahu
Časové okno: Po intervenci (14 dní)
|
Přijatelnost intervence se měří kvantitativně pomocí průzkumu spokojenosti studentů po intervenci a kvalitativně pomocí polostrukturovaných rozhovorů.
|
Po intervenci (14 dní)
|
Sekundární výstupní opatření
Měření výsledku |
Popis opatření |
Časové okno |
---|---|---|
Zlepšení znalostí v oboru chirurgie
Časové okno: Před a po intervenci (14 dní)
|
Bude porovnáno skóre předintervenčních a pointervenčních kvízů.
Kvízy, které se týkají endokrinní chirurgie, vypracují dva atestovaní praktičtí chirurgové a jeden endokrinolog.
Všechny otázky budou také ověřeny výzkumným týmem.
Je však třeba poznamenat, že síla studie bude neadekvátní při identifikaci komparativní efektivity mezi kontrolními a intervenčními skupinami, pokud jde o zlepšení chirurgických znalostí.
Proto bude analýza primárně provedena za účelem identifikace jakýchkoli potenciálních nežádoucích účinků a zvýšení chirurgických znalostí v rámci každé skupiny a sekundárně mezi skupinami.
To bude provedeno pomocí intervalu spolehlivosti 95 % s použitím malé velikosti efektu 0,2.
|
Před a po intervenci (14 dní)
|
Spokojenost účastníků
Časové okno: Po intervenci (14 dní)
|
Všichni účastníci také vyplní pointervenční průzkum spokojenosti studentů ve formě Likertovy škály upravené z průzkumu použitelnosti systému (SUS) (Brooke et al., 1996) a dotazníku Studentské hodnocení kvality vzdělávání (SEEQ).
Průzkum posoudí, zda jsou studenti v intervenční skupině spokojenější se svými zkušenostmi než studenti v kontrolní skupině.
|
Po intervenci (14 dní)
|
Uchování chirurgických znalostí
Časové okno: 14 dní po zásahu
|
Po dalších 14 dnech účastníci zasednou k navazujícímu znalostnímu testu, který se opět skládá z 20 MCQ o endokrinní chirurgii prováděné po dobu 30 minut.
V tomto okamžiku již účastníci kontrolních i intervenčních skupin nebudou mít přístup k výukovým platformám.
Úroveň obtížnosti následného testu bude podobná jako u pointervenčního testu, jak bylo popsáno výše.
Rozdíl ve skóre testů (po zákroku a následném sledování) bude indikovat zachování chirurgických znalostí účastníků.
|
14 dní po zásahu
|
Spolupracovníci a vyšetřovatelé
Sponzor
Vyšetřovatelé
- Vrchní vyšetřovatel: Clement, Luck Khng Chia, MBBS, MS, Department of General Surgery, Khoo Teck Puat Hospital, Singapore
- Vrchní vyšetřovatel: Lorainne Tudor Car, MBBS, PhD, Lee Kong Chian School of Medicine, Nanyang Technological University, Singapore
Publikace a užitečné odkazy
Obecné publikace
- Douthit NT, Norcini J, Mazuz K, Alkan M, Feuerstein MT, Clarfield AM, Dwolatzky T, Solomonov E, Waksman I, Biswas S. Assessment of Global Health Education: The Role of Multiple-Choice Questions. Front Public Health. 2021 Jul 22;9:640204. doi: 10.3389/fpubh.2021.640204. eCollection 2021.
- St-Onge C, Young M, Renaud JS, Cummings BA, Drescher O, Varpio L. Sound Practices: An Exploratory Study of Building and Monitoring Multiple-Choice Exams at Canadian Undergraduate Medical Education Programs. Acad Med. 2021 Feb 1;96(2):271-277. doi: 10.1097/ACM.0000000000003659.
- Ryan A, Judd T, Swanson D, Larsen DP, Elliott S, Tzanetos K, Kulasegaram K. Beyond right or wrong: More effective feedback for formative multiple-choice tests. Perspect Med Educ. 2020 Oct;9(5):307-313. doi: 10.1007/s40037-020-00606-z.
- Yang BW, Razo J, Persky AM. Using Testing as a Learning Tool. Am J Pharm Educ. 2019 Nov;83(9):7324. doi: 10.5688/ajpe7324.
- Roediger HL, Karpicke JD. Test-enhanced learning: taking memory tests improves long-term retention. Psychol Sci. 2006 Mar;17(3):249-55. doi: 10.1111/j.1467-9280.2006.01693.x.
- Larsen DP, Butler AC, Roediger HL 3rd. Test-enhanced learning in medical education. Med Educ. 2008 Oct;42(10):959-66. doi: 10.1111/j.1365-2923.2008.03124.x.
- Jud SM, Cupisti S, Frobenius W, Winkler A, Schultheis F, Antoniadis S, Beckmann MW, Heindl F. Introducing multiple-choice questions to promote learning for medical students: effect on exam performance in obstetrics and gynecology. Arch Gynecol Obstet. 2020 Dec;302(6):1401-1406. doi: 10.1007/s00404-020-05758-1. Epub 2020 Aug 31. Erratum In: Arch Gynecol Obstet. 2021 Dec;304(6):1627.
- Ayyub A, Mahboob U. Effectiveness of Test-Enhanced Learning (TEL) in lectures for undergraduate medical students. Pak J Med Sci. 2017 Nov-Dec;33(6):1339-1343. doi: 10.12669/pjms.336.13358.
- Green ML, Moeller JJ, Spak JM. Test-enhanced learning in health professions education: A systematic review: BEME Guide No. 48. Med Teach. 2018 Apr;40(4):337-350. doi: 10.1080/0142159X.2018.1430354. Epub 2018 Feb 1. Erratum In: Med Teach. 2022 Jun;44(6):I.
- Pei L, Wu H. Does online learning work better than offline learning in undergraduate medical education? A systematic review and meta-analysis. Med Educ Online. 2019 Dec;24(1):1666538. doi: 10.1080/10872981.2019.1666538.
- Vaona A, Banzi R, Kwag KH, Rigon G, Cereda D, Pecoraro V, Tramacere I, Moja L. E-learning for health professionals. Cochrane Database Syst Rev. 2018 Jan 21;1(1):CD011736. doi: 10.1002/14651858.CD011736.pub2.
- Brame CJ, Biel R. Test-enhanced learning: the potential for testing to promote greater learning in undergraduate science courses. CBE Life Sci Educ. 2015 Summer;14(2):14:es4. doi: 10.1187/cbe.14-11-0208.
- Mitra NK, Barua A. Effect of online formative assessment on summative performance in integrated musculoskeletal system module. BMC Med Educ. 2015 Mar 3;15:29. doi: 10.1186/s12909-015-0318-1.
- Orr R, Foster S. Increasing student success using online quizzing in introductory (majors) biology. CBE Life Sci Educ. 2013 Fall;12(3):509-14. doi: 10.1187/cbe.12-10-0183.
- Kibble J. Use of unsupervised online quizzes as formative assessment in a medical physiology course: effects of incentives on student participation and performance. Adv Physiol Educ. 2007 Sep;31(3):253-60. doi: 10.1152/advan.00027.2007.
- van Gaalen AEJ, Brouwer J, Schonrock-Adema J, Bouwkamp-Timmer T, Jaarsma ADC, Georgiadis JR. Gamification of health professions education: a systematic review. Adv Health Sci Educ Theory Pract. 2021 May;26(2):683-711. doi: 10.1007/s10459-020-10000-3. Epub 2020 Oct 31.
- Gentry SV, Gauthier A, L'Estrade Ehrstrom B, Wortley D, Lilienthal A, Tudor Car L, Dauwels-Okutsu S, Nikolaou CK, Zary N, Campbell J, Car J. Serious Gaming and Gamification Education in Health Professions: Systematic Review. J Med Internet Res. 2019 Mar 28;21(3):e12994. doi: 10.2196/12994.
- Nevin CR, Westfall AO, Rodriguez JM, Dempsey DM, Cherrington A, Roy B, Patel M, Willig JH. Gamification as a tool for enhancing graduate medical education. Postgrad Med J. 2014 Dec;90(1070):685-93. doi: 10.1136/postgradmedj-2013-132486. Epub 2014 Oct 28.
- Coleman E, O'Connor E. The role of WhatsApp(R) in medical education; a scoping review and instructional design model. BMC Med Educ. 2019 Jul 25;19(1):279. doi: 10.1186/s12909-019-1706-8.
- Bakshi SG, Bhawalkar P. Role of WhatsApp-based discussions in improving residents' knowledge of post-operative pain management: a pilot study. Korean J Anesthesiol. 2017 Oct;70(5):542-549. doi: 10.4097/kjae.2017.70.5.542. Epub 2017 May 19.
- Blumenfeld O, Brand R. Real time medical learning using the WhatsApp cellular network: a cross sectional study following the experience of a division's medical officers in the Israel Defense Forces. Disaster Mil Med. 2016 Aug 9;2:12. doi: 10.1186/s40696-016-0022-7. eCollection 2016.
- Alhalabi N, Salloum R, Aless A, Darjazini Nahas L, Ibrahim N. Messaging apps use in undergraduate medical education: The case of National Medical Unified Examination. Ann Med Surg (Lond). 2021 Jun 5;66:102465. doi: 10.1016/j.amsu.2021.102465. eCollection 2021 Jun.
- Iqbal MZ, Alradhi HI, Alhumaidi AA, Alshaikh KH, AlObaid AM, Alhashim MT, AlSheikh MH. Telegram as a Tool to Supplement Online Medical Education During COVID-19 Crisis. Acta Inform Med. 2020 Jun;28(2):94-97. doi: 10.5455/aim.2020.28.94-97.
- Skivington K, Matthews L, Simpson SA, Craig P, Baird J, Blazeby JM, Boyd KA, Craig N, French DP, McIntosh E, Petticrew M, Rycroft-Malone J, White M, Moore L. A new framework for developing and evaluating complex interventions: update of Medical Research Council guidance. BMJ. 2021 Sep 30;374:n2061. doi: 10.1136/bmj.n2061.
- Blanie A, Amorim MA, Benhamou D. Comparative value of a simulation by gaming and a traditional teaching method to improve clinical reasoning skills necessary to detect patient deterioration: a randomized study in nursing students. BMC Med Educ. 2020 Feb 19;20(1):53. doi: 10.1186/s12909-020-1939-6.
- Plana NM, Rifkin WJ, Kantar RS, David JA, Maliha SG, Farber SJ, Staffenberg DA, Grayson BH, Diaz-Siso JR, Flores RL. A Prospective, Randomized, Blinded Trial Comparing Digital Simulation to Textbook for Cleft Surgery Education. Plast Reconstr Surg. 2019 Jan;143(1):202-209. doi: 10.1097/PRS.0000000000005093.
- Bell ML, Whitehead AL, Julious SA. Guidance for using pilot studies to inform the design of intervention trials with continuous outcomes. Clin Epidemiol. 2018 Jan 18;10:153-157. doi: 10.2147/CLEP.S146397. eCollection 2018.
- Whitehead AL, Julious SA, Cooper CL, Campbell MJ. Estimating the sample size for a pilot randomised trial to minimise the overall trial sample size for the external pilot and main trial for a continuous outcome variable. Stat Methods Med Res. 2016 Jun;25(3):1057-73. doi: 10.1177/0962280215588241. Epub 2015 Jun 19.
- Tuma F, Nassar AK. Applying Bloom's taxonomy in clinical surgery: Practical examples. Ann Med Surg (Lond). 2021 Aug 5;69:102656. doi: 10.1016/j.amsu.2021.102656. eCollection 2021 Sep.
Užitečné odkazy
- Johnson G. Optional online quizzes: College student use and relationship to achievement. Canadian Journal of Learning and Technology/La revue canadienne de l'apprentissage et de la technologie 2006;32
- Deterding S, Khaled R, Nacke LE. Gamification: Toward a definition. CHI 2011 gamification Published Online First: 2011.
- Morillas Barrio C, Munoz-Organero M, Sanchez Soriano J. Can gamification improve the benefits of student response systems in learning? An experimental study. IEEE Trans Emerg Top Comput 2016;4:429-38.
- Licorish SA, Owen HE, Daniel B, et al. Students' perception of Kahoot!'s influence on teaching and learning. Research and Practice in Technology Enhanced Learning 2018;13:1-23.
- Gon S, Rawekar A. Effectivity of E-Learning through Whatsapp as a Teaching Learning Tool. MVP Journal of Medical Sciences 2017;4:19-25.
- Top Apps Worldwide for January 2021 by Downloads. (accessed 23 May 2022)
- Most popular messaging apps. Statista. (accessed 23 May 2022).
- Brooke J. Sus: a 'quick and dirty' usability scale. Usability evaluation in industry Published Online First: 1996.
- Soon MKS, Martinengo L, Lu J, et al. Telegram Education for Surgical Learning and Application (TESLA): An exploratory study. JMIR Preprints. 2021.
- Sauro J, Lewis JR. Quantifying the User Experience: Practical Statistics for User Research. Morgan Kaufmann 2016.
- Grammatikopoulos V, Linardakis M, Gregoriadis A, et al. Assessing the Students' Evaluations of Educational Quality (SEEQ) questionnaire in Greek higher education. High Educ 2015;70:395-408.
- Orgill BD, Nolin J. Learning Taxonomies in Medical Simulation. In: StatPearls. Treasure Island (FL): : StatPearls Publishing 2022.
- Krathwohl DR. A Revision of Bloom's Taxonomy: An Overview. Theory Pract 2002;41:212-8.
- Coffey M, Gibbs G. The Evaluation of the Student Evaluation of Educational Quality Questionnaire (SEEQ) in UK Higher Education. Assessment & Evaluation in Higher Education 2001;26:89-93.
Termíny studijních záznamů
Hlavní termíny studia
Začátek studia (Očekávaný)
Primární dokončení (Očekávaný)
Dokončení studie (Očekávaný)
Termíny zápisu do studia
První předloženo
První předloženo, které splnilo kritéria kontroly kvality
První zveřejněno (Aktuální)
Aktualizace studijních záznamů
Poslední zveřejněná aktualizace (Aktuální)
Odeslaná poslední aktualizace, která splnila kritéria kontroly kvality
Naposledy ověřeno
Více informací
Termíny související s touto studií
Klíčová slova
Další identifikační čísla studie
- SGG20/SN02
Plán pro data jednotlivých účastníků (IPD)
Plánujete sdílet data jednotlivých účastníků (IPD)?
Informace o lécích a zařízeních, studijní dokumenty
Studuje lékový produkt regulovaný americkým FDA
Studuje produkt zařízení regulovaný americkým úřadem FDA
produkt vyrobený a vyvážený z USA
Tyto informace byly beze změn načteny přímo z webu clinicaltrials.gov. Máte-li jakékoli požadavky na změnu, odstranění nebo aktualizaci podrobností studie, kontaktujte prosím register@clinicaltrials.gov. Jakmile bude změna implementována na clinicaltrials.gov, bude automaticky aktualizována i na našem webu .