评估 TESLA-G,一个用于医学生外科教育的游戏化、电报传送、测验平台
评估 TESLA-G,一个用于医学生外科教育的游戏化、电报传送、测验平台:试点随机对照试验方案
Telegram Education for Surgical Learning and Application Gamified (TESLA-G) 是一个在线游戏化的医学生外科教育测验平台。这项试点研究的主要目的是评估开展一项涉及以下内容的完全随机对照试验的可行性和可接受性特斯拉-G。
将进行一项涉及 50 名本科医学生的随机对照试验。 他们将被随机分为干预组和主动控制组。
可行性将由参与者注册、保留率和测验完成情况决定。 可接受性将通过干预后学习者满意度调查进行定量测量,并通过半结构化访谈进行定性测量。 此外,还将比较参与者干预前和干预后知识测试的分数。
研究概览
详细说明
在线多项选择题 (MCQ) 测验是医学教育中行之有效的总结性评估工具。 然而,由于用户的积极性随着时间的推移逐渐减弱,他们的退出率很高。 各种研究表明,将游戏化元素融入学习可以促进参与和积极性。
在这项试点研究中,我们将评估一种新型游戏化测验平台的可行性和可接受性,即 Telegram Education for Surgical Learning and Application Gamified (TESLA-G),以确定未来进行更大规模随机对照试验的可能性。
这项研究需要进行一项随机对照试验,包括两个臂、一个干预组 (TESLA-G) 和一个主动控制组(传统测验平台)。 来自南洋理工大学李光前医学院的 50 名一年级至五年级医学生将以 1:1 的分配比例随机分配到两组,按学习年份分层。 参与者将在两周内使用指定的测验平台尝试针对特定主题(内分泌手术)提出问题。
在研究期结束时,将评估几个结果。 可行性将由参与者注册、保留率和测验完成情况决定。 可接受性将通过干预后学习者满意度调查进行定量测量,并通过半结构化访谈进行定性测量。 此外,还将比较参与者干预前和干预后知识测试的分数。
研究类型
注册 (预期的)
阶段
- 不适用
联系人和位置
学习联系方式
- 姓名:Clement, Luck Khng Chia, MBBS, MS
- 电话号码:+65 6602 2207
- 邮箱:Chia.clement.lk@ktph.com.sg
研究联系人备份
- 姓名:Matthew, Song Peng Ng, MBBS
- 电话号码:+65 9644 1701
- 邮箱:matthew.rocketmail@gmail.com
参与标准
资格标准
适合学习的年龄
接受健康志愿者
有资格学习的性别
描述
纳入标准:
- 目前就读于医学院的全日制 5 年本科课程,可获得医学学士学位和外科学士学位 (MBBS)
- 愿意并能够同意参与整个研究期间,包括所有研究前和研究后评估
排除标准:
- 零
学习计划
研究是如何设计的?
设计细节
- 主要用途:其他
- 分配:随机化
- 介入模型:并行分配
- 屏蔽:三倍
武器和干预
参与者组/臂 |
干预/治疗 |
|---|---|
|
实验性的:特斯拉-G
参与者将被随机分配到两组,分配比例为 1:1,按研究年份分层。
这支队伍将有 25 名参与者。
|
TESLA-G 是一种基于 Bloom 学习领域分类法设计的新型游戏化测验平台。 问题将分块创建,每个块将测试专业内的特定主题(本研究已选择内分泌外科)。 每个块有 5 个问题,每个问题对应 Bloom 分类法的每个级别和游戏中的每个级别。 对于这项研究,我们的目标是创建 56 个模块,每个模块包含 5 个问题,总共 280 个问题。 所有问题都将由两名获得委员会认证的普通外科医生和一名内分泌学家创建,并由研究团队验证。 游戏的目的是让玩家在计时器用完之前获得尽可能多的分数。 游戏化元素包括关卡、倒数计时器、生命、积分乘数系统、排行榜排名和个性化仪表板。 干预组的参与者将获得一个访问 TESLA-G 的链接,该链接由自动 Telegram 机器人发送;此访问权将提供 14 天。 |
|
有源比较器:控制
参与者将被随机分配到两组,分配比例为 1:1,按研究年份分层。
这支队伍将有 25 名参与者。
|
传统的测验平台将是 TESLA-G 的修改版本,删除了所有游戏化元素。 将使用与游戏化版本相同的一组问题。 进入测验后,将显示问题主干和五个选项。 选择一个选项后,将显示正确答案及其解释。 然后将发送下一个问题,并重复此过程,直到参与者离开平台或回答完每个问题。 问题将按块排列,每个块对应内分泌外科的一个特定主题。 与游戏化版本不同,每个块中的问题将是随机的,无论它们在 Bloom 分类法中的级别如何。 参与者也不会被告知个别问题的 Bloom 分类法级别。 平台的访问链接将从自动 Telegram 机器人发送给参与者,此访问将持续 14 天。 |
研究衡量的是什么?
主要结果指标
结果测量 |
措施说明 |
大体时间 |
|---|---|---|
|
干预的可行性
大体时间:14天
|
将对干预的可行性进行定量评估。 这些是目标:
实现所有这些目标将证明进行全面的随机对照试验(RCT)是可行的,而实现三个目标中的两个则表明它可能是可行的。 实现少于两个目标将表明使用当前程序进行全面的 RCT 是不可行的。 |
14天
|
|
干预的可接受性
大体时间:干预后(14 天)
|
干预的可接受性通过干预后学习者满意度调查进行定量测量,并通过半结构化访谈进行定性测量。
|
干预后(14 天)
|
次要结果测量
结果测量 |
措施说明 |
大体时间 |
|---|---|---|
|
提高手术知识
大体时间:干预前后(14 天)
|
将比较干预前和干预后测验的分数。
这些关于内分泌外科的测验将由两名获得委员会认证的普通外科医生和一名内分泌学家起草。
所有问题也将由研究团队验证。
然而,应该指出的是,研究的力量不足以确定对照组和干预组在提高手术知识方面的比较效果。
因此,将主要进行分析以确定任何潜在的不利影响和增加每组内的手术知识,其次是组间。
这将使用 95% 的置信区间和 0.2 的小效果来完成。
|
干预前后(14 天)
|
|
参与者满意度
大体时间:干预后(14 天)
|
所有参与者还将完成一项干预后学习者满意度调查,该调查采用李克特量表的形式,该量表改编自系统可用性调查 (SUS)(布鲁克等人,1996 年)和学生教育质量评估 (SEEQ) 问卷。
该调查将评估干预组的学生是否比对照组的学生对他们的经历更满意。
|
干预后(14 天)
|
|
保留手术知识
大体时间:干预后 14 天
|
再过 14 天后,参与者将参加后续知识测试,该测试再次由 20 道关于内分泌手术的 MCQ 组成,持续时间超过 30 分钟。
此时,控制组和干预组的参与者将无法再访问学习平台。
后续测试的难度级别将与之前描述的干预后测试的难度级别相似。
测试分数(干预后和后续)的差异将表明参与者保留了手术知识。
|
干预后 14 天
|
合作者和调查者
调查人员
- 首席研究员:Clement, Luck Khng Chia, MBBS, MS、Department of General Surgery, Khoo Teck Puat Hospital, Singapore
- 首席研究员:Lorainne Tudor Car, MBBS, PhD、Lee Kong Chian School of Medicine, Nanyang Technological University, Singapore
出版物和有用的链接
一般刊物
- Douthit NT, Norcini J, Mazuz K, Alkan M, Feuerstein MT, Clarfield AM, Dwolatzky T, Solomonov E, Waksman I, Biswas S. Assessment of Global Health Education: The Role of Multiple-Choice Questions. Front Public Health. 2021 Jul 22;9:640204. doi: 10.3389/fpubh.2021.640204. eCollection 2021.
- St-Onge C, Young M, Renaud JS, Cummings BA, Drescher O, Varpio L. Sound Practices: An Exploratory Study of Building and Monitoring Multiple-Choice Exams at Canadian Undergraduate Medical Education Programs. Acad Med. 2021 Feb 1;96(2):271-277. doi: 10.1097/ACM.0000000000003659.
- Ryan A, Judd T, Swanson D, Larsen DP, Elliott S, Tzanetos K, Kulasegaram K. Beyond right or wrong: More effective feedback for formative multiple-choice tests. Perspect Med Educ. 2020 Oct;9(5):307-313. doi: 10.1007/s40037-020-00606-z.
- Yang BW, Razo J, Persky AM. Using Testing as a Learning Tool. Am J Pharm Educ. 2019 Nov;83(9):7324. doi: 10.5688/ajpe7324.
- Roediger HL, Karpicke JD. Test-enhanced learning: taking memory tests improves long-term retention. Psychol Sci. 2006 Mar;17(3):249-55. doi: 10.1111/j.1467-9280.2006.01693.x.
- Larsen DP, Butler AC, Roediger HL 3rd. Test-enhanced learning in medical education. Med Educ. 2008 Oct;42(10):959-66. doi: 10.1111/j.1365-2923.2008.03124.x.
- Jud SM, Cupisti S, Frobenius W, Winkler A, Schultheis F, Antoniadis S, Beckmann MW, Heindl F. Introducing multiple-choice questions to promote learning for medical students: effect on exam performance in obstetrics and gynecology. Arch Gynecol Obstet. 2020 Dec;302(6):1401-1406. doi: 10.1007/s00404-020-05758-1. Epub 2020 Aug 31. Erratum In: Arch Gynecol Obstet. 2021 Dec;304(6):1627.
- Ayyub A, Mahboob U. Effectiveness of Test-Enhanced Learning (TEL) in lectures for undergraduate medical students. Pak J Med Sci. 2017 Nov-Dec;33(6):1339-1343. doi: 10.12669/pjms.336.13358.
- Green ML, Moeller JJ, Spak JM. Test-enhanced learning in health professions education: A systematic review: BEME Guide No. 48. Med Teach. 2018 Apr;40(4):337-350. doi: 10.1080/0142159X.2018.1430354. Epub 2018 Feb 1. Erratum In: Med Teach. 2022 Jun;44(6):I.
- Pei L, Wu H. Does online learning work better than offline learning in undergraduate medical education? A systematic review and meta-analysis. Med Educ Online. 2019 Dec;24(1):1666538. doi: 10.1080/10872981.2019.1666538.
- Vaona A, Banzi R, Kwag KH, Rigon G, Cereda D, Pecoraro V, Tramacere I, Moja L. E-learning for health professionals. Cochrane Database Syst Rev. 2018 Jan 21;1(1):CD011736. doi: 10.1002/14651858.CD011736.pub2.
- Brame CJ, Biel R. Test-enhanced learning: the potential for testing to promote greater learning in undergraduate science courses. CBE Life Sci Educ. 2015 Summer;14(2):14:es4. doi: 10.1187/cbe.14-11-0208.
- Mitra NK, Barua A. Effect of online formative assessment on summative performance in integrated musculoskeletal system module. BMC Med Educ. 2015 Mar 3;15:29. doi: 10.1186/s12909-015-0318-1.
- Orr R, Foster S. Increasing student success using online quizzing in introductory (majors) biology. CBE Life Sci Educ. 2013 Fall;12(3):509-14. doi: 10.1187/cbe.12-10-0183.
- Kibble J. Use of unsupervised online quizzes as formative assessment in a medical physiology course: effects of incentives on student participation and performance. Adv Physiol Educ. 2007 Sep;31(3):253-60. doi: 10.1152/advan.00027.2007.
- van Gaalen AEJ, Brouwer J, Schonrock-Adema J, Bouwkamp-Timmer T, Jaarsma ADC, Georgiadis JR. Gamification of health professions education: a systematic review. Adv Health Sci Educ Theory Pract. 2021 May;26(2):683-711. doi: 10.1007/s10459-020-10000-3. Epub 2020 Oct 31.
- Gentry SV, Gauthier A, L'Estrade Ehrstrom B, Wortley D, Lilienthal A, Tudor Car L, Dauwels-Okutsu S, Nikolaou CK, Zary N, Campbell J, Car J. Serious Gaming and Gamification Education in Health Professions: Systematic Review. J Med Internet Res. 2019 Mar 28;21(3):e12994. doi: 10.2196/12994.
- Nevin CR, Westfall AO, Rodriguez JM, Dempsey DM, Cherrington A, Roy B, Patel M, Willig JH. Gamification as a tool for enhancing graduate medical education. Postgrad Med J. 2014 Dec;90(1070):685-93. doi: 10.1136/postgradmedj-2013-132486. Epub 2014 Oct 28.
- Coleman E, O'Connor E. The role of WhatsApp(R) in medical education; a scoping review and instructional design model. BMC Med Educ. 2019 Jul 25;19(1):279. doi: 10.1186/s12909-019-1706-8.
- Bakshi SG, Bhawalkar P. Role of WhatsApp-based discussions in improving residents' knowledge of post-operative pain management: a pilot study. Korean J Anesthesiol. 2017 Oct;70(5):542-549. doi: 10.4097/kjae.2017.70.5.542. Epub 2017 May 19.
- Blumenfeld O, Brand R. Real time medical learning using the WhatsApp cellular network: a cross sectional study following the experience of a division's medical officers in the Israel Defense Forces. Disaster Mil Med. 2016 Aug 9;2:12. doi: 10.1186/s40696-016-0022-7. eCollection 2016.
- Alhalabi N, Salloum R, Aless A, Darjazini Nahas L, Ibrahim N. Messaging apps use in undergraduate medical education: The case of National Medical Unified Examination. Ann Med Surg (Lond). 2021 Jun 5;66:102465. doi: 10.1016/j.amsu.2021.102465. eCollection 2021 Jun.
- Iqbal MZ, Alradhi HI, Alhumaidi AA, Alshaikh KH, AlObaid AM, Alhashim MT, AlSheikh MH. Telegram as a Tool to Supplement Online Medical Education During COVID-19 Crisis. Acta Inform Med. 2020 Jun;28(2):94-97. doi: 10.5455/aim.2020.28.94-97.
- Skivington K, Matthews L, Simpson SA, Craig P, Baird J, Blazeby JM, Boyd KA, Craig N, French DP, McIntosh E, Petticrew M, Rycroft-Malone J, White M, Moore L. A new framework for developing and evaluating complex interventions: update of Medical Research Council guidance. BMJ. 2021 Sep 30;374:n2061. doi: 10.1136/bmj.n2061.
- Blanie A, Amorim MA, Benhamou D. Comparative value of a simulation by gaming and a traditional teaching method to improve clinical reasoning skills necessary to detect patient deterioration: a randomized study in nursing students. BMC Med Educ. 2020 Feb 19;20(1):53. doi: 10.1186/s12909-020-1939-6.
- Plana NM, Rifkin WJ, Kantar RS, David JA, Maliha SG, Farber SJ, Staffenberg DA, Grayson BH, Diaz-Siso JR, Flores RL. A Prospective, Randomized, Blinded Trial Comparing Digital Simulation to Textbook for Cleft Surgery Education. Plast Reconstr Surg. 2019 Jan;143(1):202-209. doi: 10.1097/PRS.0000000000005093.
- Bell ML, Whitehead AL, Julious SA. Guidance for using pilot studies to inform the design of intervention trials with continuous outcomes. Clin Epidemiol. 2018 Jan 18;10:153-157. doi: 10.2147/CLEP.S146397. eCollection 2018.
- Whitehead AL, Julious SA, Cooper CL, Campbell MJ. Estimating the sample size for a pilot randomised trial to minimise the overall trial sample size for the external pilot and main trial for a continuous outcome variable. Stat Methods Med Res. 2016 Jun;25(3):1057-73. doi: 10.1177/0962280215588241. Epub 2015 Jun 19.
- Tuma F, Nassar AK. Applying Bloom's taxonomy in clinical surgery: Practical examples. Ann Med Surg (Lond). 2021 Aug 5;69:102656. doi: 10.1016/j.amsu.2021.102656. eCollection 2021 Sep.
有用的网址
- Johnson G. Optional online quizzes: College student use and relationship to achievement. Canadian Journal of Learning and Technology/La revue canadienne de l'apprentissage et de la technologie 2006;32
- Deterding S, Khaled R, Nacke LE. Gamification: Toward a definition. CHI 2011 gamification Published Online First: 2011.
- Morillas Barrio C, Munoz-Organero M, Sanchez Soriano J. Can gamification improve the benefits of student response systems in learning? An experimental study. IEEE Trans Emerg Top Comput 2016;4:429-38.
- Licorish SA, Owen HE, Daniel B, et al. Students' perception of Kahoot!'s influence on teaching and learning. Research and Practice in Technology Enhanced Learning 2018;13:1-23.
- Gon S, Rawekar A. Effectivity of E-Learning through Whatsapp as a Teaching Learning Tool. MVP Journal of Medical Sciences 2017;4:19-25.
- Top Apps Worldwide for January 2021 by Downloads. (accessed 23 May 2022)
- Most popular messaging apps. Statista. (accessed 23 May 2022).
- Brooke J. Sus: a 'quick and dirty' usability scale. Usability evaluation in industry Published Online First: 1996.
- Soon MKS, Martinengo L, Lu J, et al. Telegram Education for Surgical Learning and Application (TESLA): An exploratory study. JMIR Preprints. 2021.
- Sauro J, Lewis JR. Quantifying the User Experience: Practical Statistics for User Research. Morgan Kaufmann 2016.
- Grammatikopoulos V, Linardakis M, Gregoriadis A, et al. Assessing the Students' Evaluations of Educational Quality (SEEQ) questionnaire in Greek higher education. High Educ 2015;70:395-408.
- Orgill BD, Nolin J. Learning Taxonomies in Medical Simulation. In: StatPearls. Treasure Island (FL): : StatPearls Publishing 2022.
- Krathwohl DR. A Revision of Bloom's Taxonomy: An Overview. Theory Pract 2002;41:212-8.
- Coffey M, Gibbs G. The Evaluation of the Student Evaluation of Educational Quality Questionnaire (SEEQ) in UK Higher Education. Assessment & Evaluation in Higher Education 2001;26:89-93.
研究记录日期
研究主要日期
学习开始 (预期的)
初级完成 (预期的)
研究完成 (预期的)
研究注册日期
首次提交
首先提交符合 QC 标准的
首次发布 (实际的)
研究记录更新
最后更新发布 (实际的)
上次提交的符合 QC 标准的更新
最后验证
更多信息
此信息直接从 clinicaltrials.gov 网站检索,没有任何更改。如果您有任何更改、删除或更新研究详细信息的请求,请联系 register@clinicaltrials.gov. clinicaltrials.gov 上实施更改,我们的网站上也会自动更新.