电话听众反馈系统辅助口腔本科生正畸教学 (PBAR)

设计：

该试验被设计为交叉集群随机对照试验（每个组都是一个集群），因此每个组都作为他们自己的知识保留和感知的对照。

设置和同意：牙科学院，萨塔姆本阿卜杜勒阿齐兹王子大学/Alkharj/沙特阿拉伯。 在开始追踪之前，已获得学生的书面同意。

参与者：试验队列包括整个四年级本科生（34 名本科牙科学生），以消除选择偏差。 本研究的参与者之前没有接受过正畸教学，因此，预计不会出现与任何正畸领域知识增加相关的偏见。

随机化：使用计算机生成的随机化将学生分配到两个偶数组（G1 或 G2）中的一个。 每组（G1 和 G2）由 17 名平均年龄为（23.27 岁±0.86）的男学生组成。

干涉 ：

讲座：G1和G2同时参加了两场讲座（L1&L2）：L1的题目是“III类咬合不正的管理”，L2的题目是“开合和反合的管理”。 两次讲座均在 Prince Sattam Bin Abdulaziz 牙科学院的主校区进行，并且在各个方面都以相同的方式进行，包括：

• PowerPoint 演示文稿（Microsoft Corp，华盛顿州雷德蒙德）
• 两次讲座均由同一位注册专科正畸医生 (FA) 授课，
• 授课（T1 和 T2）的学习成果基于沙特阿拉伯国家学术认证和评估委员会规定的教学成果，以及
• 两个讲座在同一时间段内进行。 在讲课之前，学生们被指示注册观众反应系统 (ARS) 并下载其应用程序（Poll Everywhere，旧金山，加利福尼亚州，美国，https://www.polleverywhere.com）。 讲座时没有智能手机的学生可以使用额外的智能手机。 直到第一堂课开始，学生们才知道他们的分配。

在演讲厅，G1 和 G2 分开，两组在讲座前都完成了对满分 20 分的书面多项选择题 (MCQ) 的评估。 在 L1 期间，基于电话（ARS）的问题（PB-ARS）秘密显示在 G1 学生的智能手机上，允许他们阅读问题并回答，而平行试验组（G2）的学生则对这些问题和答案视而不见。 在 L1 结束时，两组都完成了相同的书面 MCQ 评估。 一周后的 L2 期间进行了类似的协议，不同的是组是交叉的，因此，上周参加过 ARS 综合讲座的小组已经参加了非 ARS 综合讲座，反之亦然。

形成性考试：

MCQ 的形成性测试包括 20 个与 L1 和 L2 期间教授的主题相关的问题。 为了减少遗留效应，PB-ARS 上课时的问题与 MCQs 表不相似。 使用的 MCQ 在作者之间进行了试点，以确保其内容的有效性和可靠性。 使用测试矩阵和专家判断来测试内容有效性。 测试信度是使用评分者间信度来估计的，超过 0.7 的相关性被认为是可以接受的。

总结性考试：

两组都参加了他们最后的书面总结性考试。 L1 在期末考试前 11 周进行，而 L2 在考试前 10 周进行。 期末考试采用 MCQ 格式，包括当年第二学期教授的所有科目的问题，包括与 L1 和 L2 教授的科目相关的五个问题。 所有学生的试题都是相同的，并且在受控条件下同时进行。 未能参加期末总结考试的学生被排除在外，以减少时间因素作为混杂因素的影响。 所有学生在 TL1 和 TL2 相关问题上的期末考试成绩均由独立导师使用 Excel 表格匿名整理，以减少报告偏差。 与 L1 和 L2 中教授的科目相关的五个问题的最高得分为 5。

学生感悟：

在 L1 结束时，两组都被要求填写一份关于他们在讲座中的经历的问卷，干预组的参与者被问及关于他们在 PA-ARS 中的经历的具体问题。 使用的问卷是以前使用的问卷的修改版本，用于评估学生在最近的试验中使用 ARS 的经验。 每次讲座（L1、L2）后，学生的回答都保存在 Excel 表格中。

结果分析：

每次测试后，学生的分数都保存在 Excel 表格中。 使用专门的统计分析软件（IBM SPSS statistics 22，第 22 版）。统计学家对分配组不知情。 使用交叉分析对分数进行分析和比较以评估知识保留，Mann-Whitney U 检验用于课前和课后测验，t 检验用于总结性测试。