치과대학 학부생의 교정교육 보조장치로서의 전화 기반 청중 반응 시스템 (PBAR)

설계:

시험은 각 그룹이 자신의 지식 보유 및 인식에 대한 자체 통제 역할을 하도록 크로스오버 군집 무작위 통제 시험(각 그룹은 클러스터임)으로 설계되었습니다.

설정 및 동의: Prince Sattam Bin Abdulaziz University/Alkharj/ Saudi Arabia 치과 대학. 트레일을 시작하기 전에 학생들로부터 서면 동의를 얻었습니다.

대상자 : 코호트는 선택 편향을 제거하기 위해 학부 4학년 전체(34명의 치대생)를 포함하였다. 이 연구의 참가자는 이전에 교정 교육을 받은 적이 없었으므로 교정 분야의 지식 증가와 관련된 편견이 예상되지 않았습니다.

무작위화: 학생들은 컴퓨터 생성 무작위화를 사용하여 두 짝수 그룹(G1 또는 G2) 중 하나에 할당되었습니다. 각 그룹(G1 및 G2)은 평균 연령(23.27세 ± 0.86)의 남학생 ​​17명으로 구성되었습니다.

간섭 :

강의 : G1과 G2는 동시에 2개의 강의(L1&L2)에 참석했습니다. L1은 "3급 부정교합 관리", L2는 "개교합 및 반대교합 관리"였습니다. 두 강의 모두 Prince Sattam Bin Abdulaziz College of Dentistry의 메인 캠퍼스에서 진행되었으며 다음을 포함한 모든 측면에서 동일한 방식으로 진행되었습니다.

• PowerPoint 프레젠테이션(Microsoft Corp, Redmond, WA)
• 두 강의 모두 동일한 공인교정전문의(FA)에 의해 진행되었으며,
• 전달된 강의(T1 및 T2)의 학습 결과는 사우디아라비아 국가학술인증평가위원회(National Commission for Academic Accreditation and Assessment in Saudi Arabia)에서 지정한 교육 결과를 기반으로 합니다.
• 두 강의 모두 같은 시간에 진행되었습니다. 강의에 앞서 학생들은 청중 응답 시스템(ARS)에 등록하고 응용 프로그램을 다운로드하도록 지시 받았습니다(Poll Everywhere, San Francisco, California, USA, https://www.poleverywhere.com). 강의 시간에 스마트폰이 없는 학생들을 위해 스마트폰을 추가로 제공했습니다. 학생들은 첫 강의가 시작될 때까지 자신의 할당량을 알지 못했다.

강의실에서는 G1과 G2가 분리되어 강의 전에 두 그룹 모두 20점 만점의 필기 객관식 문제(MCQ) 평가를 완료했습니다. L1 동안 전화 기반(ARS) 질문(PB-ARS)은 G1 학생들의 스마트폰에 비밀리에 표시되어 질문을 읽고 대답할 수 있도록 허용되었으며, 시험(G2)의 병렬 팔은 그 질문과 대답에 눈이 멀었습니다. L1 종료 시 두 그룹 모두 동일한 서면 MCQ 평가를 완료했습니다. 일주일 후 L2에서도 유사한 프로토콜이 수행되었지만 그룹이 교차되어 지난주에 ARS 통합 강의를 들은 그룹은 비 ARS 통합 강의를 받았고 그 반대의 경우도 마찬가지였습니다.

형성 시험:

MCQ의 형성 테스트는 L1 및 L2 동안 배운 주제와 관련된 20개의 질문으로 구성되었습니다. 이월 효과를 줄이기 위해 강의 중 PB-ARS 질문은 MCQs 시트와 유사하지 않았습니다. 사용된 MCQ는 콘텐츠 타당성과 신뢰성을 보장하기 위해 작성자 간에 파일럿 테스트를 거쳤습니다. 내용 타당도는 테스트 매트릭스와 전문가 판단을 사용하여 테스트되었습니다. 검사 신뢰도는 평가자간 신뢰도를 이용하여 추정하였으며, 상관관계가 0.7 이상이면 수용 가능한 것으로 판단하였다.

종합 시험:

두 그룹 모두 최종 필기 총괄 시험에 참석했습니다. L1은 최종 시험 11주 전에, L2는 시험 10주 전에 수행되었습니다. 최종 시험은 MCQ 형식으로 진행되었으며 L1 및 L2에서 가르치는 과목과 관련된 5개의 질문을 포함하여 올해 2학기에 가르치는 모든 과목의 질문이 포함되었습니다. 시험 문제는 모든 학생에게 동일했으며 통제된 조건에서 동시에 전달되었습니다. 교란요인인 시간요인의 영향을 줄이기 위해 기말고사에 불참한 학생은 제외하였다. TL1 및 TL2와 관련된 질문에 대한 모든 학생의 최종 시험 점수는 보고 편향을 줄이기 위해 독립적인 튜터가 엑셀 시트를 사용하여 익명으로 수집했습니다. L1 및 L2에서 가르치는 과목과 관련된 5개 질문에 대해 달성할 수 있는 최대 점수는 5점이었습니다.

학생들의 인식:

L1이 끝날 때 두 그룹 모두 강의 경험에 관한 설문지를 작성하도록 요청받았고 중재 그룹 참가자에게는 PA-ARS 경험에 대한 구체적인 질문이 주어졌습니다. 사용된 설문지는 최근 시험에서 학생의 ARS 경험을 평가하기 위해 이전에 사용된 설문지에서 수정된 버전입니다. 학생들의 응답은 각 강의(L1, L2) 후에 엑셀 시트에 저장되었습니다.

결과 분석:

학생들의 점수는 각 시험 후 엑셀 시트에 저장되었습니다. 특수 통계 분석 소프트웨어(IBM SPSS 통계 22, 버전 22)가 사용되었습니다. 통계학자는 할당 그룹에 대해 눈이 멀었습니다. 강의 전후 퀴즈에 대한 Mann-Whitney U 테스트와 요약 테스트에 대한 t-테스트를 ​​사용한 교차 분석을 사용하여 지식 보유를 평가하기 위해 점수를 분석하고 비교했습니다.