シミュレーショントレーニングにおける人工知能指導システムの有効性
外科教育における仮想手術アシスタントと専門家ベースの指導の比較: 無作為化対照試験
簡単な要約:
バックグラウンド:
手術経験と技術的スキルは患者の転帰の改善に関連していますが、手術室での手術能力を定量化することは困難です。 外科教育では、忠実度の高い仮想現実シミュレーターによって生成された大規模なデータセットを機械学習アルゴリズムで使用して、専門家のベンチマークで研修生のパフォーマンスと能力を客観的に測定できます。 これにより、安全でリスクのない環境で外科的スキルの反復練習が可能になり、即時のフィードバックが得られます。
私たちのグループは、Virtual Operative Assistant (VOA) と呼ばれるインテリジェントな個別指導システムを開発し、特許出願中です。 VOA は、人工知能 (AI) サポート ベクター マシン アルゴリズムを利用して、NeuroVR (CAE Healthcare) シミュレーター プラットフォームから得られたデータを評価し、個別の視聴覚フィードバックを提供して、シミュレートされた脳腫瘍切除中の学習者のパフォーマンスを向上させます。 人間の外科見習い教育への VOA などのインテリジェントな個人指導システムの有効性は、まだ解明されていません。
この研究の目的は、パーソナライズされた VOA フィードバックの有効性と教育的影響を、医学生の仮想現実腫瘍切除手順の技術的スキル学習に関する専門家の指導と比較することです。
具体的な目的: 1) 個別化された VOA フィードバックを受け取った医学生が、(a) 専門のインストラクターからのフィードバックを受けていない学生、または (b) 専門のインストラクターによるフィードバックを受けた学生と比較して、手術成績が統計的に改善されているかどうかを評価すること。 2) 人間の指導と比較して、この達成課題を実行する際に、医学生の VOA インテリジェント チュータリング システムによって異なる感情が誘発されるかどうかを概説する。
調査の概要
詳細な説明
設計: VOA トレーニングと遠隔ベースの専門家による指導と対照の 3 アーム部分盲検ランダム化比較試験。
設定: モントリオール神経学研究所の脳神経外科シミュレーションおよび人工知能学習センター。
参加者: ケベック州全体からの適格な 1 年生と 2 年生の医学生。
タスク: NeuroVR (CAE Healthcare) 手術シミュレーターの 2 つの手術器具 (Cavitron Ultrasonic Aspirator と Bipolar ピンサー) を使用して、シミュレートされた腫瘍 (色と触覚特性で区別可能) を完全に除去し、出血と周囲の健康な脳への損傷を最小限に抑えます。
介入: 6 回の仮想軟膜下腫瘍切除の試み (5 つの単純な実践シナリオと 1 つの複雑で現実的なシナリオ) を含む 1 回の 75 分間のトレーニング セッションで、次のいずれかからの評価とフィードバックが行われます。
- VOA インテリジェント チューター システム (グループ 2) または
リモートベースの専門インストラクター (グループ 3)
両方と比較:
- 評価またはパフォーマンス フィードバックを受信しないコントロール グループ (グループ 1)。
私たちの知る限り、これは、AI を利用したインテリジェントな個人指導システムの有効性を、医療および外科手術の仮想現実シミュレーションのコンテキストで専門家の指導と比較し、そのような指導に対する感情的な反応を評価する最初の研究です。 この研究の目的は、この革新的な技術を医学教育カリキュラムで使用し、外科医やその他の医療提供者の安全性、効率性、能力を高めることで患者の転帰を改善するための成功したアプローチを特定することです。
研究の種類
入学 (実際)
段階
- 適用できない
連絡先と場所
研究場所
-
-
Quebec
-
Montreal、Quebec、カナダ、H3A 2B4
- Neurosurgical Simulation and Artificial Intelligence Learning Centre
-
-
参加基準
適格基準
就学可能な年齢
- 子
- 大人
- 高齢者
健康ボランティアの受け入れ
受講資格のある性別
説明
包含基準: • 除外基準を満たさないカナダの機関の 1 年生および 2 年生の医学生。
-
除外基準: • NeuroVR (CAE ヘルスケア) シミュレーターを含む、当社グループの以前の試験のいずれかに参加している。
-
研究計画
研究はどのように設計されていますか?
デザインの詳細
- 主な目的:ヘルスサービス研究
- 割り当て:ランダム化
- 介入モデル:並列代入
- マスキング:ダブル
武器と介入
参加者グループ / アーム |
介入・治療 |
|---|---|
|
介入なし:対照群
コントロール グループ - ベースライン トレーニング 25名の参加者が割り当てられました。 個人は、シミュレーターとシナリオの使用に関する入門情報を受け取ります。 彼らは練習のために 5 つの簡単な軟膜下腫瘍切除を行い、1 回の試行に 5 分間かかります。 各試行の後、生徒はパフォーマンスに関する評価やフィードバックなしで 5 分間の休憩を取ります。 6 回目の試行では、13 分間で別の現実的なシナリオを実行します。 |
|
|
実験的:実験グループ - 仮想手術支援トレーニング
実験グループ - 仮想手術支援トレーニング 25名の参加者が割り当てられました。 個人は、対照群と同じ情報を受け取り、同じ時間を持ち、同じシナリオを実行します。 試行間の 5 分間に、参加者はパフォーマンスの仮想手術支援トレーニング評価と視聴覚フィードバックを受け取ります。 |
個人は、対照群と同じ基本情報を受け取り、同じ時間を持ち、同じシナリオを実行します。
試行間の 5 分間に、参加者は仮想手術アシスタントのパフォーマンス評価と視聴覚フィードバックを受け取ります。
|
|
実験的:実験グループ - リモートベースのエキスパート インストラクター トレーニング
25名の参加者が割り当てられました。
個人は、対照群と同じ情報を受け取り、同じ時間を持ち、同じシナリオを実行します。
一方、トレーニングを受けたインストラクターは、参加者の画面上のパフォーマンスをライブ ストリーミングでリモートで観察します。
インストラクターは、このシナリオの実行と評価に豊富な経験を持つ上級脳神経外科レジデントです。
5 分間のフィードバック セッションでは、生徒とチャットし、パフォーマンスについて話し合い、次のトライアルの目標設定に役立てます。
|
個人は、対照群と同じ情報を受け取り、同じ時間を持ち、同じシナリオを実行します。
一方、トレーニングを受けたインストラクターは、参加者の画面上のパフォーマンスをライブ ストリーミングでリモートで観察します。
インストラクターは、このシナリオの実行と評価に豊富な経験を持つ上級脳神経外科レジデントです。
5 分間のフィードバック セッションでは、生徒とチャットし、パフォーマンスについて話し合い、次のトライアルの目標設定に役立てます。
|
この研究は何を測定していますか?
主要な結果の測定
結果測定 |
メジャーの説明 |
時間枠 |
|---|---|---|
|
手続き上のパフォーマンスの変化。
時間枠:勉強の日
|
各練習試行のパフォーマンスは、検証済みの指標で以前に確立された AI アルゴリズムによる評価に使用されるシミュレーターからの生データを使用して測定されます。
|
勉強の日
|
|
学びの変化
時間枠:勉強の日
|
複雑で現実的なシナリオでのパフォーマンスは、技術スキルの客観的構造化評価 (OSATS) の視覚的評価尺度 (50% で加重) と AI 評価アルゴリズム (50% で加重) を使用して専門のインストラクターによって評価され、複合パフォーマンス スコアが作成されます。
|
勉強の日
|
二次結果の測定
結果測定 |
メジャーの説明 |
時間枠 |
|---|---|---|
|
引き出す感情の強さの違い
時間枠:勉強の日
|
介入前、介入中、介入後に、Duffy's Medical Emotions Scale (MES) を使用して測定。
|
勉強の日
|
|
認知負荷の違い
時間枠:勉強の日
|
介入後、Leppink の認知負荷指数 (CLI) を使用して測定。
|
勉強の日
|
協力者と研究者
スポンサー
出版物と役立つリンク
一般刊行物
- Stulberg JJ, Huang R, Kreutzer L, Ban K, Champagne BJ, Steele SR, Johnson JK, Holl JL, Greenberg CC, Bilimoria KY. Association Between Surgeon Technical Skills and Patient Outcomes. JAMA Surg. 2020 Oct 1;155(10):960-968. doi: 10.1001/jamasurg.2020.3007. Erratum In: JAMA Surg. 2020 Oct 1;155(10):1002. JAMA Surg. 2021 Jul 1;156(7):694.
- Birkmeyer JD, Finks JF, O'Reilly A, Oerline M, Carlin AM, Nunn AR, Dimick J, Banerjee M, Birkmeyer NJ; Michigan Bariatric Surgery Collaborative. Surgical skill and complication rates after bariatric surgery. N Engl J Med. 2013 Oct 10;369(15):1434-42. doi: 10.1056/NEJMsa1300625.
- Birkmeyer JD, Stukel TA, Siewers AE, Goodney PP, Wennberg DE, Lucas FL. Surgeon volume and operative mortality in the United States. N Engl J Med. 2003 Nov 27;349(22):2117-27. doi: 10.1056/NEJMsa035205.
- Winkler-Schwartz A, Yilmaz R, Mirchi N, Bissonnette V, Ledwos N, Siyar S, Azarnoush H, Karlik B, Del Maestro R. Machine Learning Identification of Surgical and Operative Factors Associated With Surgical Expertise in Virtual Reality Simulation. JAMA Netw Open. 2019 Aug 2;2(8):e198363. doi: 10.1001/jamanetworkopen.2019.8363.
- Mirchi N, Bissonnette V, Yilmaz R, Ledwos N, Winkler-Schwartz A, Del Maestro RF. The Virtual Operative Assistant: An explainable artificial intelligence tool for simulation-based training in surgery and medicine. PLoS One. 2020 Feb 27;15(2):e0229596. doi: 10.1371/journal.pone.0229596. eCollection 2020.
- Winkler-Schwartz A, Marwa I, Bajunaid K, Mullah M, Alotaibi FE, Bugdadi A, Sawaya R, Sabbagh AJ, Del Maestro R. A Comparison of Visual Rating Scales and Simulated Virtual Reality Metrics in Neurosurgical Training: A Generalizability Theory Study. World Neurosurg. 2019 Jul;127:e230-e235. doi: 10.1016/j.wneu.2019.03.059. Epub 2019 Mar 15.
- Duffy, M.C., et al., Emotions in medical education: Examining the validity of the Medical Emotion Scale (MES) across authentic medical learning environments. Learning and Instruction, 2020. 70: p. 101150.
- Leppink J, Paas F, Van der Vleuten CP, Van Gog T, Van Merrienboer JJ. Development of an instrument for measuring different types of cognitive load. Behav Res Methods. 2013 Dec;45(4):1058-72. doi: 10.3758/s13428-013-0334-1.
- Fazlollahi AM, Bakhaidar M, Alsayegh A, Yilmaz R, Winkler-Schwartz A, Mirchi N, Langleben I, Ledwos N, Sabbagh AJ, Bajunaid K, Harley JM, Del Maestro RF. Effect of Artificial Intelligence Tutoring vs Expert Instruction on Learning Simulated Surgical Skills Among Medical Students: A Randomized Clinical Trial. JAMA Netw Open. 2022 Feb 1;5(2):e2149008. doi: 10.1001/jamanetworkopen.2021.49008.
研究記録日
主要日程の研究
研究開始 (実際)
一次修了 (実際)
研究の完了 (実際)
試験登録日
最初に提出
QC基準を満たした最初の提出物
最初の投稿 (実際)
学習記録の更新
投稿された最後の更新 (実際)
QC基準を満たした最後の更新が送信されました
最終確認日
詳しくは
本研究に関する用語
キーワード
その他の研究ID番号
- 2010-270, NEU-09-042
個々の参加者データ (IPD) の計画
個々の参加者データ (IPD) を共有する予定はありますか?
IPD プランの説明
IPD 共有時間枠
IPD 共有アクセス基準
IPD 共有サポート情報タイプ
- STUDY_PROTOCOL
- SAP
- ICF
- ANALYTIC_CODE
- CSR
医薬品およびデバイス情報、研究文書
米国FDA規制医薬品の研究
米国FDA規制機器製品の研究
この情報は、Web サイト clinicaltrials.gov から変更なしで直接取得したものです。研究の詳細を変更、削除、または更新するリクエストがある場合は、register@clinicaltrials.gov。 までご連絡ください。 clinicaltrials.gov に変更が加えられるとすぐに、ウェブサイトでも自動的に更新されます。
仮想手術アシスタントトレーニングの臨床試験
-
University of WashingtonNational Institute on Aging (NIA); Kaiser Permanente完了
-
Diakonhjemmet HospitalThe Dam Foundation; The Norwegian Council for Musculoskeletal Health積極的、募集していない