大規模な言語モデルを使用した診断症例に対する医師の推論
大規模言語モデルのチャット ボットを使用した診断推論
調査の概要
詳細な説明
人工知能 (AI) テクノロジー、特に OpenAI の ChatGPT のような高度な大規模言語モデルには、医療上の意思決定を改善する可能性があります。 ChatGPT-4 は、医療特有のアプリケーションでの使用を目的として開発されたものではありませんが、医療メモの作成、患者の問い合わせへの対応、医療相談の促進など、さまざまな医療の状況で期待できることが実証されています。 ただし、ChatGPT が臨床医の臨床推論能力をどのように強化するかについてはほとんど知られていません。
臨床推論は、パターン認識、知識の適用、確率的推論を含む複雑なプロセスです。 ChatGPT-4 のような AI ツールを医師のワークフローに統合すると、臨床医の作業負荷が軽減され、診断が見逃される可能性が減少する可能性があります。 ただし、ChatGPT-4 は臨床推論を目的として開発されたものではなく、この目的での検証も行われていません。 さらに、臨床医に誤解を与える可能性のある説得力のある作話などの偽情報の影響を受ける可能性があります。 臨床医がこのツールを誤用すると、診断推論が改善されず、害を及ぼす可能性さえあります。 したがって、患者ケアに日常的に組み込む前に、臨床医が大規模な言語モデルを使用して臨床推論を強化する方法を研究することが重要です。
この研究では、ChatGPT-4 へのアクセスの有無にかかわらず、参加者をランダムに診断ケースに回答させます。 参加者は、各症例について 3 つの鑑別診断を行うよう求められ、各診断の裏付けとなる所見と反対の所見も示されます。 さらに、次の診断ステップとともに、最も重要な診断を提供するよう求められます。 回答は、治療の割り当てを知らされていない独立した査読者によって採点されます。
研究の種類
入学 (実際)
段階
- 適用できない
連絡先と場所
研究場所
-
-
California
-
Palo Alto、California、アメリカ、94304
- Stanford University
-
-
参加基準
適格基準
就学可能な年齢
- 子
- 大人
- 高齢者
健康ボランティアの受け入れ
説明
包含基準:
- 参加者は医師免許を持ち、少なくとも卒業後 2 年目 (PGY2) の医療訓練を完了している必要があります。
- 内科、家庭医学、救急医療の研修。
除外基準:
- 現在臨床活動は行っておりません。
研究計画
研究はどのように設計されていますか？
デザインの詳細
- 主な目的：診断
- 割り当て：ランダム化
- 介入モデル：並列代入
- マスキング：独身
武器と介入
参加者グループ / アーム |
介入・治療 |
|---|---|
|
アクティブコンパレータ：GPT-4
グループには GPT-4 へのアクセスが与えられます。
|
チャット インターフェイスを備えた OpenAI の GPT-4 大型言語モデル。
|
|
介入なし：通常のリソース
グループには GPT-4 へのアクセス権は与えられませんが、大規模な言語モデル (UpToDate、Dynamed、google など) 以外に希望するリソースを使用することが奨励されます。
|
この研究は何を測定していますか？
主要な結果の測定
結果測定 |
メジャーの説明 |
時間枠 |
|---|---|---|
|
診断推論
時間枠：評価中
|
主な結果は、各ケースの正解率 (範囲: 0 ～ 100) になります。
各症例について、参加者は、その診断を支持するものとその診断に反対するもののうち、上位 3 つの診断と症例の所見を尋ねられます。
参加者は、もっともらしい診断ごとに 1 ポイントを受け取ります。
診断を裏付ける所見と診断に反対する所見も、正しさに基づいて評価され、部分的に正しい場合は 1 ポイント、完全に正しい場合は 2 ポイントとなります。
次に、参加者は最も上位の診断名を尋ねられ、妥当な回答で 1 ポイント、最も正しい回答で 2 ポイントを獲得します。
最後に、参加者は患者をさらに評価するための次のステップを 3 つまで挙げるよう求められ、部分的に正しい応答には 1 ポイントが与えられ、完全に正しい応答には 2 ポイントが与えられます。
主要結果は、ランダム化されたグループによって症例レベルで比較されます。
|
評価中
|
二次結果の測定
結果測定 |
メジャーの説明 |
時間枠 |
|---|---|---|
|
診断に費やした時間
時間枠：評価中
|
2 つの研究部門間で、参加者が 1 件あたりに費やす時間 (分単位) を比較します。
|
評価中
|
協力者と研究者
スポンサー
捜査官
- 主任研究者：Jonathan H Chen, MD, PhD、Stanford University
- 主任研究者：Adam Rodman, MD、Beth Israel Deaconess Medical Center
- 主任研究者：Andrew Olson, MD、University of Minnesota
研究記録日
主要日程の研究
研究開始 (実際)
一次修了 (実際)
研究の完了 (実際)
試験登録日
最初に提出
QC基準を満たした最初の提出物
最初の投稿 (実際)
学習記録の更新
投稿された最後の更新 (実際)
QC基準を満たした最後の更新が送信されました
最終確認日
詳しくは
本研究に関する用語
個々の参加者データ (IPD) の計画
個々の参加者データ (IPD) を共有する予定はありますか?
医薬品およびデバイス情報、研究文書
米国FDA規制医薬品の研究
米国FDA規制機器製品の研究
この情報は、Web サイト clinicaltrials.gov から変更なしで直接取得したものです。研究の詳細を変更、削除、または更新するリクエストがある場合は、register@clinicaltrials.gov。 までご連絡ください。 clinicaltrials.gov に変更が加えられるとすぐに、ウェブサイトでも自動的に更新されます。