ローカルの大規模言語モデルを通じて眼科ノートの学際的な理解を強化する
ローカル大規模言語モデルを通じて眼科ノートの学際的な理解を強化する
調査の概要
研究の種類
入学 (実際)
段階
- 適用できない
連絡先と場所
研究場所
-
-
Minnesota
-
Rochester、Minnesota、アメリカ、55905
- Mayo Clinic
-
-
参加基準
適格基準
就学可能な年齢
- 大人
- 高齢者
健康ボランティアの受け入れ
説明
包含基準:
- ミネソタ州ロチェスターのメイヨークリニック眼科の眼科医による、2024年2月1日から2024年5月31日までの入院患者または外来患者による評価。
除外基準:
- ネットワーク内の眼科医以外のケア提供者が医療記録に存在しない
- 手順メモのみを含む手順のみの訪問
研究計画
研究はどのように設計されていますか？
デザインの詳細
- 主な目的：ヘルスサービス研究
- 割り当て：ランダム化
- 介入モデル：並列代入
- マスキング：なし（オープンラベル）
武器と介入
参加者グループ / アーム |
介入・治療 |
|---|---|
|
介入なし：コントロール
参加者は追加のない標準的な眼科ノートを受け取ります。
|
|
|
実験的：介入
参加者は、眼科医によってレビューおよび編集された、LLM が生成した平易な言葉の概要が添付された標準的な眼科ノートを受け取ります。
平易な言葉による概要には、品質向上イニシアチブの一環として生成されたものとして明確にマークされています。
|
大規模言語モデルによって生成された眼科ノートの平易な言語要約を現実世界に実装した、前向きでランダム化された品質改善研究。
|
この研究は何を測定していますか？
主要な結果の測定
結果測定 |
メジャーの説明 |
時間枠 |
|---|---|---|
|
眼科医以外のメモの理解と満足
時間枠：入学から入学後8週間まで
|
患者の眼科診断の理解、メモへの満足度、および標準眼科メモと標準眼科メモ + 平易な言葉の要約の間の全体的な好みを評価するアンケート回答によって評価されます。 理解度は次のリッカート尺度で評価されました。 全くではない やや中立である 非常に良い 満足度は次のリッカート尺度で評価されました。 全く満足していない やや不満 どちらでもない やや満足している 満足している 音符の種類間の好みは、次のリッカート尺度で評価されました。 スタンダードノート、お得です。 スタンダードノート、やや中立的な平易なまとめ、やや平易なまとめ、とてもお得です |
入学から入学後8週間まで
|
二次結果の測定
結果測定 |
メジャーの説明 |
時間枠 |
|---|---|---|
|
眼科医による要約精度と時間負担の評価
時間枠：登録後 24 時間未満の単一時点で評価
|
標準眼科ノートの所見を反映した平文要約の正確さ、レビュー/編集に費やした時間、および認識された負担に関して、アンケート回答によって評価されます。 調査結果の反映の正確さは、次のリッカート尺度で等級付けされました。 全くない どちらでもない 少し大きい とても良い レビュー/編集に費やした時間は、次のオプションを使用して報告されました。 1分未満
知覚された負担は、次のリッカート尺度で等級付けされました。 全くない どちらでもない 少し大きい とても良い |
登録後 24 時間未満の単一時点で評価
|
|
平易な言語による要約の意味的および言語的品質
時間枠：登録後 24 時間未満の単一時点で評価
|
フレッシュな読みやすさ スケール: 0 (悪い) ～ 100 (良い) |
登録後 24 時間未満の単一時点で評価
|
|
平易な言語による要約の意味的および言語的品質
時間枠：登録後 24 時間未満の単一時点で評価
|
フレッシュキンケイドのグレードレベル スケール: 0 (最も読みにくい、最高学年レベル) ～ 80 (最も読みやすい、最低学年レベル) |
登録後 24 時間未満の単一時点で評価
|
|
平易な言語による要約の意味的および言語的品質
時間枠：登録後 24 時間未満の単一時点で評価
|
Gobbledygook (SMOG) インデックスの意味測定 スケール: 0 (最も読みやすい) ～ 11 (最も読みにくい) |
登録後 24 時間未満の単一時点で評価
|
|
平易な言語による要約の意味的および言語的品質
時間枠：登録後 24 時間未満の単一時点で評価
|
BERTScore 言語的類似性の尺度 スケール: -1 (最も類似していない) ～ +1 (最も類似している) |
登録後 24 時間未満の単一時点で評価
|
|
平易な言語による要約の意味的および言語的品質
時間枠：登録後 24 時間未満の単一時点で評価
|
SBERT コサイン類似性 言語的類似性の尺度 スケール: -1 (最も類似していない) ～ +1 (最も類似している) |
登録後 24 時間未満の単一時点で評価
|
その他の成果指標
結果測定 |
メジャーの説明 |
時間枠 |
|---|---|---|
|
エラーの存在、エラーの種類、エラーによる潜在的な害
時間枠：登録後 24 時間以内の単一時点で評価され、登録後 8 週間後に単一時点で再度評価される
|
Plain Language Summary 内の誤った情報または欠落している情報、エラー率、エラーの種類、および潜在的な害の評価の有無。 報告されたエラーの種類は次のとおりです。 HPI 検査所見 診断計画 患者の眼全体の健康状態についての説明 その他 該当なし 危害の可能性は次の尺度で等級付けされました。 低リスク 中リスク 高リスク N/A 潜在的な危害の評価は、次のスケールで等級付けされました。 軽度または中等度の危害 死亡または重度の危害 |
登録後 24 時間以内の単一時点で評価され、登録後 8 週間後に単一時点で再度評価される
|
協力者と研究者
スポンサー
捜査官
- スタディディレクター：John J Chen, MD, PhD、Mayo Clinic
研究記録日
主要日程の研究
研究開始 (実際)
一次修了 (実際)
研究の完了 (実際)
試験登録日
最初に提出
QC基準を満たした最初の提出物
最初の投稿 (実際)
学習記録の更新
投稿された最後の更新 (実際)
QC基準を満たした最後の更新が送信されました
最終確認日
詳しくは
本研究に関する用語
その他の研究ID番号
- 24-000550
個々の参加者データ (IPD) の計画
個々の参加者データ (IPD) を共有する予定はありますか?
IPD プランの説明
IPD 共有時間枠
IPD 共有アクセス基準
IPD 共有サポート情報タイプ
- STUDY_PROTOCOL
- ANALYTIC_CODE
- CSR
医薬品およびデバイス情報、研究文書
米国FDA規制医薬品の研究
米国FDA規制機器製品の研究
米国で製造され、米国から輸出された製品。
この情報は、Web サイト clinicaltrials.gov から変更なしで直接取得したものです。研究の詳細を変更、削除、または更新するリクエストがある場合は、register@clinicaltrials.gov。 までご連絡ください。 clinicaltrials.gov に変更が加えられるとすぐに、ウェブサイトでも自動的に更新されます。