此页面是自动翻译的,不保证翻译的准确性。请参阅 英文版 对于源文本。

大语言模型拟人化的多学科处理 (MDTALLM)

2024年10月3日 更新者:Zining Luo、North Sichuan Medical College

大型语言模型拟人化的多学科处理:一项并行对照研究

这项回顾性临床试验旨在通过比较人类医生进行的MDT咨询与大语言模型进行的MDT咨询的有效性,更好地探索大语言模型在医学中的潜力。

需要解决的主要问题是:

使用大型语言模型进行拟人化 MDT 咨询是否会比使用非拟人化过程产生更好的结果? 大型语言模型进行的 MDT 咨询与人类进行的 MDT 咨询之间是否存在显着的性能差距? 与人类进行的 MDT 咨询相比,大型语言模型的 MDT 咨询的经济效益有多大?

回顾性收集中国川北地区近20年来MDT咨询记录以及匿名患者病历。 第一组:分配不同的大语言模型作为不同科室的医生和MDT秘书来总结会诊。 第2组:大语言模型直接为患者输出诊断和治疗建议。 将第1组和第2组的输出与人类表现进行回顾性比较,并进行评分,并通过拟人化MDT咨询从各部门中选择最佳模型进行重新评估,再次与人类结果进行比较。

研究概览

研究类型

观察性的

注册 (估计的)

300

联系人和位置

本节提供了进行研究的人员的详细联系信息,以及有关进行该研究的地点的信息。

学习联系方式

  • 姓名:Zining Luo, Doctor
  • 电话号码:86 + 18161007029
  • 邮箱:cblzn@nsmc.edu.cn

学习地点

    • Sichuan
      • Nanchong、Sichuan、中国、637000
        • The Affiliated Hospital of North Sichuan Medical College
        • 接触:

参与标准

研究人员寻找符合特定描述的人,称为资格标准。这些标准的一些例子是一个人的一般健康状况或先前的治疗。

资格标准

适合学习的年龄

  • 孩子
  • 成人
  • 年长者

接受健康志愿者

不

取样方法

非概率样本

研究人群

从医院

描述

纳入标准:

  • 1. 医疗记录包括跨学科咨询记录、各部门专家的建议以及详细记录的最终摘要。
  • 2.病历包含至少就诊前一年和就诊后一年的数据(包括完整的报告和影像记录)。
  • 3、经过会诊后的多学科治疗方案,患者出院情况有所改善。

排除标准:

  • 1. 病历不包括多学科会诊记录,或各科室医生的建议和最终总结记录不完整或不充分。
  • 2.病历缺乏就诊前后1年的数据,或遗漏必要的报告和影像资料,导致资料不全。
  • 3.经多学科治疗方案出院时病情未见改善或病情加重。

学习计划

本节提供研究计划的详细信息,包括研究的设计方式和研究的衡量标准。

研究是如何设计的?

设计细节

队列和干预

团体/队列
干预/治疗
拟人化过程大语言模型多学科治疗组
使用本地部署的MedicalGPT,商业可用的在线GPT-4o,Claude-3.5 Sonnet、GPT-4o mini 和 Claude 3 Haiku 将依次扮演来自不同科室的医生参与多学科治疗过程。 然后,他们将依次扮演总结者的角色,将他们的建议汇编成最终的建议或治疗计划。
将所有患者病历(包括文本、检查报告和影像数据)输入到 GPT-4o 中。 使用预先测试的提示来建立部门角色,使其能够提供与相应部门相关的诊断和治疗建议。
将所有患者病历(包括文本、检查报告和影像数据)输入 GPT-4o mini。 使用预先测试的提示来建立部门角色,使其能够提供与相应部门相关的诊断和治疗建议。
将所有患者病历(包括文本、检查报告和影像数据)输入 MedicalGPT。 使用预先测试的提示来建立部门角色,使其能够提供与相应部门相关的诊断和治疗建议。
将所有患者病历,包括文本、检查报告和影像数据输入Claude-3.5 十四行诗。 使用预先测试的提示来建立部门角色,使其能够提供与相应部门相关的诊断和治疗建议。
将所有患者病历(包括文本、检查报告和影像数据)输入到 Claude 3 Haiku 中。 使用预先测试的提示来建立部门角色,使其能够提供与相应部门相关的诊断和治疗建议。
非拟人化流程大语言模型多学科治疗组
使用本地部署的MedicalGPT,商业在线GPT-4o,Claude-3.5 Sonnet、GPT-4o mini 和 Claude 3 Haiku 在单个实例中输出多学科会诊结果,无需单独担任每个部门的角色,然后汇总结果。
将所有患者病历(包括文本、检查报告和影像数据)输入到 GPT-4o 中。 使用预先测试的提示来建立部门角色,使其能够提供与相应部门相关的诊断和治疗建议。
将所有患者病历(包括文本、检查报告和影像数据)输入 GPT-4o mini。 使用预先测试的提示来建立部门角色,使其能够提供与相应部门相关的诊断和治疗建议。
将所有患者病历(包括文本、检查报告和影像数据)输入 MedicalGPT。 使用预先测试的提示来建立部门角色,使其能够提供与相应部门相关的诊断和治疗建议。
将所有患者病历,包括文本、检查报告和影像数据输入Claude-3.5 十四行诗。 使用预先测试的提示来建立部门角色,使其能够提供与相应部门相关的诊断和治疗建议。
将所有患者病历(包括文本、检查报告和影像数据)输入到 Claude 3 Haiku 中。 使用预先测试的提示来建立部门角色,使其能够提供与相应部门相关的诊断和治疗建议。
真正的医生多学科治疗小组
传统的多学科治疗中,结果记录在参与会诊的患者的会诊记录中,包括参与会诊的各科室医生的建议以及秘书的最终总结。
回顾性收集参与过往患者多学科治疗的相应科室的诊断和治疗建议以及总体建议。
最佳大型语言模型多学科治疗组
将拟人化过程大语言模型多学科治疗组的结果与真实医生多学科治疗组的结果按科室进行评分后,选出各科室的最佳替代模型和最佳汇总模型。 这些顶尖模特将在多学科治疗咨询中发挥作用。
将所有患者病历(包括文本、检查报告和影像数据)输入到 GPT-4o 中。 使用预先测试的提示来建立部门角色,使其能够提供与相应部门相关的诊断和治疗建议。
将所有患者病历(包括文本、检查报告和影像数据)输入 GPT-4o mini。 使用预先测试的提示来建立部门角色,使其能够提供与相应部门相关的诊断和治疗建议。
将所有患者病历(包括文本、检查报告和影像数据)输入 MedicalGPT。 使用预先测试的提示来建立部门角色,使其能够提供与相应部门相关的诊断和治疗建议。
将所有患者病历,包括文本、检查报告和影像数据输入Claude-3.5 十四行诗。 使用预先测试的提示来建立部门角色,使其能够提供与相应部门相关的诊断和治疗建议。
将所有患者病历(包括文本、检查报告和影像数据)输入到 Claude 3 Haiku 中。 使用预先测试的提示来建立部门角色,使其能够提供与相应部门相关的诊断和治疗建议。

研究衡量的是什么?

主要结果指标

结果测量
大体时间
咨询费用($)
大体时间:从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。
从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。
咨询时间(分钟)
大体时间:从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。
从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。
多学科治疗结果的综合性(百分比)
大体时间:从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。
从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。
多学科治疗结果的清晰度(百分比)
大体时间:从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。
从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。
多学科治疗结果的正确性(百分比)
大体时间:从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。
从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。
跨专业团队协作实践评估(CPAT)
大体时间:从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。
从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。
总结评定量表
大体时间:从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。
从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。
Flesch-Kincaid 可读性测试
大体时间:从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。
从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。

次要结果测量

结果测量
大体时间
道德合规性(布尔值)
大体时间:从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。
从多学科治疗流程到多学科治疗流程直至所有json字段输出,人类医生使用His系统记录时间一般不超过12小时。

合作者和调查者

在这里您可以找到参与这项研究的人员和组织。

出版物和有用的链接

负责输入研究信息的人员自愿提供这些出版物。这些可能与研究有关。

研究记录日期

这些日期跟踪向 ClinicalTrials.gov 提交研究记录和摘要结果的进度。研究记录和报告的结果由国家医学图书馆 (NLM) 审查,以确保它们在发布到公共网站之前符合特定的质量控制标准。

研究主要日期

学习开始 (估计的)

2024年10月1日

初级完成 (估计的)

2024年11月1日

研究完成 (估计的)

2024年11月1日

研究注册日期

首次提交

2024年10月1日

首先提交符合 QC 标准的

2024年10月3日

首次发布 (实际的)

2024年10月4日

研究记录更新

最后更新发布 (实际的)

2024年10月4日

上次提交的符合 QC 标准的更新

2024年10月3日

最后验证

2024年10月1日

更多信息

与本研究相关的术语

其他研究编号

  • 1426887-2024-3

计划个人参与者数据 (IPD)

计划共享个人参与者数据 (IPD)?

是的

IPD 共享支持信息类型

  • 研究方案
  • 树液
  • 国际碳纤维联合会
  • 分析代码
  • 企业社会责任

药物和器械信息、研究文件

研究美国 FDA 监管的药品

不

研究美国 FDA 监管的设备产品

不

此信息直接从 clinicaltrials.gov 网站检索,没有任何更改。如果您有任何更改、删除或更新研究详细信息的请求,请联系 register@clinicaltrials.gov. clinicaltrials.gov 上实施更改,我们的网站上也会自动更新.

订阅