癌症本体监督多模态编排(COSMO)人工智能系统与仅病理学家评估的头对头比较 (COSMO)
癌症本体监督多模态编排(COSMO)人工智能系统与病理学家单独评估的头对头比较
本研究评估癌症本体监督多模态编排(COSMO)人工智能系统在癌症亚型分类中的诊断性能,并与病理学家独立阅片进行头对头比较。 病理学家将独立审阅来自三个解剖部位(脑、肺、肾)最多300名患者的去标识化全切片图像,并提供诊断评估。 同时,COSMO将离线处理相同病例以生成独立预测,从而实现人类专家与人工智能系统之间诊断准确性的直接比较。
本研究将分析COSMO与病理学家的诊断准确性、观察者间一致性,以及在不同发病率的解剖部位和癌症类型中的表现差异。 研究结果将确定COSMO在相同病例中与病理学家的比较情况,并为临床实践中人工智能辅助诊断系统的开发提供参考。
研究概览
详细说明
研究背景与理论基础 由于病理学家在专业知识、经验和获取诊断资源方面的差异,癌症亚型分类的诊断准确性存在显著差异。 人工智能系统在病理学领域的出现为提升癌症分类的诊断性能和一致性提供了潜力。 然而,文献中关于基于人工智能的预测与病理学家在相同病例上诊断性能的直接实证比较仍然有限。
研究目标 此项头对头比较研究旨在:(1) 评估COSMO人工智能系统在多个解剖部位的癌症亚型分类中的诊断性能;(2) 描述经验丰富的病理学家在相同病例上的诊断准确性;(3) 直接比较COSMO与病理学家之间的诊断性能指标;(4) 考察按解剖部位、癌症发病率类别、病理学家经验和病例复杂性划分的一致性模式和性能差异。
研究环境与参与者 本研究将招募多达25名拥有3至10年以上诊断经验的委员会认证病理学家,他们来自北美、欧洲和亚太地区的机构。 参与的病理学家将在神经病理学、肺部病理学、泌尿病理学或普通解剖病理学领域具备专业知识。
病例与分层 本研究将使用代表多达300名确诊参考诊断患者的去标识化档案全切片图像,包括100例脑癌、100例肺癌和100例肾癌。 病例将根据癌症类型和发病率类别(常见与罕见或不常见)进行分层,符合世界卫生组织(WHO)指南。
数据收集 病理学家将独立审查每个病例,并使用5点量表提供诊断分类及置信度评估。 数字病理学界面将自动记录诊断时间指标。 COSMO将离线处理相同病例,以生成独立的诊断预测和置信度评分。 病理学家和人工智能的预测都将根据既定的参考标准诊断进行评估。
分析框架 主要分析将描述病理学家(在个人和聚合层面)和COSMO系统的诊断性能指标(包括准确性、敏感性、特异性、阳性预测值(PPV)、阴性预测值(NPV)以及受试者工作特征曲线下面积(AUROC))。 次要分析将评估按解剖部位、癌症发病率类别和病理学家经验水平分层的性能。
研究类型
注册 (估计的)
联系人和位置
学习地点
-
-
Massachusetts
-
Boston、Massachusetts、美国、02115
- Harvard Medical School
-
-
参与标准
资格标准
适合学习的年龄
- 孩子
- 成人
- 年长者
接受健康志愿者
取样方法
研究人群
描述
纳入标准:
- 获得委员会认证的病理学家,具备神经病理学、肺病理学、泌尿病理学或一般解剖病理学专业知识
- 至少3年临床诊断经验
- 涉及诊断病理切片审查的活跃临床实践
- 愿意独立审查和诊断最多300张去标识化的全切片图像
- 能够访问研究平台并在规定的研究时间表内完成病例审查
- 提供参与研究的知情同意书
排除标准:
- 先前参与COSMO AI系统的设计或验证
- 无法承诺足够时间完成分配的病例审查
- 存在与研究结果相关的重大财务利益冲突
学习计划
研究是如何设计的?
设计细节
队列和干预
团体/队列 |
干预/治疗 |
|---|---|
|
基于COSMO的人工智能评估
|
|
|
病理学家主导评估
|
数字病理学评估
|
研究衡量的是什么?
主要结果指标
结果测量 |
措施说明 |
大体时间 |
|---|---|---|
|
诊断性能
大体时间:围手术期(在玻片审查时)
|
COSMO AI系统与病理学家在脑部、肺部和肾脏肿瘤中识别癌症亚型的诊断性能,通过准确性、平衡准确性、敏感性、特异性、阳性预测值(PPV)、阴性预测值(NPV)和受试者工作特征曲线下面积(AUROC)进行评估。
我们将包括总体比较以及按解剖部位和癌症发病率类别(常见与罕见或不常见)的分层评估。
|
围手术期(在玻片审查时)
|
次要结果测量
结果测量 |
措施说明 |
大体时间 |
|---|---|---|
|
病理学家间的观察者一致性
大体时间:围手术期(在阅片时)
|
参与病理学家之间的诊断一致性,通过Fleiss' kappa、组内相关系数(ICC)和配对一致性率进行测量。
|
围手术期(在阅片时)
|
|
病理学家-COSMO AI一致性
大体时间:围手术期(阅片时)
|
病理学家诊断与COSMO AI预测之间的一致性模式,包括总体一致病例的比例,并按解剖部位、癌症发病率类别和病理学家经验水平分层分析。
|
围手术期(阅片时)
|
|
诊断置信度
大体时间:围手术期(阅片时)
|
病理学家在诊断评估期间报告的置信度平均得分(5分量表),按解剖部位、癌症发病率类别和诊断正确性(正确与不正确)分层。
|
围手术期(阅片时)
|
|
诊断时间
大体时间:围手术期(切片检查时)
|
按解剖部位、癌症发病率类别和病理学家经验水平分层,病理学家提供癌症亚型分类所需的平均诊断时间(以秒计)。
|
围手术期(切片检查时)
|
|
按病理学家经验分层的诊断表现
大体时间:围手术期(在阅片时)
|
病理学家按临床经验年限(3-5年、6-10年、>10年)分层的诊断准确性,以评估经验水平与癌症亚型分类诊断性能之间的关系。
|
围手术期(在阅片时)
|
合作者和调查者
调查人员
- 首席研究员:Kun-Hsing Yu, MD, PhD、Harvard Medical School (HMS and HSDM)
研究记录日期
研究主要日期
学习开始 (实际的)
初级完成 (估计的)
研究完成 (估计的)
研究注册日期
首次提交
首先提交符合 QC 标准的
首次发布 (实际的)
研究记录更新
最后更新发布 (实际的)
上次提交的符合 QC 标准的更新
最后验证
更多信息
与本研究相关的术语
其他相关的 MeSH 术语
其他研究编号
- Yu Lab COSMO Study
计划个人参与者数据 (IPD)
计划共享个人参与者数据 (IPD)?
IPD 计划说明
药物和器械信息、研究文件
研究美国 FDA 监管的药品
研究美国 FDA 监管的设备产品
此信息直接从 clinicaltrials.gov 网站检索,没有任何更改。如果您有任何更改、删除或更新研究详细信息的请求,请联系 register@clinicaltrials.gov. clinicaltrials.gov 上实施更改,我们的网站上也会自动更新.