评估使用PHQ-9的GPT-4O和基于RAG的语音聊天机器人的有效性和可接受性 (GPT4-RAG-PHQ)
这项研究旨在评估由GPT-4O和检索功能增强生成驱动的基于语音的聊天机器人(RAG)的可行性和可接受性,用于使用患者健康调查表9(PHQ-9)进行抑郁筛查。 PHQ-9是一种经过验证的自我报告仪器,用于筛查,诊断和监测抑郁症的严重程度。 它由九个问题组成,与重大抑郁症的精神障碍诊断和统计手册相对应(DSM-5)标准。 受访者在过去两个星期中的症状频率从0(“完全不是”)到3(“几乎每天”)。 总分(从0到27)表明抑郁症状的严重程度,分为最小,轻度,中度,中度严重或严重的抑郁症。 PHQ-9还用于评估临床和研究环境中的功能障碍和指导治疗决策。
基于语音的聊天机器人集成了GPT-4O,并具有碎布,以增强其在互动过程中提供知情和背景化响应的能力。 GPT-4O充当对话引擎,能够产生类似人类,善解人意和上下文适当的对话。 另一方面,抹布使聊天机器人能够从策划的数据库或知识存储库中检索并合并外部,最新的知识,从而确保其响应的准确性和可靠性。
研究概览
详细说明
抑郁症是普遍的心理健康挑战,具有巨大的个人,社会和经济成本。 传统的心理健康资源面临障碍,例如污名,有限的可用性和较长的等待时间。 技术,尤其是AI驱动的工具,为弥合这些差距提供了机会。 这项研究利用GPT-4O和抹布来创建一个能够对话,管理PHQ-9问卷并提供个性化反馈的配音聊天机器人。
参与者将在与聊天机器人互动之前填写自我测试的PHQ-9(结果不会向公众披露,并且仅用于准确比较),并且将其自测的结果与聊天机器人给出的结果就准确性而言。
聊天机器人交互包括三个阶段:
进行融洽关系和一般支持的热身对话。
- 聊天机器人发起随意的,善解人意的对话,与用户建立融洽的关系,帮助他们在过渡到PHQ-9筛选之前感到舒适和放松。
- 用户可以提出与心理健康有关的一般问题,聊天机器人提供知情和支持的回应。
对抑郁筛查的PHQ-9调查表的管理。
- 聊天机器人介绍了PHQ-9问卷,解释了其目的以及结果将如何帮助评估用户的心理健康。
- 通过语音互动,用户回答了9个PHQ-9问题,聊天机器人记录了他们的回答。 如果用户难以了解特定项目,聊天机器人可以澄清问题或提供其他上下文。
分析结果和量身定制建议的交付。
- 用户完成PHQ-9后,聊天机器人分析了响应,计算总分并将结果分类为严重程度(例如,温和,中度)。
- 根据分数,聊天机器人提供个性化的建议,例如轻度症状的自助策略,或为更严重的病例建议专业的心理健康服务。
参与者将与聊天机器人互动,然后参加1小时半结构化的访谈,以提供有关他们的经验的反馈。 该研究重点是评估在心理健康筛查中使用此类基于LLM的聊天机器人的可接受性和可行性,并确定潜在的改善和风险。
研究目标主要目标
评估GPT-4O和基于抹布的语音聊天机器人(Hopebot)使用PHQ-9进行抑郁筛查的可接受性,可行性和准确性。
假设:参与者表现出对Hopebot(高于65%)的高度接受,并且很高的意愿在将来使用基于LLM的聊天机器人进行心理健康筛查(高于65%),这表明LLM作为支持工具的信誉是一种支持工具心理健康筛查(高于65%)。 参与者使用Hopebot进行抑郁症筛查,他们的自我测试PHQ-9结果匹配100%
- 分析聊天机器人在识别抑郁症状和提供可行建议方面的有效性。
假设:Hopebot可以帮助用户以友好的方式参加PHQ-9测试,帮助用户准确地对答案进行分类,并提供准确的测试结果,他们提供的建议是基于官方PHQ-9指南,超过70%用户说他们的回答非常有效和有帮助。
次要目标
评估将抹布与LLM整合到创建心理健康的配音聊天机器人方面的可行性和性能。
假设:超过65%的参与者认识到使用抹布的反应更有帮助和有效。
- 探索在心理健康领域中部署LLM的优势,局限性和风险。
假设:超过65%的用户表示,Hopebot非常方便,更易于访问且无需成本提供非判断性建议。 但是,有50%的人仍然对其隐私和数据安全表达了担忧。
研究类型
注册 (估计的)
联系人和位置
学习地点
-
-
-
London、英国、NW1 2DA
- UCL Institute of Health Informatics
-
-
参与标准
资格标准
适合学习的年龄
- 成人
- 年长者
接受健康志愿者
取样方法
研究人群
该研究人群由18至65岁的健康个体组成,他们没有严重的精神疾病。 我们欢迎对人工智能技术感兴趣的参与者。 招聘将在线和离线进行。
参与者将与精致的AI聊天机器人互动,旨在模拟与心理健康专业人员的咨询。 这种相互作用使他们能够以结构化但对话的方式完成心理测量评估,例如PHQ-9测试。 与传统的在线版本的PHQ-9测试不同,聊天机器人提供了增强的交互性。 对于可能在表达或总结其响应方面遇到困难的个人,聊天机器人使用全面的语言模型提供了澄清和帮助。
评估后,参与者将根据既定的心理健康指南提供的量身定制的建议,对他们的测试结果进行解释。
描述
纳入标准:
- 18-65岁的成年人。
- 流利的英语。
- 访问能够进行语音交互和稳定Internet连接的设备。
- 愿意参加聊天机器人互动和后续采访。
排除标准:
- 当前严重的精神诊断(例如,精神病,躁郁症)。
- 与精神科医生接受积极治疗的参与者。
- 对基于语音的技术或无法提供知情同意的不适感。
学习计划
研究是如何设计的?
设计细节
研究衡量的是什么?
主要结果指标
结果测量 |
措施说明 |
大体时间 |
|---|---|---|
|
GPT-4O和RAG语音聊天机器人的可行性和可接受性
大体时间:聊天机器人互动后立即进行访谈。
|
参与者对聊天机器人的可行性,可接受性和有效性的看法通过互动会议后进行的半结构访谈进行评估。
这些访谈探讨了主题,例如聊天机器人的同理心,可用性和整体用户体验。
|
聊天机器人互动后立即进行访谈。
|
次要结果测量
结果测量 |
措施说明 |
大体时间 |
|---|---|---|
|
聊天机器人的PHQ-9评分的准确性
大体时间:互动会话后立即测量,一旦聊天机器人生成PHQ-9分数
|
聊天机器人产生的PHQ-9分数的准确性是通过将聊天机器人的结果与参与者在交互之前收集的自我报告的PHQ-9分数进行比较来衡量的。
一致性将使用统计方法进行评估,例如Cohen的Kappa或类内相关系数(ICC)。
|
互动会话后立即测量,一旦聊天机器人生成PHQ-9分数
|
合作者和调查者
调查人员
- 研究主任:Kezhi Li、University College, London
研究记录日期
研究主要日期
学习开始 (估计的)
初级完成 (估计的)
研究完成 (估计的)
研究注册日期
首次提交
首先提交符合 QC 标准的
首次发布 (实际的)
研究记录更新
最后更新发布 (实际的)
上次提交的符合 QC 标准的更新
最后验证
更多信息
与本研究相关的术语
其他研究编号
- 26133.001 (其他标识符:UCL Research Ethics Committee)
计划个人参与者数据 (IPD)
计划共享个人参与者数据 (IPD)?
IPD 计划说明
药物和器械信息、研究文件
研究美国 FDA 监管的药品
研究美国 FDA 监管的设备产品
此信息直接从 clinicaltrials.gov 网站检索,没有任何更改。如果您有任何更改、删除或更新研究详细信息的请求,请联系 register@clinicaltrials.gov. clinicaltrials.gov 上实施更改,我们的网站上也会自动更新.