Эта страница была переведена автоматически, точность перевода не гарантируется. Пожалуйста, обратитесь к английской версии для исходного текста.

Оценка эффективности и приемлемости голосового чат-бота на основе GPT-4O и RAG для скрининга депрессии с использованием PHQ-9 (GPT4-RAG-PHQ)

24 января 2025 г. обновлено: University College, London

Это исследование направлено на оценку осуществимости и приемлемости голосового чат-бота, основанного на GPT-4O и поисковой генерации (RAG), для проведения скрининга депрессии с использованием анкеты для здоровья пациентов-9 (PHQ-9). PHQ-9 представляет собой проверенный инструмент самоотчета, широко используемый для скрининга, диагностики и мониторинга тяжести депрессии. Он состоит из девяти вопросов, которые соответствуют критериям диагностического и статистического руководства по психическим расстройствам (DSM-5) для крупного депрессивного расстройства. Респонденты оценивают частоту симптомов, возникающих в течение последних двух недель по шкале от 0 («совсем не») до 3 («почти каждый день»). Общая оценка (в диапазоне от 0 до 27) указывает на тяжесть депрессивных симптомов, классифицируемую на минимальную, легкую, умеренную, умеренно тяжелую или тяжелую депрессию. PHQ-9 также используется для оценки функциональных нарушений и руководства решениями о лечении в клинических и исследовательских условиях.

Голосовой чат-бот интегрирует GPT-4O, с RAG для повышения его способности предоставлять информированные и контекстуализированные ответы во время взаимодействия. GPT-4O служит разговорным двигателем, способным генерировать человеческий, чуткий и контекстуально подходящий диалог. Рэг, с другой стороны, позволяет чат-боту извлекать и включать внешние, современные знания из кураторской базы данных или хранилища знаний, обеспечивая точность и надежность ее ответов.

Обзор исследования

Подробное описание

Депрессия является распространенной проблемой психического здоровья со значительными личными, социальными и экономическими затратами. Традиционные ресурсы психического здоровья сталкиваются с такими барьерами, как стигма, ограниченная доступность и длительное время ожидания. Технология, в частности, инструменты с AI, дает возможность преодолеть эти пробелы. В этом исследовании используются GPT-4O и RAG для создания голосового чат-бота, способного к разговорной помолвке, администрировать анкету PHQ-9 и предоставлять персонализированную обратную связь.

Участники заполнят PHQ-9 для самопротестирования, прежде чем взаимодействовать с чат-ботом (результаты не будут раскрыты для общественности и будут использоваться только для сравнения точности), и результаты их самостоятельных тестов будут сравниваться с Результаты, данные чатботом с точки зрения точности.

Взаимодействие Чатбота состоит из трех этапов:

  1. Разговоры о размине для составления связей и общей поддержки.

    • Чатбот инициирует случайные, сочувствующие диалоги для налаживания взаимопонимания с пользователями, помогая им чувствовать себя комфортно и непринужденно, прежде чем перейти на скрининг PHQ-9.
    • Пользователи могут задавать общие вопросы, связанные с психическим здоровьем, а чат -бот предоставляет информированные и поддерживающие ответы.
  2. Администрирование анкеты PHQ-9 для скрининга депрессии.

    • Чатбот вводит анкету PHQ-9, объясняя его цель и то, как результаты помогут оценить психическое здоровье пользователя.
    • Благодаря голосовому взаимодействию пользователи отвечают на девять вопросов PHQ-9, а чат-бот записывает свои ответы. Чатбот может уточнить вопросы или предоставить дополнительный контекст, если пользователи испытывают трудности с пониманием конкретных элементов.
  3. Анализ результатов и доставка индивидуальных рекомендаций.

    • После того, как пользователь завершает PHQ-9, чат-бот анализирует ответы, вычисляет общий балл и классифицирует результаты на уровни тяжести (например, мягкий, умеренный).
    • Основываясь на оценке, чат-бот предоставляет персонализированные рекомендации, такие как стратегии самопомощи для легких симптомов или предложение профессиональных психиатрических услуг для более тяжелых случаев.

Участники будут взаимодействовать с чатботом, а затем участвовать в 1-часовом полуструктурированном интервью, чтобы предоставить отзыв об их опыте. Исследование посвящено оценке приемлемости и осуществимости использования таких чат-ботов на основе LLM в скрининге психического здоровья и выявлении потенциальных улучшений и рисков.

Изучить цели первичные цели

  1. Чтобы оценить приемлемость, осуществимость и точность голосового чат-бота на основе GPT-4O и RAG для скрининга депрессии с использованием PHQ-9.

    Гипотеза: участники показали высокое признание HopeBot (выше 65%) и высокую готовность использовать такой чат-бот на основе LLM для скрининга психического здоровья в будущем (выше 65%), что указывает на признание достоверности LLM в качестве поддерживающего инструмента в Скрининг психического здоровья (выше 65%). Участники использование HopeBot для скрининга депрессии соответствовали их самопротестированию PHQ-9 результатов на 100%

  2. Проанализировать эффективность чат -бота в выявлении симптомов депрессии и предоставления действенных рекомендаций.

Гипотеза: HopeBot может помочь пользователям пройти тест PHQ-9 дружелюбным образом, помогать пользователям точно классифицировать ответы и дать точные результаты теста, советы, которые они предоставляют, основаны на официальных руководящих принципах PHQ-9 и более 70% от Пользователи говорят, что их ответы очень эффективны и полезны.

Вторичные цели

  1. Чтобы оценить выполнимость и производительность интеграции тряпки с LLM в создании голосового чат-бота для психического здоровья.

    Гипотеза: более 65% участников признали, что ответы с использованием RAG были более полезными и эффективными.

  2. Чтобы изучить сильные стороны, ограничения и риски развертывания LLM в области психического здоровья.

Гипотеза: более 65% пользователей говорят, что HopeBot очень удобен, более доступен и без затрат для предоставления непредвзятых советов. Тем не менее, 50% по -прежнему выражали обеспокоенность по поводу ее конфиденциальности и безопасности данных.

Тип исследования

Наблюдательный

Регистрация (Оцененный)

100

Контакты и местонахождение

В этом разделе приведены контактные данные лиц, проводящих исследование, и информация о том, где проводится это исследование.

Места учебы

Критерии участия

Исследователи ищут людей, которые соответствуют определенному описанию, называемому критериям приемлемости. Некоторыми примерами этих критериев являются общее состояние здоровья человека или предшествующее лечение.

Критерии приемлемости

Возраст, подходящий для обучения

  • Взрослый
  • Пожилой взрослый

Принимает здоровых добровольцев

Да

Метод выборки

Невероятностная выборка

Исследуемая популяция

Исследовательская популяция состоит из здоровых людей в возрасте от 18 до 65 лет, у которых нет тяжелых психических заболеваний. Мы приветствуем участников, которые заинтересованы в технологиях искусственного интеллекта. Набор персонала будет проводиться как в Интернете, так и в автономном режиме.

Участники будут взаимодействовать со сложным чат -ботом ИИ, предназначенным для имитации консультации с специалистом по психическому здоровью. Это взаимодействие позволяет им завершить психометрическую оценку, такую ​​как тест PHQ-9, структурированным, но разговорным образом. В отличие от обычных онлайн-версий теста PHQ-9, чат-бот предлагает повышенную интерактивность. Для людей, которые могут испытывать трудности в сформулировании или суммировании своих ответов, чат -бот обеспечивает разъяснения и помощь, используя комплексную языковую модель.

После оценки участники получат интерпретацию результатов своих испытаний вместе с адаптированными рекомендациями, предоставленными в соответствии с установленными руководящими принципами психического здоровья.

Описание

Критерии включения:

  • Взрослые в возрасте 18-65 лет.
  • Свободно владеет английским.
  • Доступ к устройству, способному к голосовому взаимодействию и стабильному подключению к Интернету.
  • Готовы участвовать в взаимодействии чат-ботов и последующего интервью.

Критерии исключения:

  • Современные тяжелые психиатрические диагнозы (например, психоз, биполярное расстройство).
  • Участники, проходящие активное лечение депрессии с психиатром.
  • Дискомфорт с голосовой технологией или неспособностью предоставить информированное согласие.

Учебный план

В этом разделе представлена ​​подробная информация о плане исследования, в том числе о том, как планируется исследование и что оно измеряет.

Как устроено исследование?

Детали дизайна

Что измеряет исследование?

Первичные показатели результатов

Мера результата
Мера Описание
Временное ограничение
Осуществимость и приемлемость GPT-4O и Rag Voice Chatbot
Временное ограничение: Интервью проводятся сразу после взаимодействия чат -бота.
Восприятие участников о выполнимости, приемлемости и эффективности чат-бота оценивается с помощью полуструктурированных интервью, проведенных после сеанса взаимодействия. Эти интервью изучают такие темы, как сочувствие чат -бота, удобство использования и общий опыт пользователя.
Интервью проводятся сразу после взаимодействия чат -бота.

Вторичные показатели результатов

Мера результата
Мера Описание
Временное ограничение
Точность оценки PHQ-9 по чат-боту
Временное ограничение: Измерено сразу после сеанса взаимодействия, как только чат-бот сгенерировал оценки PHQ-9
Точность баллов PHQ-9, полученных с помощью чат-бота, измеряется путем сравнения результатов чат-бота с самооценкой участников PHQ-9, собранных до взаимодействия. Соглашение будет оцениваться с использованием статистических методов, таких как коэффициент каппа или внутриклассовой корреляции (ICC).
Измерено сразу после сеанса взаимодействия, как только чат-бот сгенерировал оценки PHQ-9

Соавторы и исследователи

Здесь вы найдете людей и организации, участвующие в этом исследовании.

Следователи

  • Директор по исследованиям: Kezhi Li, University College, London

Даты записи исследования

Эти даты отслеживают ход отправки отчетов об исследованиях и сводных результатов на сайт ClinicalTrials.gov. Записи исследований и сообщаемые результаты проверяются Национальной медицинской библиотекой (NLM), чтобы убедиться, что они соответствуют определенным стандартам контроля качества, прежде чем публиковать их на общедоступном веб-сайте.

Изучение основных дат

Начало исследования (Оцененный)

1 февраля 2025 г.

Первичное завершение (Оцененный)

31 марта 2025 г.

Завершение исследования (Оцененный)

31 мая 2025 г.

Даты регистрации исследования

Первый отправленный

24 января 2025 г.

Впервые представлено, что соответствует критериям контроля качества

24 января 2025 г.

Первый опубликованный (Действительный)

25 марта 2025 г.

Обновления учебных записей

Последнее опубликованное обновление (Действительный)

25 марта 2025 г.

Последнее отправленное обновление, отвечающее критериям контроля качества

24 января 2025 г.

Последняя проверка

1 января 2025 г.

Дополнительная информация

Термины, связанные с этим исследованием

Другие идентификационные номера исследования

  • 26133.001 (Другой идентификатор: UCL Research Ethics Committee)

Планирование данных отдельных участников (IPD)

Планируете делиться данными об отдельных участниках (IPD)?

НЕТ

Описание плана IPD

IPD не будет использоваться для обеспечения конфиденциальности участников и соблюдать этические руководящие принципы, связанные с исследованиями в области психического здоровья. Кроме того, участники не дали явного согласия на обмен данными с внешними исследователями.

Информация о лекарствах и устройствах, исследовательские документы

Изучает лекарственный продукт, регулируемый FDA США.

Нет

Изучает продукт устройства, регулируемый Управлением по санитарному надзору за качеством пищевых продуктов и медикаментов США.

Нет

Эта информация была получена непосредственно с веб-сайта clinicaltrials.gov без каких-либо изменений. Если у вас есть запросы на изменение, удаление или обновление сведений об исследовании, обращайтесь по адресу register@clinicaltrials.gov. Как только изменение будет реализовано на clinicaltrials.gov, оно будет автоматически обновлено и на нашем веб-сайте. .

Подписаться