Эта страница была переведена автоматически, точность перевода не гарантируется. Пожалуйста, обратитесь к английской версии для исходного текста.

Оценка эффективности и удобства использования искусственного интеллекта (ChatGPT) для студентов-медиков (AIHSS)

5 февраля 2024 г. обновлено: Mirella Veras, Carleton University

Перекрестное рандомизированное контролируемое исследование для оценки эффективности и удобства использования искусственного интеллекта (ChatGPT) для студентов-медиков (AIHSS)

Перекрестное рандомизированное контрольное исследование, в котором субъекты случайным образом распределяются в одну из двух групп: одна (ChatGPT), получающая тестируемое вмешательство, и контрольная группа, получающая обычные онлайн-ресурсы.

Обзор исследования

Подробное описание

Будет принята двухэтапная стратегия рандомизации. Распределение участников по группам мероприятий A и B будет определяться с помощью компьютерной рандомизации в соотношении распределения: 1:1. Для решения этических проблем, связанных с динамикой власти между профессорами и студентами; следователи решили привлечь человека, который не зависит от исследовательской группы. Это решение направлено на то, чтобы свести к минимуму любую потенциальную предвзятость или влияние, которые могут возникнуть в результате прямого участия профессора во вмешательстве. Такой подход помогает гарантировать, что исследование проводится честно и непредвзято, создавая исследовательскую среду, в которой приоритет отдается равным возможностям для всех участников. Обе группы будут одновременно работать над заданием (А и Б).

Исследователи использовали перекрестный дизайн, чтобы обеспечить равные условия обучения для всех учащихся. Это включало назначение студентам либо ChatGPD (A), либо обычных онлайн-инструментов (B) для доступа к ресурсам и оказания им помощи в выполнении заданий. На начальном этапе вмешательства участники группы A будут использовать ChatGPT для выполнения своих заданий, а участники группы B будут выступать в качестве контрольной группы. В последующий период вмешательства будут переключаться между двумя группами. Чтобы оценить удобство использования технологий участниками, обе группы заполнят анкеты до и после. Кроме того, участникам будет предложено заполнить анкету после вмешательства, чтобы оценить их восприятие методов помощи. После периода вымывания в течение 13 дней в неделю участники, которые ранее были отнесены к группе A, будут отнесены к группе B, и то же самое с участниками, ранее отнесенными к группе B, будет отнесено к группе A. Это перекрестное рандомизированное контрольное исследование будет включают 50 студентов-медиков, зарегистрированных на курс «Хронические состояния здоровья и инвалидность» (HLTH 3503) Карлтонского университета. В первой части вмешательства группа А будет использовать ChatGPT для выполнения своего задания, а участники Б будут выступать в качестве контрольной группы. На второй неделе интервенции будут пересекаться. Участники обеих групп заполнят анкету до и после, чтобы оценить свои знания. Участники также заполнят анкету после вмешательства, чтобы оценить свое восприятие. Шкала юзабилити системы (SUS) будет применяться в конце мероприятий и при переходе участников к другому вспомогательному инструменту. Это позволяет оценивать результаты и сравнивать внутри и между двумя группами вмешательства. Собирая данные в нескольких точках исследования, исследователи могут оценить эффект каждого вмешательства и любые потенциальные эффекты переноса в течение переходного периода. Кроме того, это дает возможность измерить изменения в результатах отдельных участников по мере того, как они переключаются с одного вмешательства на другое. Анкета по социально-экономическим вопросам, вопросам грамотности, преимуществам ИИ и рискам и негативному опыту, связанному с использованием ИИ.

Тип исследования

Интервенционный

Регистрация (Действительный)

26

Фаза

  • Непригодный

Контакты и местонахождение

В этом разделе приведены контактные данные лиц, проводящих исследование, и информация о том, где проводится это исследование.

Контакты исследования

  • Имя: Mirella Veras, PhD
  • Номер телефона: 4848 613-520-2600
  • Электронная почта: mirella.veras@carleton.ca

Учебное резервное копирование контактов

  • Имя: Dahlia Kairy, PhD
  • Номер телефона: 514-343-6111
  • Электронная почта: dahlia.kairy@umontreal.ca

Места учебы

      • Ottawa, Канада
        • Carleton University
        • Контакт:
          • Mirella Veras, PhD

Критерии участия

Исследователи ищут людей, которые соответствуют определенному описанию, называемому критериям приемлемости. Некоторыми примерами этих критериев являются общее состояние здоровья человека или предшествующее лечение.

Критерии приемлемости

Возраст, подходящий для обучения

  • Взрослый
  • Пожилой взрослый

Принимает здоровых добровольцев

Да

Описание

Критерии включения:

  • Студенты медицинских наук
  • Необходимо пройти регистрацию на курс «Хронические заболевания и инвалидность» (HLTH 3503), осень 2023 г.

Критерий исключения:

• Невозможно дать информированное согласие

Учебный план

В этом разделе представлена ​​подробная информация о плане исследования, в том числе о том, как планируется исследование и что оно измеряет.

Как устроено исследование?

Детали дизайна

  • Основная цель: Другой
  • Распределение: Рандомизированный
  • Интервенционная модель: Назначение кроссовера
  • Маскировка: Одинокий

Оружие и интервенции

Группа участников / Армия
Вмешательство/лечение
Без вмешательства: Группа традиционных онлайн-инструментов
Группа B будет служить контрольной группой в этом исследовании. Участники этой группы получат инструкции о том, как выполнить задание с помощью традиционных онлайн-инструментов, доступных в Интернете, без использования искусственного интеллекта. У них будет шесть дней на выполнение задания с использованием этих обычных инструментов. Как и участники этапа 1, они также должны будут заполнить анкету об удобстве использования технологий, предоставив отзывы о своем опыте работы с онлайн-инструментами.
Экспериментальный: Группа искусственного интеллекта (ChatGPT)
Участникам группы A будет поручено использовать ChatGPT в качестве инструмента для выполнения заданий. Им будет предоставлен период в шесть дней, чтобы использовать искусственный интеллект через ChatGPT для выполнения задания. Наряду с инструкциями по заданию участники получат этическое руководство и конкретные рекомендации по эффективному использованию ChatGPT. После завершения периода вмешательства участникам будет предоставлено 24-часовое окно для заполнения опроса, в котором оценивается удобство использования технологии. Опрос направлен на сбор ценных отзывов об опыте участников и их восприятии использования ChatGPT для выполнения своих заданий. Кроме того, участников этапа 1 также попросят заполнить анкету относительно их восприятия использования искусственного интеллекта (ИИ) в качестве вспомогательного инструмента для выполнения своих заданий. Этот опрос направлен на сбор информации об их мыслях, мнениях и отношении к использованию ИИ в процессе обучения.
Участникам группы A будет поручено использовать ChatGPT в качестве инструмента для выполнения заданий. Им будет предоставлен период в шесть дней, чтобы использовать искусственный интеллект через ChatGPT для выполнения задания. Наряду с инструкциями по заданию участники получат этическое руководство и конкретные рекомендации по эффективному использованию ChatGPT. После завершения периода вмешательства участникам будет предоставлено 24-часовое окно для заполнения опроса, в котором оценивается удобство использования технологии. Опрос направлен на сбор ценных отзывов об опыте участников и их восприятии использования ChatGPT для выполнения своих заданий. Кроме того, участников этапа 1 также попросят заполнить анкету относительно их восприятия использования искусственного интеллекта (ИИ) в качестве вспомогательного инструмента для выполнения своих заданий. Этот опрос направлен на сбор информации об их мыслях, мнениях и отношении к использованию ИИ в процессе обучения.

Что измеряет исследование?

Первичные показатели результатов

Мера результата
Мера Описание
Временное ограничение
Шкала удобства использования системы (SUS) — от 0 до 100, средний балл SUS — 68.
Временное ограничение: в течение 24 часов
Удобство использования технологии
в течение 24 часов

Вторичные показатели результатов

Мера результата
Мера Описание
Временное ограничение
Восприятие учащимися искусственного интеллекта, анкета проверена экспертами, нет признанного золотого стандарта измерения результатов.
Временное ограничение: в течение 24 часов
Восприятие студента об использовании искусственного интеллекта
в течение 24 часов

Соавторы и исследователи

Здесь вы найдете людей и организации, участвующие в этом исследовании.

Спонсор

Соавторы

Следователи

  • Главный следователь: Mirella Veras, PhD, Carleton University

Публикации и полезные ссылки

Лицо, ответственное за внесение сведений об исследовании, добровольно предоставляет эти публикации. Это может быть что угодно, связанное с исследованием.

Даты записи исследования

Эти даты отслеживают ход отправки отчетов об исследованиях и сводных результатов на сайт ClinicalTrials.gov. Записи исследований и сообщаемые результаты проверяются Национальной медицинской библиотекой (NLM), чтобы убедиться, что они соответствуют определенным стандартам контроля качества, прежде чем публиковать их на общедоступном веб-сайте.

Изучение основных дат

Начало исследования (Действительный)

1 сентября 2023 г.

Первичное завершение (Действительный)

1 декабря 2023 г.

Завершение исследования (Действительный)

1 декабря 2023 г.

Даты регистрации исследования

Первый отправленный

4 июля 2023 г.

Впервые представлено, что соответствует критериям контроля качества

25 июля 2023 г.

Первый опубликованный (Действительный)

27 июля 2023 г.

Обновления учебных записей

Последнее опубликованное обновление (Оцененный)

6 февраля 2024 г.

Последнее отправленное обновление, отвечающее критериям контроля качества

5 февраля 2024 г.

Последняя проверка

1 февраля 2024 г.

Дополнительная информация

Термины, связанные с этим исследованием

Другие идентификационные номера исследования

  • AIHSS01

Планирование данных отдельных участников (IPD)

Планируете делиться данными об отдельных участниках (IPD)?

НЕТ

Информация о лекарствах и устройствах, исследовательские документы

Изучает лекарственный продукт, регулируемый FDA США.

Нет

Изучает продукт устройства, регулируемый Управлением по санитарному надзору за качеством пищевых продуктов и медикаментов США.

Нет

Эта информация была получена непосредственно с веб-сайта clinicaltrials.gov без каких-либо изменений. Если у вас есть запросы на изменение, удаление или обновление сведений об исследовании, обращайтесь по адресу register@clinicaltrials.gov. Как только изменение будет реализовано на clinicaltrials.gov, оно будет автоматически обновлено и на нашем веб-сайте. .

Подписаться