Разработка мобильного приложения для поддержки академической успеваемости студентов-ветеранов

Цели этого этапа: 1) получить отзывы о мобильном приложении VetEd с помощью ветеранского юзабилити-тестирования; 2) оценить заинтересованность ветеранов, их удовлетворенность и удобство использования VetEd; 3) итеративно решать любые технологические проблемы и 4) собирать предварительную информацию о влиянии приложения VetEd на академическую деятельность (удержание, воспринимаемые способности к выполнению задач по курсу и самоэффективность в обучении) и реинтеграцию в сообщество. Исследователи проведут пилотное юзабилити-тестирование с 15 ветеранами, которые соответствуют критериям приемлемости, в три этапа. Каждая волна юзабилити-тестирования будет включать 5 участников, исходя из того, что примерно 80% проблем юзабилити можно обнаружить, используя выборку из 4–5 участников на волну.

Набор персонала. Участниками будут 15 ветеранов, набранных из Бедфордского VAMC VITAL, CWT и местных колледжей. Как отмечалось на Этапе 1, исходя из количества студентов-ветеранов, обращающихся за услугами по поддержке образования в учреждении в Бедфорде, и количества студентов-ветеранов в сообществе, у исследователей не должно возникнуть трудностей с набором предложенного количества участников. Кроме того, у этой исследовательской группы не возникло проблем с достижением ранее более высоких целей набора для недавнего РКИ VITAL-SEd (n = 43) с использованием аналогичных стратегий набора.

Скрининг. Потенциальные участники будут предварительно проверены по телефону, чтобы определить, соблюдаются ли основные критерии приемлемости исследования. Лица, которые сохранят право на участие после предварительного отбора, будут приглашены на всеобъемлющее очное базовое занятие. В начале базового сеанса исследователи предоставят участникам подробную информацию об исследовании и получат письменное информированное согласие. После информированного согласия участники пройдут оценку исследования и с помощью персонала загрузят приложение на свое личное устройство.

Процедуры юзабилити-тестирования. Участникам будет предоставлено приложение и информация для входа в систему, которые они смогут использовать дома в течение четырех недель. В течение этого времени они будут выполнять по крайней мере две задачи в приложении в течение недели, включая создание образовательной дорожной карты, отслеживание заданий курса, изучение успешных стратегий обучения, выполнение упражнения по преодолению трудностей и поиск информации, связанной с льготами GI Bill.

Участники будут оцениваться после использования приложения в следующих областях: (а) полезность приложения: могут ли пользователи успешно выполнять назначенные задачи в приложении, (б) эффективность: способность быстро и легко выполнять назначенные образовательные задачи приложения, (в) обучаемость : возможность достижения заранее определенных целей навигации по приложению (например, доступ и ввод информации в образовательную дорожную карту), (d) удовлетворение: чувства и мнения пользователей о приложении, связанные с их образовательной функцией и соответствием потребностям психического здоровья, и (e) вовлеченность: начальное и устойчивое взаимодействие между пользователем и мобильное приложение. Показатели юзабилити будут включать две количественные шкалы юзабилити системы (SUS; AES), выполнение задачи (количественное), вход в приложение и информацию об использовании (вовлечение). Воспринимаемая полезность, вовлеченность и общая удовлетворенность также будут оцениваться с помощью качественного интервью после тестирования приложения (1,5 часа).

После каждого раунда тестирования исследовательская группа будет работать с командой программистов над улучшением приложения. Будут использованы следующие меры: Диагностическая мера психического здоровья: Структурированное клиническое интервью для DSM (SCID-5) — это надежный полуструктурированный инструмент, являющийся золотым стандартом диагностики психических расстройств.

Шкала удобства использования системы (SUS): SUS представляет собой показатель из 10 пунктов, оцениваемый по 5-балльной шкале Лайкерта, который оценивает взаимодействие человека с компьютером. Оценка SUS выше 58 считается выше среднего, а оценка SUS выше 80 означает оценку, выше которой участники, вероятно, порекомендуют продукт друзьям.

E-Scale приемлемости (AES): AES представляет собой валидированную меру приемлемости мобильных вмешательств, состоящую из 5 пунктов, с пороговым значением 80% для приемлемости, охватывающей общую и конкретную удовлетворенность компонентов.

Результаты академического функционирования. Расширение академического функционирования является основной целью приложения VetEd, не связанной с удобством использования. Следовательно, также будет собираться и описываться предварительная информация об учебном функционировании, связанная с академической самоэффективностью, готовностью к задачам курса и предполагаемой уверенностью в завершении/удержании курса. В соответствии с исследованиями в области образования, предполагающими, что факторы, не относящиеся к среднему баллу, могут быть более сильными предикторами успеха в учебе и окончания учебы, исследователи будут специально оценивать академическую самоэффективность (шкала академической самоэффективности: ASES), способность выполнять задания курса (преодоление образовательных барьеров). Подшкала: CWBS), а также уверенность в выполнении курсовой работы и успеваемость (качественное собеседование).

Реинтеграция в общество: Анкета для военных и гражданских лиц (M2C-Q) состоит из 16 пунктов, предназначенных для измерения аспектов реинтеграции в общество, связанных с производительностью (в образовании, работе и домашней жизни); социальные отношения; участие сообщества; воспринимаемый смысл жизни, забота о себе и досуг.

Управление данными. VetEd будет разработан и размещен на защищенном сервере компанией Geisel Software, Inc. Приложение будет собирать данные об удобстве использования и контенте, но не будет собирать личную информацию. Закодированные имена пользователей и идентификаторы будут использоваться для входа в приложение. Когда сбор данных будет завершен, Geisel Software, Inc. передаст закодированные данные об удобстве использования исследовательскому персоналу Bedford VAMC. Данные не будут передаваться за пределы виртуального устройства.

Бумажные файлы исследований будут храниться в Бедфордском VAMC в запираемом шкафу и использовать обезличенные идентификационные номера. Данные будут проверены на наличие несоответствий, упущений и ошибок. Ассистент-исследователь будет обучен процедурам управления данными и конфиденциальности и будет нести ответственность за ввод данных и управление ими.

План анализа данных. Основными количественными показателями приемлемости и удобства использования на Этапе 2 будут E-шкала приемлемости и шкала удобства использования системы (SUS) соответственно. Исследователи ожидают, что рейтинги приемлемости E-Scale и SUS будут повышаться по трем волнам проверки приложений, и что к третьей волне исследователи достигнут эталона 80% по E-шкале приемлемости и 68 баллов по SUS (хорошо). приемлемость). Дополнительные данные будут предоставлены в ходе качественных интервью с использованием процессов RAP, описанных в Этапе 1. Исследователи также оценят осуществимость и вовлеченность, измерив долю людей, которые успешно завершили 4-недельное тестирование приложения, выполнив не менее 5 действий (из запрошенных 8, 2 в неделю) или 63% выполнения программы, в соответствии с среднее количество завершенных сеансов, выявленное в ходе предыдущих мобильных вмешательств при хронических состояниях. Исследователи также оценят академическое функционирование (академическая самоэффективность, выполнение задач курса и предполагаемое удержание / завершение курса) и реинтеграцию в сообщество (M2C-Q) до и после использования приложения для каждого учащегося-ветерана, в частности, чтобы 1) охарактеризовать выборку с точки зрения базового академического функционирования и реинтеграции в сообщество, 2) описать изменения в академическом функционировании и реинтеграции в сообщество, и 3) проверить осуществимость этих мер в ожидании более крупного будущего РКИ.