Projetando um aplicativo móvel para apoiar o sucesso acadêmico de estudantes veteranos

Os objetivos desta fase são: 1) obter feedback sobre o aplicativo móvel VetEd por meio de testes de usabilidade do Veteran; 2) avaliar o interesse, satisfação e usabilidade do Veteran Veteran; 3) abordar iterativamente quaisquer preocupações tecnológicas e 4) coletar informações preliminares sobre o impacto do aplicativo VetEd no funcionamento acadêmico (retenção, percepção da capacidade de tarefas do curso e autoeficácia educacional) e reintegração na comunidade. Os investigadores realizarão testes piloto de usabilidade com 15 veteranos que atendem aos critérios de elegibilidade, conduzidos em três ondas. Cada onda de teste de usabilidade incluirá 5 participantes, com base na descoberta de que aproximadamente 80% dos problemas de usabilidade podem ser detectados usando uma amostra de 4 a 5 participantes por onda.

Recrutamento. Os participantes serão 15 veteranos recrutados do Bedford VAMC VITAL, CWT e faculdades locais. Conforme observado na Fase 1, com base na taxa de alunos veteranos que procuram serviços de apoio educacional nas instalações de Bedford e no número de alunos veteranos na comunidade, os investigadores não devem ter dificuldade em recrutar o número proposto de participantes. Além disso, este grupo de pesquisa não teve problemas em atingir metas de recrutamento anteriores mais altas para o recente ECR VITAL-SEd (n = 43) usando estratégias de recrutamento semelhantes.

Triagem. Os participantes em potencial serão pré-selecionados por telefone para determinar se os critérios básicos de elegibilidade do estudo foram atendidos. Os indivíduos que permanecerem elegíveis após a pré-triagem serão convidados a participar de uma sessão de linha de base presencial abrangente. No início da sessão de linha de base, os investigadores fornecerão aos participantes informações detalhadas sobre o estudo e obterão o consentimento informado por escrito. Após o consentimento informado, os participantes completarão as avaliações do estudo e, com a ajuda da equipe, farão o download do aplicativo em seu dispositivo pessoal.

Procedimentos de teste de usabilidade. Os participantes receberão o aplicativo e informações de login, para utilizar em casa durante um período de quatro semanas. Durante esse período, eles concluirão pelo menos duas tarefas no aplicativo por semana, incluindo a criação de um roteiro educacional, acompanhamento das atribuições do curso, aprendizado sobre estratégias de estudo bem-sucedidas, conclusão de um exercício de enfrentamento e localização de informações relacionadas aos benefícios do GI Bill.

Os participantes serão avaliados após o uso do aplicativo nas seguintes áreas: (a) utilidade do aplicativo: se os usuários podem concluir com êxito as tarefas designadas no aplicativo, (b) eficácia: a capacidade de realizar as tarefas do aplicativo educacional atribuídas de maneira rápida e fácil, (c) facilidade de aprendizado : a capacidade de atender a objetivos de navegação de aplicativos pré-determinados (por exemplo, acessar e inserir informações no roteiro educacional), (d) satisfação: sentimentos e opiniões dos usuários sobre o aplicativo relacionados ao seu funcionamento educacional e alinhamento com as necessidades de saúde mental, e (e) engajamento: interação inicial e sustentada entre um usuário e um aplicativo móvel. As medidas de usabilidade incluirão duas escalas quantitativas de usabilidade do sistema (SUS; AES), conclusão da tarefa (quantitativa), login do aplicativo e informações de uso (engajamento). A utilidade percebida, o engajamento e a satisfação geral também serão avaliados por meio de uma entrevista qualitativa pós-teste do aplicativo (1,5 horas).

Após cada rodada de testes, a equipe de investigação trabalhará com a equipe de programação para melhorar o aplicativo. As seguintes medidas serão utilizadas: Medida de diagnóstico de saúde mental: A Entrevista Clínica Estruturada para o DSM (SCID-5) é um instrumento semiestruturado confiável que é o padrão-ouro para o diagnóstico de transtornos de saúde mental.

Escala de Usabilidade do Sistema (SUS): O SUS é uma medida de 10 itens, pontuada em uma escala Likert de 5 pontos, que avalia a interação humano-computador. Uma pontuação SUS acima de 58 é considerada acima da média, e uma pontuação SUS acima de 80, uma pontuação acima da qual os participantes provavelmente recomendam o produto a amigos.

Escala E de aceitabilidade (AES): A AES é uma medida validada de 5 itens da aceitabilidade de intervenções móveis, que tem um corte de 80% para aceitabilidade, abrangendo satisfação geral e componente específico.

Resultados do Funcionamento Acadêmico: O aumento da função acadêmica é o principal objetivo não relacionado à usabilidade do aplicativo VetEd. Consequentemente, informações preliminares sobre o funcionamento educacional relacionadas à autoeficácia acadêmica, preparação para as tarefas do curso e confiança percebida na conclusão/retenção do curso também serão coletadas e descritas. Em consonância com a pesquisa educacional que sugere que fatores não GPA podem ser preditores mais fortes de sucesso educacional e graduação, os investigadores avaliarão especificamente a autoeficácia acadêmica (Escala de autoeficácia acadêmica: ASES), a capacidade de concluir as tarefas do curso (The Coping With Education Barriers Subescala: CWBS) e confiança em concluir o curso e retenção acadêmica (entrevista qualitativa).

Reintegração na comunidade: O questionário Militar para Civil (M2C-Q) é um item de 16 itens destinado a medir as dimensões da reintegração na comunidade relacionadas à produtividade (na educação, no trabalho e na vida doméstica); Relações sociais; envolvimento da comunidade; e sentido percebido na vida, autocuidado e lazer.

Gestão de dados. O VetEd será desenvolvido e hospedado em um servidor seguro pela Geisel Software, Inc. O aplicativo coletará dados de usabilidade e conteúdo, mas não coletará informações de identificação pessoal. Nomes de usuário e IDs codificados serão usados ​​para login no aplicativo. Quando a coleta de dados estiver concluída, a Geisel Software, Inc. transferirá os dados de usabilidade codificados para a equipe de pesquisa do Bedford VAMC. Os dados não serão compartilhados fora do VA.

Os arquivos de pesquisa em papel serão mantidos no Bedford VAMC em um armário trancado e usarão números de identificação não identificados. Os dados serão verificados quanto a inconsistências, omissões e erros. O assistente de pesquisa será treinado em gerenciamento de dados e procedimentos de confidencialidade e será responsável pela entrada e gerenciamento de dados.

Plano de análise de dados. As principais medidas quantitativas da Fase 2 de aceitabilidade e usabilidade serão a Escala E de Aceitabilidade e a Escala de Usabilidade do Sistema (SUS), respectivamente. Os investigadores esperam que as classificações da Escala E de Aceitabilidade e do SUS aumentem nas 3 ondas de revisão do aplicativo e que, na terceira onda, os investigadores alcancem a referência de 80% na Escala E de Aceitabilidade e 68 no SUS (bom aceitabilidade). Dados adicionais serão fornecidos pelas entrevistas qualitativas, usando os processos RAP descritos na Fase 1. Os investigadores também avaliarão a viabilidade e o engajamento medindo a proporção de indivíduos que concluíram com êxito o teste de aplicativo de 4 semanas, com pelo menos 5 atividades concluídas (das 8 solicitadas, 2 por semana) ou 63% do programa concluído, de acordo com o número médio de sessões concluídas encontradas em intervenções móveis anteriores para condições crônicas. Os investigadores também avaliarão o funcionamento acadêmico (autoeficácia acadêmica, conclusão da tarefa do curso e percepção de retenção/conclusão do curso) e reintegração na comunidade (M2C-Q) antes e depois do uso do aplicativo para cada aluno veterano especificamente para 1) caracterizar a amostra em termos de funcionamento acadêmico básico e reintegração na comunidade, 2) descrever mudanças no funcionamento acadêmico e reintegração na comunidade, e 3) testar a viabilidade dessas medidas em antecipação a um RCT maior e futuro.