Esta página foi traduzida automaticamente e a precisão da tradução não é garantida. Por favor, consulte o versão em inglês para um texto fonte.

Aprimorando a compreensão interdisciplinar das anotações oftalmológicas por meio de um modelo local de linguagem ampla

1 de outubro de 2024 atualizado por: John J Chen

Melhorando a compreensão interdisciplinar de notas oftalmológicas por meio de um modelo local de linguagem ampla

Este estudo prospectivo, randomizado e controlado avaliou a eficácia da adição de resumos em linguagem simples (PLSs) gerados pelo modelo de linguagem grande (LLM) às notas oftalmológicas padrão (SONs) para melhorar a compreensão entre prestadores de serviços não oftalmológicos. O estudo utilizou pesquisas para avaliar a compreensão e a satisfação dos prestadores de serviços não oftalmológicos com as anotações e a avaliação dos oftalmologistas sobre a precisão, segurança e carga de tempo do PLS. Também foi realizada uma análise semântica e linguística objetiva dos PLSs.

Visão geral do estudo

Tipo de estudo

Intervencional

Inscrição (Real)

851

Estágio

  • Não aplicável

Contactos e Locais

Esta seção fornece os detalhes de contato para aqueles que conduzem o estudo e informações sobre onde este estudo está sendo realizado.

Locais de estudo

    • Minnesota
      • Rochester, Minnesota, Estados Unidos, 55905
        • Mayo Clinic

Critérios de participação

Os pesquisadores procuram pessoas que se encaixem em uma determinada descrição, chamada de critérios de elegibilidade. Alguns exemplos desses critérios são a condição geral de saúde de uma pessoa ou tratamentos anteriores.

Critérios de elegibilidade

Idades elegíveis para estudo

  • Adulto
  • Adulto mais velho

Aceita Voluntários Saudáveis

Não

Descrição

Critérios de inclusão:

  • Avaliação por um oftalmologista do Departamento de Oftalmologia da Mayo Clinic em Rochester, MN, em ambiente hospitalar ou ambulatorial, entre 1º de fevereiro de 2024 e 31 de maio de 2024.

Critérios de exclusão:

  • Nenhum prestador de cuidados não oftalmologista da rede no prontuário médico
  • Visitas apenas de procedimento contendo apenas uma nota de procedimento

Plano de estudo

Esta seção fornece detalhes do plano de estudo, incluindo como o estudo é projetado e o que o estudo está medindo.

Como o estudo é projetado?

Detalhes do projeto

  • Finalidade Principal: Pesquisa de serviços de saúde
  • Alocação: Randomizado
  • Modelo Intervencional: Atribuição Paralela
  • Mascaramento: Nenhum (rótulo aberto)

Armas e Intervenções

Grupo de Participantes / Braço
Intervenção / Tratamento
Sem intervenção: Controlar
Os participantes recebem notas oftalmológicas padrão sem quaisquer acréscimos.
Experimental: Intervenção
Os participantes recebem notas oftalmológicas padrão com um resumo em linguagem simples gerado pelo LLM, revisado e editado pelo oftalmologista. O resumo em linguagem simples está claramente marcado como gerado como parte de uma iniciativa de Melhoria da Qualidade.
Estudo prospectivo e randomizado de melhoria da qualidade com implementação no mundo real de notas de resumos de oftalmologia em linguagem simples gerados por modelo de linguagem grande.

O que o estudo está medindo?

Medidas de resultados primários

Medida de resultado
Descrição da medida
Prazo
Compreensão e satisfação de notas para não oftalmologistas
Prazo: Desde a inscrição até 8 semanas após a inscrição

Avaliado por meio de respostas de pesquisa que avaliam a compreensão do diagnóstico oftalmológico do paciente, a satisfação com a nota e a preferência geral entre Nota Oftalmológica Padrão e Nota Oftalmológica Padrão + Resumo em Linguagem Simples.

O grau de compreensão foi avaliado na seguinte escala Likert:

Nada Neutro Moderadamente Muito

A satisfação foi avaliada na seguinte escala Likert:

Nada satisfeito Um pouco insatisfeito Neutro Um pouco satisfeito Satisfeito

A preferência entre os tipos de notas foi avaliada na seguinte escala Likert:

Nota Padrão, bastante Nota Padrão, um tanto Neutro Resumo em Linguagem Simples, um tanto Resumo em Linguagem Simples, bastante

Desde a inscrição até 8 semanas após a inscrição

Medidas de resultados secundários

Medida de resultado
Descrição da medida
Prazo
Avaliação oftalmológica da precisão do resumo e carga de tempo
Prazo: Avaliado em um único momento <24 horas após a inscrição

Avaliado por meio de respostas de pesquisa sobre a precisão do resumo em linguagem simples ao refletir as descobertas da Nota Oftalmológica Padrão, tempo gasto na revisão/edição e carga percebida.

A precisão em refletir os resultados foi avaliada na seguinte escala Likert:

Nada Neutro Um pouco Muito

O tempo gasto na revisão/edição foi relatado usando as seguintes opções:

<1 minuto

  1. minuto
  2. minutos
  3. minutos
  4. minutos
  5. ou mais minutos

A sobrecarga percebida foi graduada na seguinte escala Likert:

Nada Neutro Um pouco Muito

Avaliado em um único momento <24 horas após a inscrição
Qualidade semântica e linguística de resumos em linguagem simples
Prazo: Avaliado em um único momento <24 horas após a inscrição

Facilidade de leitura Flesch

Escala: 0 (ruim) a 100 (bom)

Avaliado em um único momento <24 horas após a inscrição
Qualidade semântica e linguística de resumos em linguagem simples
Prazo: Avaliado em um único momento <24 horas após a inscrição

Nível de escolaridade Flesch-Kincaid

Escala: 0 (mais difícil de ler, série mais alta) a 80 (mais fácil de ler, série mais baixa)

Avaliado em um único momento <24 horas após a inscrição
Qualidade semântica e linguística de resumos em linguagem simples
Prazo: Avaliado em um único momento <24 horas após a inscrição

Índice de Medida Semântica do Gobbledygook (SMOG)

Escala: 0 (mais fácil de ler) a 11 (mais difícil de ler)

Avaliado em um único momento <24 horas após a inscrição
Qualidade semântica e linguística de resumos em linguagem simples
Prazo: Avaliado em um único momento <24 horas após a inscrição

Medida BERTScore de similaridade linguística

Escala: -1 (menos semelhante) a +1 (mais semelhante)

Avaliado em um único momento <24 horas após a inscrição
Qualidade semântica e linguística de resumos em linguagem simples
Prazo: Avaliado em um único momento <24 horas após a inscrição

Medida de similaridade de cosseno SBERT de similaridade linguística

Escala: -1 (menos semelhante) a +1 (mais semelhante)

Avaliado em um único momento <24 horas após a inscrição

Outras medidas de resultado

Medida de resultado
Descrição da medida
Prazo
Presença de erros, tipo de erros e danos potenciais dos erros
Prazo: Avaliado em um único momento & 24 horas após a inscrição e novamente em um único momento 8 semanas após a inscrição

Presença de qualquer informação incorreta ou ausente no Resumo em Linguagem Simples, taxas de erro, tipos de erros e classificação de danos potenciais.

Os tipos de erros foram relatados como:

Resultados do exame HPI Plano de diagnóstico Explicação da saúde ocular geral do paciente Outro N/A

A probabilidade de dano foi classificada na seguinte escala:

Baixo risco Médio risco Alto risco N/A

A classificação de dano potencial foi classificada na seguinte escala:

Danos leves ou moderados Morte ou danos graves

Avaliado em um único momento & 24 horas após a inscrição e novamente em um único momento 8 semanas após a inscrição

Colaboradores e Investigadores

É aqui que você encontrará pessoas e organizações envolvidas com este estudo.

Patrocinador

Investigadores

  • Diretor de estudo: John J Chen, MD, PhD, Mayo Clinic

Datas de registro do estudo

Essas datas acompanham o progresso do registro do estudo e os envios de resumo dos resultados para ClinicalTrials.gov. Os registros do estudo e os resultados relatados são revisados ​​pela National Library of Medicine (NLM) para garantir que atendam aos padrões específicos de controle de qualidade antes de serem publicados no site público.

Datas Principais do Estudo

Início do estudo (Real)

1 de fevereiro de 2024

Conclusão Primária (Real)

31 de maio de 2024

Conclusão do estudo (Real)

31 de maio de 2024

Datas de inscrição no estudo

Enviado pela primeira vez

30 de setembro de 2024

Enviado pela primeira vez que atendeu aos critérios de CQ

1 de outubro de 2024

Primeira postagem (Real)

3 de outubro de 2024

Atualizações de registro de estudo

Última Atualização Postada (Real)

3 de outubro de 2024

Última atualização enviada que atendeu aos critérios de controle de qualidade

1 de outubro de 2024

Última verificação

1 de outubro de 2024

Mais Informações

Termos relacionados a este estudo

Outros números de identificação do estudo

  • 24-000550

Plano para dados de participantes individuais (IPD)

Planeja compartilhar dados de participantes individuais (IPD)?

SIM

Descrição do plano IPD

Todos os IPD coletados.

Prazo de Compartilhamento de IPD

Início após publicação sem data de término

Critérios de acesso de compartilhamento IPD

Os dados subjacentes que apoiam as conclusões deste estudo podem ser disponibilizados a investigadores clínicos e investigadores mediante solicitação. Solicitações por escrito para compartilhamento de dados, incluindo um plano de análise, serão necessárias antes da aprovação. Essas solicitações serão avaliadas individualmente em consulta com os líderes da equipe de estudo e coinvestigadores, conforme apropriado. Caso outros investigadores estejam interessados ​​em realizar análises adicionais, essas solicitações poderão ser feitas ao autor correspondente (PDT) e as análises serão realizadas em colaboração com a Clínica Mayo. Em todos os casos, quaisquer dados e materiais a serem compartilhados serão divulgados através de um Contrato de Transferência de Materiais. Os dados a nível individual estarão disponíveis e a partilha de dados garantirá que os direitos e a privacidade dos indivíduos que participam na investigação permaneçam sempre protegidos. O prazo previsto para responder às solicitações iniciais de dados é de 1 mês.

Tipo de informação de suporte de compartilhamento de IPD

  • PROTOCOLO DE ESTUDO
  • ANALYTIC_CODE
  • CSR

Informações sobre medicamentos e dispositivos, documentos de estudo

Estuda um medicamento regulamentado pela FDA dos EUA

Não

Estuda um produto de dispositivo regulamentado pela FDA dos EUA

Não

produto fabricado e exportado dos EUA

Não

Essas informações foram obtidas diretamente do site clinicaltrials.gov sem nenhuma alteração. Se você tiver alguma solicitação para alterar, remover ou atualizar os detalhes do seu estudo, entre em contato com register@clinicaltrials.gov. Assim que uma alteração for implementada em clinicaltrials.gov, ela também será atualizada automaticamente em nosso site .

Se inscrever