Avaliando a tomada de decisão usando o ChatGPT-4 entre os estagiários em cirurgia (EDuCATe)
Avaliando o ChatGPT-4 como uma ferramenta de suporte de tomada de decisão para estagiários cirúrgicos
Visão geral do estudo
Status
Condições
Intervenção / Tratamento
Descrição detalhada
Fundo:
A inteligência artificial (IA) está transformando rapidamente o cenário médico, oferecendo novas possibilidades em educação, diagnóstico e apoio à decisão. Na cirurgia, a tomada de decisão clínica é uma competência central desenvolvida progressivamente através do treinamento. O ChatGPT-4, um modelo de idioma grande de última geração desenvolvido pelo OpenAI, demonstrou competência em lidar com consultas médicas e tarefas de raciocínio clínico. No entanto, seu desempenho na tomada de decisões cirúrgicas complexas em comparação aos estagiários humanos permanece amplamente inexplorada.
Objetivo:
O estudo Educate tem como objetivo avaliar a precisão e a confiabilidade das respostas do ChatGPT-4 a cenários clínicos envolvendo casos de cirurgia geral. Especificamente, o estudo compara o desempenho do modelo com o de residentes juniores, residentes seniores e cursantes para entender se o ChatGPT-4 pode servir como uma ferramenta educacional segura e eficaz para estagiários cirúrgicos.
Métodos:
Sete cenários clínicos serão construídos usando dados reais do paciente anonimizado, representando condições comuns de cirurgia geral. Cada caso será apresentado passo a passo, imitando o processo de tomada de decisão clínica. Os participantes responderão a uma pergunta relacionada à escolha do tratamento.
Os participantes incluirão residentes juniores (PGY1-2), residentes seniores (PGY3+) e cirurgiões de um único departamento cirúrgico. O ChatGPT-4 será solicitado com os mesmos cenários. Todos os participantes serão instruídos a concluir os casos sem usar recursos externos, como ferramentas de IA ou pesquisas na Internet, confiando apenas em seu conhecimento clínico.
A análise estatística comparará o desempenho entre os grupos usando testes não paramétricos (por exemplo, soma de classificação de Wilcoxon).
Resultados esperados:
O estudo levanta a hipótese de que o ChatGPT-4 terá um nível comparável aos residentes seniores ou em cirurgiões e superará os residentes juniores na tomada de decisões. Se confirmado, esses resultados poderiam apoiar o uso seguro do ChatGPT-4 como um auxílio ao treinamento para os residentes cirúrgicos juniores, potencialmente melhorando os resultados educacionais e as habilidades de raciocínio clínico.
Significado:
Este estudo fornecerá uma nova visão do papel da IA na educação cirúrgica. Ao comparar rigorosamente os recursos de tomada de decisão do ChatGPT-4 com os de cirurgiões humanos em vários níveis, o estudo espera definir sua utilidade, limitações e uso apropriado em programas de treinamento de residência.
Tipo de estudo
Inscrição (Estimado)
Contactos e Locais
Contato de estudo
- Nome: Manuela Mastronardi
- Número de telefone: 0403994152
- E-mail: manuela.mastronardi@gmail.com
Locais de estudo
-
-
-
Trieste, Itália
- University of Trieste
-
Contato:
- Manuela Mastronardi
- Número de telefone: 0403994152
- E-mail: manuela.mastronardi@gmail.com
-
Investigador principal:
- Silvia Palmisano
-
Investigador principal:
- Manuela Mastronardi
-
Subinvestigador:
- Paola Germani
-
Subinvestigador:
- Margherita Sandano
-
-
Critérios de participação
Critérios de elegibilidade
Idades elegíveis para estudo
- Filho
- Adulto
- Adulto mais velho
Aceita Voluntários Saudáveis
Método de amostragem
População do estudo
Descrição
Critérios de inclusão:
- Inscrito ativamente ou empregado na residência ou departamento de cirurgia geral da instituição participante
- Disposição de participar e completar todos os cenários de caso clínico
- Consentimento para participar do estudo
Critérios de exclusão:
- Respostas incompletas
- Uso de assistência externa (por exemplo, pesquisa na Internet, ferramentas de IA) ao responder cenários, como auto-relatado nas instruções
Plano de estudo
Como o estudo é projetado?
Detalhes do projeto
Coortes e Intervenções
Grupo / Coorte |
Intervenção / Tratamento |
|---|---|
|
Residentes
Residentes juniores e seniores em cirurgia geral
|
Sete casos clínicos que devem ser analisados
|
|
Consultores
Cirurgiões gerais sênior
|
Sete casos clínicos que devem ser analisados
|
|
Chatgpt 4
Sistema de inteligência artificial
|
Sete casos clínicos que devem ser analisados
|
O que o estudo está medindo?
Medidas de resultados primários
Medida de resultado |
Descrição da medida |
Prazo |
|---|---|---|
|
Proporção de respostas corretas
Prazo: Linha de base
|
Resultado binário (decisão correta vs. incorreta)
|
Linha de base
|
Medidas de resultados secundários
Medida de resultado |
Descrição da medida |
Prazo |
|---|---|---|
|
Comparação de precisão nos níveis de experiência
Prazo: Linha de base
|
Proporção de respostas corretas do grupo: residentes juniores, residentes seniores, cirurgiões frequentados, chatgpt-4
|
Linha de base
|
|
Nível de confiança
Prazo: Linha de base
|
Os participantes e o ChatGPT são solicitados a classificar como eles se sentem confiantes em sua resposta (1-5 Likert Scale, onde 1 significa não confiante e 5 muito confiante)
|
Linha de base
|
|
Porcentagem de uso de IA para avaliação de casos clínicos
Prazo: Linha de base
|
Os participantes são questionados se eles usam ou não Chatgpt em sua atividade clínica
|
Linha de base
|
Colaboradores e Investigadores
Patrocinador
Datas de registro do estudo
Datas Principais do Estudo
Início do estudo (Estimado)
Conclusão Primária (Estimado)
Conclusão do estudo (Estimado)
Datas de inscrição no estudo
Enviado pela primeira vez
Enviado pela primeira vez que atendeu aos critérios de CQ
Primeira postagem (Real)
Atualizações de registro de estudo
Última Atualização Postada (Real)
Última atualização enviada que atendeu aos critérios de controle de qualidade
Última verificação
Mais Informações
Termos relacionados a este estudo
Palavras-chave
Outros números de identificação do estudo
- AI-Surgical training
Plano para dados de participantes individuais (IPD)
Planeja compartilhar dados de participantes individuais (IPD)?
Informações sobre medicamentos e dispositivos, documentos de estudo
Estuda um medicamento regulamentado pela FDA dos EUA
Estuda um produto de dispositivo regulamentado pela FDA dos EUA
Essas informações foram obtidas diretamente do site clinicaltrials.gov sem nenhuma alteração. Se você tiver alguma solicitação para alterar, remover ou atualizar os detalhes do seu estudo, entre em contato com register@clinicaltrials.gov. Assim que uma alteração for implementada em clinicaltrials.gov, ela também será atualizada automaticamente em nosso site .