- ICH GCP
- Registro de ensaios clínicos dos EUA
- Ensaio Clínico NCT07470463
Avaliação do Diagnóstico Diferencial Visual de Uma Só Vez (OSVDE) e da Não Inferioridade Conversacional de Múltiplos Passos (MSCNE) em Entrevistas Médicas com IA. (OSVDE-MSCNE)
Avaliação do Desempenho do Sistema de Entrevista Médica e Diagnóstico por IA: Diagnóstico Diferencial de Visão Única (OSVDE) e Avaliação de Não-Inferioridade Conversacional de Múltiplos Passos (MSCNE).
Este estudo avalia o desempenho diagnóstico de um sistema multimodal de inteligência artificial (IA) (AIMD.1) utilizando imagens médicas anonimizadas e simulações de pacientes semi-sintéticas. O estudo combina a análise retrospetiva de conjuntos de dados de imagens publicamente disponíveis com a recolha prospetiva de dados de clínicos certificados que completam tarefas de avaliação diagnóstica.
Na fase de Avaliação Diferencial de Visão Única (OSVDE), os clínicos analisam imagens médicas individuais anonimizadas e geram uma lista ordenada de diagnósticos potenciais baseada apenas em características visuais. Na fase de Avaliação de Não-Inferioridade Conversacional Multi-Etapas (MSCNE), os clínicos completam avaliações diagnósticas utilizando simulações de pacientes semi-sintéticas derivadas de imagens médicas anonimizadas. O desempenho dos clínicos será comparado com o do sistema de IA nas mesmas tarefas diagnósticas.
Os participantes humanos consistem exclusivamente em clínicos certificados que fornecem respostas diagnósticas. As imagens médicas e os casos simulados são materiais de estudo e não são considerados participantes do estudo. Não são utilizados dados identificáveis de pacientes, e o sistema de IA é avaliado num ambiente de investigação offline, não sendo utilizado para tomada de decisões clínicas ou cuidados ao paciente.
Visão geral do estudo
Status
Intervenção / Tratamento
Descrição detalhada
Os sistemas de inteligência artificial (IA) demonstraram capacidades promissoras no diagnóstico médico; no entanto, é necessária uma avaliação rigorosa de referência antes da implementação clínica. O AIMD.1 é um sistema de diagnóstico multimodal de IA concebido para auxiliar o raciocínio clínico através da análise de imagens médicas e de interações de diagnóstico conversacionais.
Este estudo avalia o desempenho diagnóstico do AIMD.1 utilizando uma combinação de conjuntos de dados de imagens retrospetivos e tarefas de avaliação clínica prospetivas. O objetivo é determinar se o sistema de IA atinge uma precisão diagnóstica comparável à de clínicos certificados por conselho, em condições de referência controladas.
A avaliação inclui duas fases complementares.
Avaliação Diferencial de Visão Única (OSVDE):
Nesta fase, o sistema de IA e os participantes clínicos analisam independentemente imagens médicas individuais desidentificadas e geram listas ordenadas de diagnósticos potenciais baseadas unicamente em características visuais. A avaliação utilizará aproximadamente 11.500-15.000 imagens médicas desidentificadas de múltiplas especialidades médicas e categorias de doenças, com diagnósticos de referência verificados.
Avaliação de Não Inferioridade Conversacional de Múltiplos Passos (MSCNE):
Nesta fase, o sistema de IA e os clínicos completam tarefas de diagnóstico utilizando simulações de doentes semi-sintéticas derivadas de imagens médicas desidentificadas. Estas simulações fornecem informação clínica estruturada através de interações conversacionais, permitindo a avaliação do raciocínio diagnóstico em múltiplos passos. Serão avaliados aproximadamente 380-500 casos simulados.
Participarão no estudo aproximadamente 10-30 clínicos certificados por conselho. Os clínicos completarão sessões de avaliação diagnóstica remotamente e fornecerão diagnósticos diferenciais para subconjuntos dos casos de imagem e simulação. Os participantes humanos consistem exclusivamente em clínicos que fornecem respostas de diagnóstico. Os conjuntos de dados de imagem e os casos sintéticos servem como materiais de estudo e não são considerados participantes.
Todas as imagens utilizadas no estudo são desidentificadas e têm origem em fontes publicamente disponíveis ou conjuntos de dados que cumprem os padrões de desidentificação. Passos adicionais de pré-processamento asseguram a remoção de qualquer informação potencialmente identificável antes da inclusão no conjunto de dados de investigação.
O sistema de IA é avaliado num ambiente de investigação offline e não é utilizado para orientar cuidados clínicos reais ou gestão de doentes. O estudo está concebido como uma avaliação de desempenho de referência antes de qualquer validação prospetiva envolvendo doentes reais.
As medidas de resultado primárias incluem métricas de precisão diagnóstica, tais como a precisão diagnóstica Top-1, definida como a proporção de casos em que o diagnóstico primário do sistema de IA corresponde ao diagnóstico de referência. Os resultados secundários incluem a precisão diagnóstica Top-5, métricas de calibração, sensibilidade e especificidade entre categorias de doenças, e medidas de tempo até ao diagnóstico em cenários de diagnóstico conversacional.
A análise de dados estimará a precisão diagnóstica com intervalos de confiança e comparará o desempenho do sistema de IA com o desempenho dos clínicos utilizando testes estatísticos emparelhados e análises de não inferioridade.
As respostas dos clínicos são registadas utilizando identificadores anónimos de estudo, e apenas serão relatados resultados de desempenho agregados. Nenhuma informação identificável sobre clínicos ou doentes será recolhida ou publicada.
Prevê-se que a duração do estudo seja de aproximadamente seis meses, incluindo a preparação do conjunto de dados, as sessões de avaliação clínica e a análise estatística.
O protocolo ID 1026 foi verificado como Isento de acordo com 45CFR46.104(d) Ex em 03/10/2026 pela Solutions IRB (855) 226-4472 (www.solutionsirb.com)
Tipo de estudo
Inscrição (Estimado)
Contactos e Locais
Contato de estudo
- Nome: Luis R Soenksen, MSE, PhD
- Número de telefone: (617) 936-9293
- E-mail: soenksen@nollahealth.com
Estude backup de contato
- Nome: Sean Geiger, B.S.
- Número de telefone: (412) 412-8786
- E-mail: sean@nollahealth.com
Locais de estudo
-
-
New York
-
New York, New York, Estados Unidos, 10003
- Recrutamento
- Nolla Health (Magic Health Inc.)
-
Contato:
- Sean Geiger, B.S.
- Número de telefone: (412) 412-8786
- E-mail: sean@nollahealth.com
-
Contato:
- Luis R Soenksen, MSE, PhD
- Número de telefone: (617)936-9293
- E-mail: soenksen@nollahealth.com
-
Investigador principal:
- Luis R Soenksen, MSE, PhD
-
Subinvestigador:
- Sean Geiger, B.S.
-
Subinvestigador:
- Luis Wenus
-
-
Critérios de participação
Critérios de elegibilidade
Idades elegíveis para estudo
- Adulto
- Adulto mais velho
Aceita Voluntários Saudáveis
Método de amostragem
População do estudo
Os participantes são recrutados através de redes profissionais e associações médicas.
Nenhum paciente está inscrito neste estudo.
Descrição
Critérios de Inclusão:
- Certificação ativa em Dermatologia, Medicina Interna, Otorrinolaringologia, Ginecologia, Ortopedia, Pediatria, Geriatria, Medicina de Emergência, Oftalmologia, Psiquiatria, Endocrinologia, Medicina Familiar ou especialidade estreitamente relacionada
- Idade igual ou superior a 18 anos
- Capacidade de completar sessões de avaliação diagnóstica remotamente usando um computador ou tablet com acesso fiável à internet
Critérios de Exclusão:
- Perda da certificação ativa numa especialidade elegível
- Incapacidade de completar a sessão de avaliação remotamente
Plano de estudo
Como o estudo é projetado?
Detalhes do projeto
Coortes e Intervenções
Grupo / Coorte |
Intervenção / Tratamento |
|---|---|
|
Participantes Clínicos
Clínicos licenciados que participam em tarefas de avaliação diagnóstica utilizando imagens médicas desidentificadas e simulações de pacientes semi-sintéticas para avaliar a precisão do diagnóstico.
Os clínicos fornecem diagnósticos diferenciais para comparação de referência com um sistema de diagnóstico de IA.
|
O AIMD.1 (também conhecido como agente NollaMD) é um sistema de diagnóstico de inteligência artificial (IA) multimodal concebido para gerar diagnósticos diferenciais com base na análise de imagens médicas e informações clínicas estruturadas.
Neste estudo, o sistema é avaliado utilizando imagens médicas anonimizadas e simulações de pacientes semi-sintéticas em condições de investigação controladas.
O sistema de IA gera resultados de diagnóstico classificados e pontuações de confiança associadas, que são comparados com diagnósticos de referência e métricas de desempenho clínico.
O sistema é avaliado num ambiente de investigação offline.
Os resultados da IA não são utilizados para tomada de decisões clínicas, gestão de pacientes ou cuidados médicos no mundo real.
Outros nomes:
|
O que o estudo está medindo?
Medidas de resultados primários
Medida de resultado |
Descrição da medida |
Prazo |
|---|---|---|
|
Exatidão de Diagnóstico Top-1
Prazo: Após a conclusão das avaliações diagnósticas (até 6 meses)
|
Proporção de casos avaliados em que o diagnóstico primário gerado pelo Sistema de Diagnóstico por IA corresponde ao diagnóstico de referência (verdadeiro).
A precisão será calculada através de casos de imagens médicas anonimizadas e casos de simulação de pacientes semi-sintéticos e comparada com o desempenho clínico.
|
Após a conclusão das avaliações diagnósticas (até 6 meses)
|
Medidas de resultados secundários
Medida de resultado |
Descrição da medida |
Prazo |
|---|---|---|
|
Precisão Diagnóstica Top-5
Prazo: Após a conclusão das avaliações diagnósticas (até 6 meses)
|
Proporção de casos avaliados em que o diagnóstico de referência correto aparece entre os cinco principais diagnósticos classificados gerados pelo Sistema de Diagnóstico por IA.
|
Após a conclusão das avaliações diagnósticas (até 6 meses)
|
|
Precisão Diagnóstica dos Participantes Clínicos
Prazo: No final das avaliações diagnósticas (até 6 meses)
|
Proporção de casos avaliados em que o diagnóstico primário do participante clínico corresponde ao diagnóstico de referência, calculada através dos casos de imagem e simulação atribuídos.
|
No final das avaliações diagnósticas (até 6 meses)
|
|
Não inferioridade da precisão de diagnóstico por IA em comparação com clínicos
Prazo: Após a conclusão das avaliações de diagnóstico (até 6 meses)
|
Diferença na precisão diagnóstica Top-1 entre o Sistema de Diagnóstico de IA e os participantes clínicos.
A não inferioridade será avaliada usando uma margem pré-definida de 5%.
|
Após a conclusão das avaliações de diagnóstico (até 6 meses)
|
|
Calibração da Confiança do Diagnóstico por IA
Prazo: Na conclusão das avaliações diagnósticas (até 6 meses)
|
Desempenho de calibração das pontuações de confiança diagnóstica geradas por IA avaliadas usando o Erro de Calibração Esperado (ECE).
|
Na conclusão das avaliações diagnósticas (até 6 meses)
|
|
Área Sob a Curva Característica de Operação do Receptor (AUC) e Curva de Precisão-Recall (PRC)
Prazo: No final das avaliações de diagnóstico (até 6 meses)
|
Área sob a curva de características de operação do recetor e a Curva de Precisão-Recall para classificação de diagnóstico de IA em todas as categorias de doenças.
|
No final das avaliações de diagnóstico (até 6 meses)
|
|
Tempo até ao Diagnóstico em Simulações Conversacionais
Prazo: No final das avaliações de simulação (até 6 meses)
|
Número de voltas de conversação necessárias pelo sistema de IA e participantes clínicos para chegar a um diagnóstico final em casos de simulação de pacientes semi-sintéticos.
|
No final das avaliações de simulação (até 6 meses)
|
Colaboradores e Investigadores
Patrocinador
Investigadores
- Investigador principal: Luis R Soenksen, MSE, PhD, Nolla Health
Datas de registro do estudo
Datas Principais do Estudo
Início do estudo (Real)
Conclusão Primária (Estimado)
Conclusão do estudo (Estimado)
Datas de inscrição no estudo
Enviado pela primeira vez
Enviado pela primeira vez que atendeu aos critérios de CQ
Primeira postagem (Real)
Atualizações de registro de estudo
Última Atualização Postada (Real)
Última atualização enviada que atendeu aos critérios de controle de qualidade
Última verificação
Mais Informações
Termos relacionados a este estudo
Palavras-chave
Outros números de identificação do estudo
- NH-OSVDE-MSCNE-1026
Plano para dados de participantes individuais (IPD)
Planeja compartilhar dados de participantes individuais (IPD)?
Descrição do plano IPD
Informações sobre medicamentos e dispositivos, documentos de estudo
Estuda um medicamento regulamentado pela FDA dos EUA
Estuda um produto de dispositivo regulamentado pela FDA dos EUA
Essas informações foram obtidas diretamente do site clinicaltrials.gov sem nenhuma alteração. Se você tiver alguma solicitação para alterar, remover ou atualizar os detalhes do seu estudo, entre em contato com register@clinicaltrials.gov. Assim que uma alteração for implementada em clinicaltrials.gov, ela também será atualizada automaticamente em nosso site .