Comparação de Desempenho de Modelos de Linguagem de Grande Escala na Interpretação de Ultrassom do Bloco TAP: Um Estudo Prospectivo Duplo-Cego
Comparação de Desempenho de Modelos de Linguagem de Grande Escala na Interpretação de Ecografia de Bloqueio TAP: Um Estudo Prospetivo Duplo-Cego
O objetivo deste estudo é aprender com que precisão dois modelos de inteligência artificial (IA), Gemini 2.5 Pro e ChatGPT-5.1, conseguem interpretar vídeos de ecografia do bloqueio do plano transverso do abdómen (TAP), uma técnica de anestesia regional utilizada para o controlo da dor após cirurgia.
As principais questões que este estudo pretende responder são:
Com que precisão cada modelo de IA consegue identificar estruturas anatómicas em vídeos de ecografia do bloqueio TAP? Conseguem os modelos de IA avaliar corretamente a dispersão do anestésico local e determinar se o bloqueio é bem-sucedido? Quão próximas estão as respostas dos modelos de IA das avaliações de anestesiologistas especialistas? Nenhum procedimento adicional será realizado nos doentes. Os bloqueios TAP serão realizados como parte dos cuidados clínicos de rotina, e os vídeos de ecografia serão gravados e anonimizados.
Os participantes não precisarão de fazer nada extra para o estudo. Anestesiologistas experientes irão rever os vídeos e fornecer respostas especializadas. Os modelos de IA receberão os mesmos vídeos e as mesmas questões. Um segundo especialista, que não saberá quais as respostas que vieram de humanos ou de IA, irá comparar todas as respostas.
Os resultados ajudarão os investigadores a compreender se sistemas avançados de IA podem apoiar com segurança os clínicos na interpretação de procedimentos de anestesia regional guiada por ecografia e melhorar a educação e a tomada de decisões na prática de anestesia.
Visão geral do estudo
Status
Condições
Intervenção / Tratamento
Descrição detalhada
Este estudo tem como objetivo avaliar como dois modelos avançados de inteligência artificial (IA), o Gemini 2.5 Pro e o ChatGPT-5.1, interpretam vídeos de ultrassom de procedimentos de bloqueio do plano transverso do abdómen (TAP). Os bloqueios TAP são realizados como parte do cuidado clínico de rotina por anestesiologistas experientes. Os vídeos de ultrassom gravados durante estes procedimentos servem como fonte de dados para este estudo. Nenhum procedimento adicional ou envolvimento do paciente é necessário além do cuidado padrão.
Processamento de Vídeo de Ultrassom Todas as gravações de ultrassom serão completamente anonimizadas, removendo nomes de pacientes, datas e qualquer outra informação de identificação.
O Gemini 2.5 Pro receberá os ficheiros de vídeo originais. O ChatGPT-5.1 receberá segmentos GIF de alta resolução gerados a partir das mesmas gravações.
A ambos os modelos serão fornecidos prompts estruturados idênticos, consistindo em oito questões clinicamente relevantes sobre estruturas anatómicas, colocação da agulha, disseminação do anestésico local, efeitos dermatómicos e potenciais preocupações de segurança.
Participação de Especialistas
Dois especialistas em anestesiologia participarão independentemente:
O Especialista A irá rever cada vídeo de ultrassom e responder ao mesmo conjunto de oito questões clínicas. Estas respostas servirão como referência clínica humana primária.
O Especialista B irá avaliar independentemente todas as respostas, tanto do Especialista A, como do Gemini e do ChatGPT-5.1, depois de estas terem sido anonimizadas e ordenadas aleatoriamente. O Especialista B não saberá se uma resposta teve origem num modelo de IA ou num especialista humano. O Especialista B irá avaliar a precisão anatómica, clareza, adequação clínica e qualidade geral do conteúdo para cada resposta.
Se o Especialista A e o Especialista B discordarem na interpretação ou avaliação da qualidade de qualquer resposta, um terceiro especialista (Especialista C), que também tem experiência em anestesia regional guiada por ultrassom, irá rever independentemente as respostas relevantes. A avaliação do Especialista C será usada para resolver discrepâncias e estabelecer o consenso final.
Dados Recolhidos
Para cada vídeo de bloqueio TAP, será registada a seguinte informação:
Detalhes de ultrassom e procedimento. Descritores demográficos do paciente (idade, sexo, IMC, classificação ASA), usados apenas para caracterização geral da amostra.
Características de desempenho relacionadas com IA, como completude da resposta, relevância, nível de confiança e tempo de resposta.
Tipo de estudo
Inscrição (Estimado)
Contactos e Locais
Contato de estudo
- Nome: Engin ihsan Turan, principal investigator
- Número de telefone: +905382431114
- E-mail: enginihsan@hotmail.com
Locais de estudo
-
-
Istanbul
-
Istanbul, Istanbul, Turquia (Türkiye), 34303
- Recrutamento
- Health Science University İstanbul Kanuni Sultan Süleyman Education and Training Hospital
-
Contato:
- Engin ihsan Turan
- Número de telefone: 05382431114
- E-mail: enginihsan@hotmail.com
-
-
Critérios de participação
Critérios de elegibilidade
Idades elegíveis para estudo
- Adulto
- Adulto mais velho
Aceita Voluntários Saudáveis
Método de amostragem
População do estudo
Descrição
Critérios de Inclusão:
- Adultos com idades entre 18-85 anos
- Estado físico ASA I-III
- Submetidos a cirurgia eletiva com bloqueio TAP lateral realizado como parte dos cuidados anestésicos de rotina
- Procedimento completo de bloqueio guiado por ultrassom gravado em vídeo
- Capaz de fornecer consentimento informado por escrito
Critérios de Exclusão:
- Procedimento de bloqueio TAP mal sucedido ou incompleto
- Vídeo de ultrassom de má qualidade (ponta da agulha ou distribuição anestésica não visível)
- Dados demográficos ou clínicos em falta
- Retirada do consentimento a qualquer momento
Plano de estudo
Como o estudo é projetado?
Detalhes do projeto
O que o estudo está medindo?
Medidas de resultados primários
Medida de resultado |
Descrição da medida |
Prazo |
|---|---|---|
|
Precisão da Interpretação Anatómica
Prazo: No momento da análise do vídeo
|
Para cada vídeo de ultrassom, será avaliada a capacidade de ambos os modelos de IA (ChatGPT-5.1 e Gemini 2.5 Pro) para identificar corretamente as estruturas anatómicas-chave do bloqueio TAP lateral (oblíquo interno, transverso do abdómen, plano fascial, ponta da agulha).
A precisão de cada modelo será comparada com a resposta de referência definida pelo especialista.
|
No momento da análise do vídeo
|
Medidas de resultados secundários
Medida de resultado |
Descrição da medida |
Prazo |
|---|---|---|
|
Interpretação do Bloco de Sucesso
Prazo: No momento da análise do vídeo.
|
Avaliação de se cada modelo de IA determina corretamente o sucesso do bloqueio com base na colocação da agulha e na propagação do anestésico local, comparativamente com a avaliação de referência de especialistas.
|
No momento da análise do vídeo.
|
|
Avaliação do Plano da Agulha
Prazo: No momento da análise do vídeo.
|
Determinação de se os modelos de IA avaliam corretamente a localização da ponta da agulha e se está dentro do plano interfascial correto (fáscia IO-TA), em comparação com a referência de especialista.
|
No momento da análise do vídeo.
|
|
Previsão do Nível Dermatomal
Prazo: No momento da análise de vídeo.
|
Comparação da cobertura dermatómica prevista por cada modelo de IA (por exemplo, T10-T12) com o nível dermatómico de referência fornecido pelo especialista.
|
No momento da análise de vídeo.
|
|
Avaliação de Consciência de Risco
Prazo: No momento da análise de vídeo.
|
Avaliação de se cada modelo de IA identifica corretamente os riscos potenciais nas imagens de ultrassom (por exemplo, proximidade peritoneal, estruturas vasculares). 0 = sem consciência do risco, 1 = parcial, 2 = identificação completa e adequada do risco. |
No momento da análise de vídeo.
|
|
Qualidade da Recomendação
Prazo: No momento da análise do vídeo.
|
Avaliação da adequação das sugestões de cada modelo (por exemplo, necessidade de injeção adicional, reposicionamento) com base na aparência ecográfica. Pontuação qualitativa por avaliador especialista (0-10). |
No momento da análise do vídeo.
|
|
Acordo Entre Peritos
Prazo: Durante a fase de avaliação de peritos.
|
Avaliar se o Perito A e o Perito B fornecem juízos consistentes para cada parâmetro; e resolver discrepâncias através do Perito C, quando necessário. Concordância / Discordância resolvida por um terceiro perito. |
Durante a fase de avaliação de peritos.
|
|
Tempo de Resposta da IA
Prazo: Capturado automaticamente durante a saída do modelo.
|
Tempo necessário para cada modelo de IA gerar respostas às oito perguntas padronizadas. Segundos (variável contínua). |
Capturado automaticamente durante a saída do modelo.
|
Colaboradores e Investigadores
Datas de registro do estudo
Datas Principais do Estudo
Início do estudo (Real)
Conclusão Primária (Estimado)
Conclusão do estudo (Estimado)
Datas de inscrição no estudo
Enviado pela primeira vez
Enviado pela primeira vez que atendeu aos critérios de CQ
Primeira postagem (Real)
Atualizações de registro de estudo
Última Atualização Postada (Real)
Última atualização enviada que atendeu aos critérios de controle de qualidade
Última verificação
Mais Informações
Termos relacionados a este estudo
Palavras-chave
Outros números de identificação do estudo
- SUCCESS OF LLMs in TAP BLOCK
Plano para dados de participantes individuais (IPD)
Planeja compartilhar dados de participantes individuais (IPD)?
Informações sobre medicamentos e dispositivos, documentos de estudo
Estuda um medicamento regulamentado pela FDA dos EUA
Estuda um produto de dispositivo regulamentado pela FDA dos EUA
Essas informações foram obtidas diretamente do site clinicaltrials.gov sem nenhuma alteração. Se você tiver alguma solicitação para alterar, remover ou atualizar os detalhes do seu estudo, entre em contato com register@clinicaltrials.gov. Assim que uma alteração for implementada em clinicaltrials.gov, ela também será atualizada automaticamente em nosso site .