- ICH GCP
- US Clinical Trials Registry
- Klinisk utprøving NCT07261436
Ytelsessammenligning av store språkmodeller i TAP-blokk ultralydtolkning: En dobbeltblind prospektiv studie
Målet med denne studien er å undersøke hvor nøyaktig to kunstig intelligens-modeller, Gemini 2.5 Pro og ChatGPT-5.1, kan tolke ultralydvideoer av Transversus Abdominis Plane (TAP)-blokken, en regional anestesiteknikk som brukes til smertelindring etter operasjon.
Hovedspørsmålene denne studien tar sikte på å besvare er:
Hvor nøyaktig kan hver KI-modell identifisere anatomiske strukturer på TAP-blokk ultralydvideoer? Kan KI-modellene korrekt vurdere spredningen av lokalbedøvelse og avgjøre om blokken er vellykket? Hvor godt samsvarer KI-modellenes svar med vurderingene til ekspertanestesileger? Ingen ytterligere prosedyrer vil bli utført på pasientene. TAP-blokker vil bli utført som en del av rutinemessig klinisk omsorg, og ultralydvideoene vil bli spilt inn og anonymisert.
Deltakere trenger ikke å gjøre noe ekstra for studien. Erfarne anestesileger vil gjennomgå videoene og gi ekspertsvar. KI-modellene vil få de samme videoene og bli stilt de samme spørsmålene. En annen ekspert, som ikke vet hvilke svar som kom fra mennesker eller KI, vil sammenligne alle svarene.
Resultatene vil hjelpe forskere å forstå om avanserte KI-systemer trygt kan støtte klinikere i tolkningen av ultralydledet regional anestesiprocedyrer og forbedre opplæring og beslutningstaking i anestesipraksis.
Studieoversikt
Status
Forhold
Intervensjon / Behandling
Detaljert beskrivelse
Denne studien har som mål å evaluere hvordan to avanserte kunstig intelligens-modeller (AI), Gemini 2.5 Pro og ChatGPT-5.1, tolker ultralydvideoer av Transversus Abdominis Plane (TAP)-blokkeringsprosedyrer. TAP-blokkeringer utføres som en del av rutinemessig klinisk behandling av erfarne anestesileger. Ultralydvideoene som er tatt opp under disse prosedyrene, fungerer som datakilde for denne studien. Ingen ytterligere prosedyrer eller pasientinvolvering kreves utover standardbehandling.
Ultralydvideobehandling Alle ultralydopptak vil bli fullstendig anonymisert ved å fjerne pasientnavn, datoer og annen identifiserende informasjon.
Gemini 2.5 Pro vil motta originale videofiler. ChatGPT-5.1 vil motta høyoppløselige GIF-segmenter generert fra de samme opptakene.
Begge modellene vil få identiske strukturerte spørsmål bestående av åtte klinisk relevante spørsmål om anatomiske strukturer, nåleplassering, lokal anestetisk spredning, dermatomale effekter og potensielle sikkerhetshensyn.
Ekspertdeltakelse
To anestesieksperter vil delta uavhengig:
Ekspert A vil gjennomgå hver ultralydvideo og svare på det samme settet med åtte kliniske spørsmål. Disse svarene vil tjene som den primære menneskelige kliniske referansen.
Ekspert B vil uavhengig evaluere alle svar, både fra Ekspert A, Gemini og ChatGPT-5.1, etter at de er anonymisert og tilfeldig ordnet. Ekspert B vil ikke vite om et svar kom fra en AI-modell eller en menneskelig ekspert. Ekspert B vil vurdere anatomisk nøyaktighet, klarhet, klinisk relevans og generell innholdskvalitet for hvert svar.
Hvis Ekspert A og Ekspert B er uenige i tolkningen eller kvalitetsvurderingen av et svar, vil en tredje ekspert (Ekspert C), som også er erfaren i ultralydstyrt regional anestesi, uavhengig gjennomgå de relevante svarene. Ekspert Cs vurdering vil bli brukt til å løse avvik og etablere den endelige konsensusen.
Innsamlede data
For hver TAP-blokkeringsvideo vil følgende informasjon bli registrert:
Ultralyd- og prosedyredetaljer. Pasientdemografiske beskrivelser (alder, kjønn, BMI, ASA-klassifisering), brukt kun for generell karakterisering av utvalget.
AI-relaterte ytelsesegenskaper som svarfullstendighet, relevans, konfidensnivå og svarstid.
Studietype
Registrering (Antatt)
Kontakter og plasseringer
Studiekontakt
- Navn: Engin ihsan Turan, principal investigator
- Telefonnummer: +905382431114
- E-post: enginihsan@hotmail.com
Studiesteder
-
-
Istanbul
-
Istanbul, Istanbul, Tyrkia (Türkiye), 34303
- Rekruttering
- Health Science University İstanbul Kanuni Sultan Süleyman Education and Training Hospital
-
Ta kontakt med:
- Engin ihsan Turan
- Telefonnummer: 05382431114
- E-post: enginihsan@hotmail.com
-
-
Deltakelseskriterier
Kvalifikasjonskriterier
Alder som er kvalifisert for studier
- Voksen
- Eldre voksen
Tar imot friske frivillige
Prøvetakingsmetode
Studiepopulasjon
Beskrivelse
Inklusjonskriterier:
- Voksne i alderen 18–85 år
- ASA fysisk status I–III
- Skal gjennomgå elektiv kirurgi med en lateral TAP-blokk utført som del av rutinemessig anestesibehandling
- Fullstendig ultralydveiledet blokkeringsprosedyre registrert på video
- I stand til å gi skriftlig samtykke
Eksklusjonskriterier:
- Mislykket eller ufullstendig TAP-blokkprosedyre
- Dårlig kvalitet på ultralydvideo (nålspiss eller anestetisk spredning ikke synlig)
- Manglende demografiske eller kliniske data
- Tilbaketrekking av samtykke når som helst
Studieplan
Hvordan er studiet utformet?
Designdetaljer
Hva måler studien?
Primære resultatmål
Resultatmål |
Tiltaksbeskrivelse |
Tidsramme |
|---|---|---|
|
Nøyaktighet i anatomisk tolkning
Tidsramme: Ved tidspunktet for videoanalyse
|
For hver ultralydvideo vil evnen til begge KI-modellene (ChatGPT-5.1 og Gemini 2.5 Pro) til å korrekt identifisere nøkkelanatomiske strukturer ved lateral TAP-blokk (internal oblique, transversus abdominis, fascialplan, nålespiss) bli evaluert.
Nøyaktigheten til hver modell vil bli sammenlignet med det ekspertdefinerte referansesvaret.
|
Ved tidspunktet for videoanalyse
|
Sekundære resultatmål
Resultatmål |
Tiltaksbeskrivelse |
Tidsramme |
|---|---|---|
|
Blokk Suksess Tolkning
Tidsramme: På tidspunktet for videoanalyse.
|
Vurdering av hvorvidt hver AI-modell korrekt fastsetter blokkeringens suksess basert på nåleplassering og spredning av lokalbedøvelse, sammenlignet med ekspertreferanseevaluering.
|
På tidspunktet for videoanalyse.
|
|
Nålplanutvurdering
Tidsramme: Ved tiden for videoanalyse.
|
Vurdering av hvorvidt KI-modeller korrekt vurderer nålespissens plassering og om den befinner seg innenfor det korrekte interfasciale planet (IO-TA-fascia), sammenlignet med ekspertreferansen.
|
Ved tiden for videoanalyse.
|
|
Dermatomnivåforutsigelse
Tidsramme: Ved tidspunktet for videoanalyse.
|
Sammenligning av hver AI-modells predikerte dermatomdekning (f.eks. T10-T12) med ekspertbasert referansedermatomnivå.
|
Ved tidspunktet for videoanalyse.
|
|
Risikovurdering
Tidsramme: Ved tidspunktet for videoanalyse.
|
Evaluering av hvorvidt hver AI-modell korrekt identifiserer potensielle risikoer på ultralydbilder (f.eks. peritoneal nærhet, vaskulære strukturer). 0 = ingen risiko bevissthet, 1 = delvis, 2 = fullstendig og passende risikoidentifikasjon. |
Ved tidspunktet for videoanalyse.
|
|
Anbefalingskvalitet
Tidsramme: På tidspunktet for videoanalyse.
|
Vurdering av passendeheten for hver modells forslag (f.eks. behov for ekstra injeksjon, omposisjonering) basert på ultralydbildet. Kvalitativ scoring av ekspertvurderer (0-10). |
På tidspunktet for videoanalyse.
|
|
Avtale mellom eksperter
Tidsramme: Under ekspertvurderingsfasen.
|
Å evaluere om Ekspert A og Ekspert B gir konsistente vurderinger for hver parameter; og å løse avvik gjennom Ekspert C når det er nødvendig. Enighet / Uenighet løst av tredje ekspert. |
Under ekspertvurderingsfasen.
|
|
AI-svarstid
Tidsramme: Automatisk fanget under modellutdata.
|
Tid som kreves for hver AI-modell til å generere svar på de åtte standardiserte spørsmålene. Sekunder (kontinuerlig variabel). |
Automatisk fanget under modellutdata.
|
Samarbeidspartnere og etterforskere
Studierekorddatoer
Studer hoveddatoer
Studiestart (Faktiske)
Primær fullføring (Antatt)
Studiet fullført (Antatt)
Datoer for studieregistrering
Først innsendt
Først innsendt som oppfylte QC-kriteriene
Først lagt ut (Faktiske)
Oppdateringer av studieposter
Sist oppdatering lagt ut (Faktiske)
Siste oppdatering sendt inn som oppfylte QC-kriteriene
Sist bekreftet
Mer informasjon
Begreper knyttet til denne studien
Nøkkelord
Andre studie-ID-numre
- SUCCESS OF LLMs in TAP BLOCK
Plan for individuelle deltakerdata (IPD)
Planlegger du å dele individuelle deltakerdata (IPD)?
Legemiddel- og utstyrsinformasjon, studiedokumenter
Studerer et amerikansk FDA-regulert medikamentprodukt
Studerer et amerikansk FDA-regulert enhetsprodukt
Denne informasjonen ble hentet direkte fra nettstedet clinicaltrials.gov uten noen endringer. Hvis du har noen forespørsler om å endre, fjerne eller oppdatere studiedetaljene dine, vennligst kontakt register@clinicaltrials.gov. Så snart en endring er implementert på clinicaltrials.gov, vil denne også bli oppdatert automatisk på nettstedet vårt. .