Porównanie skuteczności dużych modeli językowych w interpretacji ultrasonografii blokady TAP: podwójnie ślepe, prospektywne badanie
Porównanie Wydajności Dużych Modeli Językowych w Interpretacji Ultrasonografii Bloku TAP: Podwójnie Ślepa Badanie Prospektywne
Celem tego badania jest poznanie, jak dokładnie dwa modele sztucznej inteligencji (AI), Gemini 2.5 Pro i ChatGPT-5.1, mogą interpretować filmy ultrasonograficzne bloku płaszczyzny poprzecznej brzucha (TAP), techniki znieczulenia regionalnego stosowanej do kontroli bólu po operacji.
Główne pytania, na które ma odpowiedzieć to badanie, to:
Jak dokładnie każdy model AI może identyfikować struktury anatomiczne na filmach ultrasonograficznych bloku TAP? Czy modele AI mogą prawidłowo ocenić rozprzestrzenianie się środka znieczulającego miejscowo i określić, czy blok jest udany? Jak blisko odpowiedzi modeli AI pokrywają się z ocenami doświadczonych anestezjologów? Na pacjentach nie będą wykonywane żadne dodatkowe procedury. Bloki TAP będą wykonywane jako część rutynowej opieki klinicznej, a filmy ultrasonograficzne będą rejestrowane i anonimizowane.
Uczestnicy nie będą musieli robić niczego dodatkowego dla badania. Doświadczeni anestezjolodzy przejrzą filmy i udzielą eksperckich odpowiedzi. Modele AI otrzymają te same filmy i te same pytania. Drugi ekspert, który nie wie, które odpowiedzi pochodzą od ludzi, a które od AI, porówna wszystkie odpowiedzi.
Wyniki pomogą badaczom zrozumieć, czy zaawansowane systemy AI mogą bezpiecznie wspierać klinicystów w interpretacji procedur znieczulenia regionalnego pod kontrolą USG oraz poprawić edukację i podejmowanie decyzji w praktyce anestezjologicznej.
Przegląd badań
Status
Warunki
Interwencja / Leczenie
Szczegółowy opis
Badanie to ma na celu ocenę, w jaki sposób dwa zaawansowane modele sztucznej inteligencji (AI), Gemini 2.5 Pro i ChatGPT-5.1, interpretują filmy ultrasonograficzne procedur blokady płaszczyzny poprzecznej brzucha (TAP). Blokady TAP są wykonywane jako część rutynowej opieki klinicznej przez doświadczonych anestezjologów. Filmy ultrasonograficzne zarejestrowane podczas tych procedur stanowią źródło danych dla tego badania. Poza standardową opieką nie są wymagane żadne dodatkowe procedury ani zaangażowanie pacjenta.
Przetwarzanie filmów ultrasonograficznych Wszystkie nagrania ultrasonograficzne zostaną w pełni zanonimizowane poprzez usunięcie imion pacjentów, dat oraz wszelkich innych informacji umożliwiających identyfikację.
Gemini 2.5 Pro otrzyma oryginalne pliki wideo. ChatGPT-5.1 otrzyma segmenty GIF w wysokiej rozdzielczości wygenerowane z tych samych nagrań.
Oba modele otrzymają identyczne, ustrukturyzowane pytania składające się z ośmiu klinicznie istotnych pytań dotyczących struktur anatomicznych, umiejscowienia igły, rozprzestrzeniania się środka znieczulającego miejscowo, efektów dermatomalnych oraz potencjalnych zagrożeń bezpieczeństwa.
Udział ekspertów
Dwóch ekspertów anestezjologii weźmie udział niezależnie:
Ekspert A przejrzy każdy film ultrasonograficzny i odpowie na ten sam zestaw ośmiu pytań klinicznych. Odpowiedzi te posłużą jako podstawowe ludzkie odniesienie kliniczne.
Ekspert B niezależnie oceni wszystkie odpowiedzi – od Eksperta A, Gemini i ChatGPT-5.1 – po ich zanonimizowaniu i losowym uporządkowaniu. Ekspert B nie będzie wiedział, czy odpowiedź pochodzi od modelu AI czy od eksperta ludzkiego. Ekspert B oceni anatomiczną dokładność, przejrzystość, trafność kliniczną i ogólną jakość treści każdej odpowiedzi.
Jeśli Ekspert A i Ekspert B nie będą zgodni co do interpretacji lub oceny jakości jakiejkolwiek odpowiedzi, trzeci ekspert (Ekspert C), również doświadczony w ultrasonograficznie kontrolowanej anestezji regionalnej, niezależnie przejrzy odpowiednie odpowiedzi. Ocena Eksperta C zostanie wykorzystana do rozwiązania rozbieżności i ustalenia ostatecznego konsensusu.
Zebrane dane
Dla każdego filmu z blokadą TAP zostaną zarejestrowane następujące informacje:
Szczegóły ultrasonograficzne i proceduralne. Opisy demograficzne pacjenta (wiek, płeć, BMI, klasyfikacja ASA), używane wyłącznie do ogólnej charakterystyki próby.
Cechy wydajności związane z AI, takie jak kompletność odpowiedzi, trafność, poziom pewności i czas odpowiedzi.
Typ studiów
Zapisy (Szacowany)
Kontakty i lokalizacje
Kontakt w sprawie studiów
- Nazwa: Engin ihsan Turan, principal investigator
- Numer telefonu: +905382431114
- E-mail: enginihsan@hotmail.com
Lokalizacje studiów
-
-
Istanbul
-
Istanbul, Istanbul, Turcja (Türkiye), 34303
- Rekrutacyjny
- Health Science University İstanbul Kanuni Sultan Süleyman Education and Training Hospital
-
Kontakt:
- Engin ihsan Turan
- Numer telefonu: 05382431114
- E-mail: enginihsan@hotmail.com
-
-
Kryteria uczestnictwa
Kryteria kwalifikacji
Wiek uprawniający do nauki
- Dorosły
- Starszy dorosły
Akceptuje zdrowych ochotników
Metoda próbkowania
Badana populacja
Opis
Kryteria włączenia:
- Dorośli w wieku 18-85 lat
- Stan fizyczny ASA I-III
- Poddawani planowej operacji z blokiem TAP bocznym wykonanym jako część rutynowej opieki anestezjologicznej
- Pełna procedura blokady pod kontrolą USG nagrana na wideo
- Zdolni do wyrażenia pisemnej świadomej zgody
Kryteria wyłączenia:
- Nieudana lub niekompletna procedura bloku TAP
- Niska jakość wideo USG (koniec igły lub rozprzestrzenianie się środka znieczulającego niewidoczne)
- Brakujące dane demograficzne lub kliniczne
- Wycofanie zgody w dowolnym momencie
Plan studiów
Jak projektuje się badanie?
Szczegóły projektu
Co mierzy badanie?
Podstawowe miary wyniku
Miara wyniku |
Opis środka |
Ramy czasowe |
|---|---|---|
|
Dokładność Interpretacji Anatomicznej
Ramy czasowe: W momencie analizy wideo
|
Dla każdego filmu ultrasonograficznego oceniana będzie zdolność obu modeli sztucznej inteligencji (ChatGPT-5.1 i Gemini 2.5 Pro) do prawidłowego identyfikowania kluczowych struktur anatomicznych blokady TAP bocznego (mięsień skośny wewnętrzny, mięsień poprzeczny brzucha, płaszczyzna powięziowa, czubek igły).
Dokładność każdego modelu będzie porównywana z odpowiedzią referencyjną określoną przez eksperta.
|
W momencie analizy wideo
|
Miary wyników drugorzędnych
Miara wyniku |
Opis środka |
Ramy czasowe |
|---|---|---|
|
Interpretacja sukcesu blokady
Ramy czasowe: W czasie analizy wideo.
|
Ocena, czy każdy model AI poprawnie określa skuteczność blokady na podstawie umiejscowienia igły i rozprzestrzeniania się środka znieczulenia miejscowego, w porównaniu z ekspercką oceną referencyjną.
|
W czasie analizy wideo.
|
|
Ocena Płaszczyzny Igły
Ramy czasowe: W czasie analizy wideo.
|
Określenie, czy modele AI prawidłowo oceniają położenie końcówki igły oraz czy znajduje się ona w prawidłowej płaszczyźnie międzypowięziowej (powięź IO-TA), w porównaniu z eksperckim odniesieniem.
|
W czasie analizy wideo.
|
|
Predykcja Poziomu Dermatomalnego
Ramy czasowe: W czasie analizy wideo.
|
Porównanie przewidywanej dermatomalnej pokrywy przez każdy model AI (np. T10-T12) z referencyjnym poziomem dermatomalnym dostarczonym przez eksperta.
|
W czasie analizy wideo.
|
|
Ocena świadomości ryzyka
Ramy czasowe: W czasie analizy wideo.
|
Ocena, czy każdy model AI poprawnie identyfikuje potencjalne ryzyka na obrazach ultrasonograficznych (np. bliskość otrzewnej, struktury naczyniowe). 0 = brak świadomości ryzyka, 1 = częściowa, 2 = pełna i odpowiednia identyfikacja ryzyka. |
W czasie analizy wideo.
|
|
Jakość rekomendacji
Ramy czasowe: W czasie analizy wideo.
|
Ocena trafności sugestii każdego modelu (np. potrzeba dodatkowej iniekcji, zmiana pozycji) na podstawie obrazu ultrasonograficznego. Jakościowe ocenianie przez eksperta (0-10). |
W czasie analizy wideo.
|
|
Porozumienie między ekspertami
Ramy czasowe: Podczas fazy oceny eksperckiej.
|
Aby ocenić, czy Ekspert A i Ekspert B zapewniają spójne oceny dla każdego parametru; i aby rozstrzygnąć rozbieżności poprzez Eksperta C w razie potrzeby. Zgoda / Niezgoda rozstrzygnięta przez trzeciego eksperta. |
Podczas fazy oceny eksperckiej.
|
|
Czas odpowiedzi SI
Ramy czasowe: Przechwycone automatycznie podczas generowania wyników przez model.
|
Czas wymagany dla każdego modelu AI do wygenerowania odpowiedzi na osiem standaryzowanych pytań. Sekundy (zmienna ciągła). |
Przechwycone automatycznie podczas generowania wyników przez model.
|
Współpracownicy i badacze
Daty zapisu na studia
Główne daty studiów
Rozpoczęcie studiów (Rzeczywisty)
Zakończenie podstawowe (Szacowany)
Ukończenie studiów (Szacowany)
Daty rejestracji na studia
Pierwszy przesłany
Pierwszy przesłany, który spełnia kryteria kontroli jakości
Pierwszy wysłany (Rzeczywisty)
Aktualizacje rekordów badań
Ostatnia wysłana aktualizacja (Rzeczywisty)
Ostatnia przesłana aktualizacja, która spełniała kryteria kontroli jakości
Ostatnia weryfikacja
Więcej informacji
Terminy związane z tym badaniem
Słowa kluczowe
Inne numery identyfikacyjne badania
- SUCCESS OF LLMs in TAP BLOCK
Plan dla danych uczestnika indywidualnego (IPD)
Planujesz udostępniać dane poszczególnych uczestników (IPD)?
Informacje o lekach i urządzeniach, dokumenty badawcze
Bada produkt leczniczy regulowany przez amerykańską FDA
Bada produkt urządzenia regulowany przez amerykańską FDA
Te informacje zostały pobrane bezpośrednio ze strony internetowej clinicaltrials.gov bez żadnych zmian. Jeśli chcesz zmienić, usunąć lub zaktualizować dane swojego badania, skontaktuj się z register@clinicaltrials.gov. Gdy tylko zmiana zostanie wprowadzona na stronie clinicaltrials.gov, zostanie ona automatycznie zaktualizowana również na naszej stronie internetowej .