Skálázható klinikai felügyelet a nagy nyelvi modellek felett bizonytalanság háromszögelés révén (SCOUT)
2026. február 14. frissítette: China National Center for Cardiovascular Diseases
Prospektív értékelése egy modellfüggetlen meta-ellenőrzési keretrendszernek (SCOUT) a nagy nyelvi modellek kimeneteinek skálázható klinikai felügyeletére a szívkoszorúér-betegség diagnosztikájában: Több olvasós, randomizált, keresztezett vizsgálat
Ez a prospektív, többértékelős, randomizált keresztezett vizsgálat értékeli a SCOUT-ot (Scalable Clinical Oversight via Uncertainty Triangulation), egy modellfüggetlen meta-ellenőrzési keretrendszert, amely három ortogonális bizonytalansági jel alapján történő háromszögeléssel szelektíven átadja a megbízhatatlan nagy nyelvi modell (LLM) előrejelzéseket a klinikusoknak: modell heterogenitás, sztochasztikus inkonzisztencia és érvelési kritika.
A vizsgálat azt értékeli, hogy a SCOUT által támogatott felülvizsgálat csökkentheti-e az orvosi felülvizsgálati időt az AI által generált diagnózisok szabványos kézi felülvizsgálatához képest, miközben nem alacsonyabb diagnosztikai pontosságot tart fenn a koszorúér-betegség (CHD) altípusainak meghatározásában.
A tanulmány áttekintése
Állapot
Még nincs toborzás
Körülmények
Részletes leírás
Háttér: A nagy nyelvi modellek egyre inkább elterjedtek a klinikai munkafolyamatokban, de ha minden egyes AI-kimenetet klinikusnak kell felülvizsgálnia, az megsemmisíti a hatékonysági nyereségeket, amelyek az alkalmazásukat motiválják. A SCOUT az algoritmikus meta-ellenőrzéssel kezeli ezt a hatékonyság-biztonság paradoxont.
A SCOUT keretrendszer három ortogonális külső jel alapján triangulálja az esetszintű bizonytalanságot: (1) Modell heterogenitás – hogy egy szerkezetileg eltérő kiegészítő LLM egyetért-e az elsődleges modellel; (2) Sztochasztikus inkonzisztencia – hogy ugyanabból a modelből történő ismételt mintavételezés eltérő kimeneteket eredményez-e; (3) Indoklás kritika – hogy egy külső ellenőrző modell azonosít-e logikai hibákat a gondolatmenet indoklásában.
Ebben a keresztezett vizsgálatban 7 különböző tapasztalati szintű klinikus (2 junior rezidens, 3 szenior rezidens, 2 főorvos) mindegyike felülvizsgál mind a 110 esetet mind a szabványos kézi felülvizsgálati, mind a SCOUT-asszisztált felülvizsgálati munkafolyamatok alatt. A vizsgálat értékeli a munkafolyamat hatékonyságát (elsődleges végpont) és a diagnosztikai pontosságot (másodlagos végpont).
Tanulmány típusa
Beavatkozó
Beiratkozás (Becsült)
7
Fázis
- Nem alkalmazható
Kapcsolatok és helyek
Ez a rész a vizsgálatot végzők elérhetőségeit, valamint a vizsgálat lefolytatásának helyére vonatkozó információkat tartalmazza.
Tanulmányi kapcsolat
- Név: Xiaojin Gao, Dr.
- Telefonszám: +86 010 88322415
- E-mail: sophie_gao@sina.com
Részvételi kritériumok
A kutatók olyan embereket keresnek, akik megfelelnek egy bizonyos leírásnak, az úgynevezett jogosultsági kritériumoknak. Néhány példa ezekre a kritériumokra a személy általános egészségi állapota vagy a korábbi kezelések.
Jogosultsági kritériumok
Tanulmányozható életkorok
- Felnőtt
- Idősebb felnőtt
Egészséges önkénteseket fogad
Nem
Leírás
Bevonási kritériumok:
- Fuwai Kórház táblabiztos vagy képzés alatt álló kardiológusai
- Három tapasztalati szintet átfogó: kezdő rezidensek, tapasztalt rezidensek, főorvosok
Kizárási kritériumok:
- A SCOUT keretrendszer fejlesztésében vagy optimalizálásában részt vevő klinikusok
- A referenciaértékelési folyamatban részt vevő klinikusok
Tanulási terv
Ez a rész a vizsgálati terv részleteit tartalmazza, beleértve a vizsgálat megtervezését és a vizsgálat mérését.
Hogyan készül a tanulmány?
Tervezési részletek
- Elsődleges cél: Diagnosztikai
- Kiosztás: Véletlenszerűsített
- Beavatkozó modell: Crossover kiosztás
- Maszkolás: Nincs (Open Label)
Fegyverek és beavatkozások
Résztvevő csoport / kar |
Beavatkozás / kezelés |
|---|---|
|
Aktív összehasonlító: Kontroll (Standard kézi ellenőrzés)
Az orvosok kézzel felülvizsgálják az összes esetet a kontrollcsoportban (n=54), hozzáféréssel az AI előrejelzéseihez és indoklásaihoz.
Nincs szelektív elhalasztás.
|
Az orvosok 54 eset teljes kézi áttekintését végzik el nyers orvosi feljegyzések alapján, hozzáférve az AI-modell előrejelzéseihez és indoklásaihoz, de SCOUT bizonytalansági rétegezés vagy szelektív átadás nélkül.
|
|
Kísérleti: Kísérleti (SCOUT-Assisted Review)
Az orvosok az intervenciós halmazt (n=56) a SCOUT keretrendszeren keresztül dolgozzák fel.
Az alacsony bizonytalanságú esetek automatikusan elfogadásra kerülnek; a magas bizonytalanságú esetek orvosi felülvizsgálaton esnek át teljes audit nyomvonal mellett.
|
SCOUT-Assisted Review (Intervenciós Kar): Az orvosok 56 esetet vizsgálnak át, amelyeket a SCOUT keretrendszeren keresztül dolgoztak fel.
Az alacsony bizonytalanságú eseteknél (D(x)=0) az AI előrejelzése automatikusan elfogadásra kerül orvosi felülvizsgálat nélkül.
A magas bizonytalanságú eseteknél (D(x)=1) az orvos felülvizsgálja az esetet hozzáféréssel a fő modell láncolat-gondolkodásához és a meta-ellenőrzési audit eredményeihez.
A fő modell a DeepSeek-V3.1 láncolat-gondolkodás ösztönzéssel.
|
Mit mér a tanulmány?
Elsődleges eredményintézkedések
Eredménymérő |
Intézkedés leírása |
Időkeret |
|---|---|---|
|
Átlagos orvosi felülvizsgálati idő esetenként (perc)
Időkeret: A vizsgálat befejezéséig, átlagosan 2 óra.
|
Az egyes klinikusok által diagnosztikai döntés felülvizsgálatára és meghozatalára fordított átlagos idő esetenként az egyes vizsgálati csoportokban.
Percben mérve. |
A vizsgálat befejezéséig, átlagosan 2 óra.
|
Másodlagos eredményintézkedések
Eredménymérő |
Intézkedés leírása |
Időkeret |
|---|---|---|
|
Diagnosztikai pontosság (%)
Időkeret: A vizsgálat befejezéséig, átlagosan 2 óra.
|
Az egyes csoportokban a megfelelő koszorúér-betegség altípusok (STEMI, NSTEMI, instabil angina, krónikus koszorúér-szindrómák) besorolásának aránya.
|
A vizsgálat befejezéséig, átlagosan 2 óra.
|
|
Számítási megtérülési ráta (ROI)
Időkeret: A vizsgálat befejezéséig, átlagosan 2 óra.
|
Az orvosok által megtakarított idő aránya (a Sanming egészségügyi reform referenciaértékein alapuló standardizált percbérek alapján értékelve) a SCOUT következtetés számítási költségéhez, klinikusok tapasztalati szintje szerint rétegzve.
|
A vizsgálat befejezéséig, átlagosan 2 óra.
|
Együttműködők és nyomozók
Itt találhatja meg a tanulmányban érintett személyeket és szervezeteket.
Tanulmányi rekorddátumok
Ezek a dátumok nyomon követik a ClinicalTrials.gov webhelyre benyújtott vizsgálati rekordok és összefoglaló eredmények benyújtásának folyamatát. A vizsgálati feljegyzéseket és a jelentett eredményeket a Nemzeti Orvostudományi Könyvtár (NLM) felülvizsgálja, hogy megbizonyosodjon arról, hogy megfelelnek-e az adott minőség-ellenőrzési szabványoknak, mielőtt közzéteszik őket a nyilvános weboldalon.
Tanulmány főbb dátumok
Tanulmány kezdete (Becsült)
2026. február 19.
Elsődleges befejezés (Becsült)
2026. február 28.
A tanulmány befejezése (Becsült)
2026. február 28.
Tanulmányi regisztráció dátumai
Először benyújtva
2026. február 9.
Először nyújtották be, amely megfelel a minőségbiztosítási kritériumoknak
2026. február 14.
Első közzététel (Tényleges)
2026. február 17.
Tanulmányi rekordok frissítései
Utolsó frissítés közzétéve (Tényleges)
2026. február 17.
Az utolsó frissítés elküldve, amely megfelel a minőségbiztosítási kritériumoknak
2026. február 14.
Utolsó ellenőrzés
2026. február 1.
Több információ
A tanulmányhoz kapcsolódó kifejezések
Kulcsszavak
További vonatkozó MeSH feltételek
Egyéb vizsgálati azonosító számok
- 2025-2702-1
Terv az egyéni résztvevői adatokhoz (IPD)
Tervezi megosztani az egyéni résztvevői adatokat (IPD)?
IGEN
IPD terv leírása
A tanulmányban jelentett eredmények mögött meghúzódó, azonosítatlan egyéni résztvevői adatok elérhetővé lesznek téve.
IPD megosztási időkeret
A publikációt követő 1 hónaptól kezdődően, legfeljebb 60 hónapig elérhető.
IPD-megosztási hozzáférési feltételek
Az adatok az illetékes szerzőtől észszerű kérésre rendelkezésre állnak.
A kérelmezőknek egy módszertanilag megalapozott kutatási javaslatot kell benyújtaniuk és alá kell írniuk egy adatfelhasználási megállapodást.
Az IPD megosztását támogató információ típusa
- STUDY_PROTOCOL
- NEDV
- ICF
- ANALYTIC_CODE
- CSR
Gyógyszer- és eszközinformációk, tanulmányi dokumentumok
Egy amerikai FDA által szabályozott gyógyszerkészítményt tanulmányoz
Nem
Egy amerikai FDA által szabályozott eszközterméket tanulmányoz
Nem
Ezt az információt közvetlenül a clinicaltrials.gov webhelyről szereztük be, változtatás nélkül. Ha bármilyen kérése van vizsgálati adatainak módosítására, eltávolítására vagy frissítésére, kérjük, írjon a következő címre: register@clinicaltrials.gov. Amint a változás bevezetésre kerül a clinicaltrials.gov oldalon, ez a webhelyünkön is automatikusan frissül. .