- ICH GCP
- Yhdysvaltain kliinisten tutkimusten rekisteri
- Kliininen tutkimus NCT07414966
Laajennettava kliininen valvonta suurille kielimalleille epävarmuuden kolmioinnin kautta (SCOUT)
Prospektiivinen arviointi malliriippumattomasta metatarkastuskehyksestä (SCOUT) skaalautuvaa kliinisen valvonnan suorittamiseksi suurten kielimallien tuotoksille sepelvaltimotaudin diagnoosissa: monilukijainen, satunnaistettu, ristikkäiskokeilu
Tutkimuksen yleiskatsaus
Tila
Ehdot
Yksityiskohtainen kuvaus
Tausta: Suuret kielimallit otetaan yhä enemmän käyttöön kliinisissä työnkuluissa, mutta vaatimus, että jokainen tekoälyn tuotos tarkastetaan lääkärin toimesta, kumoaa tehokkuusparannukset, jotka motivoivat niiden käyttöönottoa. SCOUT ratkaisee tämän tehokkuus-turvallisuus -paradoksin algoritmisen metatarkastuksen avulla.
SCOUT-kehys trianguloi kolme ortogonaalista ulkoista signaalia määrittääkseen tapauskohtaisen epävarmuuden: (1) Mallin heterogeenisuus - onko rakenteellisesti erilainen apu-LLM samaa mieltä päämallin kanssa; (2) Stokastinen epäjohdonmukaisuus - tuottaako toistuva näytteenotto samasta mallista poikkeavia tuloksia; (3) Päättelyn kritiikki - tunnistaako ulkoinen tarkistusmalli loogisia puutteita päättelyketjun päättelyssä.
Tässä ristiinverrannollisessa tutkimuksessa 7 eri kokemuksen omaavaa lääkäriä (2 nuorempaa erikoislääkäriopiskelijaa, 3 vanhempaa erikoislääkäriopiskelijaa, 2 vastaavaa lääkäriä) tarkastavat kukin kaikki 110 tapausta sekä standardin manuaalisen tarkastuksen että SCOUT-avusteisen tarkastustyönkulun alaisina. Tutkimus arvioi työnkulun tehokkuutta (ensisijainen päätepiste) ja diagnoosien tarkkuutta (toissijainen päätepiste).
Opintotyyppi
Ilmoittautuminen (Arvioitu)
Vaihe
- Ei sovellettavissa
Yhteystiedot ja paikat
Opiskeluyhteys
- Nimi: Xiaojin Gao, Dr.
- Puhelinnumero: +86 010 88322415
- Sähköposti: sophie_gao@sina.com
Osallistumiskriteerit
Kelpoisuusvaatimukset
Opintokelpoiset iät
- Aikuinen
- Vanhempi Aikuinen
Hyväksyy terveitä vapaaehtoisia
Kuvaus
Osallistumiskriteerit:
- Fuwai-sairaalan kardiologit, joilla on alan sertifikaatti tai jotka ovat koulutettavina
- Kolme kokemustasoa: nuoremmat erikoislääkäriharjoittelijat, vanhemmat erikoislääkäriharjoittelijat, ylilääkärit
Poissulkemiskriteerit:
- Kliinikot, jotka ovat olleet mukana SCOUT-viitekehyksen kehittämisessä tai optimoinnissa
- Kliinikot, jotka ovat olleet mukana kultastandardin arviointiprosessissa
Opintosuunnitelma
Miten tutkimus on suunniteltu?
Suunnittelun yksityiskohdat
- Ensisijainen käyttötarkoitus: Diagnostiikka
- Jako: Satunnaistettu
- Inventiomalli: Crossover-tehtävä
- Naamiointi: Ei mitään (avoin tarra)
Aseet ja interventiot
Osallistujaryhmä / Arm |
Interventio / Hoito |
|---|---|
|
Active Comparator: Kontrolli (standardi manuaalinen tarkistus)
Lääkärit tarkistavat manuaalisesti kaikki tapaukset kontrollijoukossa (n=54) pääsyllä tekoälyn ennusteisiin ja päättelyyn.
Ei selektiivistä lykkäystä.
|
Lääkärit suorittavat täydellisen manuaalisen arvioinnin 54 tapauksesta käyttäen raakalääketietoja, joissa on pääsy tekoälymallin ennusteisiin ja päättelyyn, mutta ilman SCOUT-ennustetarkkuuskerrosta tai valikoivaa siirtämistä.
|
|
Kokeellinen: Kokeellinen (SCOUT-avusteinen tarkastus)
Lääkärit käsittelevät interventiosarjan (n=56) SCOUT-viitekehyksen kautta.
Matalan epävarmuustason tapaukset hyväksytään automaattisesti; korkean epävarmuustason tapaukset käyvät lääkärin tarkastuksen läpi täydellisellä tarkastuslokilla.
|
SCOUT-avusteinen tarkastelu (Interventioryhmä): Lääkärit tarkastavat 56 SCOUT-viitekehyksen kautta käsiteltyä tapausta.
Matalan epävarmuustason tapauksille (D(x)=0) tekoälyn ennuste hyväksytään automaattisesti ilman lääkärin tarkastusta.
Korkean epävarmuustason tapauksille (D(x)=1) lääkäri tarkastaa tapauksen päämalliin ajatusketjun päättelyn ja metatarkastuksen tulokset.
Päämalli on DeepSeek-V3.1 ajatusketjun ohjauksella.
|
Mitä tutkimuksessa mitataan?
Ensisijaiset tulostoimenpiteet
Tulosmittaus |
Toimenpiteen kuvaus |
Aikaikkuna |
|---|---|---|
|
Keskimääräinen lääkärin arviointiaika tapauskohtaisesti (minuutteina)
Aikaikkuna: Tutkimuksen loppuun asti, keskimäärin 2 tuntia.
|
Keskimääräinen aika, jonka kukin kliinikko käyttää diagnoosipäätöksen tarkistamiseen ja antamiseen per tapaus kussakin tutkimusryhmässä.
Mitattu minuutteina.
|
Tutkimuksen loppuun asti, keskimäärin 2 tuntia.
|
Toissijaiset tulostoimenpiteet
Tulosmittaus |
Toimenpiteen kuvaus |
Aikaikkuna |
|---|---|---|
|
Diagnostinen tarkkuus (%)
Aikaikkuna: Tutkimuksen päättymiseen asti, keskimäärin 2 tuntia.
|
Osuus oikeista CHD-alatyyppiluokituksista (STEMI, NSTEMI, epävakaa angina, krooniset sepelvaltimotautioireyhtymät) kussakin tutkimusryhmässä.
|
Tutkimuksen päättymiseen asti, keskimäärin 2 tuntia.
|
|
Laskennallinen investoinnin tuotto (ROI)
Aikaikkuna: Tutkimuksen loppuun asti, keskimäärin 2 tuntia.
|
Lääkärin työajan säästön suhde (arvioitu standardoitujen minuuttipalkkojen perusteella Sanmingin terveydenhuoltouudistuksen vertailuarvoista) SCOUT-päätelmien laskennallisiin kustannuksiin, eriteltynä kliinikon kokemustason mukaan.
|
Tutkimuksen loppuun asti, keskimäärin 2 tuntia.
|
Yhteistyökumppanit ja tutkijat
Opintojen ennätyspäivät
Opi tärkeimmät päivämäärät
Opiskelun aloitus (Arvioitu)
Ensisijainen valmistuminen (Arvioitu)
Opintojen valmistuminen (Arvioitu)
Opintoihin ilmoittautumispäivät
Ensimmäinen lähetetty
Ensimmäinen toimitettu, joka täytti QC-kriteerit
Ensimmäinen Lähetetty (Todellinen)
Tutkimustietojen päivitykset
Viimeisin päivitys julkaistu (Todellinen)
Viimeisin lähetetty päivitys, joka täytti QC-kriteerit
Viimeksi vahvistettu
Lisää tietoa
Tähän tutkimukseen liittyvät termit
Avainsanat
Muita asiaankuuluvia MeSH-ehtoja
Muut tutkimustunnusnumerot
- 2025-2702-1
Yksittäisten osallistujien tietojen suunnitelma (IPD)
Aiotko jakaa yksittäisten osallistujien tietoja (IPD)?
IPD-suunnitelman kuvaus
IPD-jaon aikakehys
IPD-jaon käyttöoikeuskriteerit
IPD-jakamista tukeva tietotyyppi
- STUDY_PROTOCOL
- MAHLA
- ICF
- ANALYTIC_CODE
- CSR
Lääke- ja laitetiedot, tutkimusasiakirjat
Tutkii yhdysvaltalaista FDA sääntelemää lääkevalmistetta
Tutkii yhdysvaltalaista FDA sääntelemää laitetuotetta
Nämä tiedot haettiin suoraan verkkosivustolta clinicaltrials.gov ilman muutoksia. Jos sinulla on pyyntöjä muuttaa, poistaa tai päivittää tutkimustietojasi, ota yhteyttä register@clinicaltrials.gov. Heti kun muutos on otettu käyttöön osoitteessa clinicaltrials.gov, se päivitetään automaattisesti myös verkkosivustollemme .