- ICH GCP
- Yhdysvaltain kliinisten tutkimusten rekisteri
- Kliininen tutkimus NCT06434220
Ennustavan mallin vaikutus ED-lääkärin arviointeihin potilaan disposition
Tämän tutkimuksen tavoitteena on mitata oikeudenmukaisuustietoisten algoritmien vaikutusta lääkäreiden ennusteisiin ED-potilaiden saapumisesta. Käyttämällä kokeellisesti validoitua koneoppimismallia, joka on viritetty tasapuolisiin tuloksiin, tutkijat määrittävät mallisuositusten vaikutuksen ED-lääkäreiden arvioihin pääsyriskistä hiljaisessa, prospektiivisessa tutkimuksessa. Tutkijat haastattelevat ED-lääkäreitä, jotka eivät tällä hetkellä hoida potilaita reaaliaikaisten sivustotietojen avulla. Kvantifioidakseen mallin vaikutusta ED-lääkäreiden arviointeihin pääsyriskistä tutkijat keräävät lääkärinarvioita ennen (alkuperäisen tai päivitetyn) malliennusteen kuulemista ja sen jälkeen.
Tutkijat mittaavat ED-lääkäreiden noudattamista mallin ehdotuksissa sekä myöhempien potilaiden tulosten ennustetarkkuutta ja tasapuolisuutta. Tämän tutkimuksen tulos on empiirinen mitta siitä, missä määrin oikeudenmukaiset ML-mallit voivat vaikuttaa pääsypäätöksiin vähentääkseen terveydenhuollon eroja.
Tutkimuksen yleiskatsaus
Tila
Interventio / Hoito
Yksityiskohtainen kuvaus
Erityiset tavoitteet/tavoitteet:
- Mittaa vastaanottomalliennusteen jakamisen vaikutus hoitavan lääkärin arvioon potilaan taipumuksesta tunnin sisällä esittelystä korkea-asteen akateemisessa lastensairaalassa.
- Mittaa mallien ennusteen jakamisen vaikutusta mallista, joka on viritetty tasaiseen alaryhmän suorituskykyyn, hoitavan lääkärin arvioon potilaan taipumuksesta tunnin sisällä esittelystä korkea-asteen akateemisessa lastensairaalassa.
Tausta ja merkitys:
Koneoppimismallit (ML) tarjoavat yhä enemmän hoitotiimeille kliinistä päätöstukea (CDS) auttaakseen yksilöitä priorisoimaan tiettyä hoitoa heidän ennustettujen terveystarpeidensa ja tulosten perusteella. AI/ML-menetelmillä voi olla erityisen suuri vaikutus resurssien allokointiin ensiapuosastoilla (ED:t) kaikkialla Yhdysvalloissa, joiden lääketieteen instituutti on kuvannut ylikapasiteetin "lähellä murtumispistettä". Valitettavasti mallit toimivat usein huonosti investoimattomissa osapopulaatioissa suhteessa koko väestöön. Seurauksena on, että ML-mallit voivat pahentaa loppupään terveyseroja, koska ne toimivat huonommin syrjäytyneissä potilasalaryhmissä, varsinkin kun malleja laajennetaan useisiin hoitokeskuksiin ja/tai niitä käytetään ilman alaryhmien seurantaa pitkiä aikoja.
Viime vuosina on kehitetty monia ennustemalleja potilaan tilan ennustamiseksi ED:stä, mukaan lukien ryhmämme kehittämä ennustetyökalu, joka on tällä hetkellä pilottivaiheessa Bostonin lastensairaalassa, South Shore Hospitalissa ja Los-Angelesin lastensairaalassa. Ennustetyökalumme POPP (Predictor of Patient Placement) tarjoaa tarkan, reaaliaikaisen sisäänpääsyn todennäköisyyden käynnin aikana saatavilla olevien sähköisten terveystietojen perusteella. Ennakkoilmoituksella todennäköisistä sisäänpääsyistä voi olla merkittävä vaikutus ED-odotukseen ja lennolle pääsyyn, mikä voi parantaa virtausta ja potilastyytyväisyyttä.
Tätä tarkoitusta varten tutkimusryhmä on jättänyt National Library of Medicine (NLM) -avustusehdotuksen [1R01LM014300 - 01A1], joka tutkii potilaiden vastaanottoon liittyvien oikeudenmukaisuustietoisten ennustemallien kehittämistä ja validointia. Tämän apurahan tavoitteessa 2 tutkitaan näiden mallien vaikutusta ED-lääkäreiden arvioihin potilaan taipumuksesta, ja se vastaa tätä protokollaa. NLM on ilmoittanut aikovansa rahoittaa tämän ehdotuksen, ja tutkijat ovat parhaillaan toimittamassa asiakirjoja palkinnon viimeistelemiseksi. Tämä tutkimuksen osa on suunniteltu tutkimuksen vuodelle 3.
Alustavat tutkimukset
Tutkijat suorittivat joukon alustavia retrospektiivisiä tutkimuksia, joissa todettiin, että potilaiden vastaanotto voitiin ennustaa koneoppimismalleilla etukäteen BCH ED:ssä, asteittain käynnin aikana sekä muissa lääketieteellisissä keskuksissa hyvällä tarkkuudella (AUROC 0,9-0,93). .
Seuraavaksi tutkijat havaitsivat, että POPP:n tarkkuus ennustettaessa pääsyn todennäköisyyttä lisäsi arvoa ED-hoitolääkäreiden gestalt-arviointiin. Positiivinen ennustearvo hoitoon pääsyn ennusteelle oli 66 % kliinikoille, 73 % POPP:lle ja 86 % hybridimallille, jossa nämä kaksi yhdistettiin.
Lopuksi tutkijat kehittivät menetelmiä ED-ennustemallien jälkikäsittelyyn, jotta ne olisivat hyvin kalibroituja rodun, sukupuolen ja vakuutustuotteen mukaan määritellyissä potilaiden väestöryhmissä.
Mallin ennusteita käytetään tällä hetkellä auttamaan sänkykoordinaatiossa, mutta niiden korkean arvon vuoksi ne voivat myös parantaa päätöksentekoa sängyn vieressä. Tällä tutkimuksella tavoitteemme on nyt testata simuloidussa, turvallisessa ja realistisessa ympäristössä, kuinka mallisuositukset vaikuttavat ED-hoitolääkäreiden arvioihin pääsyn todennäköisyydestä.
Opintotyyppi
Ilmoittautuminen (Arvioitu)
Vaihe
- Ei sovellettavissa
Yhteystiedot ja paikat
Opiskeluyhteys
- Nimi: William La Cava, PhD
- Puhelinnumero: 4133200544
- Sähköposti: william.lacava@childrens.harvard.edu
Tutki yhteystietojen varmuuskopiointi
- Nimi: Andrew Fine, MD
- Puhelinnumero: 617-355-9696
- Sähköposti: andrew.fine@childrens.harvard.edu
Osallistumiskriteerit
Kelpoisuusvaatimukset
Opintokelpoiset iät
- Aikuinen
- Vanhempi Aikuinen
Hyväksyy terveitä vapaaehtoisia
Kuvaus
Sisällyttämiskriteerit:
- Hallituksen hyväksymät ensiapuosaston hoitavat lääkärit, jotka tällä hetkellä työskentelevät Bostonin lastensairaalassa
Poissulkemiskriteerit:
- Lääkärit suljetaan kokonaan pois potilaiden tutkimuksista, joita he parhaillaan hoitavat
Opintosuunnitelma
Miten tutkimus on suunniteltu?
Suunnittelun yksityiskohdat
- Ensisijainen käyttötarkoitus: Muut
- Jako: Satunnaistettu
- Inventiomalli: Peräkkäinen tehtävä
- Naamiointi: Kolminkertaistaa
Aseet ja interventiot
Osallistujaryhmä / Arm |
Interventio / Hoito |
|---|---|
|
Ei väliintuloa: Lääkärin arvio ennen toimenpidettä
Ei väliintuloa.
Lääkäriä tutkitaan arvioidakseen potilaan tilaa.
|
|
|
Active Comparator: Lääkärin arvio perusmallin toimenpiteen jälkeen
Lääkärille näytetään perusmallisuositus potilaan sijoittumisesta, mukaan lukien kuvaus mallin ennusteeseen vaikuttavista tekijöistä.
|
Mallin ennuste potilaan sijainnista, mukaan lukien ominaisuuden tärkeyspisteet, jotka ohjaavat ennustetta.
|
|
Active Comparator: Lääkärin arviointi oikeudenmukaisuustietoisen malliintervention jälkeen
Lääkärille näytetään mallisuositus mallista, joka on viritetty alaryhmän suorituskykyä varten potilaan asettamiseen, mukaan lukien kuvaus mallin ennusteeseen vaikuttavista tekijöistä.
|
Mallin ennuste potilaan sijainnista, mukaan lukien ominaisuuden tärkeyspisteet, jotka ohjaavat ennustetta.
Tämä malli on viritetty minimoimaan alaryhmän kalibrointivirheet.
|
Mitä tutkimuksessa mitataan?
Ensisijaiset tulostoimenpiteet
Tulosmittaus |
Toimenpiteen kuvaus |
Aikaikkuna |
|---|---|---|
|
Lääkärin arvioima ED-alttius (pääsyn todennäköisyys)
Aikaikkuna: 24 tunnin sisällä kyselystä
|
Ensisijainen tulos on lääkärin arvioima ED-sijoittelu (luokiteltu sisäänpääsyksi tai kotiutukseksi) ennen malliennusteen katsomista ja sen jälkeen verrattuna potilaan lopulliseen sijoittumiseen
|
24 tunnin sisällä kyselystä
|
|
Potilaan loppusijoitus (saatu/poistettu)
Aikaikkuna: 24 tunnin sisällä kyselystä
|
Potilaan lopullinen sijainti riippumatta siitä, onko se otettu sairaalahoitoon tai kotiutettu
|
24 tunnin sisällä kyselystä
|
Toissijaiset tulostoimenpiteet
Tulosmittaus |
Toimenpiteen kuvaus |
Aikaikkuna |
|---|---|---|
|
Mallin mukainen ED-sijoitus
Aikaikkuna: 24 tunnin sisällä kyselystä
|
Mallin ennusteen arvio ED-sijoituksesta verrattuna potilaan lopulliseen disposition
|
24 tunnin sisällä kyselystä
|
Yhteistyökumppanit ja tutkijat
Sponsori
Julkaisuja ja hyödyllisiä linkkejä
Yleiset julkaisut
- Barak-Corren Y, Israelit SH, Reis BY. Progressive prediction of hospitalisation in the emergency department: uncovering hidden patterns to improve patient flow. Emerg Med J. 2017 May;34(5):308-314. doi: 10.1136/emermed-2014-203819. Epub 2017 Feb 10.
- Barak-Corren Y, Agarwal I, Michelson KA, Lyons TW, Neuman MI, Lipsett SC, Kimia AA, Eisenberg MA, Capraro AJ, Levy JA, Hudgins JD, Reis BY, Fine AM. Prediction of patient disposition: comparison of computer and human approaches and a proposed synthesis. J Am Med Inform Assoc. 2021 Jul 30;28(8):1736-1745. doi: 10.1093/jamia/ocab076.
- Barak-Corren Y, Chaudhari P, Perniciaro J, Waltzman M, Fine AM, Reis BY. Prediction across healthcare settings: a case study in predicting emergency department disposition. NPJ Digit Med. 2021 Dec 15;4(1):169. doi: 10.1038/s41746-021-00537-x.
- Barak-Corren Y, Fine AM, Reis BY. Early Prediction Model of Patient Hospitalization From the Pediatric Emergency Department. Pediatrics. 2017 May;139(5):e20162785. doi: 10.1542/peds.2016-2785.
- La Cava WG, Lett E, Wan G. Fair admission risk prediction with proportional multicalibration. Proc Mach Learn Res. 2023;209:350-378.
Opintojen ennätyspäivät
Opi tärkeimmät päivämäärät
Opiskelun aloitus (Arvioitu)
Ensisijainen valmistuminen (Arvioitu)
Opintojen valmistuminen (Arvioitu)
Opintoihin ilmoittautumispäivät
Ensimmäinen lähetetty
Ensimmäinen toimitettu, joka täytti QC-kriteerit
Ensimmäinen Lähetetty (Todellinen)
Tutkimustietojen päivitykset
Viimeisin päivitys julkaistu (Todellinen)
Viimeisin lähetetty päivitys, joka täytti QC-kriteerit
Viimeksi vahvistettu
Lisää tietoa
Tähän tutkimukseen liittyvät termit
Muut tutkimustunnusnumerot
- IRB-P00048537
Yksittäisten osallistujien tietojen suunnitelma (IPD)
Aiotko jakaa yksittäisten osallistujien tietoja (IPD)?
Lääke- ja laitetiedot, tutkimusasiakirjat
Tutkii yhdysvaltalaista FDA sääntelemää lääkevalmistetta
Tutkii yhdysvaltalaista FDA sääntelemää laitetuotetta
Nämä tiedot haettiin suoraan verkkosivustolta clinicaltrials.gov ilman muutoksia. Jos sinulla on pyyntöjä muuttaa, poistaa tai päivittää tutkimustietojasi, ota yhteyttä register@clinicaltrials.gov. Heti kun muutos on otettu käyttöön osoitteessa clinicaltrials.gov, se päivitetään automaattisesti myös verkkosivustollemme .