Realtidsstreamingmotor til klinisk brug til medicinsk eskalering (ReSCUE-ME)

Mål:

Mount Sinai Hospital har udviklet et Rapid Response Team-system (RRT) designet til at give generelle gulvplejere yderligere støtte til patienter, der kan have behov for et højere plejeniveau. Dette system gør det muligt for både sygeplejersker og læger at underrette RRT og få et kritisk plejeteam til at evaluere patienterne. I perioden fra 03/01/2018 til 09/17/2018 foretog Mount Sinai Hospitals gulvenheder på 10W og 10E enheder 357 opkald til hurtige reaktionsteam (RRT), hvoraf kun 58 førte til en faktisk stigning i plejeniveauet (sandt) positiv rate ~ 16 %). På samme måde genererede Electronic Health Record (EHR) 839 sepsis Best Practice Alerts (BPA'er), men kun fem førte til eskaleringer i plejen (sand positiv rate ~ 0,5%). Resultaterne ovenfor ville indebære, at der skal foretages mere end 168 evalueringer for at identificere et enkelt tilfælde, hvor patienten havde behov for en eskalering i plejen. Målet med ReSCUE-ME er at evaluere den potentielle modelpræstation og identificere det bedste sted, som undersøgelsesteamet kan inkorporere MEWS++ i RRT og primære udbyderes arbejdsgange. Det primære endepunkt er hastigheden for eskalering af pleje på 10W og 10E i løbet af undersøgelsesperioden.

Baggrund:

I et tidligere studie har gruppen vist, at en maskinlæringsmodel (MEWS++) markant overgik en standard, manuelt beregnet MEWS-score på en stor retrospektiv kohorte af indlagte patienter. For at udvikle denne model brugte undersøgelsesholdet et datasæt (Godkendt af: IRB-18-00581) på 96.645 patienter med 157.984 hospitalsmøder og 244.343 sengebevægelser. Undersøgelsesholdet fandt, at MEWS++ var overlegen i forhold til standard MEWS-modellen med en følsomhed på 81,6 % vs. 44,6 %, specificitet på 75,5 % vs. 64,5 %, og areal under modtagerens driftskurve på 0,85 vs. 0,71.

Opmuntret af dette tidligere resultat søger undersøgelsesholdet at evaluere modellen i en prospektiv undersøgelse.

En lydløs pilot af ReSCUE-ME-advarslerne har kørt på 10E og 10W siden februar 2019. Undersøgelsesteamet har løbende overvåget varslingsydelsen via et webbaseret dashboard i realtid. Resultaterne er opsummeret nedenfor:

• Medianantal af underretninger til primært team, pr. etage, pr. dag: 8
• Medianantal af advarsler til RRT, pr. etage, pr. dag: 4
• Sensitivitet 0,76, specificitet 0,68, AUC 0,77
• Nøjagtighed 0,69, Præcision 0,3, F1 Score 0,43 Denne præstation kan sammenlignes meget positivt med præstationen set i den retrospektive historiske kohorte, der blev brugt til at udvikle MEWS++-modellen:
• Sensitivitet 0,82, specificitet 0,76, AUC 0,85
• Nøjagtighed 0,76, præcision 0,12, F1-score 0,19"