Voiko suuren kielimallin palaute parantaa terveydenhuollon laatua?

Kokeellinen: Kliininen arvio LLMS: n kanssa ja ilman sitä

Tutkijat käyttävät potilaan sisäistä mallia. Potilaat saavat kaksi peräkkäistä arviointia yhteisön terveyspidennystyöntekijästä: ensin ilman ja sitten suurella kielimallilla.

Muut: Suuri kielimalli kliininen päätöksenteon tuki

Klinikan elektroniseen sairauskertomusjärjestelmään integroitu suuri kielimalli (LLM) tarjoaa reaaliaikaisen palautteen potilaan arvioinnista. Yhteisön terveyslaajennustyöntekijät luovat ensin tavanomaisen saippuan huomautuksen, lähettävät sen LLM: lle ja saavat yksityiskohtaista palautetta ja keskeisiä suosituksia. Sitten he voivat päivittää arviointinsa tämän palautteen perusteella. Kaikki lopulliset hoitopäätökset tekevät lääkärit, jotka arvioivat itsenäisesti potilaita.

Käsittelysuunnitelman virheen indikaattori (haittojen potentiaalilla)

Saippua huomautuksen arvioinnin aikana MO: ta pyydetään ilmoittamaan, sisältääkö potilaan hoitosuunnitelma virheitä, jotka ovat ehdollisia MO: n omasta diagnoosista. Tämä koodataan 1, jos MO osoittaa, että virhe on ja 0 muuten.

Johdantoteksti (tässä saippuan huomautus A) on: Arvioi, onko saippuahuomautus A soveltuvan tämän potilaan tilaan. Perusta tämä omaan diagnoosiin, ei Chew's Diagnoosi saippua Huomautus A.

Tätä seuraa kysymys: Onko potilaan hoitosuunnitelma saippualla huomautus täysin sopiva ottaen huomioon oman diagnoosisi (lääketieteellisten testien perusteella ehdolliset hoidot)? Vastaa "ei", jos potilaan pitäisi saada erilaista lääketieteellistä hoitoa diagnoosisi vuoksi. Tähän voi kuulua molemmat pienet erot (esimerkiksi potilasta tulisi neuvoa levätä) että suuria virheitä (esimerkiksi potilaan tulisi saada täysin erilainen lääkkeen). (Vastausvaihtoehdot: Kyllä/ei/epävarma)

Käsittelysuunnitelman virheen indikaattori, joka aiheuttaa vähintään x-laadun mukautettujen elämäpäivien menettämisen

Tämä muuttuja on koodattu 1: ksi, jos MO osoittaa, että tällainen virhe on ja 0 muuten. X on määritelty olevan suurin vertailukohta sopivalla DALY -asteikolla siten, että vähintään 5%: lla potilaista on virhe, joka suurta apuasaippua. Toisin sanoen vakavat virheet ovat virheitä, jotka tuottavat haittoluokituksen haittojen 95. prosenttipisteen tai sen yläpuolella avustamattomassa mittakaavassa (yhdistävät lapsen ja aikuisten asteikot).

Indikaattori paremmalle hoitosuunnitelmalle (MOS: n määrittämä)

Saippuan DALY -luokituksen perusteella A Vs. B (laskentatapaukset, joissa virheitä ei ole 0 daly -häviötä), indikaattori koodataan 1, jos SOAP -huomautuksella on parempi hoitosuunnitelma (alhaisempi DALY -menetys) ja 0, jos MOS tuomitsee molemmat molemmat molemmat Muistiinpanot ovat samat vastauksena seuraavaan kysymykseen: Onko saippuan A ja B hoitosuunnitelmissa merkityksellisiä eroja?

Indikaattori siitä, onko hoito sopusoinnussa ennalta määrätyn "hoidon standardin" kanssa

Riskipotilaat saavat malarian, anemian ja UTI-seulonnan tiettyjen väestökriteerien mukaisesti. Sitten tietojoukko rakennetaan yhdellä havainnolla jokaiselle (potilas, seulontakoe, huomautus), jopa kuusi potilasta kohti.

Hoitovirheellisestä kohdistustiedotetiedoista, onko potilasta virheellisesti hoidettu testituloksen tai oireiden puuttumisen perusteella. Muuttuja koodataan 1: ksi, jos potilas testataan positiiviseksi ja joko sai sopimattoman tai ei hoitoa. Se koodataan myös 1, jos potilas testataan negatiivisesti tai sitä ei testattu oireiden seulon perusteella, mutta sai hoidon. Muuttuja koodataan vain 0: ksi, jos potilas testataan negatiivisesti eikä sitä käsitelty oikein vastaavan tilan suhteen tai jos he testasivat positiivista ja saivat oikean hoidon.

Indikaattorit, jotka kuvaavat diagnoosia ja hoidon linjausta pureskelun ja MOS: n välillä

Jokaiselle Chew -hoitosuunnitelman lääkitykselle on "kliininen indikaattori" (lääkkeeseen liittyvä diagnoosi) sekä indikaattori, joka määrittelee, onko annettu resepti ehdollinen lääketieteellisen testituloksen suhteen. Tutkimusryhmä harkitsee kolmea ottelun indikaattoria:

• mikä tahansa "kliinisen indikaatio" -kentän sisällön ottelu lääkkeiden välillä;
• mikä tahansa "lääkitys" -kentän sisällön ottelu indikaatioiden välillä, mukaan lukien lääkitys testissä vai ei;
• Sekä lääkityksen että indikaation (ja testi ehdollisuus) vastaavuus.

Vaihtoehtoiset indikaattorit hoidon väärinkäyttöön

Tutkimusryhmä rakentaa seuraavat hoidon väärinkäytön indikaattorit:

• Ylitysten aiheuttama väärinkäyttö: Käsitetään ehto, jonka potilas on vahvistettu
• Väärinkäyttöön kohdistuva väärinkäyttö: sairaus, jota potilaan vahvistetaan olevan, ei hoideta
• Väärin annostelusta tai lääkkeen valinnasta johtuva väärinkäyttö: potilaalla on sairaus, mutta valittu annostelu tai lääkitys on sopimaton.

QALY -menetyksen suhde potilaan tilan vakavuuteen

Potilailla, joilla on vain lieviä sairauksia, QALY -menetyksen soveltamisalaa virheistä voi olla rajoitettu suhteessa vakavampiin sairauksiin.

Tätä silmällä pitäen QALY -menetys taantuu lievän, kohtalaisen ja vakavien sairauksien indikaattoreissa (MO: n arvioimana), kumpikin on vuorovaikutuksessa avustetun huomautuksen indikaattorin kanssa hallitsemalla potilaan kiinteitä vaikutuksia. Tulokset esitetään graafisesti.

Indikaattorit lääketieteellisten testauspäätösten tarkoituksenmukaisuudelle

Lääketieteellisen testien mahdollinen väärinkäyttö toteutetaan kahdella tavalla:

1. Jokaiselle testityypille tutkimusryhmä rakentaa indikaattorin, joka on koodattu 1: ksi, jos pureskele suosittelee testin suorittamista, joka osoittautuu negatiiviseksi, ja toinen indikaattori, joka on 1, jos pureskele laiminlyö testin, joka osoittautuu, joka osoittautuu olla positiivinen.
2. Toiseksi tutkimusryhmä rakentaa indikaattorin (potilas, testi, huomautus), joka mittaako Chew ja MO pyytänyt samaa vai vertailukelpoista lääketieteellistä testiä (esim. Chew pyysi malaria RDT: tä, kun taas MO pyysi malarian verenmuotoa ).

Yhdistämällä nämä indikaattorit, yhteensopimattomuus tapahtuu siten, että pureskella ei ole pyytänyt testiä, mutta oli vain jos jompikumpi: i) testiä pyysi pureskelta, mutta tulos oli negatiivinen eikä vastaavaa testiä tilattu Mo.

Kadonneen Dalyn keskiarvo ja jakauma

LLM -avustuksen vaikutusta menetetty DALY mitataan suoraan eikä epäsuorasti (kuten virheen ja vakavan virheen todennäköisyydessä, mikä huomauttaa on parempi huomautus). Tuloksissa esitetään myös DALY -luokitusten täydellinen jakautuminen avustetuille ja avustamattomille muistiinpanoille.

MO -arviointien arviointi: Poikkeamat Mo: n saippuasta

MO: ta pyydetään arvioimaan jokaisesta saippua huomautuksesta, olivatko tilattu lääketieteelliset testit välttämättömiä vai kliinisesti hyödyllisiä, onko puuttuvia vai virheellisiä/tarpeettomia diagnooseja, ja onko puuttuvia vai virheellisiä/tarpeettomia hoitosuunnitelmien osia.

MO -arviointien arviointi: aiheutuneita haittoja

MO: ta pyydetään arvioimaan mahdolliset lyhytaikaiset vahingot (ylimääräiset oireet tai epämukavuus jonkin ajanjakson ajan) ja mahdolliset pitkäaikaiset vakavat vahingot (heikentymisen riski, kuoleman jne.) Saippua-huomautuksen hoitosuunnitelmasta.

MO: n arviointi Saippua Huomautuksista: Dalyssa menetetyn terveellisen ajan mittaaminen

MO tarjoaa myös kokonaisluokituksen, jonka tarkoituksena on heijastaa "terveellistä aikaa menetettyä aikaa" mahdollisista saippua -huomautuksen hoitovirheistä. Jokaiselle pureskelulle rakentamalle arvioinnille ja suunnitelmalle (LLM -neuvoilla tai ilman) MO arvioi terveellisen elämän odotettua suuruutta, joka menetetään, jos puresuunnitelma toteutetaan MO: n suunnitelman sijasta.

Chew- ja MO -muistiinpanojen MD -arviointi: MO -virheen liputtaminen

Ensimmäisessä vaiheessa he tarkistavat vain MO -muistiinpanot ja tallentavat, onko ehdollisessa huomautuksessa ehdotetussa diagnoosissa tai hoidossa virheitä tai lopullisessa huomautuksessa. Jos virhe tunnistetaan, MDS arvioi virheiden mukaan virheiden erottamiseksi lääketieteellisten virheiden erottamiseksi potilaasta, jota ei ole läsnä.

Chew- ja MO -muistiinpanojen MD -arviointi: Saippua huomautusluokitus

MD: tä pyydetään arvioimaan mahdolliset lyhytaikaiset vahingot (ylimääräiset oireet tai epämukavuus jonkin ajanjakson ajan) ja mahdolliset pitkäaikaiset vakavat vahingot (heikkenemisriski, kuolema jne.) Saippua-huomautuksen hoitosuunnitelmasta.

MD tarjoaa myös kokonaisluokituksen, jonka tarkoituksena on heijastaa "terveellistä aikaa menetettyä aikaa" saippuan huomautuksen hoitovirheistä. Jokaiselle pureskelulle rakentamalle arvioinnille ja suunnitelmalle (LLM -neuvoilla tai ilman) MO arvioi terveellisen elämän odotettua suuruutta, joka menetetään, jos puresuunnitelma toteutetaan MO: n suunnitelman sijasta. Terveellinen aika mitataan vammaisuuteen mukautetun elämän vuoden yksiköissä (DALY), jotka heijastavat sekä pituutta että elämänlaatua.

Chew- ja MO -muistiinpanojen MD -arviointi: LLM Review

MDS tarkistaa myös LLM -palautetta ja vastaa seuraaviin kysymyksiin:

"Seurasiko pureskelu kaikissa, toisia tai kukaan LLM -suosituksista?" Jos osa tai ei mitään: "Kuvittele, että pureskelu oli noudattanut kaikkia LLM: n suosituksia. Olisiko tuloksena oleva hoitosuunnitelma parannus heidän avustettuun huomautukseen? "(Kyllä/ei), jos kyllä:" Selitä "." "Onko LLM tehnyt virheitä?" (Kyllä/Ei) Jos kyllä: "Oliko jokin osa Chew -avustetusta hoitosuunnitelmasta pahempaa kuin avustamaton suunnitelma, koska pureskelu noudatti LLM: n virheellistä suositusta?" Jos kyllä: "Selitä.

Indikaattori triaatiopäätösten tarkoituksenmukaisuudelle

Jokaiselle (potilas, huomautus) indikaattori tallentaa, onko pureskeleiden triaatiopäätös (saippua huomautuksessa osoitettu triaatio) ja ehdotetun triaatiopäätöksen kohdistaminen.