EScreeningin tehokkuus ja toteutus 9/11-siirtymäohjelmissa

Tässä tutkimuksessa arvioidaan sähköisen seulontaohjelman, eSeulonta, tehokkuutta ja toteutusta verrattuna VHA Transition Care Management (TCM) -ohjelmien hoitopaperiin ja/tai sanallisiin seulontamenetelmiin. Tämä on sekamenetelmien hybridi 2, tehokkuus-toteutus, stepped wedge (SW) -koe eScreeningistä kahdeksassa paikassa. Seuraavat kahdeksan toimipaikkaa ovat toteutuspaikkoja, joissa ei suoriteta tutkimukseen liittyviä toimia: Oklahoma City VA Health Care System, Chillicothe VA Medical Center, Orlando VA Medical Center, VA Western Colorado Health Care System, VA Puget Sound Health Care System, Roseburg VA Health Care System, VA Salt Lake City Health Care System, West Palm Beach VA Medical Center. Nämä sivustot toteuttavat seulonnan osana rutiinihoitoa. He eivät kerää tietoja eivätkä saa riippumatonta IRB-hyväksyntää.

Tutkijat keräävät seuraavat tiedot:

EMR-tiedot: EMR-tiedot poimitaan Corporate Data Warehouse (CDW) -tietokannasta. EMR-tiedot sisältävät 1) terveydenhuoltojärjestelmään ilmoittautuneiden veteraanien lukumäärän sekä heidän ilmoittautumispäivämääränsä ja kellonaikansa (keskimäärin 144 veteraania kuukaudessa eri toimipisteissä), 2) päivämäärästä ja kellonajasta, jolloin he saivat PC-PTSD-5+I9:n. , PHQ-2 +I9, AUDIT-C, CSSR-S ja sijainti (positiivinen/negatiivinen näyttö), 3) päivämäärä ja kellonaika, jolloin he saivat kattavan itsemurhariskiarvioinnin (CSRE) ja 4) mielenterveyshuollon lähetteet. Näitä tietoja käytetään laskettaessa seulonnan ja mielenterveyshuoltoon lähetteiden kokonaismäärää sekä seulonnan suorittamiseen kuluvaa keskimääräistä kestoa. Tutkijat keräävät myös ikä-, sukupuoli-, rotu- ja etnisyystietoja sisällyttääkseen kovariaatteina malleihin.

eScreening-järjestelmä: tutkijat käyttävät eScreening reports -toimintoa eScreening-käyttötietojen hakemiseen sivustoille.

Henkilöstön osallistujat: noin 4–8 siirtymähoitohenkilöstöä (ensisijaisesti sosiaalityöntekijöitä, mutta myös lääketieteellisiä tukihenkilöitä tai muita ammattilaisia) kussakin kahdeksasta VHA:sta, jotka ovat suoraan tai epäsuorasti mukana eSeulonnan toteuttamisessa, pyydetään osallistumaan tämä tutkimus. Osallistumiseen kuuluu yksi 30 minuutin henkilökohtainen puhelinkysely/haastattelu, kaksi 60 minuutin henkilökohtaista puhelinhaastattelua ja yksi 20 minuutin verkkokysely. Haastatteluissa ja kyselyissä keskitytään arvioimaan eScreening-toteutusstrategian toteutettavuutta ja hyväksyttävyyttä; tekijät, jotka vaikuttavat eScreeningin käyttöönottoon, käyttöönottoon ja jatkuvaan käyttöön; ja täytäntöönpanon jälkeiset tulokset. Kaikki henkilökunnan tiedot kerätään virtuaalisesti.

Seuraavassa on yksityiskohtainen kuvaus tutkimusmenettelyistä, aikajanasta, tiedoista ja analyyseistä.

Kuuden kuukauden käynnistysjakson jälkeen, johon kuuluu suunnittelu ja satunnaistaminen, vaiheittainen kiilakoe alkaa. Tämä porrastettu kiilakokeilu perustuu peräkkäiseen käyttöönottoon osallistuville sivustoille ajan myötä, samalla kun muita sivustoja käytetään kontrollina, kunnes niiden käyttöönotto ja helpottaminen alkavat. Kahdeksan osallistuvaa toimipaikkaa ositetaan koon mukaan (yhdistelmä TCM:n henkilöstön lukumäärästä ja 9/11:n jälkeen rekisteröityneiden veteraanien keskimääräisestä määrästä kuukaudessa) ja satunnaistetaan neljään kahden toimipaikan vaihe-/risteytyskohorttiin. Kaikki vaihe-/ristikkäiset kohortit käyvät läpi 3 kuukautta kestävän käyttöönottoa edeltävän vaiheen (Pre-Imp), jota seuraa 9 kuukauden aktiivinen käyttöönotto eScreening MCIS:n avulla. eScreening MCIS alkaa 3 kuukauden jaksolla, joka sisältää eScreening-ohjelmiston toimituksen, koulutuksen, RPIW:n ja yhdistetyn fasilitoinnin, jota seuraa 6 kuukautta jatkuvaa sekoitettua fasilitointia (yhteensä 9 kuukautta). Aktiivisen käyttöönoton jälkeen kaikilla kohteilla on 9 kuukauden ylläpitojakso. Kerätään monenlaisia ​​tietoja, mukaan lukien sähköiset potilastiedot, henkilöstön mittaukset ja haastattelut, kenttämuistiinpanot ja ajan liikkeen seuranta (kuvattu alla). Tiedonkeruu aloitetaan ennen käyttöönottoa jokaisessa paikassa ja jatkuu ylläpitoon asti.

Opintojen aloitus (0-6 kuukautta):

Satunnaistaminen ja sisäiset fasilitaattorit. Sivustot ositetaan koon mukaan, satunnaistetaan neljään vaihe/risteytyskohorttiin ja valitaan sisäiset fasilitaattorit, jotka toimivat sivuston eScreening-toteutusmestareina tutkimuksen aikana. Paikan valinnan aikana tutkijat tunnistivat mestareita, jotka tukevat eScreeningin käyttöä ja jotka ovat luoneet suhteita TCM-tiimiin.

Viimeistele materiaalit. Laadullinen johtava apututkija yhdessä PI:n ja toteutustieteen asiantuntijan kanssa ohjaavat tutkimuskyselylomakkeiden, aika- ja sopeutumisseurantalaitteiden sekä haastatteluoppaiden kehittämistä ja pilotointia PRISM:n avulla.

Lean/Six Sigma RPIW koulutus. Tutkijoiden tiimillä on yli 7 vuoden kokemus eSeulonnan toteuttamisesta erilaisissa kliinisissä ympäristöissä RPIW-lähestymistapaa käyttäen. Valmistautuakseen muodolliseen RPIW-fasilitointiin koulutetaan kaksi ulkopuolista fasilitaattoria helpottamaan eScreening RPIW:itä, mukaan lukien ensisijainen fasilitaattori (masteritaso) ja varmuuskopio (PI) blackbelt-tason Lean/Six Sigma -asiantuntijan toimesta San Diegon Systems Redesign -ohjelmassa. Terveydenhuoltojärjestelmä. Osana koulutusta ulkopuoliset fasilitaattorit helpottavat kahta muodollista eScreening RPIW:tä toteutussivustoilla, jotka eivät osallistu tutkimukseen.

Viimeistele koulutusmateriaalit. Tutkijoiden ryhmä on kehittänyt eScreening VA Pulse Site -sivuston, joka tekee teknisen tiedon ja koulutusmateriaalien pääsystä henkilöstölle helppoa. Sivusto sisältää usein kysyttyjä kysymyksiä, opetusvideoita, teknisen oppaan ja käyttöoppaan, suuren määrän koulutustietoa ja eScreening-ohjekirjan. Yhteistyössä eScreening OIT -tiimin kanssa tutkijat päivittävät nämä materiaalit sisältämään uusimmat tiedot eScreeningistä ja tukemaan koulutusprotokollaa.

Sidosryhmäkokous: Tutkijat isännöivät useiden kansallisten ja laitossidosryhmien kanssa pidettyjen alustavien kokousten pohjalta muodollisen puhelinkonferenssin aloituskokouksen kansallisen TCM:n johdon, toimipaikan sisäisten fasilitaattorien, VA OIT:n eScreening-ohjelman johtajan, VA Innovations -henkilöstön sekä PI:n ja yhteistyökumppaneiden kanssa. tutkijat ja tutkimushenkilöstö. Tämän tapaamisen tavoitteena on suunnata kaikki tutkimuksen tavoitteisiin, viestiä kansalliset sidosryhmien mieltymykset vuorovaikutuksen sisällöstä ja tiheydestä sekä tunnistaa ja käsitellä mahdollisia logistisia esteitä ja fasilitaattoreita. 2 tunnin kokouksessa kuvataan kuvakäsikirjoitusmuotoa menettelyt ja luodaan keskustelua aiemmassa työssä käytetyn jäsennellyn kohderyhmämuodon kautta. Nämä tapaamiset järjestetään kuuden kuukauden välein tutkimuksen aikana. Ulkopuolinen VHA:n neuvoa-antava ryhmä, johon kuuluu veteraaneja, käy läpi tutkimusmateriaalin ja suunnitelman.

Stepped-Wedge -kokeilu (7–45 kuukautta):

Esityön perusteella tutkijat arvioivat, että tähän tutkimukseen otetaan mukaan 45 TCM:n otos ja siihen liittyvä henkilökunta. Potilastason tiedot kerätään EMR:stä (johon tutkijat hakevat HIPPA-vapautusta), eikä veteraanit osallistu suoraan. Rekrytointimenettelyt tarkistetaan ja tarvittaessa mukautetaan käynnistysvaiheessa, mutta ehdotettu menettely on seuraava: 1) Sisäiset fasilitaattorit, TCM-henkilöstö ja eScreening-toteutukseen liittyvä sidosryhmähenkilöstö kustakin toimipaikasta kutsutaan osallistumaan opiskella; 2) Järjestetään tiedotustilaisuus tutkimuksen johtamisesta ja tarkoituksesta, osallistujien valinnasta ja tietojen käytöstä. Mahdollisille henkilöstön osallistujille ilmoitetaan, että heidän osallistumisensa on täysin vapaaehtoista, eikä heidän osallistumispäätöksensä vaikuta heidän työhönsä, ansioihinsa tai ylennyksiinsä. Tämän tiedotustilaisuuden jälkeen tutkimushenkilöstö suostuu kiinnostuneisiin osallistujiin. Kun suostumus on allekirjoitettu, ilmoittautuneet työntekijät saavat linkin verkkokyselyyn, ja arvioinnin johtaja ajoittaa heidät alustavaan haastatteluun. Jos henkilöstö vaihtuu, tutkijat yrittävät arvioida henkilöstön jäsenen ennen lähtöä sekä korvata ja kouluttaa toisen osallistujan, jolla on samanlaisia ​​tehtäviä klinikalla. Jokainen neljästä vaihe-/risteytyskohortista käy läpi seuraavat vaiheet peräkkäin tutkimuksen aikana.

Toteutusta edeltävä vaihe (Pre-Imp). Tämä vaihe kestää 3 kuukautta, ja sen aikana tutkimusryhmä työskentelee sisäisten ohjaajien kanssa: 1) kerää ennen käyttöönottoa tietoja, mukaan lukien yksityiskohtaiset tiedot TCM-seulonnassa olevista prosesseista ilmoittautumisen yhteydessä; 2) tunnistaa iPadien ja muiden logististen tarpeiden yhteyspisteet; 3) luoda kommunikaatiota TCM:n henkilöstön ja muiden TCM:n henkilökunnan kanssa työskentelevien kanssa; 4) palkata henkilöstöä tutkimukseen osallistujia; ja 5) aloittaa jatkuva prosessitietojen seuranta kenttämuistiinpanoista ja ajan liikkeen seuranta. TCM-henkilöstön nimet, klinikoiden nimet, muistiinpanojen nimet, RPIW-aikataulut ja ohjelman henkilökunnan täyttämät kliiniset muistutukset kerätään ja käytetään myöhemmin käyttäjätilien kehittämiseen ja sisällön mukauttamiseen käyttöönottovaiheen aikana. Toteutustiimi tarjoaa myös henkilöstölle psykokoulutusta seulonnan tärkeydestä. Tämä vaihe toimii huomionhallintatilanteena, johon verrataan perustason ohjaus- ja interventioolosuhteita.

Ennen käyttöönottoa TCM-tiimit jatkavat tavallisia seulontamenettelyjä. Näihin kuuluu haastattelu tai omaraportti, paperipohjainen kokoelma 9/11 jälkeisistä seulontatoimenpiteistä, mukaan lukien järjestelmän laajuiset standardoidut masennuksen, PTSD:n ja alkoholinkäytön arvioinnit (PHQ-2 +I9, PCPTSD +I9 ja Audit-C). , vastaavasti). Potilaille, jotka saavat positiivisen tuloksen PHQ-2 +I9, PCPTSD +I9, annetaan sitten Columbia Suicide Severity Rating Scale (C-SSRS), joka kerää lisää tietoa itsemurhariskistä. Veteraanit, jotka ovat saaneet C-SSRS:n positiivisen tuloksen, saavat sitten kattavan itsemurhariskiarvioinnin ja lähetetään asianmukaiseen seurantaan. Ulkoinen ohjaaja (tutkimusryhmä) ja sisäinen ohjaaja (työpaikan henkilökunta) laativat yksityiskohtaisen kuvauksen ja kulkukartan nykyisestä seulontaprosessista kussakin paikassa ennen käyttöönottovaihetta TCM:n henkilökunnalta saatujen tietojen perusteella.

Aktiivinen toteutus (MCIS): eScreening MCIS on kehitetty viimeisten seitsemän vuoden aikana ja se koostuu: 1) eScreening-ohjelmiston toimittamisesta, 2) koulutuksesta, 3) RPIW:stä ja 4) jatkuvasta yhdistetystä fasilitaatiosta. Tutkijat kehittivät MCIS:n puuttumaan aiemmassa tutkimuksessa havaittuihin erityisiin eScreening-toteutuksen esteisiin. OIT-tukeen liittyvien järjestelmätason esteiden poistamiseksi tutkijat kehittivät eScreeningin teknisen tukiinfrastruktuurin käyttämällä olemassa olevia VA IT-resursseja (katso LOS) osana eScreening-tarjontaa. Koulutusosa käsittelee eSeulonnan käyttöön ja saatavilla olevaan tutkimukseen liittyviä koulutusesteitä. Sekoitettu fasilitointi käsitti myös koulutuksen esteitä sekä teknologiaan liittyviä ja muita odottamattomia haasteita. RPIW-prosessissa käsitellään johtamisen tukea, henkilöstön sisäänostoa, tarvittavia resursseja ja ottamalla kaikki sidosryhmät mukaan prosessiin ja kehittämällä paikkakohtainen ja selkeä toteutussuunnitelma. RPIW sisältää erityisesti osion, jossa tiimi luo mahdollisia esteitä ja ratkaisuja toisena päivänä.

eSeulonta. eScreening on VHA-ohjelma, jonka avulla veteraanit voivat vastata itse ilmoittaviin seulontakysymyksiin iPadin kautta, joka on yhdistetty VHA:n suojattuun Wi-Fi-verkkoon. eScreening lukee VHA EMR:stä ja kirjoittaa siihen. eSeulonnan korostettuja ominaisuuksia ovat: 1) veteraanien mahdollisuus syöttää seulontatietoja suoraan ilman kliinikon osallistumista; 2) toimenpiteiden välitön pisteytys; 3) muokattava muistiinpano, joka on luotu EMR:ssä; ja 4) kliinikon hälytykset positiivisista mielenterveystutkimuksista, jotka vaativat seurantaa itsemurhariskin varalta.

Koulutus. eScreening-koulutus on virtuaalinen ja asynkroninen, ja siihen sisältyy 1 tunnin opetus PowerPoint, jonka ulkoinen ohjaaja esittää. PowerPointia seuraa tunnin verran opetusvideoita, joissa näytetään kaikki vaiheet (arviointien luominen, veteraanien lisääminen, tallennus VistA:han, arvioiden etsiminen, ajoitettujen tapaamisarviointien luominen, raporttien käyttö). Käytännön koulutusta käyttäjille on tarjolla ryhmämuodossa tai erikseen koulutushenkilöstön toimesta TCM-työpaikan henkilöstön pyynnöstä. Lisäkoulutusmateriaaleja on saatavilla eScreening Pulse -sivuston kautta, joka sisältää sarjan pikaoppaita eScreeningin mukauttamiseen, arvioinnin määrittämiseen ja kojelaudan käyttöön. Usein kysytyt kysymykset ovat myös saatavilla Pulse-sivustolla.

RPIW. Kolmipäiväisen RPIW:n toteuttaa käytännössä ulkoinen ohjaaja paikan päällä olevan sisäisen ohjaajan avustuksella, ja se sisältää TCM-tiimin, asiaan liittyvän henkilöstön (eli lääketieteellisen tukihenkilöstön, virkailijat) ja muut toimipaikan sidosryhmät. Prosessin ensimmäinen päivä kouluttaa osallistujia RPIW-periaatteisiin ja esittelee yhteenvedon toteutusta edeltävässä vaiheessa kerätyistä tiedoista, mukaan lukien graafisen nykytilan prosessikartan, jota sitten jalostetaan ja viimeistellään. Toinen päivä koostuu yhteisistä ponnisteluista, joilla kartoitetaan kohdennettu tulevaisuuden tila, tehdään aukkoanalyysi ja tunnistetaan sivustolle ainutlaatuiset olennaiset tekijät ja esteet. Kolmas päivä on omistettu toiminnan suunnittelun, toteutuksen ja uudelleenarvioinnin toistamiselle tavoitetilan viimeistelemiseksi ja kliinisesti merkityksellisten parannustavoitteiden tunnistamiseksi. Plan-Do-Study-Act (PDSA) -kehyksen avulla suunnitelmat tavoitetilan saavuttamiseksi toteutetaan yksityiskohtaisella suunnitelmalla, joka sisältää kuka, mitä, milloin suunnitelman jokaisessa vaiheessa. eScreeningin ja toteutusstrategian joustavuuden vuoksi jokainen TCM-ohjelma voi halutessaan integroida eScreeningin työnkulkuunsa ohjelman erityistarpeiden, käytettävissä olevien resurssien ja muiden tekijöiden perusteella.

Sekoitettu helpotus. Sekoitettu fasilitointi sisältää ensisijaisen ulkoisen fasilitaattorin eScreening-tiimistä, joka työskentelee sivuston sisäisen fasilitaattorin kanssa tapaamisten, koulutustilaisuuksien ja puheluiden ajoittamisessa. Ulkopuolinen fasilitaattori on tärkein yhteyshenkilö täytäntöönpanoon liittyvissä kysymyksissä. Käynnistysjakson aikana valittu sisäinen fasilitaattori työskentelee ulkoisen fasilitaattorin kanssa navigoidakseen sivuston sisäisissä järjestelmissä (eli paikallinen johto, OIT, logistiikka) ja toimii eScreening-projektin mestarina jokaisessa toimipaikassa.

Yleiskatsaus tietolähteistä ja tiedonkeruun ajoituksesta:

Tutkimuksessa käytetään sekamenetelmien suunnittelua, ja siinä kerätään kvantitatiivisen ja laadullisen tiedon yhdistelmää useilta sidosryhmiltä ja useilta aikapisteiltä. Tässä osiossa on yleiskuvaus tietolähteistä ja tiedonkeruun ajankohdista. Tarkemmat tiedonkeruu- ja analyysinäkökohdat esitetään kunkin tavoitteen alla.

Kvantitatiiviset tietolähteet ja tiedonkeruun ajoitus. Kvantitatiivinen tiedonkeruu sisältää tiedot EMR:stä, eScreening-järjestelmästä ja kyselyistä, jotka henkilöstön osallistujat täyttävät. Tutkijat poimivat EMR-tiedot Pre-Imp:n alussa ja lopussa, MCIS-jakson lopussa ja 9 kuukautta MCIS:n jälkeen. Tutkijat käyttävät eScreening reports -toimintoa eScreening-käyttötietojen hakemiseen jokaisesta kohortista MCIS-jakson jälkeen ja 9 kuukauden kuluttua MCIS:stä. Tutkijat suorittavat Pre-Imp yksilöllisen puhelinkyselyn/haastattelun käyttämällä Weiner et al (2017) kehittämiä toteutettavuus- ja hyväksyttävyysasteikkoja. Tutkijat käyttävät myös suojattua online-kyselyjärjestelmää (eli Qualtricsia tai RedCapia) kerätäkseen PRISM:iin ja sen RE-AIM-tuloksiin perustuvia tutkimuselementtejä aktiivisen käyttöönottovaiheen jälkeen.

Laadulliset tietolähteet ja tiedonkeruun ajoitus. Laadullista tietoa kerätään kenttämuistiinpanojen ja haastattelujen avulla. Tutkijat tekevät muistiinpanoja strukturoidun mallin avulla puhelinkokousten/puheluiden aikana käyttöönottoa edeltävän ja toteutusvaiheen aikana, mukaan lukien ensimmäinen yhteydenotto, RPIW:n aikana ja fasilitointikontaktiistunnot. Tutkimushenkilöstö tekee laajoja muistiinpanoja kliinisen ympäristön, työnkulkujen, potilasjoukon ja suhdeilmapiirin kuvaamiseksi. Yksilölliset puhelinhaastattelut tehdään tarkoituksenmukaisesti valitun työmaan henkilöstön kanssa ennen käyttöönottoa, käyttöönoton jälkeen ja ylläpitovaiheessa. Haastatteluissa keskitytään tekijöihin, jotka vaikuttavat eScreeningin käyttöönottoon, käyttöönottoon ja jatkuvaan käyttöön. Sekä ajattelutapaa että käytännön kysymyksiä tutkitaan havainnollistamaan täytäntöönpanoon liittyviä kysymyksiä, haasteita ja menestyksen perusteita. Erityinen joukko koettimia hahmottelee ja kuvaa vaiheittain tehtävät esteiden ja avustajien dokumentoimiseksi ja milloin viestintää ja koordinointia tarvittiin.

Tavoite 1 Tiedonkeruu ja analyysit:

Tavoite 1: Arvioi eSeulontaa verrattuna paperiseen ja sanalliseen seulomiseen PRISM:n RE-AIM-tulosten ohjaamana kahdeksassa TCM-ohjelmassa käyttäen klusterin satunnaistettua, porrastettua kiilasuunnittelua. Hypoteesi 1 (Reach): Verbaaliseen ja paperiseen seulomiseen verrattuna eSeulonta tuottaa huomattavasti suuremman seulonnan. Hypoteesi 2 (Tehokkuus): 2a: Verbaaliseen ja paperiseen seulontatutkimukseen verrattuna eSeulonta-seulontaan jää huomattavasti vähemmän aikaa mielenterveys- ja itsemurhaseulonnalle. 2b: Verbaaliseen ja paperiseen seulontatutkimukseen verrattuna eSeulonta johtaa huomattavasti enemmän tarvittavaan hoitoon.

Tiedonkeruu. Tutkijat saavat HIPAA-luvan kerätäkseen seuraavat tiedot: 1) terveydenhuoltojärjestelmään ilmoittautuneiden veteraanien lukumäärä ja heidän ilmoittautumispäivämäärä ja -aika (keskimäärin 144 veteraania kuukaudessa eri toimipisteissä), 2) heidän päivämääränsä ja kellonaikansa. sai PC-PTSD-5+I9, PHQ-2 +I9, AUDIT-C, CSSR-S ja sijoituksen (positiivinen/negatiivinen näyttö), 3) päivämäärä ja kellonaika, jolloin he saivat kattavan itsemurhariskiarvioinnin (CSRE) ja 4 ) mielenterveydenhuollon lähetteet. Näitä tietoja käytetään laskettaessa seulonnan loppuunsaattamista ja mielenterveyshuoltoon lähetteiden kokonaismäärää peruskontrollijakson aikana sekä seulonnan päättymiseen kuluvan ajan keskimääräistä kestoa. Samat tiedot kerätään viimeisten yhdeksän kuukauden ajalta käyttöönoton ja ylläpidon jälkeen. Tutkijoiden toimipaikkojen kuluneen vuoden keskimääräisten ilmoittautumistietojen perusteella noin 27 600 veteraania ilmoittautuu VA-terveydenhuoltoon 27 kuukauden peruskontrolli-, esikatselu-, MCIS- ja Sustainment-tietojen aikajaksojen aikana.

Otoskoon ja tehon laskenta: tutkijat käyttivät tutkimusta tehokkuustulosten interventiovaikutuksesta tavoitteessa 1. Tutkijat olettivat yhteisen interventiovaikutuksen kaikissa kohortteissa/askelissa ja hierarkkisen lineaarisen mallinnuksen (HLM) osalta klusteroitumisen huomioon ottamiseksi, mukaan lukien kiinteän vaikutuksen kohortille/ristityksen vaiheelle maallisten trendien huomioon ottamiseksi ja interventiovaiheen muutoksen indikaattorin (esim. vs. interventio), jotta saadaan aikaan interventiovaikutuksia. Teho laskettiin SW-kokeille vakiintuneiden menetelmien perusteella. Tutkijat asettivat tyypin I virhesuhteeksi alfa = 0,05, Cohenin d:n (tai h:n binäärituloksille) vaikutuksen koon = 0,1, tehon = 0,8 ja olettivat luokan sisäisen korrelaation (ICC) = 0,20, mikä on samankaltaisiin tutkimuksiin perustuva konservatiivinen arvio. Näiden oletusten mukaan ehdotettuun tutkimukseen tarvittava arvioitu otoskoko on noin N = 5 000 osallistujaa. Tutkijoiden pilottitutkimuksen tiedot osoittavat vaikutuskokoja, jotka ovat kaikki tämän havaittavissa olevan vaikutuskoon yläpuolella. Ottaen huomioon, että 144 uutta syyskuun 11. päivän jälkeistä veteraania otetaan mukaan keskimäärin 144 uutta veteraania käyttöönottopaikoissa kuukausittain ja tutkijat keräävät tietoja kustakin paikasta 24 kuukauden ajanjakson aikana, tutkimuksessa on riittävästi tehoa havaitakseen samanlaisissa tutkimuksissa havaitut vaikutuskoot.

Tilastollinen analyysi ja hypoteesien testaus. Tietojen analysointi etenee vaiheittain ja noudattaa Prevention Science and Methodology Groupin suosituksia satunnaistetuista kenttätutkimuksista. Alustava tietojen seulonta ja puhdistus edellyttävät datajakaumien tutkimista normaalin ja puuttuvien datamallien varalta sekä yksimuuttuja- että monimuuttujatasolla. Puuttuvien tietojen odotetaan olevan rajoitettuja, ja ne sisällytetään helposti HLM:ään, jos tietojen voidaan olettaa puuttuvan satunnaisesti käyttämällä Maximum Likelihood -estimaattia. Jos tiedoista todetaan sattumanvaraisesti, että niitä ei puutu, kohdetilastomalleihin rakennetaan puuttuvan tiedon mekanismit. HLM:ää käytetään ensisijaisena tilastollisena mallina tietojen sisäkkäisen (tai klusteroidun) rakenteen vuoksi (veteraanit [taso 1] sisäkkäiset TCM-klinikoissa [taso 2] sisäkkäiset toteutuspaikassa [taso 3]), ja satunnainen osoitus tapahtuu toteutuspaikan tasolla. HLM on joustava mallinnusstrategia, joka mahdollistaa kiinteiden ja satunnaisten vaikutusten integroinnin sisäkkäisiin/klusteroituihin tietorakenteisiin normaaleiden ja ei-normaalien vastemuuttujien kanssa. Osallistujien demografisia tietoja MCIS- ja kontrollivaiheiden aikana verrataan tilastollisesti sivustojen sisällä ja välillä vertailukelpoisuuden varmistamiseksi. Kaikki ominaisuudet, jotka eroavat interventio- ja kontrolliryhmien välillä, sisällytetään kovariaatteina seuraaviin malleihin harhan minimoimiseksi. Kiinteät vaikutukset sisällytetään kuhunkin malliin, jotta voidaan ottaa huomioon tutkimusvaihe (eli lähtötason hallinta, Pre-Imp/attention control, MCIS ja kestävyys) ja askel/risteytyskohortti maallisten trendien huomioon ottamiseksi. Tutkijat voivat myös testata tutkimusvaiheen ja -vaiheen välisiä vuorovaikutuksia määrittääkseen, erosivatko interventiovaikutukset kohortittain ja vaihtelivatko interventiovaikutukset TCM-klinikoiden välillä toteutuspaikkojen sisällä. Erillisiä malleja testataan sen määrittämiseksi, onko suurempi osa veteraaneista seulottu mielenterveyden ja itsemurhariskin suhteen (Reach) ja ohjattiinko hoitoon (tehokkuus) MCIS- ja/tai ylläpitovaiheen aikana verrattuna perustilanteen ja/tai huomionhallintavaiheeseen. Lisämalleilla testataan, oliko keskimääräinen päivien lukumäärä ilmoittautumisen ja seulonnan välillä pienempi (tehokkuus) MCIS- ja/tai ylläpitovaiheen aikana verrattuna perustason ja huomionhallintavaiheeseen. Kaikissa analyyseissä tutkijat asettavat tilastollisen merkitsevyyden arvoon =0,05 ja käyttävät Holm-Bonferroni-korjauksia viidelle testille ja vääriä löydösmääriä >6 testille. Kun useita korreloituja tuloksia (riippuvaisia ​​tuloksia) analysoidaan kunkin hypoteesin kanssa, korjaukset lasketaan riippumattomien testien tehokkaan lukumäärän perusteella käytettäessä useita vertailumenettelyjä.

Tavoite 2 Tiedonkeruu ja analyysit:

Tavoite 2: Arvioi MCIS:n toteutettavuus, hyväksyttävyys ja mahdollinen vaikutus PRISM:n RE-AIM-tulosten, käyttöönoton, toteutuksen ja ylläpidon avulla sekamenetelmillä.

Tiedonkeruu. Tutkijat käyttävät sekamenetelmää ja keräävät sekä kvantitatiivista että laadullista tietoa PRISM:n RE-AIM-tulosten ohjaamana. Replikointikustannuksia varten tutkijat käyttävät aikaseurantaa, jota on käytetty aiemmin VA-toteutusyrityksissä. Työkalu räätälöidään tätä tutkimusta varten ja sitä käytetään asteittain kaappaamaan kaikki ulkoisen ohjaajan suorittamat fasilitointitoiminnot. Toiminnot määritetään sitten määrällisesti ja niitä käytetään sivustokohtaisen replikointikustannusarvion laatimiseen.

Kvantitatiivinen data-analyysi. Tutkijat käyttävät kuvailevia tilastoja tehdäkseen yhteenvedon kvantitatiivisista mittareista jokaiselle PRISM-tulokselle käyttämällä 50 % vertailukohtana. Käyttöönotto lasketaan niiden TCM-klinikoiden kokonaismääränä ja osuutena, jotka ovat valmiita aloittamaan eSeulonnan, suhteessa TCM-klinikan kokonaismäärään käyttöönottopaikoissa ja kussakin käyttöönottopaikassa sekä niiden tarjoajien kokonaismääränä ja osuutena, jotka ovat halukkaita. ottaa käyttöön eSeulonnan suhteessa palveluntarjoajien kokonaismäärään käyttöönottopaikoissa, TCM-klinikoissa kussakin käyttöönottopaikassa ja kussakin TCM-klinikassa. Käyttöönotto lasketaan TCM-klinikan ja eSeulonnan toteuttavien klinikoiden palveluntarjoajien osuudena. Tutkijat laskevat myös keskimääräiset arviot MCIS:n hyväksyttävyydestä ja toteutettavuudesta TCM-klinikoiden ja käyttöönottopaikkojen palveluntarjoajien kesken. Aikaseurannan tiedot analysoidaan VA-pääkirjan avulla, joka sisältää kaikki työvoimakustannukset, mukaan lukien työntekijäedut ja työnantajan verot. Välilliset kustannukset tulee syntyä suhteessa suoriin kustannuksiin, ja ne arvioidaan VA Health Economics Resource Centerin (HERC) ohjeistuksen perusteella. Ylläpito lasketaan niiden TCM-klinikan ja klinikoiden palveluntarjoajien osuudena, jotka ottavat eSeulonnan käyttöön ylläpitovaiheen aikana (eli 9 kuukauden ajanjakson ensimmäisestä käyttöönotosta).

Laadullinen data-analyysi. Tutkimustutkijat tai kokenut, koulutettu tutkimusryhmän jäsen suorittaa puolistrukturoidut haastattelut. Haastattelut äänitetään, VA CTSP litteroi ja syötetään laadulliseen ohjelmistoon ATLAS.ti. Keskeinen näkökohta tässä analyysissä on vastata seuraaviin kysymyksiin: Mikä vaikuttaa siihen, miten palveluntarjoajat ottavat eScreeningin käyttöön? Mitkä tekijät vaikuttivat eScreeningin käyttöönottoon? Mitkä tekijät edistävät kunnossapitoa? Analyysi vastaa myös suurempaan kysymykseen siitä, miksi palveluntarjoajat ottavat käyttöön tai eivät ota käyttöön eSeulontaa, mukaan lukien käytännön klinikan työnkulun syiden ymmärtäminen käytön tai käyttämättä jättämisen tai eSeulonta-ohjelman tai palveluntarjoajan tärkeimpien taustalla olevien ominaisuuksien ymmärtämisessä. Analyysissä tarkastellaan esiin nousevia teemoja muokkauslähestymistapaa käyttäen. Kaksi projektitiimin jäsentä koodaa itsenäisesti kerätyt puolistrukturoidut haastattelutiedot. Kolmas tiimin jäsen arvioi koodauksen laatua ja ratkaisee ristiriidat.

Konvergentti analyysi. Kvalitatiivisen tutkimuksen ydinryhmä analysoi dataa samanaikaisesti kvantitatiivisten tietojen kanssa sekamenetelmien konvergenttisuunnittelun avulla selittääkseen ja tukeakseen/kumotakseen kvantitatiivisia tietoja ja täydentääkseen näkemyksiä tulevasta toteutustutkimuksesta ja levitystyöstä.

Tavoite 3 Tiedonkeruu ja analyysit:

Tavoite 3: Kuvaa ja vertaa korkean ja matalan eScreening-kattavuussivustoja PRISM:n kontekstuaalisten rakenteiden ohjaamana käyttämällä kvalitatiivista vertailevaa analyysiä eScreeningin tavoittavuuteen ja eScreening MCIS:n käyttöön vaikuttavien tekijöiden tutkimiseksi. Tavoitteessa 3 PRISM:n kontekstuaalisista elementeistä saatua laadullista dataa käytetään vertailevan analyysin rakentamiseen korkean ja matalan eSeulonta-kattavuuden sivustojen välillä. PRISM:n kontekstuaalisia ulottuvuuksia arvioivat kysymykset ja toimenpiteet sisällytetään ehdotettuihin haastatteluihin ja kenttämuistiinpanoihin (laadulliset tiedot), ja niille tiedotetaan myös ehdotetuista tutkimuksista ja EMR-tiedoista (kvantitatiiviset tiedot).

Tietojen analysointi. Kvalitatiiviset tiedot analysoidaan tavoitteessa 2 kuvatulla tavalla, mutta tutkijat käyttävät analyysissä mallipohjaista lähestymistapaa kontekstuaalisista tekijöistä saatujen konstruktien avulla. Tutkijat käyttävät PRISM-konstruktioiden ja muiden esiin tulevien teemojen perusteella tunnistettuja ja luotuja koodeja merkitsemään asiaankuuluvat transkriptiolainaukset. Tarjousraporteissa luetellaan liittyvät tarjoukset sanatarkasti sivustoittain. Sivustot jaetaan korkean ja alhaisen kattavuuden mukaan käyttämällä 30 %:n raja-arvoa (tavoitteesta 1) aikaisemman työn perusteella. Laadullisen vertailevan analyysin (QCA) avulla voimme verrata korkean ja matalan eSeulonnan tavoittavuussivustoja tunnistaaksemme tekijät, jotka vaikuttavat eSeulonnan toteuttamiseen ja MCIS:n vaikutukseen käyttämällä systemaattista tapausten välistä vertailua, jotta voimme ymmärtää paremmin syy-seulonnan monimutkaisuutta. Tutkijat luettelevat ja laskevat tietojoukon eri muuttujien yhdistelmiä ja soveltavat sitten loogisia päättelysääntöjä arvioidakseen, tukeeko data vaihtoehtoisia päätelmiä. Käyttämällä tutkijoita kiinnostavia tuloksia (esim. korkea kattavuus) ja luettelo ehdoista (esim. kontekstuaaliset tekijät), jotka voivat liittyä tähän tulokseen, tutkijat kehittävät kalibrointimittareita käyttämällä selkeää kaksijakoista joukkoa. Kalibroinnissa pohditaan, miten kukin paikka liittyy ennalta määritettyyn PRISM-konseptiin erityisten päätössääntöjen avulla. Tutkijat laativat koodikirjan, jossa esitetään yksityiskohtaisesti ehdot ja päätöksentekosäännöt. Kolmanneksi tutkijat kalibroivat tiedot. Tarkemmin sanottuna koodattua dataa käyttämällä kukin paikka kalibroidaan kaksijakoisesti joko "jolla on" (1.0) tai "ei ole" (0.0). Kun tutkijoiden paikat on kalibroitu, tutkijat rakentavat totuustaulukon Stataa käyttäen analysoidakseen loogisia ehtoyhdistelmiä määrittääkseen, jakavatko tietyt yhdistelmät tuloksen. Boolen logiikkaa käyttämällä tutkijat minimoivat totuustaulukon päästäkseen lopputulokseen. Reitit arvioidaan sitten sopivuuden johdonmukaisuuden ja kattavuuden parametrien avulla. Työpaikan haastattelutietojen temaattista analyysiä käytetään täydentämään QCA-havaintoja.