Effectiviteit en implementatie van eScreening in overgangsprogramma's na 9/11

Deze studie zal de effectiviteit en implementatie van een elektronisch screeningprogramma, eScreening genaamd, evalueren in vergelijking met de standaard papieren en/of verbale screeningmethoden in VHA Transition Care Management (TCM)-programma's. Dit is een mixed-methods hybride 2, effectiviteit-implementatie, getrapte wig (SW) proef van eScreening op acht locaties. De volgende acht locaties zijn implementatielocaties waar geen onderzoeksgerelateerde activiteiten zullen worden uitgevoerd: Oklahoma City VA Health Care System, Chillicothe VA Medical Center, Orlando VA Medical Center, VA Western Colorado Health Care System, VA Puget Sound Health Care System, Roseburg VA Gezondheidszorgsysteem, VA Gezondheidszorgsysteem in Salt Lake City, West Palm Beach VA Medical Center. Deze sites zullen screening implementeren als onderdeel van routinematige klinische zorg. Ze verzamelen geen gegevens en krijgen geen onafhankelijke IRB-goedkeuring.

Studieonderzoekers zullen de volgende gegevens verzamelen:

EMR-gegevens: EMR-gegevens worden geëxtraheerd uit de Corporate Data Warehouse (CDW)-database. EMR-gegevens zullen bestaan ​​uit 1) het aantal veteranen dat zich inschreef voor het gezondheidszorgsysteem en de datum en tijd waarop ze zich inschreven (gemiddeld 144 veteranen per maand over de locaties), 2) de datum en tijd waarop ze PC-PTSD-5+I9 ontvingen , PHQ-2 +I9, AUDIT-C, CSSR-S en de dispositie (positief/negatief scherm), 3) datum en tijd waarop ze een uitgebreide zelfmoordrisico-evaluatie (CSRE) hebben ontvangen, en 4) verwijzingen naar de geestelijke gezondheidszorg. Deze gegevens zullen worden gebruikt om het totale percentage voltooiing van de screening en verwijzing naar de geestelijke gezondheidszorg en de gemiddelde tijdsduur tot voltooiing van de screening te berekenen. De onderzoekers zullen ook gegevens over leeftijd, geslacht, ras en etniciteit verzamelen om als covariaten in de modellen op te nemen.

eScreening-systeem: de onderzoekers zullen de eScreening-rapportenfunctionaliteit gebruiken om eScreening-gebruiksgegevens voor de sites op te halen.

Personeelsdeelnemers: ongeveer 4-8 Transition Care Management-medewerkers (voornamelijk maatschappelijk werkers, maar kunnen medische ondersteuningsassistenten of andere professionals zijn) op elk van de 8 VHA-locaties die direct of indirect betrokken zijn bij de implementatie van eScreening, zullen worden gevraagd om deel te nemen aan dit onderzoek. Deelname omvat een individuele telefonische enquête/interview van 30 minuten, twee individuele telefonische interviews van 60 minuten en een online enquête van 20 minuten. De interviews en enquêtes zullen gericht zijn op het beoordelen van de haalbaarheid en aanvaardbaarheid van de eScreening-implementatiestrategie; factoren die van invloed zijn op acceptatie, implementatie en langdurig gebruik van eScreening; en resultaten na de implementatie. Alle gegevens van het personeel worden virtueel verzameld.

Het volgende is een gedetailleerde beschrijving van de onderzoeksprocedures, tijdlijn, gegevens en analyses.

Na een opstartperiode van 6 maanden met planning en randomisatie van locaties, zal de proef met getrapte wig beginnen. Deze getrapte proef is gebaseerd op sequentiële uitrol naar deelnemende sites in de loop van de tijd, terwijl andere sites als controles worden gebruikt totdat ze beginnen met implementatie en facilitering. De acht deelnemende locaties worden gestratificeerd naar grootte (een combinatie van het aantal TCM-medewerkers en het gemiddelde aantal ingeschreven post-9/11-veteranen per maand) en worden gerandomiseerd ingedeeld in vier step/crossover-cohorten van elk twee locaties. Alle step/crossover-cohorten doorlopen een pre-implementatiefase (Pre-Imp) van 3 maanden, gevolgd door een actieve implementatie van 9 maanden met behulp van de eScreening MCIS. De eScreening MCIS begint met een periode van 3 maanden, inclusief levering van eScreening-software, training, RPIW en gemengde facilitering, gevolgd door 6 maanden lopende gemengde facilitering (in totaal 9 maanden). Na de actieve implementatie hebben alle sites een instandhoudingsperiode van 9 maanden. Er zullen meerdere soorten gegevens worden verzameld, waaronder gegevens uit elektronische medische dossiers, personeelsmetingen en interviews, veldnotities en het bijhouden van tijdbewegingen (hieronder beschreven). Het verzamelen van gegevens begint bij de pre-implementatie voor elke site en gaat door tijdens het onderhoud.

Studie Start up (0 tot 6 maanden):

Randomisatie en interne facilitators. Sites zullen worden gestratificeerd op grootte, gerandomiseerd in vier step/crossover-cohorten en betrokken bij het selecteren van de interne facilitators, die zullen dienen als site eScreening-implementatiekampioenen tijdens het onderzoek. Tijdens de locatieselectie identificeerden de onderzoekers kampioenen die het gebruik van eScreening ondersteunen en die relaties hebben opgebouwd met het TCM-team.

Materialen afronden. De kwalitatieve hoofdonderzoeker zal samen met de PI en de implementatiewetenschapsexpert de ontwikkeling en pilottesten van de onderzoeksvragenlijsten, tijd- en aanpassingstrackers en interviewgidsen begeleiden met behulp van PRISM.

Lean/Six Sigma RPIW training. Het onderzoeksteam heeft meer dan 7 jaar ervaring met het implementeren van eScreening in diverse klinische omgevingen, met behulp van de RPIW-benadering. Ter voorbereiding op formele RPIW-facilitering zullen twee externe facilitators worden opgeleid om eScreening RPIW's te faciliteren, waaronder de primaire facilitator (masterniveau) en een back-up (de PI) door een Lean/Six Sigma-expert op blackbelt-niveau in het Systems Redesign-programma in San Diego Gezondheidszorg systeem. Als onderdeel van de training zullen de externe facilitators twee formele eScreening RPIW's faciliteren met implementatiesites die niet deelnemen aan het onderzoek.

Trainingsmateriaal afronden. Het onderzoeksteam heeft een eScreening VA Pulse Site ontwikkeld om de toegang tot technische informatie en trainingsmateriaal gemakkelijk te maken voor het personeel. De site bevat veelgestelde vragen, instructievideo's, een technische handleiding en gebruikershandleiding, een grote hoeveelheid trainingsinformatie en het eScreening-draaiboek. In samenwerking met het eScreening OIT-team zullen de onderzoekers deze materialen bijwerken om de meest recente informatie over eScreening op te nemen en om het trainingsprotocol te ondersteunen.

Stakeholderbijeenkomst: voortbouwend op verschillende voorbereidende vergaderingen met nationale en facilitaire belanghebbenden, zullen de onderzoekers een formele teleconferentie-opstartbijeenkomst organiseren met de nationale TCM-leiding, interne facilitators van de site, VA OIT eScreening Program Manager, VA Innovations-staf en de PI en co- rechercheurs en onderzoeksmedewerkers. Het doel van deze bijeenkomst is om iedereen te oriënteren op de doelstellingen van het onderzoek, de nationale voorkeuren van belanghebbenden voor de inhoud en frequentie van interacties te communiceren, en mogelijke logistieke belemmeringen en facilitators te identificeren en aan te pakken. De 2 uur durende vergadering zal een storyboard-formaat gebruiken om procedures te beschrijven en discussie op gang te brengen via een gestructureerd focusgroepformaat dat in eerder werk werd gebruikt. Deze bijeenkomsten vinden tijdens het onderzoek om de zes maanden plaats. Een externe VHA-adviesgroep, waaronder Veteranen, beoordeelt het onderzoeksmateriaal en het onderzoeksplan.

Stepped-Wedge Trial (7 tot 45 maanden):

Op basis van voorbereidend werk verwachten de onderzoekers dat een steekproef van 45 TCM en aanverwant personeel in deze studie zal worden opgenomen. Gegevens op patiëntniveau worden verzameld van EMR (waarvoor de onderzoekers een HIPPA-vrijstelling zullen aanvragen), en er zullen geen veteranen rechtstreeks deelnemen. Wervingsprocedures zullen tijdens de opstartperiode worden herzien en, indien nodig, worden aangepast, maar de voorgestelde procedure zal als volgt zijn: 1) Interne facilitators, TCM-medewerkers en eScreening-implementatiegerelateerd personeel van belanghebbenden op elke locatie zullen worden uitgenodigd om deel te nemen aan de studie; 2) Er zal een informatiesessie worden gehouden over het leiderschap en het doel van de studie, de selectie van deelnemers en het gebruik van gegevens. Potentiële medewerkers zullen worden geïnformeerd dat hun deelname geheel vrijwillig is en dat hun beslissing over deelname geen invloed heeft op hun tewerkstelling, verdienste of promotie. Na deze informatieve sessie geven onderzoeksmedewerkers toestemming aan geïnteresseerde deelnemers. Na ondertekening van de toestemming ontvangen ingeschreven medewerkers een link naar een online enquête en worden ze ingepland voor een oriënterend gesprek door de evaluatieleider. Als er personeelsverloop optreedt, zullen de onderzoekers proberen het personeelslid te beoordelen voordat het de kliniek verlaat en een andere deelnemer met vergelijkbare functies binnen de kliniek te vervangen en op te leiden. Elk van de vier step/crossover-cohorten doorloopt tijdens het onderzoek achtereenvolgens de volgende fasen.

Pre-implementatie (Pre-Imp) fase. Deze fase zal 3 maanden duren, waarin het onderzoeksteam zal samenwerken met de interne facilitators om: 1) pre-implementatie-informatie te verzamelen, inclusief gedetailleerde informatie over de bestaande processen voor TCM-screening bij inschrijving; 2) contactpunten identificeren voor iPads en andere logistieke behoeften; 3) communicatie tot stand brengen met TCM-personeel en anderen die met het TCM-personeel werken; 4) personeelsdeelnemers werven voor de studie; en 5) beginnen met het doorlopend volgen van procesgegevens uit veldnotities en het volgen van tijdbewegingen. TCM-personeelsnamen, klinieknamen, notitietitels, het plannen van de RPIW en klinische herinneringen ingevuld door programmapersoneel zullen worden verzameld en gebruikt voor de latere ontwikkeling van gebruikersaccounts en het aanpassen van inhoud tijdens de implementatiefase. Het implementatieteam zal ook psycho-educatie geven aan het personeel over het belang van screening. Deze fase zal dienen als een conditie voor aandachtscontrole waarmee de condities voor basiscontrole en interventie zullen worden vergeleken.

Tijdens de pre-implementatie zullen TCM-teams de gebruikelijke screeningprocedures voortzetten. Deze omvatten een interview of zelfrapportage, op papier gebaseerde verzameling van post-9/11 screeningmaatregelen, inclusief de systeembrede gestandaardiseerde beoordelingen van depressie, PTSD en alcoholgebruik (PHQ-2 +I9, PCPTSD +I9 en Audit-C , respectievelijk). Patiënten die positief scoren op de PHQ-2 +I9, PCPTSD +I9 krijgen vervolgens de Columbia Suicide Severity Rating Scale (C-SSRS) toegediend, die meer informatie verzamelt over het risico op zelfmoord. Veteranen die positief zijn op C-SSRS ontvangen vervolgens een uitgebreide evaluatie van het risico op zelfmoord en worden doorverwezen voor passende follow-up. Een gedetailleerde beschrijving en een stroomschema van het huidige screeningproces op elke locatie zal worden ontwikkeld door de externe facilitator (onderzoeksteam) en interne facilitator (sitepersoneel) met informatie van het TCM-personeel voorafgaand aan de implementatiefase.

Actieve implementatie (MCIS): Het eScreening MCIS is de afgelopen zeven jaar ontwikkeld en bestaat uit: 1) levering van eScreening-software, 2) training, 3) RPIW en 4) doorlopende gemengde facilitering. De onderzoekers ontwikkelden de MCIS om specifieke belemmeringen voor de implementatie van eScreening aan te pakken die in eerder onderzoek waren gevonden. Om belemmeringen op systeemniveau met betrekking tot OIT-ondersteuning aan te pakken, ontwikkelden de onderzoekers een technische ondersteuningsinfrastructuur voor eScreening met behulp van bestaande VA IT-bronnen (zie LOS) als onderdeel van het aanbod van eScreening. Het opleidingsonderdeel gaat in op educatieve barrières met betrekking tot het gebruik van eScreening en het beschikbare onderzoek. Gemengde facilitering pakte ook educatieve belemmeringen aan, evenals technologiegerelateerde en andere onvoorziene uitdagingen. Het RPIW-proces zal zich richten op leiderschapsondersteuning, de buy-in van het personeel, de benodigde middelen en door alle belanghebbenden bij het proces te betrekken en een locatiespecifiek en duidelijk plan voor implementatie te ontwikkelen. De RPIW bevat specifiek een sectie waar het team mogelijke barrières en oplossingen genereert in dag 2.

eScreening. eScreening is een VHA-programma waarmee veteranen zelfgerapporteerde screeningvragen kunnen beantwoorden via een iPad die is verbonden met de beveiligde VHA-wifi. eScreening leest van en schrijft naar de VHA EMR. De belangrijkste kenmerken van eScreening zijn: 1) de mogelijkheid voor veteranen om screeningsinformatie rechtstreeks in te voeren zonder tussenkomst van een arts; 2) onmiddellijk scoren van maatregelen; 3) een bewerkbare notitie gegenereerd in de EMR; en 4) waarschuwingen van clinici voor positieve screenings op de geestelijke gezondheid die follow-up vereisen voor zelfmoordrisico's.

Opleiding. De eScreening-training is virtueel en asynchroon en omvat een 1 uur durende PowerPoint-instructie die wordt gepresenteerd door de externe facilitator. De PowerPoint wordt gevolgd door een uur aan instructievideo's die alle stappen laten zien van (beoordelingen maken, veteranen toevoegen, opslaan in VistA, zoeken naar beoordelingen, geplande afspraakbeoordelingen maken, rapporten openen). Praktische training voor gebruikers zal beschikbaar zijn in groepsvorm of individueel door het trainingspersoneel, zoals gevraagd door het personeel van de TCM-site. Extra trainingsmateriaal is toegankelijk via de eScreening Pulse-site, waaronder een reeks beknopte handleidingen over het aanpassen van eScreening, het instellen van beoordelingen en het gebruik van dashboards. Veel gestelde vragen zullen ook beschikbaar zijn op de Pulse-site.

RPIW. De 3-daagse RPIW wordt virtueel gefaciliteerd door de externe facilitator met assistentie van de interne facilitator ter plaatse en omvat het TCM-team, aanverwant personeel (d.w.z. medisch ondersteunend personeel, griffiers) en andere belanghebbenden op de locatie. Op de eerste dag van het proces worden de deelnemers getraind in de RPIW-principes en wordt een samenvatting gegeven van de informatie die is verzameld in de pre-implementatiefase, inclusief een grafische weergave van de huidige proceskaart die vervolgens zal worden verfijnd en afgerond. De tweede dag bestaat uit collectieve inspanningen om een ​​gerichte toekomstige toestand in kaart te brengen, een gap-analyse uit te voeren en relevante factoren en barrières te identificeren die uniek zijn voor de locatie. De derde dag is gewijd aan de herhaling van actieplanning, uitvoering en herevaluatie om de beoogde toestand af te ronden en klinisch relevante doelen voor verbetering te identificeren. Met behulp van een Plan-Do-Study-Act (PDSA)-raamwerk worden de plannen om de doelstatus te bereiken uitgevoerd met een gedetailleerd plan dat omvat wie, wat, wanneer voor elke stap in het plan. Vanwege de flexibiliteit van eScreening en de implementatiestrategie kan elk TCM-programma ervoor kiezen om eScreening in hun workflow te integreren op basis van de specifieke behoeften van hun programma, beschikbare middelen en andere factoren.

Gemengde facilitering. Gemengde facilitatie omvat een primaire externe facilitator van het eScreening-team die zal samenwerken met de interne facilitator van de locatie om vergaderingen, trainingssessies en telefoongesprekken te plannen. De externe facilitator is het centrale aanspreekpunt voor uitvoeringsgerelateerde vragen. De interne facilitator, geselecteerd tijdens de opstartperiode, zal samenwerken met de externe facilitator om door interne sitesystemen te navigeren (d.w.z. lokaal leiderschap, OIT, logistiek) en dient als kampioen voor het eScreening-project op elke locatie.

Overzicht van gegevensbronnen en timing voor gegevensverzameling:

De studie zal een mixed-methods-ontwerp gebruiken en een combinatie van kwantitatieve en kwalitatieve gegevens verzamelen van meerdere belanghebbenden en op meerdere tijdstippen. In deze sectie vindt u een algemeen overzicht van de gegevensbronnen en tijdstippen voor gegevensverzameling. Bij elk doel worden meer specifieke overwegingen voor het verzamelen en analyseren van gegevens gegeven.

Kwantitatieve gegevensbronnen en timing voor gegevensverzameling. Kwantitatieve gegevensverzameling omvat gegevens van de EMR, het eScreening-systeem en enquêtes die worden ingevuld door medewerkers. De onderzoekers zullen EMR-gegevens extraheren aan het begin en einde van Pre-Imp, aan het einde van de MCIS-periode en 9 maanden na MCIS. De onderzoekers zullen de eScreening-rapportenfunctionaliteit gebruiken om eScreening-gebruiksgegevens voor elk cohort op te halen na de MCIS-periode en 9 maanden na MCIS. De onderzoekers zullen een Pre-Imp individuele telefonische enquête/interview houden met behulp van de haalbaarheids- en aanvaardbaarheidsschalen die zijn ontwikkeld door Weiner et al (2017). De onderzoekers zullen ook een beveiligd online enquêtesysteem gebruiken (d.w.z. Qualtrics of RedCap) om enquête-elementen te verzamelen op basis van de PRISM en de RE-AIM-resultaten na de actieve implementatiefase.

Kwalitatieve gegevensbronnen en timing voor gegevensverzameling. Kwalitatieve gegevens zullen worden verzameld aan de hand van veldnotities en interviews. De onderzoekers zullen veldnotities maken met behulp van een gestructureerd sjabloon tijdens telefonische vergaderingen/gesprekken gedurende de pre-implementatie- en implementatiefasen, inclusief het eerste contact, tijdens de RPIW en de faciliterende contactsessies. Onderzoekspersoneel zal uitgebreide veldnotities maken om de klinische omgeving, werkstromen, patiëntenpopulatie en relationele sfeer te beschrijven. Tijdens de pre-implementatie-, post-implementatie- en de instandhoudingsfase zullen individuele telefonische interviews worden afgenomen met doelbewust geselecteerde locatiemedewerkers. Interviews zullen zich richten op factoren die van invloed zijn op de acceptatie, implementatie en langdurig gebruik van eScreening. Zowel mentaliteit als praktische kwesties zullen worden onderzocht om implementatieproblemen, uitdagingen en onderbouwing van succes te illustreren. Een specifieke reeks sondes zal schetsen, en diagramtaken die stap voor stap worden uitgevoerd om barrières en facilitators te documenteren en wanneer communicatie en coördinatie nodig waren.

Doel 1 Gegevensverzameling en analyses:

Doel 1: eScreening evalueren, vergeleken met papieren en mondelinge screening, geleid door de RE-AIM-resultaten van PRISM in 8 TCM-programma's, met behulp van een clustergerandomiseerd, getrapt wigontwerp. Hypothese 1 (Bereik): Vergeleken met papieren en mondelinge screening levert eScreening een significant hoger screeningspercentage op. Hypothese 2 (Effectiviteit): 2a: Vergeleken met papieren en mondelinge screening, zal eScreening resulteren in aanzienlijk minder tijd voor screening op geestelijke gezondheid en suïcide. 2b: Vergeleken met papieren en mondelinge screening, zal eScreening resulteren in een aanzienlijk hoger percentage verwijzingen naar de benodigde zorg.

Gegevensverzameling. De onderzoekers zullen een HIPAA-vrijstelling krijgen om de volgende gegevens te verzamelen: 1) het aantal veteranen dat zich inschreef voor het gezondheidszorgsysteem en de datum en tijd waarop ze zich inschreven (gemiddeld 144 veteranen per maand over de locaties), 2) de datum en tijd waarop ze ontvangen PC-PTSD-5+I9, PHQ-2 +I9, AUDIT-C, CSSR-S, en de dispositie (positief/negatief scherm), 3) datum en tijd waarop ze een uitgebreide zelfmoordrisico-evaluatie (CSRE) hebben ontvangen, en 4 ) verwijzingen naar de geestelijke gezondheidszorg. Deze gegevens zullen worden gebruikt om het totale percentage voltooiing van de screening en verwijzing naar de geestelijke gezondheidszorg te berekenen tijdens de baseline-controleperiode en de gemiddelde tijdsduur tot voltooiing van de screening. Dezelfde gegevens zullen worden verzameld voor de voorgaande negen maanden na implementatie en instandhouding. Op basis van de gemiddelde inschrijvingsgegevens voor de onderzoekslocaties van het afgelopen jaar, zullen ongeveer 27.600 veteranen zich inschrijven voor VA-gezondheidszorg tijdens de 27 maanden durende basislijncontrole, Pre-Imp, post MCIS en Sustainment-gegevensperiodes.

Steekproefomvang en powerberekening: de onderzoekers hebben de studie gevoed voor het interventie-effect van de effectiviteitsuitkomsten in doel 1. De onderzoekers gingen uit van een gemeenschappelijk interventie-effect voor alle cohorten/stappen en hiërarchische lineaire modellering (HLM) om clustering te verklaren, inclusief een vast effect voor cohort/stap van cross-over om rekening te houden met seculiere trends en een indicator van verandering in de interventiefase (bijv. versus interventie) om interventie-effecten te bieden. Vermogen werd berekend op basis van gevestigde methoden voor SW-proeven. De onderzoekers stelden type I-foutpercentage alpha = 0,05, Cohen's d (of h voor binaire uitkomsten) effectgrootte = 0,1, power = 0,8, en gingen uit van een intraclass-correlatie (ICC) = 0,20, wat een conservatieve schatting is op basis van vergelijkbare onderzoeken. Onder deze aannames is de geschatte steekproefomvang die nodig is voor de voorgestelde studie ongeveer N = 5.000 deelnemers. Gegevens uit de pilotstudie van de onderzoekers laten effectgroottes zien die allemaal boven deze detecteerbare effectgroottes liggen. Aangezien er maandelijks gemiddeld 144 nieuwe post-9/11-veteranen worden ingeschreven op de implementatielocaties en de onderzoekers gedurende een periode van 24 maanden op elke locatie gegevens zullen verzamelen, heeft de studie voldoende power om effectgroottes te detecteren die in vergelijkbare onderzoeken zijn waargenomen.

Statistische analyse en hypothesetesten. Data-analyses zullen gefaseerd verlopen en zullen de aanbevelingen volgen van de Preventiewetenschap en Methodologiegroep voor gerandomiseerde veldproeven. Voorafgaande gegevensscreening en -opschoning vereisen onderzoek van de gegevensdistributies op normaliteit en ontbrekende gegevenspatronen op zowel univariaat als multivariaat niveau. Ontbrekende gegevens zullen naar verwachting beperkt zijn en kunnen gemakkelijk in HLM worden opgenomen als kan worden aangenomen dat de gegevens willekeurig ontbreken met behulp van een schatting van de maximale waarschijnlijkheid. Als wordt vastgesteld dat de gegevens niet willekeurig ontbreken, worden mechanismen voor ontbrekende gegevens ingebouwd in de beoogde statistische modellen. HLM zal worden gebruikt als het primaire statistische model vanwege de geneste (of geclusterde) structuur van de gegevens (veteranen [niveau 1] genest binnen TCM-klinieken [niveau 2] genest binnen implementatiesite [niveau 3]), waarbij willekeurige toewijzing plaatsvindt op het niveau van de implementatiesite. HLM is een flexibele modelleringsstrategie die de integratie van vaste en willekeurige effecten in geneste/geclusterde gegevensstructuren met normale en niet-normale responsvariabelen mogelijk maakt. Demografische informatie over deelnemers tijdens de MCIS- en controlefasen zal statistisch worden vergeleken binnen en tussen locaties om vergelijkbaarheid te garanderen. Alle kenmerken die verschillen tussen de interventie- en controlegroep zullen worden opgenomen als covariaten in volgende modellen om vertekening te minimaliseren. Vaste effecten zullen in elk model worden opgenomen om rekening te houden met de studiefase (d.w.z. basislijncontrole, Pre-Imp/aandachtscontrole, MCIS en onderhoud) en step/crossover-cohort, om rekening te houden met seculiere trends. De onderzoekers zullen ook in staat zijn om interacties tussen studiefase en stap te testen om te bepalen of interventie-effecten verschilden per cohort en of interventie-effecten varieerden tussen TCG-klinieken binnen implementatielocaties. Afzonderlijke modellen zullen worden getest om te bepalen of een groter deel van de veteranen werd gescreend op geestelijke gezondheid en zelfmoordrisico (Reach) en werd doorverwezen naar zorg (Effectiveness) tijdens de MCIS- en/of ondersteuningsfasen in vergelijking met de baseline- en/of aandachtscontrolefasen. Aanvullende modellen zullen testen of het gemiddelde aantal dagen tussen aanmelding en screening lager was (effectiviteit) tijdens de MCIS- en/of ondersteuningsfasen in vergelijking met de baseline- en aandachtscontrolefasen. In alle analyses stellen de onderzoekers de statistische significantie in op =0,05 en gebruiken ze Holm-Bonferroni-aanpassingen voor 5 tests en methodes voor valse ontdekkingspercentages voor >6 tests. Wanneer meerdere gecorreleerde uitkomsten (afhankelijke uitkomsten) worden geanalyseerd met elke hypothese, worden correcties berekend op basis van het effectieve aantal onafhankelijke tests bij het toepassen van de meervoudige vergelijkingsprocedures

Doel 2 Gegevensverzameling en analyses:

Doel 2: Evalueer de haalbaarheid, aanvaardbaarheid en potentiële impact van de MCIS, geleid door de RE-AIM-resultaten van PRISM, acceptatie, implementatie en onderhoud met behulp van gemengde methoden.

Gegevensverzameling. De onderzoekers zullen een gemengde methodenbenadering gebruiken en zowel kwantitatieve als kwalitatieve gegevens verzamelen op basis van de RE-AIM-resultaten van PRISM. Voor de replicatiekosten zullen de onderzoekers de tijdregistratie gebruiken die eerder werd gebruikt voor VA-implementatie-inspanningen. De tool zal voor dit onderzoek worden aangepast en gebruikt om stapsgewijs alle faciliteringsactiviteiten van de externe facilitator vast te leggen. De activiteiten worden vervolgens gekwantificeerd en gebruikt om een ​​replicatiekostenraming per locatie te ontwikkelen.

Kwantitatieve gegevensanalyse. De onderzoekers zullen beschrijvende statistieken gebruiken om kwantitatieve metingen voor elke PRISM-uitkomst samen te vatten met 50% als maatstaf. Adoptie wordt berekend als het totale aantal en het aandeel TCM-klinieken dat bereid is om eScreening te starten, in verhouding tot het totale aantal TCM-klinieken op de implementatielocaties en binnen elke implementatielocatie, evenals het totale aantal en het aandeel aanbieders dat bereid is om eScreening toe te passen ten opzichte van het totale aantal aanbieders op verschillende implementatielocaties, tussen TCM-klinieken op elke implementatielocatie en binnen elke TCM-kliniek. Implementatie wordt berekend als het aandeel TCG-klinieken en aanbieders binnen klinieken die eScreening implementeren. De onderzoekers zullen ook gemiddelde beoordelingen berekenen van de aanvaardbaarheid en haalbaarheid van het MCIS voor aanbieders binnen TCM-klinieken en voor implementatielocaties. Tijdregistratiegegevens worden geanalyseerd met behulp van het VA-grootboek, dat alle arbeidskosten omvat, inclusief personeelsbeloningen en werkgeversbijdragen aan belastingen. Indirecte kosten moeten worden gemaakt in verhouding tot de directe kosten en zullen worden geschat op basis van de richtlijnen van het VA Health Economics Resource Centre (HERC). Onderhoud wordt berekend als het aandeel van TCM-klinieken en aanbieders binnen klinieken die eScreening implementeren tijdens de onderhoudsfase (d.w.z. de periode van 9 maanden na de eerste implementatie).

Kwalitatieve data-analyse. Onderzoekers of een ervaren, getraind lid van het onderzoeksteam zullen semi-gestructureerde interviews afnemen. Interviews worden op audio opgenomen, getranscribeerd door de VA CTSP en ingevoerd in het kwalitatieve softwareprogramma ATLAS.ti. Een belangrijk aspect van deze analyse is het beantwoorden van deze vragen: Wat beïnvloedt de acceptatie van eScreening door providers? Welke factoren hebben de implementatie van eScreening beïnvloed? Welke factoren bevorderen onderhoud? De analyse zal ook de grotere vraag beantwoorden waarom providers wel of niet eScreening implementeren, inclusief het begrijpen van praktische redenen voor de workflow van de kliniek voor gebruik of niet-gebruik, of de belangrijkste onderliggende kenmerken van het eScreening-programma of de provider. De analyse zal opkomende thema's beschouwen met behulp van een bewerkingsbenadering. Twee leden van het projectteam coderen onafhankelijk van elkaar de verzamelde semi-gestructureerde interviewgegevens. Een derde teamlid beoordeelt de codeerkwaliteit en lost conflicten op.

convergente analyse. Met behulp van een convergent ontwerp met gemengde methoden zal het kernteam van kwalitatief onderzoek de gegevens gelijktijdig met de kwantitatieve gegevens analyseren om de kwantitatieve gegevens uit te leggen en te ondersteunen/weerleggen en inzichten toe te voegen met betrekking tot toekomstig implementatieonderzoek en verspreidingsinspanningen.

Doel 3 Gegevensverzameling en analyses:

Doel 3: Beschrijf en vergelijk sites met een hoog en laag eScreening-bereik, geleid door contextuele constructies van PRISM met behulp van kwalitatieve vergelijkende analyse om factoren te onderzoeken die van invloed zijn op het bereik van eScreening en het gebruik van de eScreening MCIS. In doel 3 zullen kwalitatieve gegevens van contextuele elementen van PRISM worden gebruikt om een ​​vergelijkende analyse op te stellen tussen sites met een hoog en laag bereik voor eScreening. Vragen en maatregelen die de contextuele dimensies van PRISM beoordelen, zullen worden opgenomen in de voorgestelde interviews en veldnotities (kwalitatieve gegevens) en zullen ook worden geïnformeerd door de voorgestelde enquêtes en EMR-gegevens (kwantitatieve gegevens).

Gegevens analyse. Kwalitatieve gegevens zullen worden geanalyseerd zoals beschreven voor doel 2, maar de onderzoekers zullen een sjabloonbenadering gebruiken voor de analyse met behulp van constructen van contextuele factoren. De onderzoekers zullen codes gebruiken die zijn geïdentificeerd en gemaakt op basis van de PRISM-constructies en andere opkomende thema's om de relevante transcriptiecitaten te taggen. In offerterapporten worden de bijbehorende offertes woordelijk per site weergegeven. Sites worden verdeeld door hoog vs. laag bereik met een cutoff-score van 30% (vanaf doel 1), gebaseerd op eerder werk. Kwalitatieve vergelijkende analyse (QCA) stelt ons in staat sites met een hoog en laag eScreening-bereik te vergelijken om factoren te identificeren die van invloed zijn op de implementatie van eScreening en de impact van de MCIS met behulp van systematische cross-case vergelijking om de causale complexiteit beter te begrijpen. De onderzoekers zullen verschillende combinaties van variabelen in de dataset opsommen en tellen, en vervolgens logische gevolgtrekkingsregels toepassen om te evalueren of alternatieve gevolgtrekkingen door de gegevens worden ondersteund. Gebruikmakend van de uitkomst van interesse van de onderzoekers (d.w.z. hoog bereik) en een lijst met voorwaarden (bijv. contextuele factoren) die kunnen worden geassocieerd met die uitkomst, zullen de onderzoekers kalibratiestatistieken ontwikkelen met behulp van een scherpe dichotome set. Kalibratie omvat het overwegen hoe elke locatie gerelateerd is aan het vooraf gedefinieerde PRISM-concept met behulp van specifieke beslissingsregels. De onderzoekers stellen een codeboek op met daarin de voorwaarden en beslisregels. Ten derde zullen de onderzoekers de gegevens kalibreren. Specifiek, met behulp van gecodeerde gegevens, zal elke site dichotoom worden gekalibreerd als "hebben" (1.0) of "niet hebben" (0.0) van elke aandoening. Nadat de locaties van de onderzoekers zijn gekalibreerd, zullen de onderzoekers een waarheidstabel samenstellen, met behulp van Stata, om logische combinaties van omstandigheden te analyseren om te bepalen of specifieke combinaties de uitkomst delen. Met behulp van Booleaanse logica minimaliseren de onderzoekers de waarheidstabel om tot paden naar de uitkomst te komen. De trajecten zullen vervolgens worden beoordeeld aan de hand van de consistentie- en dekkingsparameters van geschiktheid. Een thematische analyse van site-interviewgegevens zal worden gebruikt om QCA-bevindingen aan te vullen.