Wirksamkeit und Implementierung von eScreening in Übergangsprogrammen nach dem 11. September

Diese Studie wird die Wirksamkeit und Implementierung eines elektronischen Screening-Programms namens eScreening im Vergleich zu Standard-of-Care-Papier und/oder verbalen Screening-Methoden in VHA Transition Care Management (TCM)-Programmen bewerten. Dies ist ein Mixed-Methods-Hybrid 2, Effektivitäts-Implementierung, Steped-Wedge (SW)-Versuch von eScreening an acht Standorten. Die folgenden acht Standorte sind Implementierungsstandorte, an denen keine forschungsbezogenen Aktivitäten durchgeführt werden: Oklahoma City VA Health Care System, Chillicothe VA Medical Center, Orlando VA Medical Center, VA Western Colorado Health Care System, VA Puget Sound Health Care System, Roseburg VA Gesundheitssystem, VA Gesundheitssystem von Salt Lake City, West Palm Beach VA Medical Center. Diese Standorte werden das Screening als Teil der routinemäßigen klinischen Versorgung implementieren. Sie sammeln keine Daten und erhalten keine unabhängige IRB-Zulassung.

Die Prüfärzte der Studie erheben die folgenden Daten:

EMR-Daten: EMR-Daten werden aus der Corporate Data Warehouse (CDW)-Datenbank extrahiert. EMR-Daten bestehen aus 1) der Anzahl der Veteranen, die sich im Gesundheitssystem angemeldet haben, sowie dem Datum und der Uhrzeit ihrer Anmeldung (durchschnittlich 144 Veteranen pro Monat an allen Standorten), 2) dem Datum und der Uhrzeit, an dem sie PC-PTSD-5 + I9 erhalten haben , PHQ-2 +I9, AUDIT-C, CSSR-S und die Disposition (Positiv/Negativ-Screening), 3) Datum und Uhrzeit, zu der sie eine umfassende Suizidrisikobewertung (CSRE) erhalten haben, und 4) Überweisungen zur psychiatrischen Versorgung. Diese Daten werden verwendet, um die Gesamtrate des Abschlusses des Screenings und der Überweisung an die psychiatrische Versorgung sowie die durchschnittliche Dauer bis zum Abschluss des Screenings zu berechnen. Die Ermittler werden auch Daten zu Alter, Geschlecht, Rasse und ethnischer Zugehörigkeit sammeln, um sie als Kovariaten in die Modelle aufzunehmen.

eScreening-System: Die Ermittler verwenden die eScreening-Berichtsfunktion, um eScreening-Nutzungsdaten für die Standorte abzurufen.

Teilnehmer des Personals: Ungefähr 4-8 Mitarbeiter des Transition Care Management (hauptsächlich Sozialarbeiter, aber auch medizinische Hilfsassistenten oder andere Fachkräfte) an jedem der 8 VHA-Standorte, die direkt oder indirekt an der Implementierung von eScreening beteiligt sind, werden zur Teilnahme aufgefordert diese Forschung. Die Teilnahme umfasst eine 30-minütige telefonische Einzelumfrage/ein Interview, zwei 60-minütige telefonische Einzelinterviews und eine 20-minütige Online-Umfrage. Die Interviews und Umfragen konzentrieren sich auf die Bewertung der Durchführbarkeit und Akzeptanz der eScreening-Implementierungsstrategie; Faktoren, die die Akzeptanz, Implementierung und nachhaltige Nutzung von eScreening beeinflussen; und Ergebnisse nach der Implementierung. Alle Daten der Mitarbeiter werden virtuell erhoben.

Im Folgenden finden Sie eine detaillierte Beschreibung der Studienverfahren, des Zeitplans, der Daten und Analysen.

Nach einer 6-monatigen Anlaufphase mit Planung und Randomisierung des Standorts beginnt die Stufenkeil-Studie. Dieser Step-Wedge-Versuch beruht auf der sequentiellen Einführung an teilnehmenden Standorten im Laufe der Zeit, während andere Standorte als Kontrollen verwendet werden, bis sie mit der Implementierung und Erleichterung beginnen. Die acht teilnehmenden Standorte werden nach Größe geschichtet (eine Kombination aus der Anzahl der TCM-Mitarbeiter und der durchschnittlichen Anzahl der pro Monat eingeschriebenen Post-9/11-Veteranen) und blockweise randomisiert in vier Schritt-/Crossover-Kohorten mit jeweils zwei Standorten aufgeteilt. Alle Step-/Crossover-Kohorten durchlaufen eine 3-monatige Vorimplementierungsphase (Pre-Imp), gefolgt von einer 9-monatigen aktiven Implementierung unter Verwendung des eScreening MCIS. Das eScreening MCIS beginnt mit einem 3-monatigen Zeitraum, der die Bereitstellung der eScreening-Software, Schulungen, RPIW und Blended Moderation umfasst, gefolgt von 6 Monaten kontinuierlicher Blended Moderation (insgesamt 9 Monate). Nach der aktiven Implementierung haben alle Standorte eine 9-monatige Erhaltungsphase. Es werden mehrere Arten von Daten erfasst, einschließlich elektronischer Krankenaktendaten, Mitarbeitermessungen und Interviews, Feldnotizen und Zeitbewegungsverfolgung (unten beschrieben). Die Datenerfassung beginnt bei der Vorimplementierung für jeden Standort und wird bis zur Erhaltung fortgesetzt.

Studienstart (0 bis 6 Monate):

Randomisierung und interne Moderatoren. Die Standorte werden nach Größe geschichtet, block-randomisiert in Vier-Stufen-/Crossover-Kohorten aufgeteilt und an der Auswahl der internen Moderatoren beteiligt, die während der Studie als Standort-Champions für die eScreening-Implementierung fungieren werden. Während der Standortauswahl identifizierten die Ermittler Vorkämpfer, die den Einsatz von eScreening unterstützen und Beziehungen zum TCM-Team aufgebaut haben.

Materialien abschließen. Der qualitative leitende Co-Ermittler wird zusammen mit dem PI und dem Implementierungswissenschaftsexperten die Entwicklung und Pilottests der Studienfragebögen, Zeit- und Anpassungstracker und Interviewleitfäden unter Verwendung von PRISM leiten.

Lean/Six Sigma RPIW-Schulung. Das Forscherteam verfügt über mehr als 7 Jahre Erfahrung bei der Implementierung von eScreening in verschiedenen klinischen Umgebungen unter Verwendung des RPIW-Ansatzes. Zur Vorbereitung auf die formale RPIW-Moderation werden zwei externe Moderatoren geschult, um eScreening-RPIWs zu moderieren, darunter der primäre Moderator (Master-Level) und ein Backup (der PI) durch einen Blackbelt-Level-Lean/Six-Sigma-Experten im Systems Redesign-Programm in San Diego Gesundheitssystem. Als Teil der Schulung werden die externen Moderatoren zwei formelle eScreening-RPIWs mit Implementierungsstandorten durchführen, die nicht an der Studie teilnehmen.

Schulungsunterlagen fertigstellen. Das Team der Ermittler hat eine eScreening VA Pulse Site entwickelt, um den Zugriff auf technische Informationen und Schulungsmaterialien für die Mitarbeiter zu erleichtern. Die Website enthält häufig gestellte Fragen, Lernvideos, ein technisches Handbuch und ein Benutzerhandbuch, eine große Menge an Schulungsinformationen und das eScreening-Playbook. In Zusammenarbeit mit dem eScreening-OIT-Team werden die Ermittler diese Materialien aktualisieren, um die neuesten Informationen zu eScreening aufzunehmen und das Schulungsprotokoll zu unterstützen.

Stakeholder-Meeting: Aufbauend auf mehreren vorbereitenden Treffen mit nationalen und Einrichtungs-Stakeholdern werden die Ermittler ein formelles Telefonkonferenz-Start-up-Meeting mit der nationalen TCM-Führung, standortinternen Moderatoren, dem VA OIT eScreening-Programmmanager, VA Innovations-Mitarbeitern und dem PI und Co- Ermittler und Forschungspersonal. Ziel dieses Treffens ist es, alle an den Zielen der Studie zu orientieren, die Präferenzen der nationalen Interessengruppen für den Inhalt und die Häufigkeit von Interaktionen zu kommunizieren und mögliche logistische Hindernisse und Moderatoren zu identifizieren und anzugehen. Das zweistündige Treffen wird ein Storyboard-Format verwenden, um Verfahren zu beschreiben und Diskussionen durch ein strukturiertes Fokusgruppenformat anzuregen, das in früheren Arbeiten verwendet wurde. Diese Treffen finden während der Studie alle sechs Monate statt. Eine externe VHA-Beratungsgruppe, der Veteranen angehören, wird die Forschungsmaterialien und den Plan prüfen.

Stepped-Wedge Trial (7 bis 45 Monate):

Basierend auf vorläufigen Arbeiten gehen die Forscher davon aus, dass eine Stichprobe von 45 TCM- und zugehörigen Mitarbeitern in diese Studie aufgenommen wird. Daten auf Patientenebene werden von EMR gesammelt (für die die Ermittler eine HIPPA-Verzichtserklärung beantragen), und keine Veteranen werden direkt teilnehmen. Die Rekrutierungsverfahren werden in der Startphase überprüft und bei Bedarf angepasst, aber das vorgeschlagene Verfahren sieht wie folgt aus: 1) Interne Moderatoren, TCM-Mitarbeiter und Mitarbeiter von Interessengruppen, die mit der eScreening-Implementierung in Verbindung stehen, werden an jedem Standort zur Teilnahme eingeladen lernen; 2) Es wird eine Informationsveranstaltung über die Leitung und den Zweck der Studie, die Auswahl der Teilnehmer und die Verwendung der Daten durchgeführt. Potenzielle Teilnehmer werden darüber informiert, dass ihre Teilnahme völlig freiwillig ist und ihre Entscheidung über die Teilnahme ihre Anstellung, ihren Verdienst oder ihre Beförderung nicht beeinflusst. Nach dieser Informationssitzung stimmen die Forschungsmitarbeiter interessierten Teilnehmern zu. Nach Unterzeichnung der Einwilligung erhalten eingeschriebene Mitarbeiter einen Link zu einer Online-Umfrage und werden von der Evaluationsleitung zu einem Vorgespräch eingeladen. Wenn es zu einer Personalfluktuation kommt, werden die Ermittler versuchen, den Mitarbeiter vor dem Verlassen zu beurteilen und einen anderen Teilnehmer mit ähnlichen Funktionen innerhalb der Klinik zu ersetzen und zu schulen. Jede der vier Step/Crossover-Kohorten wird während der Studie nacheinander die folgenden Phasen durchlaufen.

Phase vor der Implementierung (Pre-Imp). Diese Phase dauert 3 Monate, in denen das Forschungsteam mit den internen Moderatoren zusammenarbeitet, um: 1) Informationen vor der Implementierung zu sammeln, einschließlich detaillierter Informationen zu den bestehenden Prozessen für das TCM-Screening bei der Registrierung; 2) Kontaktpunkte für iPads und andere logistische Anforderungen identifizieren; 3) Kommunikation mit TCM-Mitarbeitern und anderen Personen, die mit TCM-Mitarbeitern zusammenarbeiten, herstellen; 4) Rekrutierung von Personalteilnehmern für die Studie; und 5) Beginn der fortlaufenden Verfolgung von Prozessdaten aus Feldnotizen und Zeitbewegungsverfolgung. TCM-Personalnamen, Kliniknamen, Notiztitel, Planung des RPIW und klinische Erinnerungen, die von Programmmitarbeitern ausgefüllt werden, werden gesammelt und für die nachfolgende Entwicklung von Benutzerkonten und Inhaltsanpassungen während der Implementierungsphase verwendet. Das Implementierungsteam wird den Mitarbeitern auch Psychoedukation über die Bedeutung des Screenings anbieten. Diese Phase dient als Aufmerksamkeitskontrollbedingung, mit der die Ausgangskontroll- und Interventionsbedingungen verglichen werden.

Während der Vorimplementierung werden die TCM-Teams die üblichen Screening-Verfahren fortsetzen. Dazu gehören Interviews oder Selbstberichte, eine papierbasierte Sammlung von Screening-Maßnahmen nach dem 11. September, einschließlich der systemweit standardisierten Bewertungen von Depressionen, PTBS und Alkoholkonsum (PHQ-2 + I9, PCPTSD + I9 und Audit-C , bzw). Patienten, die bei PHQ-2 +I9, PCPTSD +I9 positiv abschneiden, wird dann die Columbia Suicide Severity Rating Scale (C-SSRS) verabreicht, die weitere Informationen zum Suizidrisiko sammelt. Veteranen, die auf C-SSRS positiv sind, erhalten dann eine umfassende Bewertung des Suizidrisikos und werden zur entsprechenden Nachsorge überwiesen. Eine detaillierte Beschreibung und ein Flussdiagramm des aktuellen Screening-Prozesses an jedem Standort werden vom externen Moderator (Forschungsteam) und internen Moderator (Standortpersonal) mit Informationen von den TCM-Mitarbeitern vor der Implementierungsphase entwickelt.

Active Implementation (MCIS): Das eScreening MCIS wurde in den letzten sieben Jahren entwickelt und besteht aus: 1) Bereitstellung der eScreening-Software, 2) Schulung, 3) RPIW und 4) laufender gemischter Moderation. Die Forscher entwickelten das MCIS, um spezifische Hindernisse bei der eScreening-Implementierung zu beseitigen, die in früheren Untersuchungen festgestellt wurden. Um Barrieren auf Systemebene im Zusammenhang mit der OIT-Unterstützung zu beseitigen, entwickelten die Ermittler eine technische Support-Infrastruktur für eScreening unter Verwendung vorhandener VA-IT-Ressourcen (siehe LOS) als Teil der eScreening-Bereitstellung. Die Schulungskomponente befasst sich mit Bildungsbarrieren in Bezug auf die Verwendung von eScreening und die verfügbare Forschung. Blended Moderation ging auch auf Bildungsbarrieren sowie technologiebezogene und andere unvorhergesehene Herausforderungen ein. Der RPIW-Prozess befasst sich mit der Unterstützung der Führung, der Zustimmung der Mitarbeiter, den erforderlichen Ressourcen und der Einbeziehung aller Beteiligten in den Prozess und der Entwicklung eines standortspezifischen und klaren Plans für die Implementierung. Das RPIW enthält speziell einen Abschnitt, in dem das Team an Tag 2 mögliche Hindernisse und Lösungen generiert.

eScreening. eScreening ist ein VHA-Programm, das es Veteranen ermöglicht, Screening-Fragen zur Selbstanzeige über ein iPad zu beantworten, das mit dem sicheren VHA-Wi-Fi verbunden ist. eScreening liest und schreibt in die VHA EMR. Zu den hervorgehobenen Funktionen von eScreening gehören: 1) die Möglichkeit für Veteranen, Screening-Informationen direkt ohne die Beteiligung eines Arztes einzugeben; 2) sofortige Bewertung von Maßnahmen; 3) eine bearbeitbare Notiz, die im EMR generiert wurde; und 4) Klinikwarnungen für positive Screenings zur psychischen Gesundheit, die eine Nachsorge für das Suizidrisiko erfordern.

Ausbildung. Das eScreening-Training wird virtuell und asynchron sein und eine 1-stündige PowerPoint-Anweisung beinhalten, die vom externen Moderator präsentiert wird. Auf das PowerPoint folgt eine Stunde Tutorial-Videos, die alle Schritte zeigen (Bewertungen erstellen, Veteranen hinzufügen, in Vista speichern, nach Bewertungen suchen, geplante Terminbewertungen erstellen, auf Berichte zugreifen). Praktische Schulungen für Benutzer werden im Gruppenformat oder individuell durch das Schulungspersonal angeboten, wie vom TCM-Standortpersonal angefordert. Auf zusätzliche Schulungsmaterialien kann über die eScreening Pulse-Website zugegriffen werden, die eine Reihe von Kurzanleitungen zur Anpassung von eScreening, zur Einrichtung von Bewertungen und zur Verwendung von Dashboards enthalten. Häufig gestellte Fragen werden auch auf der Pulse-Website verfügbar sein.

RPIW. Das 3-tägige RPIW wird virtuell vom externen Moderator mit Unterstützung des internen Moderators vor Ort moderiert und umfasst das TCM-Team, zugehörige Mitarbeiter (z. B. medizinisches Hilfspersonal, Angestellte) und andere Interessenvertreter des Standorts. Am ersten Tag des Prozesses werden die Teilnehmer in den RPIW-Prinzipien geschult und eine Zusammenfassung der in der Vorimplementierungsphase gesammelten Informationen vorgestellt, einschließlich einer Grafik der aktuellen Prozesslandkarte, die dann verfeinert und fertiggestellt wird. Der zweite Tag besteht aus gemeinsamen Anstrengungen, um einen angestrebten zukünftigen Zustand abzubilden, eine Lückenanalyse durchzuführen und relevante Faktoren und Hindernisse zu identifizieren, die für den Standort einzigartig sind. Der dritte Tag ist der Wiederholung der Aktionsplanung, -ausführung und -neubewertung gewidmet, um den Zielzustand zu finalisieren und klinisch bedeutsame Verbesserungsziele zu identifizieren. Unter Verwendung eines Plan-Do-Study-Act (PDSA)-Frameworks werden die Pläne zum Erreichen des Zielzustands mit einem detaillierten Plan umgesetzt, der für jeden Schritt im Plan wer, was und wann enthält. Aufgrund der Flexibilität von eScreening und der Implementierungsstrategie kann jedes TCM-Programm entscheiden, eScreening in seinen Arbeitsablauf zu integrieren, basierend auf den spezifischen Bedürfnissen seines Programms, verfügbaren Ressourcen und anderen Faktoren.

Blended Moderation. Blended Moderation umfasst einen primären externen Moderator aus dem eScreening-Team, der mit dem standortinternen Moderator zusammenarbeitet, um Besprechungen, Schulungssitzungen und Telefonate zu planen. Der externe Moderator ist der Hauptansprechpartner für umsetzungsbezogene Fragen. Der interne Moderator, der während der Startphase ausgewählt wird, arbeitet mit dem externen Moderator zusammen, um durch interne Standortsysteme (d. h. lokale Führung, OIT, Logistik) zu navigieren, und fungiert als Vorkämpfer für das eScreening-Projekt an jedem Standort.

Überblick über Datenquellen und Zeitpunkt der Datenerhebung:

Die Studie wird ein Mixed-Methods-Design verwenden und eine Kombination aus quantitativen und qualitativen Daten von mehreren Interessengruppen und zu mehreren Zeitpunkten sammeln. In diesem Abschnitt wird ein allgemeiner Überblick über die Datenquellen und Zeitpunkte der Datenerhebung gegeben. Spezifischere Erwägungen zur Datenerhebung und -analyse werden unter jedem Ziel bereitgestellt.

Quantitative Datenquellen und Zeitpunkt der Datenerhebung. Die quantitative Datenerfassung umfasst Daten aus der EMR, dem eScreening-System und Umfragen, die von den Teilnehmern des Personals ausgefüllt werden. Die Ermittler extrahieren EMR-Daten zu Beginn und am Ende von Pre-Imp, am Ende des MCIS-Zeitraums und 9 Monate nach MCIS. Die Ermittler verwenden die eScreening-Berichtsfunktion, um eScreening-Nutzungsdaten für jede Kohorte nach dem MCIS-Zeitraum und 9 Monate nach dem MCIS abzurufen. Die Ermittler werden eine individuelle telefonische Pre-Imp-Befragung/Interview unter Verwendung der von Weiner et al (2017) entwickelten Machbarkeits- und Akzeptanzskalen durchführen. Die Ermittler werden auch ein sicheres Online-Umfragesystem (d. h. Qualtrics oder RedCap) verwenden, um nach der aktiven Implementierungsphase Umfrageelemente auf der Grundlage von PRISM und seinen RE-AIM-Ergebnissen zu sammeln.

Qualitative Datenquellen und Zeitpunkt der Datenerhebung. Qualitative Daten werden anhand von Feldnotizen und Interviews erhoben. Die Ermittler werden Feldnotizen unter Verwendung einer strukturierten Vorlage während Telefonkonferenzen/Anrufen während der Vorimplementierungs- und Implementierungsphase machen, einschließlich des ersten Kontakts, während des RPIW und der Moderationskontaktsitzungen. Das Forschungspersonal wird umfangreiche Feldnotizen machen, um das klinische Umfeld, die Arbeitsabläufe, die Patientenpopulation und die Beziehungsatmosphäre zu beschreiben. Während der Pre-Implementierung, Post-Implementierung und der Aufrechterhaltungsphase werden mit gezielt ausgewählten Standortmitarbeitern individuelle Telefoninterviews durchgeführt. Die Interviews konzentrieren sich auf Faktoren, die die Einführung, Implementierung und nachhaltige Nutzung von eScreening beeinflussen. Sowohl die Denkweise als auch praktische Fragen werden untersucht, um Implementierungsprobleme, Herausforderungen und Grundlagen des Erfolgs zu veranschaulichen. Eine bestimmte Reihe von Sonden skizziert und skizziert die beteiligten Aufgaben Schritt für Schritt, um Hindernisse und Moderatoren zu dokumentieren und wann Kommunikation und Koordination erforderlich waren.

Ziel 1 Datenerhebung und Analysen:

Ziel 1: Bewertung von eScreening im Vergleich zu Papier- und mündlichem Screening, geleitet von den RE-AIM-Ergebnissen von PRISM in 8 TCM-Programmen, unter Verwendung eines Cluster-randomisierten, abgestuften Keildesigns. Hypothese 1 (Reichweite): Im Vergleich zu Papier- und mündlichem Screening wird eScreening eine deutlich höhere Screening-Rate erzielen. Hypothese 2 (Effektivität): 2a: Im Vergleich zu Papier- und mündlichen Screenings wird eScreening zu deutlich weniger Zeit für psychische Gesundheits- und Suizidscreenings führen. 2b: Im Vergleich zum Papier- und mündlichen Screening führt das eScreening zu einer deutlich höheren Überweisungsrate an die benötigte Versorgung.

Datensammlung. Die Ermittler erhalten eine HIPAA-Verzichtserklärung, um die folgenden Daten zu sammeln: 1) die Anzahl der Veteranen, die sich im Gesundheitssystem angemeldet haben, sowie Datum und Uhrzeit ihrer Anmeldung (durchschnittlich 144 Veteranen pro Monat an allen Standorten), 2) Datum und Uhrzeit ihrer Anmeldung erhielten PC-PTSD-5+I9, PHQ-2 +I9, AUDIT-C, CSSR-S und die Disposition (positiver/negativer Screen), 3) Datum und Uhrzeit, zu der sie eine umfassende Suizidrisikobewertung (CSRE) erhielten, und 4 ) Überweisungen zur psychiatrischen Versorgung. Diese Daten werden verwendet, um die Gesamtrate des Abschlusses des Screenings und der Überweisung an die psychiatrische Versorgung während des Basiskontrollzeitraums sowie die durchschnittliche Dauer bis zum Abschluss des Screenings zu berechnen. Dieselben Daten werden für die vorangegangenen neun Monate nach der Implementierung und Erhaltung erhoben. Basierend auf den durchschnittlichen Registrierungsdaten für die Standorte der Ermittler im vergangenen Jahr werden sich etwa 27.600 Veteranen während der 27-monatigen Basiskontroll-, Pre-Imp-, Post-MCIS- und Sustainment-Datenzeiträume bei der VA-Gesundheitsversorgung anmelden.

Stichprobengröße und Power-Berechnung: Die Forscher unterstützten die Studie für den Interventionseffekt der Wirksamkeitsergebnisse in Ziel 1. Die Ermittler gingen von einem gemeinsamen Interventionseffekt über alle Kohorten/Schritte und hierarchische lineare Modellierung (HLM) aus, um die Clusterbildung zu berücksichtigen, einschließlich eines festen Effekts für die Kohorte/Schritt des Crossovers, um säkulare Trends und einen Indikator für den Wechsel der Interventionsphase (z. B. Kontrolle) zu berücksichtigen vs. Intervention), um Interventionseffekte bereitzustellen. Die Leistung wurde basierend auf etablierten Methoden für SW-Versuche berechnet. Die Forscher setzten die Typ-I-Fehlerrate alpha = 0,05, Cohens d (oder h für binäre Ergebnisse) Effektgröße = 0,1, Power = 0,8 und nahmen eine Intraklassenkorrelation (ICC) = 0,20 an, was eine konservative Schätzung auf der Grundlage ähnlicher Studien ist. Unter diesen Annahmen beträgt die geschätzte Stichprobengröße, die für die vorgeschlagene Studie benötigt wird, ungefähr N = 5.000 Teilnehmer. Daten aus der Pilotstudie der Forscher zeigen Effektstärken, die alle über diesen nachweisbaren Effektstärken liegen. Angesichts der Tatsache, dass jeden Monat durchschnittlich 144 neue Post-9/11-Veteranen an allen Implementierungsstandorten eingeschrieben werden und die Ermittler Daten an jedem Standort über einen Zeitraum von 24 Monaten sammeln, ist die Studie ausreichend aussagekräftig, um die in ähnlichen Studien beobachteten Effektstärken zu erkennen.

Statistische Analyse und Hypothesentest. Die Datenanalysen werden schrittweise erfolgen und den Empfehlungen der Prevention Science and Methodology Group für randomisierte Feldversuche folgen. Ein vorläufiges Datenscreening und -bereinigung erfordert eine Untersuchung der Datenverteilungen auf Normalität und fehlende Datenmuster sowohl auf univariater als auch auf multivariater Ebene. Es wird erwartet, dass fehlende Daten begrenzt sind und leicht in HLM aufgenommen werden, wenn angenommen werden kann, dass die Daten zufällig unter Verwendung der Maximum-Likelihood-Schätzung fehlen. Wenn festgestellt wird, dass die Daten nicht zufällig fehlen, werden Mechanismen für fehlende Daten in die statistischen Zielmodelle eingebaut. HLM wird aufgrund der verschachtelten (oder geclusterten) Struktur der Daten (Veteranen [Stufe 1] verschachtelt in TCM-Kliniken [Stufe 2] verschachtelt in Implementierungsstandort [Stufe 3]) als primäres statistisches Modell verwendet, wobei die zufällige Zuordnung bei erfolgt auf der Ebene des Implementierungsstandorts. HLM ist eine flexible Modellierungsstrategie, die die Integration von festen und zufälligen Effekten in verschachtelten/geclusterten Datenstrukturen mit normalen und nicht normalen Antwortvariablen ermöglicht. Demografische Informationen über die Teilnehmer während der MCIS- und Kontrollphasen werden innerhalb und zwischen den Standorten statistisch verglichen, um die Vergleichbarkeit zu gewährleisten. Alle Merkmale, die sich zwischen den Interventions- und Kontrollgruppen unterscheiden, werden als Kovariaten in nachfolgende Modelle aufgenommen, um Verzerrungen zu minimieren. Feste Effekte werden in jedes Modell aufgenommen, um die Studienphase (d. h. Baseline-Kontrolle, Pre-Imp/Aufmerksamkeitskontrolle, MCIS und Erhaltung) und die Step-/Crossover-Kohorte zu berücksichtigen, um säkulare Trends zu berücksichtigen. Die Forscher werden auch in der Lage sein, Wechselwirkungen zwischen Studienphase und -schritt zu testen, um festzustellen, ob sich die Interventionseffekte je nach Kohorte unterscheiden und ob die Interventionseffekte zwischen den TCM-Kliniken innerhalb der Implementierungsorte unterschiedlich sind. Separate Modelle werden getestet, um festzustellen, ob ein größerer Anteil der Veteranen während der MCIS- und/oder Erhaltungsphasen im Vergleich zu den Ausgangs- und/oder Aufmerksamkeitskontrollphasen auf psychische Gesundheit und Suizidrisiko (Reichweite) untersucht und an die Pflege (Effektivität) überwiesen wurde. Zusätzliche Modelle werden testen, ob die durchschnittliche Anzahl der Tage zwischen der Aufnahme und dem Screening während der MCIS- und/oder Erhaltungsphasen im Vergleich zu den Grundlinien- und Aufmerksamkeitskontrollphasen niedriger war (Effektivität). Bei allen Analysen setzen die Ermittler die statistische Signifikanz auf =0,05 und verwenden Holm-Bonferroni-Anpassungen für 5 Tests und Methoden zur Rate falscher Entdeckungen für >6 Tests. Wenn mehrere korrelierte Ergebnisse (abhängige Ergebnisse) mit jeder Hypothese analysiert werden, werden Korrekturen basierend auf der effektiven Anzahl unabhängiger Tests berechnet, wenn die Mehrfachvergleichsverfahren angewendet werden

Ziel 2 Datenerhebung und Analysen:

Ziel 2: Bewerten Sie die Machbarkeit, Akzeptanz und potenziellen Auswirkungen des MCIS, geleitet von den RE-AIM-Ergebnissen von PRISM, Annahme, Implementierung und Wartung unter Verwendung gemischter Methoden.

Datensammlung. Die Ermittler werden einen Mixed-Methods-Ansatz verwenden und sowohl quantitative als auch qualitative Daten sammeln, die sich an den RE-AIM-Ergebnissen von PRISM orientieren. Für die Replikationskosten verwenden die Ermittler einen Zeit-Tracker, der zuvor für die VA-Implementierungsbemühungen verwendet wurde. Das Tool wird für diese Studie angepasst und verwendet, um schrittweise alle Moderationsaktivitäten des externen Moderators zu erfassen. Die Aktivitäten werden dann quantifiziert und verwendet, um eine Schätzung der Replikationskosten pro Standort zu entwickeln.

Quantitative Datenanalyse. Die Ermittler werden deskriptive Statistiken verwenden, um quantitative Maße für jedes PRISM-Ergebnis zusammenzufassen, wobei 50 % als Benchmark verwendet werden. Die Adoption wird berechnet als die Gesamtzahl und der Anteil der TCM-Kliniken, die bereit sind, eScreening zu initiieren, im Verhältnis zur Gesamtzahl der TCM-Kliniken an allen Implementierungsstandorten und innerhalb der einzelnen Implementierungsstandorte, sowie die Gesamtzahl und der Anteil der Anbieter, die bereit sind eScreening im Verhältnis zur Gesamtzahl der Anbieter an allen Implementierungsstandorten, in allen TCM-Kliniken an jedem Implementierungsort und innerhalb jeder TCM-Klinik einzuführen. Die Implementierung wird als Anteil der TCM-Kliniken und Anbieter innerhalb von Kliniken berechnet, die eScreening implementieren. Die Ermittler werden auch Durchschnittsbewertungen der Akzeptanz und Durchführbarkeit des MCIS über Anbieter innerhalb von TCM-Kliniken und über Implementierungsstandorte hinweg berechnen. Die Zeiterfassungsdaten werden mithilfe des VA-Hauptbuchs analysiert, das alle Arbeitskosten einschließlich Leistungen an Arbeitnehmer und Arbeitgeberbeiträge zu Steuern umfasst. Indirekte Kosten sollten proportional zu den direkten Kosten anfallen und werden auf der Grundlage der Leitlinien des VA Health Economics Resource Center (HERC) geschätzt. Die Aufrechterhaltung wird als Anteil der TCM-Kliniken und Anbieter innerhalb von Kliniken berechnet, die eScreening während der Aufrechterhaltungsphase (d. h. der 9-Monats-Periode nach der Erstimplementierung) implementieren.

Qualitative Datenanalyse. Studienprüfer oder ein erfahrenes, geschultes Mitglied des Studienteams führen halbstrukturierte Interviews durch. Die Interviews werden per Audio aufgezeichnet, vom VA CTSP transkribiert und in das qualitative Softwareprogramm ATLAS.ti eingegeben. Ein Schlüsselaspekt dieser Analyse ist die Beantwortung folgender Fragen: Was beeinflusst die Akzeptanz von eScreening durch Anbieter? Welche Faktoren haben die Implementierung von eScreening beeinflusst? Welche Faktoren fördern die Pflege? Die Analyse wird auch die umfassendere Frage beantworten, warum Anbieter eScreening implementieren oder nicht implementieren, einschließlich des Verständnisses aller praktischen Gründe für den klinischen Arbeitsablauf für die Verwendung oder Nichtverwendung oder der wichtigsten zugrunde liegenden Merkmale des eScreening-Programms oder -Anbieters. Die Analyse wird aufkommende Themen unter Verwendung eines redaktionellen Ansatzes berücksichtigen. Zwei Mitglieder des Projektteams werden unabhängig voneinander die gesammelten halbstrukturierten Interviewdaten codieren. Ein drittes Teammitglied bewertet die Codierungsqualität und löst Konflikte.

Konvergente Analyse. Unter Verwendung eines konvergenten Mixed-Methods-Designs wird das Kernteam der qualitativen Forschung die Daten gleichzeitig mit den quantitativen Daten analysieren, um die quantitativen Daten zu erklären und zu unterstützen/zu widerlegen und zu Erkenntnissen über zukünftige Implementierungsforschung und Verbreitungsbemühungen beizutragen.

Ziel 3 Datenerhebung und Analysen:

Ziel 3: Beschreiben und vergleichen Sie Websites mit hoher und geringer eScreening-Reichweite, die von kontextuellen Konstrukten von PRISM geleitet werden, und verwenden Sie qualitative Vergleichsanalysen, um Faktoren zu untersuchen, die die Reichweite von eScreening und die Verwendung des eScreening-MCIS beeinflussen. In Ziel 3 werden qualitative Daten aus Kontextelementen von PRISM verwendet, um vergleichende Analysen zwischen Websites mit hoher und niedriger eScreening-Reichweite zu erstellen. Fragen und Maßnahmen zur Bewertung der PRISM-Kontextdimensionen werden in die vorgeschlagenen Interviews und Feldnotizen (qualitative Daten) aufgenommen und werden auch durch die vorgeschlagenen Umfragen und EMR-Daten (quantitative Daten) informiert.

Datenanalyse. Qualitative Daten werden wie für Ziel 2 beschrieben analysiert, aber die Untersucher verwenden einen Vorlagenansatz für die Analyse unter Verwendung von Konstrukten aus kontextuellen Faktoren. Die Ermittler verwenden Codes, die auf der Grundlage der PRISM-Konstrukte und anderer aufkommender Themen identifiziert und erstellt wurden, um die relevanten Transkriptionszitate zu markieren. Angebotsberichte listen die zugehörigen Angebote wörtlich nach Standort auf. Websites werden nach hoher vs. niedriger Reichweite unter Verwendung eines Cutoff-Scores von 30 % (von Ziel 1) basierend auf der vorherigen Arbeit eingeteilt. Die qualitative Vergleichsanalyse (QCA) ermöglicht es uns, Websites mit hoher und geringer eScreening-Reichweite zu vergleichen, um Faktoren zu identifizieren, die die Implementierung von eScreening und die Auswirkungen des MCIS beeinflussen, indem wir einen systematischen fallübergreifenden Vergleich verwenden, um die kausale Komplexität besser zu verstehen. Die Ermittler werden verschiedene Kombinationen von Variablen im Datensatz auflisten und zählen und dann logische Inferenzregeln anwenden, um zu bewerten, ob alternative Inferenzen durch die Daten unterstützt werden. Verwendung des interessierenden Ergebnisses der Ermittler (d. h. hohe Reichweite) und eine Liste von Bedingungen (z. B. Kontextfaktoren), die mit diesem Ergebnis in Verbindung gebracht werden können, entwickeln die Ermittler Kalibrierungsmetriken unter Verwendung eines klaren dichotomen Satzes. Bei der Kalibrierung wird unter Verwendung spezifischer Entscheidungsregeln berücksichtigt, wie jeder Standort mit dem vordefinierten PRISM-Konzept in Beziehung steht. Die Ermittler erstellen ein Codebuch, in dem die Bedingungen und Entscheidungsregeln aufgeführt sind. Drittens werden die Ermittler die Daten kalibrieren. Unter Verwendung kodierter Daten wird insbesondere jeder Standort dichotom kalibriert, indem er jede Bedingung entweder „mit“ (1,0) oder „nicht mit“ (0,0) hat. Nachdem die Standorte der Ermittler kalibriert sind, erstellen die Ermittler mithilfe von Stata eine Wahrheitstabelle, um logische Kombinationen von Bedingungen zu analysieren und festzustellen, ob bestimmte Kombinationen das Ergebnis teilen. Unter Verwendung der booleschen Logik minimieren die Ermittler die Wahrheitstabelle, um Wege zum Ergebnis zu finden. Die Pfade werden dann anhand der Übereinstimmungs- und Abdeckungsparameter der Anpassung bewertet. Eine thematische Analyse der Interviewdaten vor Ort wird zur Ergänzung der QCA-Ergebnisse verwendet.