VA에서 구입한 지역사회 요양원을 위한 대시보드 배포 (CNHDashboard)

목표: VAMC 시장에서 계약되지 않은 CNH와 비교하여 계약된 CNH의 품질에 대한 CNH 대시보드 구현의 영향을 평가합니다.

단계별 쐐기 대시보드 구현 조사자들은 VISN 수준(주기당 n=3-4)에서 무작위화된 CNH 대시보드의 계단식 쐐기 구현을 제안합니다. 계단식 웨지는 모든 무작위 VISN에 충분한 교육을 제공하기 위해 체계적인 롤아웃으로 GEC 리소스를 최대화할 수 있습니다(아래 교육 프로그램 참조). 3개월마다 CNH 대시보드(표 2)를 사용하여 새로운 무작위 VISN 그룹을 '온라인'으로 가져옵니다. 조사관은 VISN 내에서 VAMC 간에 통합이 있기 때문에 VISN 수준을 무작위화 단위로 선택했습니다. 각 VISN에 약 4개의 VAMC가 있는 이 릴리스 일정은 견고하지만 이 상의 지원으로 관리할 수 있습니다. 조사관은 3개의 VISN에서 CNH 대시보드를 파일럿 테스트하여 정보 업로드, 대시보드 및 교육 프로그램을 마무리합니다.

표 2: CNH 대시보드를 위한 단계적 웨지 계획 롤아웃 무작위 VISN 그룹 월

-6~0개월 1~3개월 4~6개월 7~9개월 10~12 파일럿 VISN CNH 대시보드 CNH 대시보드 CNH 대시보드 CNH 대시보드 CNH 대시보드

1. 일반 CNH 품질 CNH 대시보드 CNH 대시보드 CNH 대시보드 CNH 대시보드
2. 일반 CNH 품질 일반 CNH 품질 CNH 대시보드 CNH 대시보드 CNH 대시보드
3. 일반 CNH 품질 일반 CNH 품질 일반 CNH 품질 CNH 대시보드 CNH 대시보드
4. 일반 CNH 품질 일반 CNH 품질 일반 CNH 품질 일반 CNH 품질 CNH 대시보드

대시보드 호스팅 CNH 대시보드는 VA GEC 인트라넷 웹사이트에서 호스팅됩니다. 인트라넷 사이트의 장점은 계단식 웨지 구현을 위해 사이트에 대한 액세스를 제어할 수 있다는 것입니다. 프로젝트가 계속됨에 따라 조사관은 VA 인트라넷 전체에서 액세스할 수 있는 전자 대시보드로의 전환을 안내하기 위해 응용 시스템 엔지니어링을 위한 인디애나폴리스 VAMC 센터의 지원을 요청할 것입니다.

교육 프로그램 조사관은 a) 5성 등급 시스템에 제시된 CNH의 품질에 대한 이해, b) 대시보드 방향, c) 성과가 낮은 CNH 시설 식별, d) 사용 가능한 옵션을 목표로 교육 프로그램을 설계합니다. 더 높은 품질의 시설과 계약하기 위해. 이 교육 프로그램에는 교훈적인 훈련 요소와 구현 전반에 걸친 코칭이 포함됩니다. 이 교육 프로그램의 효과는 익명의 참가자 설문 조사를 통해 결정됩니다. 교육 프로그램은 VISN 및 시설 노인병 프로그램 리더에게 제공됩니다.

1차 분석 조사관이 VISN으로 무작위화하는 동안 조사관은 구매한 CNH 선택이 발생하는 VAMC로 분석합니다. 각 VAMC에 대해 VAMC 시장에서 구매한 CNH 시설(관측)과 계약되지 않은 CNH(예상)의 평균 품질 비율을 측정합니다. VAMC 평균 관찰 대 예상(O/E) 비율은 이 분석의 기본 척도로 사용됩니다. 기본 기준 기준 기간은 CNH 대시보드 구현 전 6개월의 평균 O/E로 구성됩니다. CNH 대시보드가 ​​무작위 그룹에 공개되는 개입 기간은 교육 프로그램이 제공되고 평가되는 3개월 동안 지속됩니다. 주요 결과는 롤아웃 기간이 끝난 후 12개월 동안의 평균 O/E입니다. 각 VAMC는 자체 컨트롤 역할을 합니다. 우리의 주요 분석은 개입 전 6개월과 개입 후 12개월 동안 계약된 CNH 시설의 VAMC 평균 O/E 비율로 구성됩니다(그림 6). 그림 3에서 조사관은 이것이 정규 분포가 될 것으로 예상하므로 평균 O/E 비율을 비교하기 위해 스튜던트 t-테스트를 ​​사용할 것입니다.

현재 CNH 계약은 일반적으로 5년 마스터 계약의 연간 갱신으로 작성됩니다. 따라서 품질이 낮으면 매년 계약을 해지할 수 있습니다. 그러나 5년 계약을 맺는 데는 상당한 간접비가 있습니다. 조사관은 CNH 품질이 CNH 선택의 유일한 척도가 될 것으로 기대하지 않지만, 비갱신 및 신규 계약 시작의 요인이 될 것으로 예상합니다. 현재 각 VAMC는 평균 12개의 CNH와 계약을 맺고 있어 연간 2~3개의 계약 가능한 시설이 있습니다. 계약 프로세스를 변경하려면 시간이 걸리고 GEC 리소스가 필요합니다. 따라서 조사관은 CNH 대시보드 출시 후 4개 그룹 각각에 대해 12개월 동안 후속 조치를 취하기로 약속했습니다.

2차 분석 계단형 쐐기 구현의 내부 유효성을 보호하기 위해 조사자는 추가 참조 기간을 사용하여 2차 분석을 수행해야 합니다.12 이것은 연구 결과에 영향을 미칠 수 있는 세속적인 추세와 중간 사건을 설명하는 데 도움이 됩니다. 예를 들어, CMS가 CNH 대시보드 구현 중에 5성 순위 시스템에 대한 기준을 하향 조정하는 경우 조사관은 유형 2 오류(null의 잘못된 수락)를 도입할 것입니다. 대시보드가 ​​공개됨에 따라 계약된 CNH 품질의 변화 외에도 조사관은 무작위 롤아웃 전에 VAMC 간에 더 높은 품질의 시설로 이동이 있을 것으로 예상합니다. 이 변경은 VAMC가 CNH 대시보드를 보기 전에 계약된 CNH 품질과 관련하여 검사되고 있음을 알고 있기 때문에 조치를 취한 결과입니다. VAMC는 계약 관행을 개선하거나 변경하도록 계약된 CNH에 압력을 가할 것입니다. 결과적으로 연구 과정에서 O/E 비율이 자연스럽게 상승할 것으로 기대합니다. 또한 CNH 선택의 세속적 추세, 수수료 권한에 대한 VA 승인, OIG 조사, 뉴스 기사 및 VA 조직 결정은 CNH 품질에 대한 선택 및 집중에 영향을 줄 수 있습니다.

이러한 자연스러운 변화를 해결하기 위해 조사관은 추가 참조 기간이 있는 2차 분석을 제안합니다. 무작위 그룹에 대한 첫 번째 추가 참조 기간은 CNH 대시보드 구현 전 6개월(-6~0개월)의 O/E이며, 이는 기본 분석 기간의 O/E와 비교됩니다. 둘째, 1차 참고기간에 대한 변경 O/E를 검토한다. 무작위 그룹 1의 O/E를 Student's t-test를 사용하여 다른 무작위 그룹과 비교하여 평가 과정에서 기준선이 크게 변경되었는지 확인합니다. 마지막으로 조사관은 참조 기간의 O/E를 시간의 함수로 조사합니다. 이것은 특히 개입 없이 O/E의 시간적 변화를 조사할 수 있는 더 긴 창(각각 12개월 및 15개월)을 가진 그룹 3 및 4와 관련이 있습니다.