의료진 문서화 부담을 줄이는 AI 도구 (Evidently)
Evidently Workflow Study: 외래 전문 진료에서 의료진 대상 AI 문서화 지원 도구의 무작위 평가
이 연구는 임상의를 위한 인공지능(AI) 도구가 외래 의사들이 의료 기록을 검토하고 진료를 문서화하는 데 소요되는 시간을 줄이는 데 도움이 될 수 있는지 살펴봅니다. 이 도구는 기존 의료 기록 정보를 간략하게 요약하여 일상적인 임상 업무를 지원합니다. 이 연구는 이 도구의 사용이 임상의들의 업무 부담, 전자 건강 기록에 소요되는 시간, 그리고 문서화에 대한 전반적인 경험에 어떤 영향을 미치는지 조사합니다. 목표는 AI 문서화 지원 도구가 외래 전문 진료에서 임상의들의 효율성을 향상시키고 부담을 줄일 수 있는지 더 잘 이해하는 것입니다.
적격한 UNC 외래 전문의들은 설문조사를 완료하도록 초대될 수 있으며, 자격을 갖춘 경우 연구 기간 시작 시 도구(Evidently)에 대한 접근 권한을 받거나, 접근 권한을 받기 전 8주 동안 기존 업무 방식을 유지하도록 무작위로 배정됩니다. 이 연구는 환자를 모집하지 않으며 환자에 대한 의료 서비스를 변경하지 않습니다.
연구 개요
상세 설명
배경 및 목적: 이는 임상 워크플로우에 초점을 맞춘 행동 및 건강 정보 기술 연구입니다. 특정 환자 질병이나 상태를 대상으로 하지 않으며, 기존 전자 건강 기록 정보의 간략한 요약을 생성하는 임상진용 인공지능(AI) 도구(Evidently)가 외래 전문의의 문서 작업 부담을 줄이고 효율성과 경험을 개선할 수 있는지 평가합니다.
설계: 중재적, 무작위, 병렬군 시험. 적격 임상진은 연구 기간 시작 시 Evidently 접근 권한을 부여받거나, 접근 권한을 받기 전 8주 동안 기존 문서 작업 워크플로우를 계속하도록 무작위 배정됩니다. 프로토콜에 명시된 대로 군별 주요 비교 기간은 8주입니다.
환경 및 대상 모집: 미국 UNC 교수진 실습(UNCFP) 또는 UNC 의료 그룹(UNCMG) 소속 외래 주치의로, 영어로 동의하고 연구 활동을 완료할 수 있으며, 승인된 IRB 신청서에 명시된 연령 제한 및 출생 시 지정 성별 범주를 포함합니다. 참가자는 전문 임상 채널을 통한 초대를 통해 모집되며, 일반 대중은 모집하지 않습니다.
적격성(요약): 선별은 주치의 역할, UNCFP 또는 UNCMG 소속, 프로토콜 적격 목록의 주전공(예: 심장학, 폐학, 위장병학, 신경학, 종양학, 외과 또는 마취통증의학), 주당 최소 2회의 반일 외래 진료 세션(각 최소 3.5시간), 외래 진료 세션의 25% 미만이 프로토콜 임계값 이상의 수련의 또는 고급 실무 제공자와 공동으로 진행됨, 이전 Evidently 파일럿 참여 없음, 8주 연구 기간 동안 1주 이상의 업무 부재 예정 없음을 확인합니다. 이 기준을 충족하지 않는 개인은 등록되지 않습니다.
참가자 절차: 참여에는 적격성 및 기준선 설문조사(약 10~15분), 무작위 배정, 무작위 기간 동안 배정에 따른 Evidently 사용 또는 비사용, 간단한 추적 설문조사가 포함됩니다. 금전적 보상은 없습니다. 동의 자료에는 자발적 참여, 기밀성 보호, 참여가 감독자나 리더십에게 보고되지 않으며 고용 상태, 평가 또는 임상 책임에 영향을 미치지 않음이 설명되어 있습니다.
결과(상위 수준): 결과는 임상진이 보고한 업무 부담, 의무 기록 검토 및 요약과 전자 건강 기록 사용과 관련된 시간과 노력, 작업 부하 및 관련 경험 측정, 조기 접근 권한이 부여된 경우 도구의 사용성과 인지된 영향을 강조합니다. 이 연구는 환자를 등록하지 않으며 환자에게 중재를 배정하지 않습니다. 분석을 위한 설문 응답과 워크플로우 데이터의 연결은 승인된 동의 및 개인정보 보호 계획을 따릅니다.
설문 응답을 워크플로우 시스템에 연결하는 데 필요한 운영 식별자는 승인된 동의서에 설명되어 있으며 기관 정책과 IRB 승인 프로토콜에 따라 처리됩니다.
연구 유형
등록 (실제)
단계
- 해당 없음
연락처 및 위치
연구 장소
-
-
North Carolina
-
Chapel Hill, North Carolina, 미국, 27599
- UNC Health
-
-
참여기준
자격 기준
공부할 수 있는 나이
- 어린이
- 성인
- 고령자
건강한 자원 봉사자를 받아들입니다
설명
포함 기준:
참가자는 다음 기준을 모두 충족해야 합니다:
- UNCFP 또는 UNCMG에 소속된 외래 전문의를 이용하는 경우.
- 주당 최소 두 번의 반나절(세션당 ≥3.5시간) 예정된 외래 진료.
- UNCFP 또는 UNCMG 내 외래 환자 대면 전문 진료를 주로 하는 경우.
마취통증의학과 의사는 동일한 프로토콜에 등록되지만, 독특한 업무 흐름 특성으로 인해 별도로 분석됩니다.
제외 기준:
다음 기준 중 하나라도 충족하는 의료진은 제외됩니다:
- 수련의(예: 전공의 또는 펠로우).
- 고급 실무 제공자(APPs).
- 외래 업무 흐름이 주로 감독적이거나 수련의 또는 APPs와 공유되는 경우, 즉 외래 진료 세션의 25% 이상을 수련의 또는 APPs와 공동으로 진행한다고 자가 보고하는 의료진.
- 이전 Evidently 파일럿 연구에 참여한 의료진.
- 연구 기간 중 계획된 휴가가 1주일을 초과하는 의료진. 제외 기준은 기준 설문조사에서 자가 보고를 통해 평가되며, 가능한 경우 행정 기록(예: 이전 파일럿 참여 또는 진료량)으로 보완됩니다. 제외 기준 중 하나라도 충족하는 의료진은 무작위 배정되지 않습니다.
공부 계획
연구는 어떻게 설계됩니까?
디자인 세부사항
- 주 목적: 건강 서비스 연구
- 할당: 무작위
- 중재 모델: 병렬 할당
- 마스킹: 없음(오픈 라벨)
무기와 개입
참가자 그룹 / 팔 |
개입 / 치료 |
|---|---|
|
실험적: 실험적: 명백히
중재군에 무작위 배정된 임상의는 일상적인 임상 워크플로우에 통합된 임상의 대상 AI 임상 요약 도구(Evidently)에 대한 접근 권한을 받게 됩니다.
중재에는 표준화된 온보딩 및 교육 자료(예: 온보딩 웨비나 또는 동등한 비동기식 교육, 팁 시트, 주문형 구현 지원)가 포함됩니다.
임상의에게는 선택적 개인화가 제공될 수 있지만, 연구 참여에는 필요하지 않습니다.
|
중재군에 무작위 배정된 임상의는 무작위 배정 및 기초 연구 절차 완료 후 AI 임상 요약 도구에 대한 접근 권한을 받게 됩니다. 대조군에 무작위 배정된 임상의는 연구 기간 동안 기존의 차트 검토 및 문서화 관행을 계속 유지합니다. 연구 참여 및 AI 임상 요약 도구 사용은 자발적입니다. 중재군에 배정된 임상의는 일상적인 진료의 일부로 해당 도구를 사용할 의무가 없습니다. AI 임상 요약 도구의 사용은 공급업체가 제공하는 시스템 생성 이용 지표를 통해 특성화됩니다. 이러한 지표에는 세션 수(즉, 도구가 호출된 횟수), 도구가 사용된 환자 수, 그리고 가능한 경우 생성된 맞춤형 요약의 수와 같은 측정 항목이 포함될 수 있습니다. 모든 이용 측정 항목은 연구 기간 동안 임상의 수준에서 집계됩니다.
다른 이름들:
|
|
간섭 없음: 대조군: 대조
대조군에 무작위 배정된 임상의는 연구 기간 동안 AI 임상 요약 도구에 접근하지 않고 기존 차트 검토 및 문서화 관행을 계속할 것입니다.
|
연구는 무엇을 측정합니까?
주요 결과 측정
결과 측정 |
측정값 설명 |
기간 |
|---|---|---|
|
임상의 인지 부하 변화
기간: 기준 시점부터 연구 2개월 종료 시점까지
|
의사의 인지 부하를 측정하기 위해 미국 항공우주국(NASA) 업무 부하 지수에서 적응된 의사 업무 부하(PTL) 척도를 사용합니다.
PTL은 정신적 요구, 신체적 요구, 노력, 시간 압박의 네 가지 항목을 포함하며, 각 항목은 지난 1-2주 동안의 일반적인 임상 근무일을 기준으로 0-100점 척도로 평가됩니다.
항목 점수를 합산하여 0에서 400까지의 연속 복합 점수를 생성하며, 점수가 높을수록 더 큰 인지적 업무 부하를 나타냅니다.
주요 결과는 의사 수준에서의 PTL 점수 변화로, 기준선에서 연구 2개월 말까지의 변화를 의도적 치료 분석 프레임워크 하에서 분석합니다.
|
기준 시점부터 연구 2개월 종료 시점까지
|
2차 결과 측정
결과 측정 |
측정값 설명 |
기간 |
|---|---|---|
|
임상 검토 시간의 변화
기간: 기준선부터 연구 2개월까지
|
환자 차트 및 임상 정보를 검토하는 데 소요된 시간을 포착하는, Epic Signal 기반 임상 검토 소요 시간.
|
기준선부터 연구 2개월까지
|
|
근무 시간 외 시간의 변화
기간: 기준점부터 연구 2개월까지
|
Epic Signal에서 파생된 예정된 근무 시간 외에 보낸 시간, 가능한 경우 저녁 시간과 예정되지 않은 날을 포함합니다.
|
기준점부터 연구 2개월까지
|
|
진료 준비 시간의 변화
기간: 기초선에서 연구 2개월까지
|
자기 보고식 진료 준비 소요 시간, 예정된 근무 시간 및 예정된 근무 시간 외(반일 진료당 분).
|
기초선에서 연구 2개월까지
|
|
신환 기록 검토 시간의 변화
기간: 기준선부터 연구 2개월까지
|
클리닉 전에 새 환자의 기록을 검토하고 요약하는 데 소요된 시간에 대한 자가 보고
|
기준선부터 연구 2개월까지
|
|
소진감 변화
기간: 기준선부터 연구 2개월까지
|
검증된 단일 항목 자기 보고 측정법을 사용하여 평가된 임상의 소진의 변화.
이 항목은 임상의에게 1(소진 증상 없음)부터 5(완전히 소진됨)까지의 5점 서열 척도로 현재의 소진 수준을 평가하도록 요청합니다.
점수가 높을수록 더 큰 소진을 나타냅니다.
이 결과는 기준선에서 연구 2개월 말까지의 이 단일 항목 소진 평가에서 임상의 수준의 변화입니다.
|
기준선부터 연구 2개월까지
|
|
도구 세션 호출 횟수
기간: 연구 2개월차
|
공급업체 제공 시스템 로그에 기록된 연구 기간 동안 각 임상의가 AI 임상 요약 도구(Evidently)를 호출한 총 횟수.
임상의 수준에서 집계된 횟수로 보고됨(중재군에 한함).
|
연구 2개월차
|
|
도구 사용 환자 수
기간: 연구 2개월
|
공급업체 제공 시스템 로그에 기록된 대로 연구 기간 동안 각 임상의가 AI 임상 요약 도구(Evidently)를 사용한 고유 환자의 총 수.
임상의 수준(중재군에만 해당)에서 집계된 수치로 보고됨.
|
연구 2개월
|
|
도구 사용이 가능한 적격 방문 비율
기간: 연구 2개월
|
공급업체가 제공한 시스템 로그 및 일정 데이터에서 도출된 각 임상의가 연구 기간 중 적격 외래 환자 방문에 대해 AI 임상 요약 도구(Evidently)를 사용한 비율.
임상의 수준에서 집계된 백분율로 보고됨(중재군만 해당).
|
연구 2개월
|
|
사용 맥락
기간: 연구 2개월차
|
필요한 경우(중재군만 해당) 구조화된 설문 항목으로 보완된 Evidently가 사용된 임상적 맥락(예: 신환 대 재방문, 전문 진료 워크플로우)을 설명하는 시스템 생성 데이터.
|
연구 2개월차
|
|
사용성 및 적합성
기간: 연구 2개월차
|
사용성과 적합성은 Evidently에 대한 세 가지 진술로 구성된 연구별 리커트 동의 설문지를 사용하여 평가되며, 각 진술은 1(매우 동의하지 않음)에서 5(매우 동의함)까지 점수가 매겨진 5점 리커트 동의 척도로 평가됩니다. 점수가 높을수록 사용성과 적합성이 더 유리함을 나타냅니다.
진술은 다음과 같습니다: Evidently는 사용하기 쉽습니다; Evidently는 배우기 쉬웠습니다; Evidently는 내 전문 분야의 차트 검토 및 요약 요구에 맞습니다.
항목별 분포 및/또는 요약 점수(예: 항목별 평균 또는 중앙값)는 연구 2개월 시점에 보고됩니다(중재군만 해당).
|
연구 2개월차
|
|
정확성과 신뢰
기간: 연구 2개월차
|
인지된 정확성과 신뢰도는 4개의 진술로 구성된 연구 특화 Likert 동의 설문지를 사용하여 평가되며, 각 진술은 1점(전혀 동의하지 않음)에서 5점(매우 동의함)으로 채점되는 5점 Likert 동의 척도로 평가됩니다. 점수가 높을수록 정확성과 신뢰에 대한 인식이 더 긍정적임을 나타냅니다.
진술 내용은 Evidently에서 생성된 요약이 일반적으로 정확한지, Evidently가 임상적으로 관련된 정보를 강조하는지, Evidently가 응답자가 독립적으로 찾지 못했을 수 있는 관련 정보를 제시하는지, 그리고 Evidently의 요약이 응답자가 그렇지 않으면 준비할 요약보다 최소한 동등한 수준인지에 대해 다룹니다.
항목별 분포 및/또는 요약 점수는 연구 2개월 차(중재군만 해당)에 보고될 예정입니다.
|
연구 2개월차
|
|
일상에 미치는 영향
기간: 연구 2개월
|
단일 항목 척도는 1(매우 동의하지 않음)에서 5(매우 동의함)까지 점수가 매겨지는 5점 리커트 동의 척도를 사용하여 평가됩니다. 점수가 높을수록 Evidently가 임상의가 임상 업무일을 더 쉽게 해낼 수 있게 도와준다는 데 대한 동의가 더 강함을 나타냅니다.
항목 프롬프트는 다음과 같습니다: Evidently는 내가 임상 업무일을 더 쉽게 해낼 수 있게 도와줍니다.
응답 분포는 연구 2개월차에 보고될 예정입니다(중재 군만 해당).
|
연구 2개월
|
|
시간 절약
기간: 연구 2개월차
|
Evidently(개입군에 한함)로 인한 반일 진료당 자가 보고된 인지된 시간 절감
|
연구 2개월차
|
|
치료에 미치는 영향
기간: 연구 2개월
|
5점 리커트 동의 척도(1(매우 동의하지 않음)부터 5(매우 동의함)까지 점수화)를 사용하여 평가된 단일 항목 측정; 점수가 높을수록 Evidently가 임상의가 더 나은 환자 치료를 제공하는 데 도움이 된다는 동의가 더 강함을 나타냅니다.
항목 프롬프트는 다음과 같습니다: Evidently를 사용하면 더 나은 환자 치료를 제공하는 데 도움이 됩니다.
응답 분포는 연구 2개월에 보고됩니다(중재 군만 해당).
|
연구 2개월
|
|
단일 항목 리커트 동의 척도로 평가된 AI 임상 요약 도구에 대한 전반적인 만족도
기간: 연구 2개월차
|
AI 임상 요약 도구(Evidently)에 대한 전반적인 만족도는 1점(매우 동의하지 않음)에서 5점(매우 동의함)까지의 5점 리커트 척도 단일 항목으로 평가됩니다. 점수가 높을수록 전반적인 만족도가 높음을 나타냅니다.
항목 프롬프트는 다음과 같습니다: 전반적으로, 나는 Evidently에 만족합니다.
결과는 연구 2개월 시점(중재군만 해당)에서 응답 분포(범주별 빈도 및 백분율)로 보고됩니다.
|
연구 2개월차
|
|
개방형 피드백
기간: 연구 2개월
|
연구 종료 설문지의 단일 선택형 자유 기술 항목을 통해 수집된 질적 개방형 피드백(이 측정에는 숫자 척도가 사용되지 않음).
해당 항목은 Evidently에 대한 추가 서술적 피드백을 요청하며, 잘 작동한 점, Evidently가 가장 도움이 된 부분, 기대보다 실망스럽거나 덜 유용했던 점, 개선 사항 또는 새로운 기능에 대한 제안을 포함합니다.
응답은 질적 내용 또는 주제 분석을 사용하여 분석됩니다.
결과는 주요 주제와 각 주제에 할당된 응답자의 수 또는 비율(적절한 경우), 대표적인 익명 인용문과 함께 보고됩니다.
충분히 간결한 경우, 가장 일반적인 의역된 응답 범주를 표로 제시할 수 있습니다. 긴 서술형 응답은 전체 축어적 답변의 순위 목록이 아닌 주제별로 요약됩니다(중재군만 해당).
|
연구 2개월
|
공동 작업자 및 조사자
수사관
- 수석 연구원: Spencer Dorn, MD, MPH, MHA, University of North Carolina, Chapel Hill
연구 기록 날짜
연구 주요 날짜
연구 시작 (실제)
기본 완료 (실제)
연구 완료 (실제)
연구 등록 날짜
최초 제출
QC 기준을 충족하는 최초 제출
처음 게시됨 (실제)
연구 기록 업데이트
마지막 업데이트 게시됨 (실제)
QC 기준을 충족하는 마지막 업데이트 제출
마지막으로 확인됨
추가 정보
이 연구와 관련된 용어
개별 참가자 데이터(IPD) 계획
개별 참가자 데이터(IPD)를 공유할 계획입니까?
IPD 계획 설명
IPD 공유 기간
IPD 공유 액세스 기준
IPD 공유 지원 정보 유형
- 연구_프로토콜
- 수액
- ICF
- ANALYTIC_CODE
- CSR
약물 및 장치 정보, 연구 문서
미국 FDA 규제 의약품 연구
미국 FDA 규제 기기 제품 연구
이 정보는 변경 없이 clinicaltrials.gov 웹사이트에서 직접 가져온 것입니다. 귀하의 연구 세부 정보를 변경, 제거 또는 업데이트하도록 요청하는 경우 register@clinicaltrials.gov. 문의하십시오. 변경 사항이 clinicaltrials.gov에 구현되는 즉시 저희 웹사이트에도 자동으로 업데이트됩니다. .