로컬 대형 언어 모델을 통해 안과 노트에 대한 학제간 이해 강화
로컬 대형 언어 모델을 통한 안과 노트의 학제간 이해 강화
연구 개요
연구 유형
등록 (실제)
단계
- 해당 없음
연락처 및 위치
연구 장소
-
-
Minnesota
-
Rochester, Minnesota, 미국, 55905
- Mayo Clinic
-
-
참여기준
자격 기준
공부할 수 있는 나이
- 성인
- 고령자
건강한 자원 봉사자를 받아들입니다
설명
포함 기준:
- 2024년 2월 1일부터 2024년 5월 31일까지 입원환자 또는 외래환자 환경에서 미네소타주 로체스터에 있는 메이요 클리닉 안과의 안과의사가 평가합니다.
제외 기준:
- 의료 기록에 네트워크 내 비안과 진료 제공자가 없습니다.
- 시술 노트만 포함된 시술 전용 방문
공부 계획
연구는 어떻게 설계됩니까?
디자인 세부사항
- 주 목적: 건강 서비스 연구
- 할당: 무작위
- 중재 모델: 병렬 할당
- 마스킹: 없음(오픈 라벨)
무기와 개입
참가자 그룹 / 팔 |
개입 / 치료 |
|---|---|
|
간섭 없음: 제어
참가자는 추가 사항 없이 표준 안과 메모를 받습니다.
|
|
|
실험적: 간섭
참가자는 안과 의사가 검토하고 편집한 LLM 생성 일반 언어 요약이 첨부된 표준 안과 노트를 받습니다.
일반 언어 요약은 품질 개선 계획의 일부로 생성된 것으로 명확하게 표시됩니다.
|
대규모 언어 모델로 생성된 일반 언어 안과 요약 노트의 실제 구현을 통한 전향적 무작위 품질 개선 연구입니다.
|
연구는 무엇을 측정합니까?
주요 결과 측정
결과 측정 |
측정값 설명 |
기간 |
|---|---|---|
|
안과 전문의가 아닌 경우 메모 이해도 및 만족도
기간: 등록부터 등록 후 8주까지
|
환자의 안과 진단에 대한 이해도, 메모에 대한 만족도, 표준 안과 메모와 표준 안과 메모 + 일반 언어 요약 간의 전반적인 선호도를 평가하는 설문조사 응답을 통해 평가됩니다. 이해도는 다음 Likert 척도로 평가되었습니다. 전혀 그렇지 않다 보통이다 보통이다 매우 그렇다 만족도는 다음 Likert 척도로 평가되었습니다. 전혀 불만족 약간 불만족 보통 약간 만족 만족 노트 유형 간의 선호도는 다음 Likert 척도로 평가되었습니다. 표준 노트, 매우 좋음 표준 노트, 다소 중립적 일반 언어 요약, 다소 일반 언어 요약, 매우 좋음 |
등록부터 등록 후 8주까지
|
2차 결과 측정
결과 측정 |
측정값 설명 |
기간 |
|---|---|---|
|
요약 정확도 및 시간 부담에 대한 안과 의사의 평가
기간: 등록 후 24시간 미만의 단일 시점에 평가됨
|
표준 안과학 노트 결과를 반영하는 일반 언어 요약 정확성, 검토/편집에 소요된 시간 및 인식된 부담에 관한 설문 조사 응답을 통해 평가됩니다. 결과 반영의 정확성은 다음 Likert 척도에 따라 등급이 매겨졌습니다. 전혀 그렇지 않다 보통이다 약간 그렇다 매우 좋다 검토/편집에 소요된 시간은 다음 옵션을 사용하여 보고되었습니다. <1분
인지된 부담은 다음 Likert 척도로 등급이 매겨졌습니다. 전혀 그렇지 않다 보통이다 약간 그렇다 매우 좋다 |
등록 후 24시간 미만의 단일 시점에 평가됨
|
|
일반 언어 요약의 의미론적 및 언어적 품질
기간: 등록 후 24시간 미만의 단일 시점에 평가됨
|
Flesch 읽기 용이성 척도: 0(나쁨) ~ 100(좋음) |
등록 후 24시간 미만의 단일 시점에 평가됨
|
|
일반 언어 요약의 의미론적 및 언어적 품질
기간: 등록 후 24시간 미만의 단일 시점에 평가됨
|
Flesch-Kincaid 학년 수준 척도: 0(가장 읽기 어려움, 최고 학년 수준) ~ 80(가장 읽기 쉬움, 최저 학년 수준) |
등록 후 24시간 미만의 단일 시점에 평가됨
|
|
일반 언어 요약의 의미론적 및 언어적 품질
기간: 등록 후 24시간 미만의 단일 시점에 평가됨
|
SMOG(Gobbledygook) 지수의 의미론적 측정 척도: 0(가장 읽기 쉬움) ~ 11(가장 읽기 어려움) |
등록 후 24시간 미만의 단일 시점에 평가됨
|
|
일반 언어 요약의 의미론적 및 언어적 품질
기간: 등록 후 24시간 미만의 단일 시점에 평가됨
|
언어 유사성의 BERTScore 측정 척도: -1(가장 유사하지 않음) ~ +1(가장 유사함) |
등록 후 24시간 미만의 단일 시점에 평가됨
|
|
일반 언어 요약의 의미론적 및 언어적 품질
기간: 등록 후 24시간 미만의 단일 시점에 평가됨
|
SBERT 코사인 유사성 언어 유사성의 측정 척도: -1(가장 유사하지 않음) ~ +1(가장 유사함) |
등록 후 24시간 미만의 단일 시점에 평가됨
|
기타 결과 측정
결과 측정 |
측정값 설명 |
기간 |
|---|---|---|
|
오류 존재, 오류 유형 및 오류로 인한 잠재적 피해
기간: 등록 후 24시간 미만의 단일 시점에서 평가하고 등록 후 8주 후 단일 시점에서 다시 평가합니다.
|
일반 언어 요약에 부정확하거나 누락된 정보가 있는지, 오류율, 오류 유형 및 잠재적 위험 등급. 오류 유형은 다음과 같이 보고되었습니다. HPI 검사 결과 진단 계획 환자의 전반적인 눈 건강에 대한 설명 기타 해당 없음 피해 가능성은 다음 척도에 따라 등급이 매겨졌습니다. 낮은 위험 중간 위험 높은 위험 해당 없음 잠재적 피해 등급은 다음 척도에 따라 등급이 매겨졌습니다. 경미하거나 중간 정도의 피해 사망 또는 심각한 피해 |
등록 후 24시간 미만의 단일 시점에서 평가하고 등록 후 8주 후 단일 시점에서 다시 평가합니다.
|
공동 작업자 및 조사자
스폰서
수사관
- 연구 책임자: John J Chen, MD, PhD, Mayo Clinic
연구 기록 날짜
연구 주요 날짜
연구 시작 (실제)
기본 완료 (실제)
연구 완료 (실제)
연구 등록 날짜
최초 제출
QC 기준을 충족하는 최초 제출
처음 게시됨 (실제)
연구 기록 업데이트
마지막 업데이트 게시됨 (실제)
QC 기준을 충족하는 마지막 업데이트 제출
마지막으로 확인됨
추가 정보
이 연구와 관련된 용어
기타 연구 ID 번호
- 24-000550
개별 참가자 데이터(IPD) 계획
개별 참가자 데이터(IPD)를 공유할 계획입니까?
IPD 계획 설명
IPD 공유 기간
IPD 공유 액세스 기준
IPD 공유 지원 정보 유형
- 연구_프로토콜
- ANALYTIC_CODE
- CSR
약물 및 장치 정보, 연구 문서
미국 FDA 규제 의약품 연구
미국 FDA 규제 기기 제품 연구
미국에서 제조되어 미국에서 수출되는 제품
이 정보는 변경 없이 clinicaltrials.gov 웹사이트에서 직접 가져온 것입니다. 귀하의 연구 세부 정보를 변경, 제거 또는 업데이트하도록 요청하는 경우 register@clinicaltrials.gov. 문의하십시오. 변경 사항이 clinicaltrials.gov에 구현되는 즉시 저희 웹사이트에도 자동으로 업데이트됩니다. .