Esta página se tradujo automáticamente y no se garantiza la precisión de la traducción. por favor refiérase a versión inglesa para un texto fuente.

Mejora de la comprensión interdisciplinaria de las notas de oftalmología a través de un modelo de lenguaje local grande

1 de octubre de 2024 actualizado por: John J Chen

Mejora de la comprensión interdisciplinaria de las notas de oftalmología a través del modelo de lenguaje local grande

Este ensayo controlado aleatorio prospectivo evaluó la eficacia de agregar resúmenes en lenguaje sencillo (PLS) generados por el modelo de lenguaje grande (LLM) a las notas de oftalmología estándar (SON) para mejorar la comprensión entre proveedores no oftalmológicos. El estudio utilizó encuestas para evaluar la comprensión y satisfacción de los proveedores no oftalmólogos con las notas y la evaluación de los oftalmólogos sobre la precisión, la seguridad y la carga de tiempo de PLS. También se realizó un análisis semántico y lingüístico objetivo de los PLS.

Descripción general del estudio

Tipo de estudio

Intervencionista

Inscripción (Actual)

851

Fase

  • No aplica

Contactos y Ubicaciones

Esta sección proporciona los datos de contacto de quienes realizan el estudio e información sobre dónde se lleva a cabo este estudio.

Ubicaciones de estudio

    • Minnesota
      • Rochester, Minnesota, Estados Unidos, 55905
        • Mayo Clinic

Criterios de participación

Los investigadores buscan personas que se ajusten a una determinada descripción, denominada criterio de elegibilidad. Algunos ejemplos de estos criterios son el estado de salud general de una persona o tratamientos previos.

Criterio de elegibilidad

Edades elegibles para estudiar

  • Adulto
  • Adulto Mayor

Acepta Voluntarios Saludables

No

Descripción

Criterios de inclusión:

  • Evaluación realizada por un oftalmólogo en el Departamento de Oftalmología de Mayo Clinic en Rochester, MN, ya sea en el ámbito hospitalario o ambulatorio, entre el 1 de febrero de 2024 y el 31 de mayo de 2024.

Criterios de exclusión:

  • No hay proveedores de atención que no sean oftalmólogos dentro de la red en el registro médico
  • Visitas solo para procedimientos que contienen solo una nota del procedimiento

Plan de estudios

Esta sección proporciona detalles del plan de estudio, incluido cómo está diseñado el estudio y qué mide el estudio.

¿Cómo está diseñado el estudio?

Detalles de diseño

  • Propósito principal: Investigación de servicios de salud
  • Asignación: Aleatorizado
  • Modelo Intervencionista: Asignación paralela
  • Enmascaramiento: Ninguno (etiqueta abierta)

Armas e Intervenciones

Grupo de participantes/brazo
Intervención / Tratamiento
Sin intervención: Control
Los participantes reciben notas oftalmológicas estándar sin añadidos.
Experimental: Intervención
Los participantes reciben notas oftalmológicas estándar con un resumen en lenguaje sencillo generado por LLM, revisado y editado por el oftalmólogo. El resumen en lenguaje sencillo está claramente marcado como generado como parte de una iniciativa de mejora de la calidad.
Estudio prospectivo, aleatorizado de mejora de la calidad con implementación en el mundo real de resúmenes de notas de oftalmología en lenguaje sencillo generados por modelos de lenguaje amplio.

¿Qué mide el estudio?

Medidas de resultado primarias

Medida de resultado
Medida Descripción
Periodo de tiempo
Nota de no oftalmólogo sobre comprensión y satisfacción
Periodo de tiempo: Desde la inscripción hasta 8 semanas después de la inscripción

Se evalúa a través de respuestas a una encuesta que evalúa la comprensión del diagnóstico oftalmológico del paciente, la satisfacción con la nota y la preferencia general entre la Nota oftalmológica estándar y la Nota oftalmológica estándar + Resumen en lenguaje sencillo.

El grado de comprensión se evaluó mediante la siguiente escala Likert:

Para nada Neutral Moderadamente Mucho

La satisfacción se calificó en la siguiente escala Likert:

Nada satisfecho Algo insatisfecho Neutral Algo satisfecho Satisfecho

La preferencia entre tipos de notas se evaluó en la siguiente escala Likert:

Nota estándar, mucho Nota estándar, algo neutral Resumen en lenguaje sencillo, algo sencillo Resumen en lenguaje sencillo, mucho

Desde la inscripción hasta 8 semanas después de la inscripción

Medidas de resultado secundarias

Medida de resultado
Medida Descripción
Periodo de tiempo
Evaluación oftalmológica de la precisión del resumen y la carga de tiempo.
Periodo de tiempo: Evaluado en un único momento <24 horas después de la inscripción

Evaluado a través de respuestas a encuestas con respecto a la precisión del Resumen en lenguaje sencillo al reflejar los hallazgos de la Nota estándar de oftalmología, el tiempo dedicado a la revisión/edición y la carga percibida.

La precisión al reflejar los hallazgos se calificó en la siguiente escala Likert:

Para nada Neutral Un poco Mucho

El tiempo dedicado a revisar/editar se informó utilizando las siguientes opciones:

<1 minuto

  1. minuto
  2. minutos
  3. minutos
  4. minutos
  5. o más minutos

La carga percibida se calificó en la siguiente escala Likert:

Para nada Neutral Un poco Mucho

Evaluado en un único momento <24 horas después de la inscripción
Calidad semántica y lingüística de los resúmenes en lenguaje sencillo
Periodo de tiempo: Evaluado en un único momento <24 horas después de la inscripción

Facilidad de lectura de Flesch

Escala: 0 (mala) a 100 (buena)

Evaluado en un único momento <24 horas después de la inscripción
Calidad semántica y lingüística de los resúmenes en lenguaje sencillo
Periodo de tiempo: Evaluado en un único momento <24 horas después de la inscripción

Nivel de grado de Flesch-Kincaid

Escala: 0 (más difícil de leer, nivel de grado más alto) a 80 (más fácil de leer, nivel de grado más bajo)

Evaluado en un único momento <24 horas después de la inscripción
Calidad semántica y lingüística de los resúmenes en lenguaje sencillo
Periodo de tiempo: Evaluado en un único momento <24 horas después de la inscripción

Índice de medida semántica de galimatías (SMOG)

Escala: 0 (más fácil de leer) a 11 (más difícil de leer)

Evaluado en un único momento <24 horas después de la inscripción
Calidad semántica y lingüística de los resúmenes en lenguaje sencillo
Periodo de tiempo: Evaluado en un único momento <24 horas después de la inscripción

Medida BERTScore de similitud lingüística

Escala: -1 (menos similar) a +1 (más similar)

Evaluado en un único momento <24 horas después de la inscripción
Calidad semántica y lingüística de los resúmenes en lenguaje sencillo
Periodo de tiempo: Evaluado en un único momento <24 horas después de la inscripción

SBERT Coseno Similitud Medida de similitud lingüística

Escala: -1 (menos similar) a +1 (más similar)

Evaluado en un único momento <24 horas después de la inscripción

Otras medidas de resultado

Medida de resultado
Medida Descripción
Periodo de tiempo
Presencia de errores, tipo de errores y daño potencial de los errores
Periodo de tiempo: Evaluado en un único momento &lt;24 horas después de la inscripción y nuevamente en un único momento 8 semanas después de la inscripción

Presencia de información incorrecta o faltante en el Resumen en lenguaje sencillo, tasas de error, tipos de errores y clasificación de daños potenciales.

Los tipos de errores se informaron como:

Hallazgos del examen HPI Plan de diagnóstico Explicación de la salud ocular general del paciente Otro N/A

La probabilidad de daño se calificó según la siguiente escala:

Riesgo bajo Riesgo medio Riesgo alto N/A

La calificación de daño potencial se calificó según la siguiente escala:

Daño leve o moderado Muerte o daño grave

Evaluado en un único momento &lt;24 horas después de la inscripción y nuevamente en un único momento 8 semanas después de la inscripción

Colaboradores e Investigadores

Aquí es donde encontrará personas y organizaciones involucradas en este estudio.

Patrocinador

Investigadores

  • Director de estudio: John J Chen, MD, PhD, Mayo Clinic

Fechas de registro del estudio

Estas fechas rastrean el progreso del registro del estudio y los envíos de resultados resumidos a ClinicalTrials.gov. Los registros del estudio y los resultados informados son revisados ​​por la Biblioteca Nacional de Medicina (NLM) para asegurarse de que cumplan con los estándares de control de calidad específicos antes de publicarlos en el sitio web público.

Fechas importantes del estudio

Inicio del estudio (Actual)

1 de febrero de 2024

Finalización primaria (Actual)

31 de mayo de 2024

Finalización del estudio (Actual)

31 de mayo de 2024

Fechas de registro del estudio

Enviado por primera vez

30 de septiembre de 2024

Primero enviado que cumplió con los criterios de control de calidad

1 de octubre de 2024

Publicado por primera vez (Actual)

3 de octubre de 2024

Actualizaciones de registros de estudio

Última actualización publicada (Actual)

3 de octubre de 2024

Última actualización enviada que cumplió con los criterios de control de calidad

1 de octubre de 2024

Última verificación

1 de octubre de 2024

Más información

Términos relacionados con este estudio

Otros números de identificación del estudio

  • 24-000550

Plan de datos de participantes individuales (IPD)

¿Planea compartir datos de participantes individuales (IPD)?

SÍ

Descripción del plan IPD

Todos los IPD recogidos.

Marco de tiempo para compartir IPD

A partir de la publicación sin fecha de finalización

Criterios de acceso compartido de IPD

Los datos subyacentes que respaldan los hallazgos de este estudio pueden ponerse a disposición de los investigadores clínicos y de los investigadores que lo soliciten. Se requerirán solicitudes por escrito para compartir datos, incluido un plan de análisis, antes de la aprobación. Estas solicitudes se evaluarán individualmente en consulta con los líderes del equipo de estudio y los co-investigadores, según corresponda. Si otros investigadores están interesados ​​en realizar análisis adicionales, estas solicitudes se pueden realizar al autor correspondiente (PDT) y los análisis se realizarán en colaboración con la Clínica Mayo. En todos los casos, todos los datos y materiales que se compartirán se divulgarán mediante un Acuerdo de transferencia de material. Los datos a nivel individual estarán disponibles y el intercambio de datos garantizará que los derechos y la privacidad de las personas que participan en la investigación siempre permanezcan protegidos. El plazo previsto para responder a las solicitudes de datos iniciales es de 1 mes.

Tipo de información de apoyo para compartir IPD

  • PROTOCOLO DE ESTUDIO
  • CÓDIGO_ANALÍTICO
  • RSC

Información sobre medicamentos y dispositivos, documentos del estudio

Estudia un producto farmacéutico regulado por la FDA de EE. UU.

No

Estudia un producto de dispositivo regulado por la FDA de EE. UU.

No

producto fabricado y exportado desde los EE. UU.

No

Esta información se obtuvo directamente del sitio web clinicaltrials.gov sin cambios. Si tiene alguna solicitud para cambiar, eliminar o actualizar los detalles de su estudio, comuníquese con register@clinicaltrials.gov. Tan pronto como se implemente un cambio en clinicaltrials.gov, también se actualizará automáticamente en nuestro sitio web. .

Suscribir