- ICH GCP
- Registre américain des essais cliniques
- Essai clinique NCT06434220
Effet du modèle prédictif sur les évaluations des médecins du service d'urgence de l'état du patient
Le but de cette étude est de mesurer l'impact des algorithmes soucieux de l'équité sur les prévisions des médecins concernant l'admission des patients aux urgences. À l'aide d'un modèle d'apprentissage automatique validé expérimentalement et optimisé pour des résultats équitables, les enquêteurs quantifient l'impact des recommandations du modèle sur les évaluations du risque d'admission par les médecins des urgences dans une étude prospective silencieuse. Les enquêteurs interrogent les médecins des urgences qui ne s'occupent pas actuellement des patients en utilisant les données du site en direct. Pour quantifier l'impact du modèle sur les évaluations des médecins du service d'urgence du risque d'admission, les enquêteurs collectent les évaluations des médecins avant et après avoir consulté la prédiction du modèle (original ou mis à jour).
Les enquêteurs mesurent l'adhésion des médecins du service d'urgence aux suggestions du modèle, ainsi que l'exactitude prédictive et l'équité des résultats pour les patients en aval. Le résultat de cette étude est une mesure empirique de la mesure dans laquelle des modèles équitables de ML peuvent influencer les décisions d'admission afin d'atténuer les disparités en matière de soins de santé.
Aperçu de l'étude
Statut
Les conditions
Intervention / Traitement
Description détaillée
Buts/Objectifs spécifiques :
- Mesurer l'effet du partage d'un modèle de prédiction d'admission sur l'évaluation par un médecin traitant de l'état du patient dans l'heure suivant la présentation dans un hôpital pédiatrique universitaire tertiaire.
- Mesurer l'effet du partage d'une prédiction de modèle à partir d'un modèle optimisé pour des performances égales de sous-groupes sur l'évaluation par un médecin traitant de l'état du patient dans l'heure suivant la présentation dans un hôpital pédiatrique universitaire tertiaire.
Contexte et importance :
Les modèles d’apprentissage automatique (ML) fournissent de plus en plus d’aide à la décision clinique (CDS) aux équipes de soins pour les aider à prioriser les individus pour des soins spécifiques en fonction de leurs besoins et résultats de santé prévus. Les méthodes d'IA/ML peuvent avoir un impact particulièrement élevé sur l'allocation des ressources dans les services d'urgence (SU) à travers les États-Unis, qui ont été décrits par l'Institute for Medicine comme « proches du point de rupture » de surcapacité. Malheureusement, les modèles fonctionnent souvent mal sur les sous-populations désinvesties par rapport à la population dans son ensemble. En conséquence, les modèles ML peuvent exacerber les disparités en matière de santé en aval en sous-performant sur les sous-populations de patients marginalisées, en particulier lorsque les modèles sont étendus à plusieurs centres de soins et/ou utilisés sans surveillance de sous-groupes pendant de longues périodes.
De nombreux modèles de prédiction ont été développés ces dernières années pour prédire l'état des patients à l'urgence, y compris un outil de prédiction développé par notre groupe et actuellement en phase pilote à l'hôpital pour enfants de Boston, à l'hôpital de South Shore et à l'hôpital pour enfants de Los Angeles. Notre outil de prédiction, le Predictor of Patient Placement (POPP), fournit une probabilité précise et en temps réel d'admission sur la base des données disponibles dans le dossier de santé électronique au moment de la visite. Un préavis des admissions probables peut avoir un impact important sur les temps d’attente et d’embarquement aux urgences, avec le potentiel d’améliorer le flux et la satisfaction des patients.
À cette fin, l'équipe d'enquête a soumis une proposition de subvention à la National Library of Medicine (NLM) [1R01LM014300 - 01A1] qui recherche le développement et la validation de modèles de prédiction équitables de l'admission des patients. L'objectif 2 de cette subvention étudie l'effet de ces modèles sur les évaluations des médecins urgentistes de la disposition des patients et correspond à ce protocole. Le NLM a indiqué son intention de financer cette proposition et les enquêteurs sont en train de soumettre les documents pour finaliser l'attribution. Cette composante de l'étude est prévue pour la troisième année de l'étude.
Études préliminaires
Les enquêteurs ont mené une série d'études rétrospectives initiales qui ont établi que l'admission des patients pouvait être prédite à l'aide de modèles d'apprentissage automatique dans le BCH ED, progressivement au cours de la visite, ainsi que dans d'autres centres médicaux avec une bonne précision (AUROC 0,9-0,93). .
Ensuite, les enquêteurs ont découvert que l'exactitude du POPP dans la prévision de la probabilité d'admission ajoutait de la valeur aux évaluations gestaltistes des médecins traitants aux urgences. La valeur prédictive positive pour la prédiction de l'admission était de 66 % pour les cliniciens, de 73 % pour le POPP et de 86 % pour un modèle hybride combinant les deux.
Enfin, les enquêteurs ont développé des méthodes de post-traitement des modèles de prédiction de dysfonction érectile afin de les rendre bien calibrés sur les groupes démographiques de patients définis par la race, le sexe et le produit d'assurance.
Les prédictions du modèle sont actuellement utilisées pour faciliter la coordination au lit, mais, compte tenu de leur valeur élevée, elles pourraient également améliorer la prise de décision au chevet du patient. Avec cette étude, notre objectif est maintenant de tester, dans un cadre simulé, sûr et réaliste, comment les recommandations du modèle affectent les évaluations de la probabilité d'admission par les médecins traitants des urgences.
Type d'étude
Inscription (Estimé)
Phase
- N'est pas applicable
Contacts et emplacements
Coordonnées de l'étude
- Nom: William La Cava, PhD
- Numéro de téléphone: 4133200544
- E-mail: william.lacava@childrens.harvard.edu
Sauvegarde des contacts de l'étude
- Nom: Andrew Fine, MD
- Numéro de téléphone: 617-355-9696
- E-mail: andrew.fine@childrens.harvard.edu
Critères de participation
Critère d'éligibilité
Âges éligibles pour étudier
- Adulte
- Adulte plus âgé
Accepte les volontaires sains
La description
Critère d'intégration:
- Médecins traitants certifiés par le conseil d'administration des urgences actuellement employés par le Boston Children's Hospital
Critère d'exclusion:
- Les médecins sont complètement exclus des enquêtes sur les patients dont ils s'occupent actuellement
Plan d'étude
Comment l'étude est-elle conçue ?
Détails de conception
- Objectif principal: Autre
- Répartition: Randomisé
- Modèle interventionnel: Affectation séquentielle
- Masquage: Tripler
Armes et Interventions
Groupe de participants / Bras |
Intervention / Traitement |
|---|---|
|
Aucune intervention: Évaluation médicale avant intervention
Aucune intervention.
Le médecin est interrogé pour fournir son évaluation de l'état du patient.
|
|
|
Comparateur actif: Évaluation du médecin après l'intervention du modèle de base
Le médecin voit une recommandation de modèle de base pour l'évolution du patient, y compris une description des facteurs qui déterminent la prédiction du modèle.
|
Modèle de prédiction de la disposition du patient, y compris les scores d'importance des caractéristiques qui déterminent la prédiction.
|
|
Comparateur actif: Évaluation d’un médecin après une intervention fondée sur un modèle soucieux de l’équité
Le médecin voit un modèle de recommandation à partir d'un modèle adapté aux performances du sous-groupe pour l'orientation du patient, y compris la description des facteurs déterminant la prédiction du modèle.
|
Modèle de prédiction de la disposition du patient, y compris les scores d'importance des caractéristiques qui déterminent la prédiction.
Ce modèle a été ajusté pour minimiser les erreurs d'étalonnage des sous-groupes.
|
Que mesure l'étude ?
Principaux critères de jugement
Mesure des résultats |
Description de la mesure |
Délai |
|---|---|---|
|
Disposition aux urgences évaluée par un médecin (probabilité d'admission)
Délai: Dans les 24 heures suivant l'enquête
|
Le résultat principal est la disposition aux urgences évaluée par le médecin (catégorisée comme admission ou sortie), avant et après visualisation d'une prédiction du modèle, par rapport à la disposition finale du patient.
|
Dans les 24 heures suivant l'enquête
|
|
Disposition finale du patient (admis/sorti)
Délai: Dans les 24 heures suivant l'enquête
|
La décision finale du patient, qu'il soit admis dans un service d'hospitalisation ou libéré
|
Dans les 24 heures suivant l'enquête
|
Mesures de résultats secondaires
Mesure des résultats |
Description de la mesure |
Délai |
|---|---|---|
|
Disposition aux urgences évaluée par un modèle
Délai: Dans les 24 heures suivant l'enquête
|
Évaluation de la prédiction du modèle de la disposition aux urgences par rapport à la disposition finale du patient
|
Dans les 24 heures suivant l'enquête
|
Collaborateurs et enquêteurs
Parrainer
Publications et liens utiles
Publications générales
- Barak-Corren Y, Israelit SH, Reis BY. Progressive prediction of hospitalisation in the emergency department: uncovering hidden patterns to improve patient flow. Emerg Med J. 2017 May;34(5):308-314. doi: 10.1136/emermed-2014-203819. Epub 2017 Feb 10.
- Barak-Corren Y, Agarwal I, Michelson KA, Lyons TW, Neuman MI, Lipsett SC, Kimia AA, Eisenberg MA, Capraro AJ, Levy JA, Hudgins JD, Reis BY, Fine AM. Prediction of patient disposition: comparison of computer and human approaches and a proposed synthesis. J Am Med Inform Assoc. 2021 Jul 30;28(8):1736-1745. doi: 10.1093/jamia/ocab076.
- Barak-Corren Y, Chaudhari P, Perniciaro J, Waltzman M, Fine AM, Reis BY. Prediction across healthcare settings: a case study in predicting emergency department disposition. NPJ Digit Med. 2021 Dec 15;4(1):169. doi: 10.1038/s41746-021-00537-x.
- Barak-Corren Y, Fine AM, Reis BY. Early Prediction Model of Patient Hospitalization From the Pediatric Emergency Department. Pediatrics. 2017 May;139(5):e20162785. doi: 10.1542/peds.2016-2785.
- La Cava WG, Lett E, Wan G. Fair admission risk prediction with proportional multicalibration. Proc Mach Learn Res. 2023;209:350-378.
Dates d'enregistrement des études
Dates principales de l'étude
Début de l'étude (Estimé)
Achèvement primaire (Estimé)
Achèvement de l'étude (Estimé)
Dates d'inscription aux études
Première soumission
Première soumission répondant aux critères de contrôle qualité
Première publication (Réel)
Mises à jour des dossiers d'étude
Dernière mise à jour publiée (Réel)
Dernière mise à jour soumise répondant aux critères de contrôle qualité
Dernière vérification
Plus d'information
Termes liés à cette étude
Autres numéros d'identification d'étude
- IRB-P00048537
Plan pour les données individuelles des participants (IPD)
Prévoyez-vous de partager les données individuelles des participants (DPI) ?
Informations sur les médicaments et les dispositifs, documents d'étude
Étudie un produit pharmaceutique réglementé par la FDA américaine
Étudie un produit d'appareil réglementé par la FDA américaine
Ces informations ont été extraites directement du site Web clinicaltrials.gov sans aucune modification. Si vous avez des demandes de modification, de suppression ou de mise à jour des détails de votre étude, veuillez contacter register@clinicaltrials.gov. Dès qu'un changement est mis en œuvre sur clinicaltrials.gov, il sera également mis à jour automatiquement sur notre site Web .