Effet d'un programme de formation médicale basé sur les compétences sur la qualité de la formation en médecine de soins intensifs. (COBALIDATION)

La formation médicale basée sur les compétences (CBME) signifie un changement d'orientation des programmes basés sur le temps, basés uniquement sur l'exposition à des expériences telles que les rotations cliniques, en faveur d'un accent sur l'authenticité des résultats des diplômés basés sur les besoins et l'accent mis sur l'apprenant (1 ). Le nouveau paradigme défie l'hypothèse selon laquelle la compétence est atteinte en fonction du temps consacré aux stages et exige plutôt que les résidents démontrent leur compétence, ce qui implique la réalisation d'un nombre important d'évaluations formatives (2,3). Le modèle CBME pour la médecine de soins intensifs (ICM) s'appelle CoBaTrICE (Formation basée sur les compétences en médecine de soins intensifs en Europe) (4), un partenariat international d'organisations professionnelles et de cliniciens en soins intensifs dont les objectifs ultimes sont : d'assurer un niveau de qualité élevé formation en GIC, d'harmoniser la formation en GIC sans interférer avec les réglementations nationales spécifiques et de permettre la libre circulation des professionnels de la GIC à travers l'Europe (5). Le programme CoBaTrICE a utilisé une approche internationale pour définir les compétences des spécialistes et a intégré les points de vue de 1 398 patients et proches de 70 unités de soins intensifs dans huit pays de l'UE (6). Le programme final comprend 102 énoncés de compétences regroupés en 12 domaines et une définition du niveau d'expertise requis d'un praticien en sécurité à l'issue de sa formation spécialisée. CoBaTrICE a été officiellement adopté par 15 des 32 pays européens et 12 autres prévoient de le faire, l'Espagne est incluse dans ce dernier groupe (7,8).

Importance:

L'EMCB est de plus en plus acceptée comme une solution pour relever les défis associés aux modèles actuels de formation des médecins basés sur le temps. Cependant, on ne sait pas si les programmes CBME fournissent de meilleurs résultats que les programmes traditionnels.

Hypothèse:

La mise en œuvre du CoBaTrICE fournira des niveaux de compétence plus élevés par rapport au programme officiel basé sur le temps actuel en ICM en Espagne.

Objectifs:

1. Pour déterminer l'effet de la mise en œuvre de CoBaTrICE sur :

   1. Le niveau de compétence atteint par les stagiaires.
   2. Le pourcentage d'éléments de performance critiques.
2. Identifier les écarts de performance qui pourraient être comblés dans les futures interventions éducatives.
3. Étudier la fiabilité et la faisabilité de mener une évaluation basée sur la simulation sur plusieurs sites.
4. Déterminer la conformité avec CoBaTrICE et les obstacles à une mise en œuvre efficace.

Concevoir:

Un essai multicentrique randomisé en grappes de 14 services de soins intensifs de 14 hôpitaux universitaires de référence situés en Espagne. Les unités de soins intensifs participantes sont des unités de soins intensifs de médecine générale et de chirurgie accréditées pour former 2 à 3 nouveaux résidents en ICM par an.

Intervenants :

Au total, 38 stagiaires en 3e année de la période de spécialisation (R3) seront suivis pendant les trois années de leur période de formation spécifique en ICM (Étape 2). L'inscription commencera le 1er février 2019 et le suivi se terminera le 31 mai 2021.

Intervention : voir l'item spécifique dans la partie protocole.

Principaux résultats et mesures (voir également l'élément spécifique dans la section protocole):

Afin de déterminer le niveau de compétence atteint pour chaque participant, un ECOS basé sur la simulation (18-26) sera réalisé à la fin de la 3ème année (baseline) et à la fin de la 5ème année de formation en ICM. L'ECOS sera réalisé simultanément dans quatre centres de simulation (Hospital la Fe, Valence ; Francisco de Vitoria, Madrid ; IAVANTE, Grenade ; et Hospital Clinic, Barcelone). Chaque participant jouera dans cinq scénarios de crise clinique standardisés ou simulés haute fidélité de 15 minutes.

Instruments de notation et guide de notation :

Via une technique Delphi, un panel indépendant de 10 intensivistes experts en la matière (instructeurs de simulation et examinateurs du Diplôme européen en soins intensifs [EDIC]) effectuera les tâches suivantes : 1) sélectionner les compétences à évaluer ; 2) concevoir les scénarios ; et 3) définir les éléments de la liste de contrôle pour chaque scénario : a) les éléments critiques de performance essentiels (CEPE), et b) les éléments critiques de performance non essentiels (CNEPE) qui doivent être observés et notés dans un format oui/non . Les CEPE sont définis comme des étapes ou des actions essentielles dans la prise en charge qui, si elles ne sont pas respectées, pourraient avoir un impact significatif immédiat sur la morbidité et la mortalité. Les CNEPE sont également importants pour la bonne gestion du scénario mais ils n'ont pas d'influence immédiate sur l'issue. Les performances seront enregistrées sur vidéo (26). Tous les enregistrements vidéo seront ensuite évalués par deux évaluateurs en aveugle, membres du jury d'experts, à l'aide de listes de contrôle spécifiques qui comprennent 25 items avec une description détaillée des CEPE et CNEPE, les compétences techniques (diagnostic et traitement) et non techniques (communication , leadership d'équipe, gestion des ressources) associés à chaque élément, ainsi que des informations spécifiques sur ce qui est attendu de la part du stagiaire. Après chaque vidéo-évaluation, la performance du stagiaire sera classée en cinq niveaux de compétence : Niveau I : Le participant a réalisé moins de 60% des CEPE. Le participant a besoin de conseils et d'une supervision directe pour effectuer l'activité dans tous les cas. Niveau II : Le participant a complété ≥ 60 % des CEPE mais moins de 80 % des CEPE. Le participant a besoin de conseils et de supervision pour exécuter l'activité dans la plupart des situations. Niveau III : Le participant a complété ≥ 80 % des CEPE mais moins de 100 % des CEPE. Le participant a besoin d'être guidé et supervisé pour réaliser l'activité dans des situations complexes. Niveau IV : Le participant a complété 100 % des CEPE mais moins de 80 % des CNEPE. Le participant peut effectuer l'activité sous supervision indirecte. Niveau V : Le participant a complété 100 % des CEPE et ≥ 80 % des CEPE. Le participant est autonome pour réaliser l'activité. Enfin, les évaluateurs qualifieront également la performance comme suit : mauvaise, bonne, bonne, exceptionnelle.

Les mesures comprendront : 1) le pourcentage de CEPE observés ; 2) le pourcentage de CNEPE observés ; 3) le niveau de compétence global atteint sur une échelle descriptive de 1 à 5 (de novice à praticien autonome); 4) la note qualitative donnée par les évaluateurs selon que la performance est au niveau attendu selon le niveau prédéfini pour l'année de formation.

Standardisation de la livraison des scénarios (18-22). Afin de faciliter la livraison de scénarios reproductibles, des règles, des scripts détaillés et un guide pour chaque scénario seront créés. Le script du scénario décrira les éléments de l'environnement clinique simulé (p. CPE. Les participants seront informés des caractéristiques pertinentes des mannequins, des règles de base pour participer à des scénarios de simulation, ainsi que de l'emplacement et de l'utilisation des médicaments, de l'équipement clinique et d'autres ressources. Après avoir terminé l'ECOS, les commentaires des résidents seront demandés par le biais d'une enquête de satisfaction spécifique.

Analyses statistiques:

Taille de l'échantillon : Une analyse de puissance a été effectuée afin de déterminer la taille d'échantillon minimale requise pour détecter avec une puissance de 0,95 (α = 0,05, 1 - β = 0,95) une taille d'effet moyenne (f = .30), nécessitant une taille d'échantillon minimale de 90 observations (30 résidents).

Un design ANOVA factoriel mixte sera appliqué sur le facteur temps (R3-R4-R5) avec le facteur groupe (intervention vs contrôle) pour l'évaluation des compétences professionnelles considérées, en appliquant des tests de Bonferroni post-hoc pour analyser les effets principaux et d'interaction entre les deux facteurs.

Afin d'estimer l'efficacité de CoBaTrICE, les différences entre le groupe d'intervention et le groupe témoin concernant les critères d'évaluation primaires et secondaires seront analysées par une analyse de régression logistique multivariée, l'odds ratio ajusté sera estimé. L'expérience de simulation définie comme la participation à au moins deux cours de gestion des ressources de crise sera incluse dans l'analyse.

Phases de développement de l'étude :

La première phase du projet commencera par la mise en place d'un panel indépendant de 10 experts/exécuteurs intensivistes qui effectueront les tâches mentionnées ci-dessus. Après avoir randomisé les hôpitaux du groupe expérimental, les tuteurs de ce groupe seront formés à travers un cours de douze heures intégrant : 1) une explication détaillée des principes, de la structure et des compétences envisagées dans le programme CoBaTrICE ; 2) les principes de base de l'évaluation formative, les techniques appliquées et la rétroaction efficace ; et 4) l'utilisation du portfolio électronique pour enregistrer le volume et les résultats des évaluations formatives et les progrès du stagiaire.

Au moment du recrutement, les résidents et les tuteurs des unités de soins intensifs participantes répondront en ligne à plusieurs sondages anonymes pour explorer l'environnement éducatif, l'engagement et la satisfaction, ainsi que l'épuisement professionnel.

La deuxième phase de l'étude consistera en la mise en œuvre du programme CoBaTrICE et la comparaison des niveaux de performance des résidents participants à travers l'ECOS à des moments précis, qui seront la fin de R3 (ECOS de base) et R5. Elle déterminera : a) s'il existe des différences significatives entre le niveau de compétences manifesté par les résidents selon le type de formation; b) s'il existe des différences significatives dans le rythme d'acquisition des compétences dans les deux types de programmes; et c) les erreurs les plus courantes commises par les résidents à travers les différents niveaux de formation et les différences possibles entre les deux programmes. Les tuteurs impliqués dans le groupe CoBaTrICE recevront un soutien pour surmonter les obstacles et les problèmes rencontrés dans la mise en œuvre du programme et/ou dans l'utilisation des outils qu'il intègre. Les tuteurs recevront un questionnaire « ad hoc » destiné à recueillir leurs suggestions. Un ECOS pilote avec des résidents locaux non participants à l'essai sera réalisé au centre de simulation de l'hôpital La Fe, à Valence, en Espagne, afin de vérifier la faisabilité et la fiabilité des scénarios et du processus d'évaluation des vidéos. La troisième phase de l'étude sera consacrée à l'analyse et à la publication des résultats de l'étude. Une analyse intermédiaire sera effectuée afin de déterminer la mise en œuvre adéquate du programme et d'évaluer l'hétérogénéité et/ou la sélection possible des biais.