Yeux sur les lèvres ? Compétences en lecture labiale et discrimination des expressions faciales chez les enfants malentendants et non malentendants

1. Objectif Les objectifs de ce projet sont 1) d'obtenir des informations sur les capacités de lecture labiale en finnois des enfants sans et avec déficience auditive, 2) d'obtenir des informations sur l'association entre le comportement du regard et la précision de la lecture labiale, 3) de développer un test de lecture labiale pour les finnophones enfants, 4) découvrir si la discrimination des émotions (discrimination des expressions faciales) aide les enfants ayant des troubles de la lecture labiale, 5) découvrir si la lecture labiale peut être efficacement entraînée avec une application d'appareil intelligent, et 6) explorer et entraîner davantage les algorithmes d'intelligence artificielle avec le à l'aide de données sur l'utilisation du regard et de la lecture labiale par les enfants (cette partie n'appartient pas à la partie essai clinique de l'étude).

2. Conception de l'étude Essai clinique contrôlé. Groupes d'étude : 1) enfants entendants servant de témoins 2) enfants malentendants participant à un entraînement à la lecture labiale, 3) enfants malentendants servant de témoins

   Au total, 140 enfants (dont la moitié malentendants) seront testés à distance (via l'application Zoom), et 100 enfants sur place (car l'oculométrie est utilisée dans la collecte de données auprès d'eux).

   Les soignants seront invités à remplir un formulaire de fond en utilisant une plateforme d'enquête en ligne REDCap ayant une haute capacité de protection des données. Les soignants donneront des informations sur la capacité/le niveau d'audition de leur enfant en fonction de l'audiogramme le plus récent, de la santé globale (par exemple, diagnostics médicaux possibles, vision) et du développement. La profession et le niveau d'instruction des soignants seront également interrogés.

   Résultats pour l'enfant :

   Les enfants seront testés avec des tests et des tâches linguistiques, cognitifs et cognitifs sociaux et 100 enfants également avec un suivi oculaire.

   Parmi les tests et tâches linguistiques, une version finlandaise validée (Laine et al., 1997) du Boston Naming Test (Kaplan et al., 1983) est utilisée pour tester le vocabulaire expressif de l'enfant. Dans le sous-test de répétition de non-mots du Nepsy Test (Korkman, 1998), on demande à l'enfant de répéter 16 non-mots présentés sous forme d'enregistrement audio. Le sous-test de traitement phonologique du test NEPSY II (Kemp & Korkman, 2008) est composé de deux tâches de traitement phonologique conçues pour évaluer la conscience phonémique. Il explore l'identification des mots à partir de segments de mots. Les enfants âgés de 7 à 8 ans sont invités à répéter un mot puis à montrer à partir d'images l'alternative en question lorsque l'administrateur du test n'a d'abord prononcé qu'une partie du mot comme signal. Les enfants âgés de 9 à 11 ans sont invités à créer un nouveau mot en omettant une partie d'un mot composé ou d'un phonème, l'administrateur du test prononçant d'abord la partie à omettre. Les compétences en lecture des enfants sont explorées avec trois sous-tests, la capacité de lecture technique TL2B, TL3B et TL4B, du test ALLU (Lindeman, 1998). L'enfant est invité à sélectionner la bonne alternative parmi quatre dessins au trait pour l'associer à des mots ou des phrases simples ou au juge si le sens de la phrase écrite est vrai ou faux.

   Les compétences en lecture labiale des enfants seront évaluées avec le test de lecture labiale pour enfants (Huttunen & Saalasti) qui contient des mots simples et des phrases courtes et une tâche dans laquelle les expressions faciales et la lecture labiale au niveau de la phrase doivent être combinées.

   Tout d'abord, un nouveau test informatisé de lecture labiale pour enfants sera construit (Huttunen & Saalasti) pour les enfants acquérant le finnois. En plus des résultats pilotes des enfants entendants âgés de 8 à 11 ans, des informations sur le vocabulaire réceptif des enfants malentendants âgés de 8 à 11 ans et des analogues visuels des phonèmes parlés (visèmes) en finnois seront utilisées comme base centrale. pour choisir les éléments de la partie mot à choix multiple du test. Des phrases de deux à trois mots seront incluses dans la partie du test au niveau de la phrase.

   Lorsqu'ils donnent leurs réponses au test de lecture labiale des enfants, après avoir regardé chaque clip vidéo, les enfants doivent discriminer le mot ou la phrase exprimé en choisissant parmi des alternatives données sous forme de dessins et en illustrant diverses personnes, objets ou événements. Pour valider le nouveau test de lecture labiale, c'est-à-dire pour en obtenir les normes d'âge et pour explorer ses propriétés psychométriques, 120 enfants ayant une audition normale et un développement typique (30 enfants par tranche d'âge) et 120 enfants avec IH (encore une fois, 30 enfants par groupe d'âge) sera testé avec lui. Un niveau de lecture suffisant pour sélectionner les alternatives pour le sens des phrases courtes dans la partie au niveau de la phrase du test de lecture labiale est requis des participants.

   En plus du test de lecture labiale des enfants, une tâche émotion + lecture labiale est conçue pour voir si les enfants peuvent utiliser des informations supplémentaires provenant des expressions faciales pour discriminer les phrases qu'ils lisent. Pour cela, un locuteur exprime quelques émotions de base classiques (bonheur, tristesse, colère) en 10 séries de quatre phrases à construire à cet effet. Dix enregistrements vidéo sont présentés sans voix aux enfants avec toujours quatre choix écrits alternatifs.

   Les enfants seront également testés avec des tests et des tâches cognitifs et cognitifs sociaux : temps de réaction (tâche de temps de réaction), théorie de l'esprit de premier ordre (test Sally Anne), compétences de théorie de l'esprit de second ordre (tâche Ice Cream Van modifiée), auditif mémoire à court terme (ITPA auditory serial memory subtest), mémoire visuelle à court terme (ITPA visual serial memory subtest), mémoire visuo-spatiale à court terme (Corsi Block Test), discrimination des émotions (discrimination des expressions faciales à partir de photographies, de clips vidéo et l'épreuve FEFA 2).

   Parmi les tests et tâches cognitifs et cognitifs sociaux, la tâche de temps de réaction qui suit les principes classiques d'un test de temps de réaction à deux choix, deux nombres apparaissent au hasard sur un écran d'ordinateur ; dans les 1 à 3 secondes soit sur la gauche soit sur la droite de l'écran. La tâche de l'enfant est de frapper la touche fléchée gauche ou droite sur le clavier dès que le numéro est apparu sur l'écran. La tâche prend moins de deux minutes à exécuter, et après 40 chiffres affichés, le logiciel produit les résultats (temps de réaction moyen en millisecondes, SD, min, max et le nombre de bonnes réponses en pourcentage relatif).

   En tant que tâche de théorie de l'esprit de premier ordre, le test classique de Sally Anne (Baron-Cohen, Leslie & Frith, 1985) sera utilisé et en tant que compétences de théorie de l'esprit de second ordre, une version modifiée de la tâche Ice Cream Van (Perner & Wimmer, 1985 ; Doherty, 2009). Dans la tâche de second ordre, quatre dessins construits sont utilisés pour aider l'enfant à comprendre et à se souvenir de l'histoire racontée par l'administrateur de la tâche.

   Les compétences de mémoire à court terme sont évaluées à l'aide des sous-tests auditifs et visuels de mémoire séquentielle à court terme de la version finlandaise validée (Kuusinen & Blåfield, 1974) du test d'aptitudes psycholinguistiques de l'Illinois (ITPA) (Kirk et al., 1968). Dans le sous-test auditif à court terme de l'ITPA, on demande à l'enfant de répéter oralement des séries de chiffres données et dans le sous-test visuel à court terme d'organiser les bons symboles dans le bon ordre. Dans le sous-test visuel à court terme, l'administrateur du test montre d'abord la série de symboles et l'enfant la restaure dans la mémoire à court terme pour reproduire la série. La mémoire visuo-spatiale à court terme est recherchée en utilisant le Corsi Block Test (Corsi, 1972, Kessels, van Zandvoort, Postman, Kapelle & de Hand, 2000) inclus dans le PsyToolkit (Professeur Gijsbert Stoet). Dans le test en ligne, neuf blocs sont affichés. Ils sont disposés dans certaines positions fixes sur un écran devant le participant. Le logiciel flashe une séquence de blocs, par exemple, une séquence de trois blocs différents, l'un après l'autre. En réponse, en utilisant une souris, le participant doit appuyer sur les blocs à l'écran dans le même ordre que le test en ligne a montré. Le test prend moins de 30 secondes à effectuer. La durée de Corsi est définie comme la séquence la plus longue qu'un participant peut répéter correctement.

   La discrimination des expressions faciales à partir de photographies et de clips vidéo est une tâche auto-construite (Huttunen, 2015, décrite pour la première fois dans Huttunen, Kosonen, Laakso & Waaramaa, 2018). Dans la première tâche informatisée, un ensemble de 12 photographies représentant quatre émotions différentes (trois émotions de base et une expression neutre) sont présentées. Quatre étiquettes verbales sont données comme choix de réponse écrite. Pour tester les compétences de reconnaissance des émotions faciales à l'aide d'une entrée dynamique, le même ensemble d'émotions exprimées par les mêmes personnes est présenté sous forme de clips vidéo de deux secondes chacun avec quatre étiquettes verbales comme choix de réponse.

   Le sous-module informatisé "Faces" de la version finlandaise du test FEFA 2 (The Frankfurt Test and Training of Facial Affect Recognition; Bölte et al., 2013; Bölte & Poustka, 2003) est utilisé comme tâche standardisée pour évaluer l'émotion faciale des enfants compétences de reconnaissance. Ce test se compose de 50 photographies représentant sept émotions différentes et leurs étiquettes comme choix de réponse (joie, colère, tristesse, peur, surprise, dégoût et neutre). L'enfant sélectionne l'alternative correspondant à l'expression faciale (émotion) présentée. Le logiciel FEFA 2 synthétise les résultats (score total, matrices de confusion, temps de réponse).

   L'utilisation du regard des enfants sera explorée par le suivi oculaire (appareil EyeLink 1000+) lors de tests et de tâches d'expression faciale et de lecture labiale. L'oculométrie est utilisée pour 100 enfants (50 avec une audition normale et 50 avec une déficience/perte auditive). Leur utilisation du regard est explorée lors du test de lecture labiale des enfants, lors des tâches dans lesquelles les expressions faciales doivent être discriminées des photographies et des clips vidéo, et lors de la tâche émotions + lecture labiale. La mentonnière est utilisée pour stabiliser la position de l'enfant afin d'assurer le succès de la collecte de données. Les fixations, le temps d'arrêt (le temps pendant lequel le regard reste sur un certain endroit de l'écran) et la trajectoire du regard sont analysés pour déterminer quelles zones d'intérêt sur le visage sont celles qui attirent le plus le regard des enfants. Il est exploré avec des données de suivi oculaire quel type d'utilisation du regard et de modèles de regard sont optimaux pour les performances de lecture labiale et de discrimination des émotions des enfants.

3. Taille de l'échantillon Enfants entendants (n = 120) âgés de 8 à 11 ans (30 enfants par tranche d'âge), Enfants malentendants (n = 120) âgés de 8 à 11 ans (30 enfants par tranche d'âge).
4. Insu et randomisation Aucun
5. Protocoles de suivi

Au total, 100 enfants déficients auditifs sur le total visé de 120 seront testés deux fois :

1. Après les tests initiaux, 50 enfants malentendants seront invités à s'entraîner à la lecture labiale avec une application pour appareil intelligent à la maison. Après deux mois, leurs compétences en matière de discrimination des émotions et de lecture labiale ainsi que l'utilisation du regard pendant les tâches de discrimination des émotions et de lecture labiale seront à nouveau examinées (test sur site). Leur utilisation de l'application de lecture labiale sera explorée en transférant les données de l'utilisateur (combien ils ont utilisé l'application et comment leurs compétences en lecture labiale se sont développées comme indiqué par le système de notation intégré au logiciel) avec une connexion par câble ou Bluetooth.
2. Un groupe d'enfants déficients auditifs (n = 50) servira de témoins ; ils seront testés à distance (via l'application Zoom) après deux mois de test initial sans intervention entre la première et la dernière évaluation.