Expérience aléatoire de Playworks

Playworks est un programme scolaire qui place des entraîneurs à temps plein dans des écoles à faible revenu pour organiser des jeux et des activités pendant la récréation. La Fondation Robert Wood Johnson (RWJF) a engagé Mathematica Policy Research et son sous-traitant, le John W. Gardner Center for Youth and Their Communities (JGC) de l'Université de Stanford, pour mener une évaluation rigoureuse de Playworks. Vingt-neuf écoles intéressées par la mise en œuvre de Playworks, réparties dans six villes des États-Unis, ont été assignées au hasard à des groupes de traitement et de contrôle au cours de l'année scolaire 2010-2011 (cohorte 1) ou 2011-2012 (cohorte 2). L'assignation aléatoire a été effectuée au sein de groupes appariés d'écoles dans chaque ville. Au total, il y avait 12 blocs d'écoles jumelées. Pour chaque bloc, une école a été assignée au hasard au groupe de contrôle et les autres au groupe de traitement.

Au cours de la période d'étude d'un an pour chaque cohorte, les écoles de traitement ont reçu Playworks et les écoles de contrôle n'étaient pas éligibles pour mettre en œuvre Playworks. Les données des enquêtes auprès des élèves, des accéléromètres et des enquêtes auprès des enseignants ont été recueillies auprès des élèves de 4e et 5e année, des enseignants et du personnel scolaire environ sept mois après la première mise en œuvre de Playworks dans les écoles de traitement.

Pour le sondage auprès des étudiants, les étudiants ont été invités à répondre à un sondage de 30 minutes au printemps de leur année d'études sur leurs expériences à l'école. Une équipe d'employés expérimentés de l'administration du sondage a administré le sondage dans les salles de classe des élèves. En plus du sondage auprès des élèves, les enseignants ont été invités à répondre à un sondage auprès des enseignants qui les a interrogés sur les expériences de leurs élèves à l'école.

Un sous-échantillon d'élèves à qui on a demandé de répondre au sondage auprès des élèves a également porté des accéléromètres pendant un ou deux jours d'école. Pendant la période de collecte des données de l'accéléromètre, l'équipe de recherche est arrivée dans les salles de classe participantes au début de la journée scolaire. Les membres de l'équipe ont décrit la fonction de l'accéléromètre, puis en ont attaché un à la hanche de chaque élève consentant, à l'aide d'une ceinture élastique. Les données de l'accéléromètre ont ensuite été traitées avec le progiciel ActiLife 5.

L'impact de Playworks sur les résultats de l'étude a été estimé en comparant les résultats moyens dans les écoles de traitement et de contrôle à l'aide de modèles de régression adaptés à l'unité d'analyse (enseignant ou élève). Les modèles de régression utilisés pour l'analyse comprenaient des indicateurs pour les blocs d'assignation aléatoire pour tenir compte de la conception bloquée et des termes d'erreur aléatoire spécifiques à l'école pour tenir compte des effets spécifiques à l'école non attribuables au traitement. Des covariables ont également été incluses dans certains modèles pour tenir compte des différences significatives entre les groupes de traitement et de contrôle dans les caractéristiques démographiques. Les modèles pour les variables de résultats continues et binaires ont été ajustés à l'aide de l'estimation des moindres carrés et de l'estimation par régression logistique, respectivement. Les erreurs types pour les impacts estimés sur les résultats au niveau des enseignants et des élèves ont tenu compte du regroupement au niveau de l'école à l'aide d'équations d'estimation généralisées. Les valeurs de p basées sur le modèle et les tailles d'effet ont été calculées en fonction des impacts estimés et des erreurs standard correspondantes, et les ajustements de comparaison multiple ont tenu compte des corrélations entre les tests multiples. Des poids d'échantillonnage ont été utilisés lors de l'estimation des impacts. Les poids ont été construits pour tenir compte à la fois des probabilités de sélection des élèves et des enseignants dans l'échantillon et de la non-réponse.