Impact de l'utilisation du GPT sur les performances de rédaction d'essais et les capacités cognitives
Un essai contrôlé randomisé sur l'impact de l'utilisation de l'intelligence artificielle générative sur les performances d'écriture analytique et les capacités cognitives
Le but de cette expérience de laboratoire contrôlée randomisée est d'examiner si l'utilisation de la technologie d'intelligence artificielle (IA) générée affectera les performances académiques et les capacités cognitives des personnes dans le contexte de l'écriture analytique chez les étudiants. Les principales questions auxquelles elle vise à répondre sont :
- L'utilisation de la technologie affecte-t-elle les performances d'écriture des élèves ?
- L'utilisation de la technologie affecte-t-elle l'effort cognitif des élèves pendant le processus d'écriture ?
Les participants seront assignés au hasard soit à un groupe témoin, qui écrit sans l'aide de l'IA, soit à un groupe expérimental, qui écrit avec l'aide de ChatGPT. Les chercheurs compareront les deux groupes pour voir si ChatGPT affecte les performances d'écriture et l'effort cognitif des étudiants.
Pour chaque participant, l’expérience en laboratoire ne durera pas plus d’une heure et demie. Un eye-tracker surveillera les activités du regard du participant et la taille de la pupille. Une spectroscopie fonctionnelle proche infrarouge (fNIRS) surveillera les activités cérébrales du participant dans le lobe frontal. Au cours de l'expérience, les participants seront invités à :
- Lisez du matériel d’apprentissage sur les techniques d’écriture analytique.
- Sur la base du matériel fourni précédemment, effectuez un travail de rédaction analytique qui prendra environ 30 minutes avec ou sans l'aide de ChatGPT.
- Répondez aux questions de l'enquête sur leur expérience avec la mission de rédaction, leurs attitudes concernant l'utilisation de ChatGPT et leurs antécédents démographiques.
Aperçu de l'étude
Statut
Les conditions
Intervention / Traitement
Type d'étude
Inscription (Réel)
Phase
- N'est pas applicable
Contacts et emplacements
Lieux d'étude
-
-
-
Heidelberg, Allemagne
- Core Facility for Neuroscience of Self-Regulation, Heidelberg University
-
-
Critères de participation
Critère d'éligibilité
Âges éligibles pour étudier
- Adulte
Accepte les volontaires sains
La description
Critère d'intégration:
- Étudiant universitaire à temps plein.
- Capable de lire et d’écrire en anglais.
- Utilisez l'ordinateur presque tous les jours de la semaine.
- N'ont pas passé, ni ne se préparent actuellement, aux Graduate Record Examinations (GRE).
- Ne portez pas de lunettes (les lentilles de contact sont autorisées).
- N'avoir aucune déficience oculaire.
- Ne prends actuellement aucun opioïde, épinéphrine ou antihypertenseur.
- Durant l’expérience, ne pas porter de maquillage autour des yeux.
Plan d'étude
Comment l'étude est-elle conçue ?
Détails de conception
- Objectif principal: Autre
- Répartition: Randomisé
- Modèle interventionnel: Affectation parallèle
- Masquage: Seul
Armes et Interventions
Groupe de participants / Bras |
Intervention / Traitement |
|---|---|
|
Expérimental: Bras d'intervention
Dans le bras d'intervention, les participants sont invités à utiliser ChatGPT pour obtenir de l'aide pour accomplir une tâche de rédaction analytique.
|
L'interface informatique utilisée pour la tâche de rédaction d'essais suit une conception en écran partagé.
Les instructions de rédaction et le champ de saisie de texte sont administrés sur une plateforme d'enquête, placée sur la moitié gauche de l'écran.
ChatGPT est placé sur la moitié droite de l'écran pour l'assistance technologique.
|
|
Aucune intervention: Bras de commande
Dans le bras de contrôle, les participants sont invités à effectuer une tâche de rédaction analytique de manière indépendante sans accès à aucune assistance technologique.
|
Que mesure l'étude ?
Principaux critères de jugement
Mesure des résultats |
Description de la mesure |
Délai |
|---|---|---|
|
Performance d'écriture
Délai: 1,5 heures
|
La tâche de rédaction d'essais est dérivée de la section de rédaction analytique des Graduate Record Examinations (GRE), qui est un examen informatique mondial et standardisé développé par l'Educational Testing Service (ETS).
Les essais des participants seront notés sur une échelle de 0 à 6 par un outil de notation tiers automatique et validé, également développé par ETS.
|
1,5 heures
|
|
Effort cognitif mesuré par la taille de l'élève
Délai: 1,5 heures
|
L'effort cognitif est quantifié en surveillant les changements dans la taille de la pupille.
Pour y parvenir, les diamètres des pupilles sont enregistrés tout au long de la tâche d’écriture à l’aide d’un eye tracker proche infrarouge, en particulier le modèle Tobii Pro Fusion.
Au début de l’expérience, les diamètres de base individuels des pupilles sont mesurés au cours d’une tâche de relaxation de 30 secondes.
|
1,5 heures
|
Mesures de résultats secondaires
Mesure des résultats |
Description de la mesure |
Délai |
|---|---|---|
|
Auto-perception de la performance d'écriture
Délai: 1,5 heures
|
Il s'agit d'une échelle à un élément : En utilisant la même grille de notation que précédemment, quelle note pensez-vous que votre essai devrait obtenir (0 étant le plus bas et 6 le plus élevé) ? Le score varie de 0 à 6. Un score plus élevé indique une performance d’écriture auto-perçue plus élevée. La variable est traitée comme une variable continue. |
1,5 heures
|
|
Auto-perception de l'effort cognitif
Délai: 1,5 heures
|
Il s'agit d'une échelle de Likert à un élément adaptée de l'indice de charge de travail de la National Aeronautics and Space Administration (NASA-TLX ; Hart, 2006 ; Hart & Staveland, 1988) : Sur une échelle de 1 à 7, évaluez l'intensité avec laquelle vous devez travailler pour atteindre votre niveau de performance. Le score de Likert va de 1 à 7 (1 étant « très faible » et 7 étant « très élevé »). Un score plus élevé indique un effort cognitif auto-perçu plus élevé. La variable est traitée comme une variable continue. Les références:
|
1,5 heures
|
|
Effort cognitif mesuré par l'activité hémodynamique corticale dans le lobe frontal
Délai: 1,5 heures
|
L'effort cognitif est quantifié en surveillant les changements dans l'activité hémodynamique corticale du lobe frontal.
Pour y parvenir, l’activité cérébrale est enregistrée tout au long de la tâche d’écriture à l’aide d’une spectroscopie fonctionnelle proche infrarouge (fNIRS), notamment le modèle NIRSport2.
|
1,5 heures
|
|
Auto-perception du stress
Délai: 1,5 heures
|
Il s'agit d'une sous-échelle de Likert à un élément adaptée de l'échelle d'évaluation primaire et secondaire (PASA ; Gaab, 2009 ; Pollak et al., 2020) : Sur une échelle de 1 à 7, dans quelle mesure seriez-vous d'accord ou en désaccord avec l'énoncé suivant sur le stress perçu : Le devoir de rédaction analytique a été stressant pour moi. Le score de Likert va de 1 à 7 (1 signifiant « tout à fait en désaccord » et 7 signifiant « tout à fait d'accord »). Un score plus élevé indique un stress perçu plus élevé. La variable est traitée comme une variable continue. Les références:
|
1,5 heures
|
|
Auto-perception du défi
Délai: 1,5 heures
|
Il s'agit d'une sous-échelle de Likert à un élément adaptée de l'échelle d'évaluation primaire et secondaire (PASA ; Gaab, 2009 ; Pollak et al., 2020) : Sur une échelle de 1 à 7, dans quelle mesure seriez-vous d'accord ou en désaccord avec l'énoncé suivant sur le défi perçu : Je trouve que la tâche de rédaction analytique est un défi. Le score de Likert va de 1 à 7 (1 signifiant « tout à fait en désaccord » et 7 signifiant « tout à fait d'accord »). Un score plus élevé indique un défi perçu plus élevé. La variable est traitée comme une variable continue. Les références:
|
1,5 heures
|
|
Auto-efficacité en écriture
Délai: 1,5 heures
|
Il s'agit d'une échelle de Likert en seize éléments qui mesure trois dimensions de l'auto-efficacité en matière d'écriture : l'idéation, les conventions et l'autorégulation (Bruning et al., 2013). Le score de Likert va de 1 à 7 (1 signifiant « tout à fait en désaccord » et 7 signifiant « tout à fait d'accord »). Un score plus élevé indique une plus grande efficacité personnelle. Les trois dimensions seront traitées séparément, chacune comme une variable continue. Référence: 1. Bruning, R., Dempsey, M., Kauffman, DF, McKim, C. et Zumbrunn, S. (2013). Examiner les dimensions de l’auto-efficacité pour l’écriture. Journal de psychologie éducative, 105(1), 25. |
1,5 heures
|
|
Intérêt situationnel pour l’écriture analytique
Délai: 1,5 heures
|
Il s'agit d'une échelle de Likert à quatre items adaptée de l'échelle d'intérêt situationnel (Hulleman et al., 2010). Cette échelle mesure l'intérêt situationnel des participants pour la rédaction analytique : Sur une échelle de 1 à 7, dans quelle mesure seriez-vous d’accord ou en désaccord avec les énoncés suivants concernant votre intérêt pour le travail de rédaction analytique que vous venez de terminer ?
Le score de Likert va de 1 à 7 (1 signifiant « tout à fait en désaccord » et 7 signifiant « tout à fait d'accord »). Un score plus élevé indique un intérêt situationnel plus élevé. La variable est traitée comme une variable continue. Référence: 1. Hulleman, CS, Godes, O., Hendricks, BL et Harackiewicz, JM (2010). Améliorer l’intérêt et la performance grâce à une intervention de valeur utilitaire. Journal de psychologie éducative, 102(4), 880. |
1,5 heures
|
|
Intention comportementale lors de l'utilisation de ChatGPT
Délai: 1,5 heures
|
Il s'agit d'une échelle de Likert à deux éléments qui mesure l'intention comportementale des participants lors de l'utilisation future de ChatGPT pour des tâches de rédaction d'essais (Albayati, 2024) : Sur une échelle de 1 à 7, dans quelle mesure seriez-vous d'accord ou en désaccord avec les affirmations suivantes sur l'utilisation de ChatGPT dans les travaux de rédaction de dissertations ?
Le score de Likert va de 1 à 7 (1 signifiant « tout à fait en désaccord » et 7 signifiant « tout à fait d'accord »). Un score plus élevé indique une intention comportementale plus élevée lors de l'utilisation de ChatGPT. La variable est traitée comme une variable continue. Référence: 1. Albayati, H. (2024). Enquête sur les perceptions et la sensibilisation des étudiants de premier cycle à l'utilisation de ChatGPT comme outil d'assistance régulier : une étude en perspective sur l'acceptation des utilisateurs. Ordinateurs et éducation : intelligence artificielle, 6, 100203. https://doi.org/10.1016/j.caeai.2024.100203 |
1,5 heures
|
Collaborateurs et enquêteurs
Parrainer
Les enquêteurs
- Chercheur principal: Till Bärnighausen, Heidelberg Institute of Global Health
Dates d'enregistrement des études
Dates principales de l'étude
Début de l'étude (Réel)
Achèvement primaire (Réel)
Achèvement de l'étude (Réel)
Dates d'inscription aux études
Première soumission
Première soumission répondant aux critères de contrôle qualité
Première publication (Réel)
Mises à jour des dossiers d'étude
Dernière mise à jour publiée (Réel)
Dernière mise à jour soumise répondant aux critères de contrôle qualité
Dernière vérification
Plus d'information
Termes liés à cette étude
Autres numéros d'identification d'étude
- S-117/2024
Informations sur les médicaments et les dispositifs, documents d'étude
Étudie un produit pharmaceutique réglementé par la FDA américaine
Étudie un produit d'appareil réglementé par la FDA américaine
produit fabriqué et exporté des États-Unis.
Ces informations ont été extraites directement du site Web clinicaltrials.gov sans aucune modification. Si vous avez des demandes de modification, de suppression ou de mise à jour des détails de votre étude, veuillez contacter register@clinicaltrials.gov. Dès qu'un changement est mis en œuvre sur clinicaltrials.gov, il sera également mis à jour automatiquement sur notre site Web .