GPT:n käytön vaikutus esseen kirjoittamisen suorituskykyyn ja kognitiivisiin kykyihin
Satunnaistettu kontrolloitu kokeilu generatiivisen tekoälyn käytön vaikutuksesta analyyttiseen kirjoittamiseen ja kognitiivisiin kykyihin
Tämän satunnaistetun kontrolloidun laboratoriokokeen tavoitteena on tutkia, vaikuttaako generoidun tekoälyn (AI) käyttö ihmisten akateemiseen suorituskykyyn ja kognitiivisiin kykyihin opiskelijoiden analyyttisen kirjoittamisen yhteydessä. Tärkeimmät kysymykset, joihin se pyrkii vastaamaan, ovat:
- Vaikuttaako tekniikan käyttö opiskelijoiden kirjoitussuoritukseen?
- Vaikuttaako tekniikan käyttö opiskelijoiden kognitiiviseen ponnistukseen kirjoitusprosessin aikana?
Osallistujat jaetaan satunnaisesti joko kontrolliryhmään, joka kirjoittaa ilman tekoälyn apua, tai kokeelliseen ryhmään, joka kirjoittaa ChatGPT:n avulla. Tutkijat vertaavat kahta ryhmää nähdäkseen, vaikuttaako ChatGPT opiskelijoiden kirjoitussuorituskykyyn ja kognitiiviseen ponnisteluihin.
Jokaiselle osallistujalle laboratoriokoe kestää enintään 1,5 tuntia. Katseenseurantalaite seuraa osallistujan katsetoimintaa ja oppilaiden kokoa. Toiminnallinen lähi-infrapunaspektroskopia (fNIRS) tarkkailee osallistujan aivotoimintaa otsalohkossa. Kokeilun aikana osallistujia pyydetään:
- Lue oppimateriaalia analyyttisistä kirjoitustekniikoista.
- Suorita aiemmin toimitettujen materiaalien perusteella analyyttinen kirjoitustehtävä, joka kestää noin 30 minuuttia joko ChatGPT:n avulla tai ilman.
- Vastaa kyselyyn liittyviin kysymyksiin heidän kokemuksistaan kirjoitustehtävästä, asenteista ChatGPT:n käyttöön ja demografisista taustoista.
Tutkimuksen yleiskatsaus
Tila
Interventio / Hoito
Opintotyyppi
Ilmoittautuminen (Todellinen)
Vaihe
- Ei sovellettavissa
Yhteystiedot ja paikat
Opiskelupaikat
-
-
-
Heidelberg, Saksa
- Core Facility for Neuroscience of Self-Regulation, Heidelberg University
-
-
Osallistumiskriteerit
Kelpoisuusvaatimukset
Opintokelpoiset iät
- Aikuinen
Hyväksyy terveitä vapaaehtoisia
Kuvaus
Sisällyttämiskriteerit:
- Päätoiminen yliopisto-opiskelija.
- Pystyy lukemaan ja kirjoittamaan englanniksi.
- Käytä tietokonetta useimpina päivinä viikossa.
- En ole suorittanut Graduate Record Examinations (GRE) -kokeita eivätkä valmistaudu niihin.
- Älä käytä silmälaseja (piilolinssit ovat sallittuja).
- Ei silmävammaa.
- Et käytä tällä hetkellä opioideja, epinefriiniä tai verenpainelääkkeitä.
- Kokeen aikana älä käytä meikkiä silmien ympärillä.
Opintosuunnitelma
Miten tutkimus on suunniteltu?
Suunnittelun yksityiskohdat
- Ensisijainen käyttötarkoitus: Muut
- Jako: Satunnaistettu
- Inventiomalli: Rinnakkaistehtävä
- Naamiointi: Yksittäinen
Aseet ja interventiot
Osallistujaryhmä / Arm |
Interventio / Hoito |
|---|---|
|
Kokeellinen: Interventio käsi
Interventiohaarassa osallistujia neuvotaan käyttämään ChatGPT:tä apuna analyyttisen kirjoitustehtävän suorittamisessa.
|
Esseen kirjoitustehtävässä käytetty tietokoneliittymä noudattaa jaetun näytön suunnittelua.
Kirjoitusohjeet ja tekstinsyöttökenttä hallitaan kyselyalustalla, joka on sijoitettu näytön vasempaan puoliskoon.
ChatGPT on sijoitettu näytön oikeaan puoleen teknistä apua varten.
|
|
Ei väliintuloa: Ohjausvarsi
Ohjaushaarassa osallistujia neuvotaan suorittamaan analyyttinen kirjoitustehtävä itsenäisesti ilman minkäänlaista teknistä apua.
|
Mitä tutkimuksessa mitataan?
Ensisijaiset tulostoimenpiteet
Tulosmittaus |
Toimenpiteen kuvaus |
Aikaikkuna |
|---|---|---|
|
Kirjoitussuoritus
Aikaikkuna: 1,5 tuntia
|
Esseen kirjoitustehtävä on johdettu Graduate Record Examinations (GRE) -osasta Analytical Writing -osasta, joka on Educational Testing Servicen (ETS) kehittämä maailmanlaajuinen ja standardoitu tietokonepohjainen koe.
Osallistujien esseet pisteytetään asteikolla 0-6 automaattisella ja validoidulla kolmannen osapuolen pisteytystyökalulla, jonka myös ETS on kehittänyt.
|
1,5 tuntia
|
|
Kognitiivinen ponnistus oppilaan koon mukaan mitattuna
Aikaikkuna: 1,5 tuntia
|
Kognitiivinen ponnistus kvantifioidaan seuraamalla oppilaiden koon muutoksia.
Tämän saavuttamiseksi pupillien halkaisijat tallennetaan koko kirjoitustehtävän ajan käyttämällä lähi-infrapuna-silmäseurantaa, erityisesti Tobii Pro Fusion -mallia.
Kokeen alussa mitataan yksittäisten pupillien perushalkaisijat 30 sekunnin rentoutumistehtävän aikana.
|
1,5 tuntia
|
Toissijaiset tulostoimenpiteet
Tulosmittaus |
Toimenpiteen kuvaus |
Aikaikkuna |
|---|---|---|
|
Itsenäkemys kirjoitussuorituskyvystä
Aikaikkuna: 1,5 tuntia
|
Tämä on yhden kohteen asteikko: Mitä pistemäärää esseesi pitäisi mielestäsi saada (0 on alhaisin ja 6 korkein) käyttämällä samaa arvosanaa kuin aiemmin? Pisteet vaihtelevat 0-6. Korkeampi pistemäärä tarkoittaa parempaa itsenäistä kirjoitussuoritusta. Muuttujaa käsitellään jatkuvana muuttujana. |
1,5 tuntia
|
|
Kognitiivisen ponnistuksen itsenäkemys
Aikaikkuna: 1,5 tuntia
|
Tämä on yhden kohdan Likert-asteikko, joka on mukautettu National Aeronautics and Space Administrationin tehtävän kuormitusindeksistä (NASA-TLX; Hart, 2006; Hart & Staveland, 1988): Arvioi asteikolla 1–7, kuinka kovaa sinun on tehtävä töitä saavuttaaksesi suoritustasosi. Likert-pisteet vaihtelevat 1-7 (1 on "erittäin alhainen" ja 7 on "erittäin korkea"). Korkeampi pistemäärä tarkoittaa korkeampaa itsenäistä kognitiivista työtä. Muuttujaa käsitellään jatkuvana muuttujana. Viitteet:
|
1,5 tuntia
|
|
Kognitiivinen ponnistus etulohkon aivokuoren hemodynaamisella aktiivisuudella mitattuna
Aikaikkuna: 1,5 tuntia
|
Kognitiivinen ponnistus kvantifioidaan seuraamalla muutoksia aivokuoren hemodynaamisessa aktiivisuudessa otsalohkossa.
Tämän saavuttamiseksi aivojen toimintaa tallennetaan koko kirjoitustehtävän ajan käyttämällä toiminnallista lähi-infrapunaspektroskopiaa (fNIRS), erityisesti NIRSport2-mallia.
|
1,5 tuntia
|
|
Stressin itsetunto
Aikaikkuna: 1,5 tuntia
|
Tämä on yksiosainen Likert-alaasteikko, joka on mukautettu Primary Appraisal Secondary Appraisal -asteikosta (PASA; Gaab, 2009; Pollak et al., 2020): Asteikolla 1-7, kuinka paljon olisit samaa tai eri mieltä seuraavan väitteen koetun stressin kanssa: Analyyttinen kirjoitustehtävä oli minulle stressaava. Likert-pisteet vaihtelevat 1-7 (1 on "täysin eri mieltä" ja 7 "täysin samaa mieltä"). Korkeampi pistemäärä tarkoittaa korkeampaa itsekokemaa stressiä. Muuttujaa käsitellään jatkuvana muuttujana. Viitteet:
|
1,5 tuntia
|
|
Haasteen itsetunto
Aikaikkuna: 1,5 tuntia
|
Tämä on yksiosainen Likert-alaasteikko, joka on mukautettu Primary Appraisal Secondary Appraisal -asteikosta (PASA; Gaab, 2009; Pollak et al., 2020): Kuinka paljon olisit samaa tai eri mieltä asteikolla 1-7 seuraavan väittämän koetun haasteen kanssa: Minusta analyyttinen kirjoitustehtävä on haaste. Likert-pisteet vaihtelevat 1-7 (1 on "täysin eri mieltä" ja 7 "täysin samaa mieltä"). Korkeampi pistemäärä tarkoittaa korkeampaa itsenäistä haastetta. Muuttujaa käsitellään jatkuvana muuttujana. Viitteet:
|
1,5 tuntia
|
|
Itsetehokkuus kirjoittamisessa
Aikaikkuna: 1,5 tuntia
|
Tämä on 16-osainen Likert-asteikko, joka mittaa kirjoittamisen itsetehokkuuden kolmea ulottuvuutta: ideointia, sopimusta ja itsesäätelyä (Bruning et al., 2013). Likert-pisteet vaihtelevat 1-7 (1 on "täysin eri mieltä" ja 7 "täysin samaa mieltä"). Korkeampi pistemäärä tarkoittaa parempaa itsetehokkuutta. Kolmea ulottuvuutta käsitellään erikseen, kutakin jatkuvana muuttujana. Viite: 1. Bruning, R., Dempsey, M., Kauffman, D. F., McKim, C. ja Zumbrunn, S. (2013). Kirjoittamisen itsetehokkuuden ulottuvuuksien tutkiminen. Journal of Education Psykologia, 105(1), 25. |
1,5 tuntia
|
|
Tilannekohtainen kiinnostus analyyttiseen kirjoittamiseen
Aikaikkuna: 1,5 tuntia
|
Tämä on neliosainen Likert-asteikko, joka on muokattu tilannekohtaisesta kiinnostusasteikosta (Hulleman et al., 2010). Tämä asteikko mittaa osallistujien tilannekohtaista kiinnostusta analyyttiseen kirjoittamiseen: Kuinka paljon olisit asteikolla 1-7 samaa tai eri mieltä seuraavien väittämien kanssa kiinnostuksestasi juuri suorittamaasi analyyttistä kirjoitustehtävää kohtaan?
Likert-pisteet vaihtelevat 1-7 (1 on "täysin eri mieltä" ja 7 "täysin samaa mieltä"). Korkeampi pistemäärä tarkoittaa suurempaa kiinnostusta tilanteeseen. Muuttujaa käsitellään jatkuvana muuttujana. Viite: 1. Hulleman, C. S., Godes, O., Hendricks, B. L. ja Harackiewicz, J. M. (2010). Kiinnostuksen ja suorituskyvyn parantaminen hyödyllisyysarvon interventiolla. Journal of Educational Psychology, 102(4), 880. |
1,5 tuntia
|
|
Käyttäytymistarkoitus ChatGPT:n käytössä
Aikaikkuna: 1,5 tuntia
|
Tämä on kaksiosainen Likert-asteikko, joka mittaa osallistujien käyttäytymisaikomuksia käytettäessä ChatGPT:tä tulevaisuudessa esseen kirjoitustehtäviin (Albayati, 2024): Kuinka paljon olisit asteikolla 1–7 samaa tai eri mieltä seuraavista väittämistä ChatGPT:n käytöstä esseen kirjoitustehtävissä?
Likert-pisteet vaihtelevat 1-7 (1 on "täysin eri mieltä" ja 7 "täysin samaa mieltä"). Korkeampi pistemäärä osoittaa suurempaa käyttäytymisaikomusta ChatGPT:n käytössä. Muuttujaa käsitellään jatkuvana muuttujana. Viite: 1. Albayati, H. (2024). Tutkitaan perustutkinto-opiskelijoiden käsitystä ja tietoisuutta ChatGPT:n käytöstä säännöllisenä apuvälineenä: Käyttäjän hyväksymisnäkökulmatutkimus. Tietokoneet ja koulutus: Artificial Intelligence, 6, 100203. https://doi.org/10.1016/j.caeai.2024.100203 |
1,5 tuntia
|
Yhteistyökumppanit ja tutkijat
Sponsori
Tutkijat
- Päätutkija: Till Bärnighausen, Heidelberg Institute of Global Health
Opintojen ennätyspäivät
Opi tärkeimmät päivämäärät
Opiskelun aloitus (Todellinen)
Ensisijainen valmistuminen (Todellinen)
Opintojen valmistuminen (Todellinen)
Opintoihin ilmoittautumispäivät
Ensimmäinen lähetetty
Ensimmäinen toimitettu, joka täytti QC-kriteerit
Ensimmäinen Lähetetty (Todellinen)
Tutkimustietojen päivitykset
Viimeisin päivitys julkaistu (Todellinen)
Viimeisin lähetetty päivitys, joka täytti QC-kriteerit
Viimeksi vahvistettu
Lisää tietoa
Tähän tutkimukseen liittyvät termit
Muut tutkimustunnusnumerot
- S-117/2024
Lääke- ja laitetiedot, tutkimusasiakirjat
Tutkii yhdysvaltalaista FDA sääntelemää lääkevalmistetta
Tutkii yhdysvaltalaista FDA sääntelemää laitetuotetta
Yhdysvalloissa valmistettu ja sieltä viety tuote
Nämä tiedot haettiin suoraan verkkosivustolta clinicaltrials.gov ilman muutoksia. Jos sinulla on pyyntöjä muuttaa, poistaa tai päivittää tutkimustietojasi, ota yhteyttä register@clinicaltrials.gov. Heti kun muutos on otettu käyttöön osoitteessa clinicaltrials.gov, se päivitetään automaattisesti myös verkkosivustollemme .