Sprogligt skræddersyede sundhedsmeddelelser for at tilskynde til plantebaserede fødevarevalg hos unge

Denne undersøgelse er et fem-arms randomiseret kontrolleret forsøg rettet mod unge i alderen 11-15 år i Storbritannien og Irland (figur 1). I interventionsarmene vil deltagerne modtage daglige beskeder, der fremmer en plantebaseret kost fra mandag til fredag ​​i to uger. Den første arm fungerer som en passiv kontrolgruppe, hvor deltagerne ikke modtager nogen beskeder under hele undersøgelsen. I arm 2 vil deltagerne modtage daglige ikke-skræddersyede beskeder i hele to uger. I arm 3 vil deltagerne modtage sprogligt tilpassede beskeder. Deltagere i arm 4 vil modtage både ikke-skræddersyede og skræddersyede beskeder i en uge hver: skræddersyede beskeder i uge 1 og ikke-skræddersyede i uge 2 (arm 4a) og ikke-skræddersyede i uge 1 og skræddersyede i uge 2 (arm 4b) . Dette design understøtter både sammenligninger inden for emnet (skræddersyet vs. ikke-skræddersyet) og sammenligninger mellem emner (f.eks. kontrol vs. intervention).

Ved starten af ​​programmet vil deltageren spille et chatspil for at indsamle chatdata til at analysere deres sproglige stil. Disse data vil blive brugt til at udføre en tekststiloverførsel på interventionsbeskederne ved hjælp af en stor sprogmodel (LLM). Herefter starter den to-ugers intervention med en baseline-undersøgelse udført i løbet af den første weekend. I løbet af hverdagene (mandag til fredag) vil deltagere i interventionsarme (arme 2, 3 og 4) modtage daglige beskeder, der promoverer en plantebaseret kost gennem forskningsappen Avicenna. Derudover vil alle deltagere, inklusive dem den passive kontrolgruppe, modtage daglige undersøgelser om deres valg af mad til frokost. Deltagerne i indsatsarmene vil også modtage spørgsmål om meddelelsesopfattelse. I weekenderne efter hver interventionsuge vil deltagerne udfylde omfattende undersøgelser (midtpunkts- og afsluttende undersøgelser). Disse undersøgelser vil sammen med basisundersøgelsen vurdere alle resultatmål, herunder kostadfærd, adfærdsdeterminanter, opfattelser af meddelelseskilden, meddelelsesbehandling og tekststilkarakteristika.

Prøvestørrelse Den forventede effektstørrelse var baseret på to metaanalyser af online sundhedsfremmeundersøgelser, der omfattede generel skræddersyning (Krebs et al., 2010; Lustria et al., 2013). Disse undersøgelser rapporterede en gennemsnitlig effektstørrelse på 0,08 (Cohens f) samlet og 0,112 for diætrelaterede interventioner specifikt. Baseret på en antaget effektstørrelse på 0,1 og en styrke på 80 % for sammenligninger mellem emner, kræves en stikprøvestørrelse på 592 deltagere. Da sammenligninger inden for emnet typisk giver højere statistisk styrke, sigter vi efter en målstikprøvestørrelse på 600 deltagere (150 pr. arm) med fuldstændige svar.

Rekruttering af deltagere Deltagerne vil blive rekrutteret gennem et forskningspanel (Norstat) i Storbritannien og Irland. Panelmedlemmer med kvalificerede børn vil blive inviteret til at deltage i undersøgelsen. Som en del af rekrutteringsundersøgelsen vil forældre først besvare præ-screener-spørgsmål for at bekræfte, at deres barn opfylder inklusionskriterierne. Hvis de er berettigede, fortsætter forældre i rekrutteringsundersøgelsen, som yderligere indeholder oplysninger om undersøgelsen og mulighed for at tilmelde deres barn og give samtykke til deres barns deltagelse. Når forældrenes samtykke er indhentet, vil børn blive kontaktet for at deltage i undersøgelsen. Deltagerne vil modtage forskningspanelets kreditter (dvs. økonomisk kompensation) for at fuldføre hver fase af undersøgelsen: at spille chatspillet, udfylde baseline, dagligt, midtpunktsundersøgelse og afsluttende undersøgelse).

Randomisering Blokrandomisering vil blive brugt til at allokere deltagere på tværs af interventionsarmene. Arme 4a og 4b vil blive kombineret til en enkelt blok, da de har identiske forhold, men kun modbalanceret. Dette resulterer i fire samlede blokke. Med en målstikprøvestørrelse på 600 sigter vi mod 150 deltagere pr. blok. Deltagerne vil blive tildelt en af ​​de fire blokke via den automatiserede blokrandomiseringsfunktion i Qualtrics, integreret i rekrutteringsundersøgelsen.

Chatspil: BetweenUs Vi udviklede et webbaseret chatspil, kaldet BetweenUs, til at indsamle chatdata og samtidig opfylde etiske, sikkerheds- og privatlivsstandarder. Formålet med dette spil er at generere en prøve af autentiske tekstbeskeder, hvorfra vi kan lære om hver deltagers individuelle sproglige stil. Spillet var specialbygget (dvs. ikke behov for tredjepartssoftware) og hostet på en Microsoft Azure-server fra Erasmus University. Den kan tilgås her: (https://movez.ecda.ai/chat/test1).

BetweenUs blev co-designet af børn i en samskabelsessession. Børn gav input til hvordan spillet skulle se ud, hvilke typer avatarer der skulle bruges, spillets længde og hvilke emner de gerne ville tale om. Spillet var inspireret af populære bedragerspil, såsom "Among Us". Spillet blev desuden afprøvet blandt børn for endelig feedback.

I spillet vil spillere blive tilfældigt parret i grupper på 4 deltagere i et chatrum. Ved spillets start vil spilleren blive guidet af fem instruktioner på skærmen, som forklarer spillets regler. Bagefter kan spilleren starte spillet, hvorefter han skal besvare to spørgsmål: 1) Kan spilleren lide eller ikke lide det præsenterede emne (f.eks. ser fodbold), 2) føler spilleren sig tryg ved at spille bedrageren. Derefter vil en rolle til hver spiller (efterforsker eller bedrager) blive tildelt tilfældigt. Efterforskerne bliver nødt til at chatte om deres faktiske lide/ikke lide af det præsenterede emne, mens bedragerne bliver instrueret i at påtage sig den modsatte rolle af deres faktiske præference (f.eks. "Jeg kan ikke lide at se fodbold, selvom jeg faktisk kan lide det") uden at blive fanget af de andre spillere.

Spillet er opdelt i tre runder af en-til-en samtaler på 8 minutter og afsluttes med en gruppesamtale på 5 minutter. På denne måde kunne vi fange dynamikken i samtaler i en-til-en-indstillinger såvel som gruppeindstillinger, der afspejler chats i den virkelige verden. Under chatten. Spillet afsluttes med en afstemning, der beder efterforskerne om at gætte bedrageren i gruppen. Efterforskeren vinder, hvis de har gættet bedrageren rigtigt, mens bedrageren vinder, når han ikke fik flertalsafstemningen.

Chatspillet er helt anonymt. Spillere er repræsenteret af dyrelignende avatarer. Der indsamles ingen personlige eller identificerbare oplysninger under spillet, og spillere instrueres i at afstå fra at dele personlige oplysninger. Hvis der af en eller anden grund forekommer personlige eller følsomme detaljer (såsom navne, alder osv.) i chatten, vil dette blive fjernet/hashed. Derudover er spilemnerne nøje udvalgt af forskere (i betragtning af forslagene fra samskabelsessessionen) for at sikre, at følsomme emner undgås. Spillere har også mulighed for at angive deres ubehag ved at påtage sig rollen som en bedrager under spillet. Endelig er dataene kun tilgængelige for forskere og gemt på universitetets servere.

Interventionsbudskaber Ti interventionsbudskaber blev udviklet for at fremme fordelene ved plantebaseret spisning på en autonomi-understøttende måde. Hver besked retter sig mod ét ud af de tre mest nævnte motiver for plantebaseret spisning (Miki et al., 2020), nemlig sundhedsmotiver, miljømotiver og dyrevelfærdsmotiver. Vi holder rækkefølgen af ​​beskedmotiver konstant gennem ugedagene, således at hver dag vil adressere et af de tre motiver på tværs af begge uger. Beskedskabelsen blev styret af unges præferencer for interventionsbeskeder. Alle meddelelser blev designet til at være faktuelle (herunder videnskabsbaserede statistikker), kortfattede (4-5 sætninger), relevante for teenagere (f.eks. adressering af sundhedsproblemer som akne) og autonomi-understøttende (giver forslag og tips i stedet for direktiver) (Hingle et al., 2013). Beskederne blev med vilje skabt i en neutral sproglig stil, hvor man undgår brugen af ​​stærkt følelsesladet sprog, ikke-standard syntaks eller emojis. Disse udgør de ikke-skræddersyede meddelelser og tjener som grundlag for udvikling af skræddersyede meddelelser gennem overførsel af tekststil ved hjælp af en LLM. De ikke-skræddersyede beskeder blev skrevet med en aktiv samtalestemme for at muliggøre en fair sammenligning med de skræddersyede versioner, som også forventes at have en aktiv stemme efter stiloverførsel. Beskedneutralitet blev valideret gennem ekspertvurdering af mennesker og værktøjet Linguistic Inquiry Word Count 2022 (LIWC22), som vurderede hver meddelelse på tværs af 22 sproglige dimensioner og scorede fra 0 (neutral) til 100 (ekstremt høj) (Boyd et al., 2022). For at sikre, at budskaberne var nøjagtige, tillidsfulde, klare, engagerende for unge og primært faktuelle i sproglig stil, blev der gennemført adskillige runder af korrekturlæsning af seniorforskere med ekspertise i ungdomskommunikation.

Stor sprogmodel En LLM vil blive brugt til sprogligt at skræddersy interventionsbudskaberne. Den primære opgave for LLM er at lære hver deltagers samtalestil ved at bruge de data, der er indsamlet fra chatspillet, og tilpasse interventionsbeskeden i overensstemmelse hermed. Dette vil resultere i 10 sprogligt skræddersyede beskeder til hver deltager, mens indholdet og fakta i beskederne forbliver konstant på tværs af ikke-skræddersyede og skræddersyede beskeder.

LLM Mistral-large blev udvalgt baseret på deres nuværende generelle præstationsscore og open source tilgængelighed. I en separat undersøgelse vurderede vi ydeevnen af ​​forskellige LLM'er (Mistral og GPT) i at skræddersy interventionsmeddelelser, med fokus på tekststilsoverførselsnøjagtighed, indholdsbevarelse (dvs. betydningslighed) og flydende (dvs. forståelighed) (manuskript under forberedelse) . Alle evaluerede modeller viste gode evner til at fange brugernes samtalestile og scorede meget højt i indholdsbevaring og flydende. Mistral-large blev betragtet som den bedst egnede model til denne undersøgelse i øjeblikket.

For det første vil Mistral-large generere stilneutrale ækvivalenter af chatdataene for at skabe et parallelt datasæt for hver deltager. For at bevare relevansen inkluderes kun beskeder, der overstiger deltagerens medianordantal, og udelukker dermed korte eller ikke-meningsfulde beskeder såsom "hej". Dette parallelle datasæt vil tjene som træningsinput for modellen. Bagefter bliver LLM eksplicit bedt om at fungere som en sproglig ekspert, der analyserer den samtalestil, der afspejles i det parallelle datasæt. Specifikt vejledes LLM til at overveje: 1) Deltagerens brug af funktionsord (f.eks. stedord som "jeg", "vi", "dig"), 2) deres foretrukne tone (f.eks. formel eller uformel, analytisk eller fortælling), 3) de almindeligt anvendte stilistiske ord (f.eks. sætninger, udfyldningsord) og 4) brugen af ​​emojis eller humørikoner i eksempelsætninger. LLM bliver også bedt om at give en forklaring på overførsel af tekststil.

Research App Daglige beskeder og undersøgelser vil blive leveret via en smartphone research app kaldet Avicenna. Deltageren skal downloade og registrere sig til denne app med et unikt ID før programmets start. Denne app sikrer anonym deltagelse i forskningsprogrammet. Hver skoledag vil deltagerne modtage en morgen-push-meddelelse, der beder dem om at se en ny besked ved at åbne appen. Derudover vil appen vise et rødt skilt, når en ny besked er tilgængelig. Beskeder kan tilgås indtil midnat samme skoledag, hvorefter de forsvinder fra appen, og eventuelle ulæste beskeder vil blive markeret som manglende data for den pågældende dag. Efter at have læst beskeden, vil deltagerne gennemføre daglige foranstaltninger direkte i appen. I weekender vil deltagerne modtage en meddelelse, der minder dem om at gennemføre weekendundersøgelserne (dvs. baseline, midtpunkt og sidste undersøgelse).