PROJEKT 2 EKSEMPEL: Feedback X prævalens ved brug af dermatologiske stimuli

Denne beskrivelse er baseret på en forhåndsregistrering på webstedet Open Science Framework. Bemærk, at dette er en "BESH" undersøgelse. Denne type forskning er ikke designet som et traditionelt klinisk forsøg, men det bliver rapporteret her på grund af ændringer i NIH's rapporteringsregler for kliniske forsøg. Dette er en undersøgelse fra projekt 2 af NE017001.

Levari et al (2018) fandt ud af, at folk reagerede på et fald i forekomsten af ​​en stimulus ved at udvide deres begreb om det. Specifikt bad de observatører om at bedømme i hvert forsøg, om en prik, tegnet fra et blålilla kontinuum, var blå eller ej. Resultaterne viste, at observatører var mere tilbøjelige til at kalde tvetydige stimuli "blå", når blå genstande var mindre udbredt. I signaldetektionsteori (SDT) termer er dette et liberalt skift af responskriterium. Dette er "prævalensinduceret konceptændring" (PICC). Tidligere resultater opnåede dog de modsatte resultater i en lang række eksperimenter med prævalenseffekter. Standardfundet er, at Os savner flere mål med lav prævalens. Når blå er sjælden, er de mindre tilbøjelige til at kalde noget blåt. I SDT-termer er dette et konservativt kriteriumskift. Dette er den klassiske Low Prevalence Effect (LPE). I en runde af tidligere eksperimenter fandt Lyu et al (2021), at feedback er en kritisk variabel. Med trial-by-trial feedback får vi en LPE. Uden feedback viser dataene normalt PICC-resultater.

Dukker LPE- og PICC-effekter op, når eksperter ser stimuli i deres ekspertdomæne? Der er dokumentation for LPE fra søgeopgaver (f.eks. Evans, K. K., Birdwell, R. L., & Wolfe, J. M. (2013). Hvis du ikke finder det ofte, finder du det ofte ikke: Hvorfor nogle kræftformer savnes ved screening af brystkræft. . PLoS ONE 8(5): e64366. , 8(5), e64366. doi: doi:10.1371/journal.pone.0064366). Der er dog ikke indsamlet PICC-beviser, og der er ingen data fra enkeltelementbeslutningsopgaver som "Er denne prik blå?" opgave. Dette er vigtigt, fordi kriterieskift af den type, der er beskrevet ovenfor, kan have indlysende sundhedsmæssige konsekvenser.

Denne undersøgelse vil gentage det grundlæggende "Er denne prik blå" eksperiment ved hjælp af dermatologiske stimuli (Er dette melanom eller bare en nevus (en muldvarp)?)

Hypoteser:

(H1) uden feedback er O'er mere tilbøjelige til at mærke et sted som kræft, når kræftprævalensen er lav (prævalens-induceret-koncept-ændring).

(H2) at med feedback er O'er mindre tilbøjelige til at betegne et sted som kræft, når kræftprævalensen er lav (klassisk lavprævalenseffekt)

Afhængig variabel

Den vigtigste afhængige variabel er andelen af ​​kræftresponser som funktion af kræftprævalensen i billedsættet, men vi vil også registrere reaktionstider.

Betingelser

Hvor mange og hvilke betingelser vil deltagerne blive tildelt?

Fire betingelser vil blive kørt mellem observatører.

1. 50 % kræftbilleder med feedback
2. 50 % kræftbilleder uden feedback
3. 20 % kræftbilleder med feedback
4. 20 % kræftbilleder uden feedback

Observatører vil træffe en simpel 2-alternativ tvungen valg (2AFC) cancer/ingen cancerbeslutning.

Observatører vil blive tildelt point baseret på rigtigheden af ​​svaret (mere korrekt, flere point)

Der vil være 200 forsøg i hver blok. Det vil producere 40 mål tilstedeværende forsøg under de lave prævalensforhold, som burde give en hitrate, der ikke er for grov.

Stimuli vil være billeder af muldvarpe fra ISIC-arkivet. Hvert billede kommer med et kendt svar på enten melanom (kræft) eller nevus (negativ).

Analyser

Dataene vil producere et kontinuum fra ikke-cancer til cancer baseret på observatørens svar i 50% med feedback-tilstand. Dette vil give udbyttet en psykometrisk funktion, der stiger (det kan antages) fra næsten 0 % kræftrespons til næsten 100 %.

Ved at bruge denne bestilling genereres psykometriske funktioner for de tre andre tilstande.

For at undersøge effekten af ​​prævalens og tilstedeværelsen og fraværet af feedback på observatørers responsadfærd, \kør en logistisk regression med prævalens og feedback, da faktorer i en generaliseret blandet model vil blive kørt ved hjælp af jamovi-software.

Dataene vil også blive brugt til at beregne signaldetektionsmålene for følsomhed (d') og kriterium (c) baseret på den faktiske sandhed om billederne. Det vil sige, "kræft"-svar vil blive kodet som sande positive, hvis billederne viser kræft, og som "falske positive", hvis de ikke gør det. Der vil blive udført T-tests for at undersøge, om d' og/eller c (kriterium) ændrer sig væsentligt som funktion af prævalens og feedback.

Udelukkelser og udelukkelser

N/A

Prøvestørrelse

Separate blokke af forsøg vil blive kørt, og betingelser vil blive sammenlignet med uparrede t-tests.

G* Power siger foreslår 36 observatører PR. GRUPPE eller i alt 144 observatører for alfa = 0,05, potens = 0,80. Planen vil være at forsøge at køre 45 O'er pr. gruppe, idet man forventer et tab på omkring 20% ​​af O'er på grund af online tests luner.