PROJEKT 2 PŘÍKLAD: Zpětná vazba X Prevalence pomocí dermatologických stimulů

Tento popis je založen na předběžné registraci na webu Open Science Framework. Všimněte si, že se jedná o studii „BESH“. Tento typ výzkumu není navržen jako tradiční klinická studie, ale je zde uváděn kvůli změnám v pravidlech pro podávání zpráv o klinických studiích NIH. Toto je jedna studie z Projektu 2 NE017001.

Levari et al (2018) zjistili, že lidé reagovali na snížení prevalence podnětu rozšířením svého pojetí. Konkrétně požádali pozorovatele, aby u každého pokusu posoudili, zda tečka nakreslená z modrofialového kontinua byla modrá nebo ne. Výsledky ukázaly, že pozorovatelé častěji nazývali nejednoznačné podněty „modrými“, když byly modré položky méně rozšířené. Z hlediska teorie detekce signálu (SDT) jde o liberální posun kritéria odezvy. Jedná se o „prevalenci vyvolanou změnu konceptu“ (PICC). Předchozí výsledky však přinesly opačné výsledky v dlouhé sérii experimentů na účinky prevalence. Standardní zjištění je, že Os mine více cílů při nízké prevalenci. Když je modrá vzácná, je méně pravděpodobné, že něco nazývají modrou. Z hlediska SDT se jedná o konzervativní posun kritéria. Toto je klasický efekt nízké prevalence (LPE). V kole dřívějších experimentů Lyu et al (2021) zjistili, že zpětná vazba je kritickou proměnnou. Díky zpětné vazbě mezi jednotlivými zkouškami získáme LPE. Bez zpětné vazby data obvykle ukazují výsledky PICC.

Projevují se efekty LPE a PICC, když se experti dívají na podněty ve své expertní oblasti? Existují důkazy pro LPE z vyhledávacích úloh (např. Evans, K. K., Birdwell, R. L., & Wolfe, J. M. (2013). Pokud to často nenajdete, často to nenajdete: Proč jsou některé druhy rakoviny při screeningu rakoviny prsu vynechány. . PLoS ONE 8(5): e64366. , 8(5), e64366. doi: doi:10.1371/journal.pone.0064366). Důkazy PICC však nebyly shromážděny a neexistují žádná data z úloh rozhodování o jednotlivých položkách, jako je „Je tato tečka modrá?“ úkol. To je důležité, protože posuny kritérií výše popsaného druhu mohou mít zjevné důsledky pro zdravotní péči.

Tato studie bude opakovat základní experiment „Je to modrá tečka“ s využitím dermatologických podnětů (Je to melanom nebo jen névus (krtek)?)

hypotézy:

(H1) bez zpětné vazby, Os s větší pravděpodobností označí místo jako rakovinu, když je prevalence rakoviny nízká (prevalence indukovaná-změna konceptu).

(H2), že se zpětnou vazbou je méně pravděpodobné, že Os označí místo jako rakovinu, když je prevalence rakoviny nízká (klasický efekt nízké prevalence)

Závislá proměnná

Hlavní závislou proměnnou je podíl rakovinných odpovědí jako funkce prevalence rakoviny v obrazovém souboru, ale zaznamenáme také reakční časy.

Podmínky

Kolik a za jakých podmínek bude účastníkům přiděleno?

Proběhnou čtyři podmínky mezi pozorovateli.

1. 50 % snímků rakoviny se zpětnou vazbou
2. 50 % snímků rakoviny bez zpětné vazby
3. 20 % snímků rakoviny se zpětnou vazbou
4. 20 % snímků rakoviny bez zpětné vazby

Pozorovatelé učiní jednoduché rozhodnutí 2-alternativní vynucená volba (2AFC) rakovina/žádná rakovina.

Pozorovatelé získají body na základě správnosti odpovědi (správnější, více bodů)

V každém bloku bude 200 pokusů. Výsledkem bude 40 současných testů cíle v podmínkách nízké prevalence, které by měly produkovat míru zásahu, která není příliš hrubá.

Stimuly budou obrázky krtků z archivu ISIC. Každý obrázek přichází se známou odpovědí buď melanom (rakovina) nebo nevus (negativní).

Analýzy

Data vytvoří kontinuum od nerakovin po rakovinu na základě reakcí pozorovatelů v 50% stavu se zpětnou vazbou. To poskytne výtěžek psychometrické funkce rostoucí (lze předpokládat) z téměř 0 % odpovědí na rakovinu na téměř 100 %.

Pomocí tohoto uspořádání budou generovány psychometrické funkce pro další tři podmínky.

Chcete-li prozkoumat účinek prevalence a přítomnosti a nepřítomnosti zpětné vazby na chování pozorovatelů, spusťte logistickou regresi s prevalencí a zpětnou vazbou jako faktory ve zobecněném smíšeném modelu pomocí softwaru jamovi.

Data budou také použita k výpočtu míry detekce signálu citlivosti (d') a kritéria (c) na základě skutečné pravdy o snímcích. To znamená, že „rakovinové“ odpovědi budou kódovány jako pravdivé pozitivní, pokud snímky ukazují rakovinu, a jako „falešně pozitivní“, pokud ne. Budou provedeny T-testy, aby se zjistilo, zda se d' a/nebo c (kritérium) významně mění jako funkce prevalence a zpětné vazby.

Odlehlé hodnoty a vyloučení

N/A

Velikost vzorku

Budou probíhat samostatné bloky zkoušek a podmínky budou porovnány s nepárovými t-testy.

G* Power říká, že navrhuje 36 pozorovatelů NA SKUPINU nebo celkem 144 pozorovatelů pro alfa = 0,05, síla = 0,80. Plánem je pokusit se spustit 45 operačních systémů na skupinu, přičemž se předpokládá asi 20% ztráta operačních výkonů kvůli rozmarům online testování.