Stručný název: Projekt 4 Příklad: Mixed Hybrid Checklist

Tento experiment je jedním členem „svazku“ experimentů BESH, které byly zaregistrovány jako součást procesu žádosti o grant. Není možné ani smysluplné zaregistrovat balíček experimentů v jediném souboru CT.gov, takže jako příklad tohoto balíčku je registrován „Mixed Hybrid Checklist“.

Toto je text předběžné registrace Mixed Hybrid Checklist, který byl původně umístěn na Open Science Framework: https://osf.io/j6h4s

POZNÁMKA: Protože komentář se zájmenem je poradní, necháme si to na později. Web je skutečně fungující stránkou OSF.

=========

Jaká je hlavní otázka nebo hypotéza, která je v této studii testována?

Při hledání v reálném světě (a zejména v radiologii) může být důležité „sledovat“ položky zájmu, které nejsou primárním předmětem hledání. V radiologii jsou známy jako „náhodné nálezy“ a jsou významným problémem, protože se od lékařů očekává, že odhalí položky klinického významu, i když odpovídají na jinou otázku (např. musíte odhalit zápal plic, i když bylo vaším úkolem provést screening na rakovinu plic). Vyvinuli jsme „modelový systém“ ve formě úkolu „smíšeného hybridního vyhledávání“, který lze použít ke zkoumání základních kognitivních procesů, které stojí za náhodnými chybami při hledání. V tomto smíšeném hybridním vyhledávacím úkolu pozorovatelé hledají kterýkoli z více specifických cílů (např. tohoto králíka, toto nákladní auto a tuto lžíci) a více kategorických cílů (např. jakékoli masky, nábytek a rostliny). Ve všech dosud provedených experimentech „smíšeného hybridního vyhledávání“ jsou kategorické cíle míjeny mnohem rychleji než cíle specifické. Kategorické cíle se tak stávají analogií náhodných chyb a naším cílem je tyto chyby v našem modelovém systému snížit v naději, že to poskytne návod, jak snížit chyby v úlohách v reálném světě.

Testovali jsme dvě strategie určené ke snížení počtu nesplněných kategorických cílů. V experimentu 5 jsme pozorovatelům připomněli kategorické cíle prostřednictvím nehledacích zkoušek, ve kterých byly kategorické cíle jasně označeny. V experimentu 6 jsme přinutili pozorovatele reagovat dvakrát na každý pokus: jednou k potvrzení přítomnosti nebo nepřítomnosti konkrétních cílů a jednou k potvrzení přítomnosti nebo nepřítomnosti kategorických cílů. Oba tyto zásahy selhaly.

Tento experiment „Hybrid Checklist“ je dalším pokusem vyvinout strategii, která nám pomůže snížit tyto kategorické chyby. Stejně jako předchozí experimenty, pozorovatelé začínají tím, že si zapamatují tři specifické cíle a tři kategorické cíle. Po zhlédnutí cílů musí pozorovatelé projít starým/novým rozpoznávacím testem se 100% správnými odpověďmi, aby se přesunuli do fáze hledání. Každý test paměti se skládá z 2×N položek, kde N je velikost sady paměti a 50 % položek je starých (cílů) a 50 % je nových. Po úspěšném testu paměti hledají pozorovatelé své cíle na displejích se 4, 8 nebo 12 položkami. Pozorovatelé musí kliknutím myší označit, zda je každý cíl v sadě paměti v aktuálním zobrazení přítomen nebo nepřítomný. Existuje 6 cílů (3 specifické, 3 kategorické), takže pozorovatelé udělají 6 odpovědí na každý pokus. Chyba a reakční doba budou zaznamenány pro každé kliknutí a pro každý pokus.

Hypotéza (H1):

- Předpokládáme, že tento postup kontrolního seznamu zlepší přesnost a sníží chyby chyb. Avšak vzhledem k tomu, že v každé studii je 6 odpovědí, doba na zkoušku (nebo doba na případ pro radiology) se pravděpodobně výrazně prodlouží.

Popište klíčové závislé proměnné a specifikujte, jak budou měřeny.

Chyby chyb a reakční doby jsou klíčové závislé proměnné. Ty budou zprůměrovány napříč studiemi se stejným stavem (specifický cíl, kategorický cíl a nepřítomné studie) a velikostí vizuální sady (4, 8, 12). Všimněte si, že tato měření budou porovnána s výsledky z předchozích experimentů spíše než s návrhem v rámci pozorovatele.

Kolik a za jakých podmínek bude účastníkům přiděleno?

V tomto experimentu jsou účastníci přiřazeni k jedné podmínce „kontrolního seznamu“. Všichni pozorovatelé si zapamatují soubor tří konkrétních a tří kategorických cílů. Poté musí projít testem paměti, než přejdou k provedení 20 praktických zkoušek a 300 experimentálních zkoušek úkolu vizuálního vyhledávání. Z těchto 300 pokusů:

70 % jsou cílené studie 45 % cílových současných studií bude mít jeden cíl

• 80 % jednocílových pokusů má jeden konkrétní cíl
• 20 % pokusů s jedním cílem má jeden kategorický cíl 25 % pokusů se současným cílem bude mít dva cíle
• 65 % dvoucílových pokusů má dva specifické cíle
• 5 % dvoucílových pokusů má dva kategorické cíle
• 30 % dvoucílových zkoušek má jeden konkrétní a jeden kategorický cíl Zbývajících 30 % zkoušek nebude mít žádné cíle

Uveďte přesně, které analýzy budete provádět, abyste prozkoumali hlavní otázku/hypotézu.

Reakční doba a chybovost budou porovnány s těmi v předchozím smíšeném hybridním vyhledávacím experimentu – design mezi subjekty (Wolfe, Soce a Schill, 2017). Analýzy budou prováděny jak na reakční dobu, tak na chybovost chyb. Pro reakční dobu bude prováděna opakovaná měření ANOVA se dvěma faktory: stavem (specifický cíl, kategorický cíl a nepřítomnost) a velikostí vizuální sady. Pro chybovost chyb bude statistická analýza chyb provedena na chybovosti transformované arcsinusem (Hogg & Craig, 1995).

Nějaké sekundární analýzy?

Prozkoumáme data pro další zajímavé vzorce: Např.

- Účinky pořadí: Ovlivňuje kategorický cíl v pokusu N pravděpodobnost detekce takového cíle v N+1.

Kolik pozorování bude shromážděno nebo co určí velikost vzorku? Rozhodnutí není třeba zdůvodňovat, ale upřesněte, jak přesně bude číslo určeno.

Abychom byli konzistentní s předchozími experimenty „Mixed Hybrid Search“, shromáždíme data od 12 pozorovatelů. Účastníci jsou vyloučeni, pokud jim není mezi 18 a 55 lety, pokud je jejich zraková ostrost horší než 20/25, nebo pokud neuspějí v testu barev Ishihara.

Chtěli byste si ještě něco předregistrovat? (např. vyloučení dat, proměnné shromážděné pro účely průzkumu, plánované neobvyklé analýzy?)

N/A