Hodnocení modelu spolupráce mezi výzkumem a politikou (RPC)

Cíl: Cílem této studie je prozkoumat účinnost modelu na podporu využití výzkumných důkazů ze strany tvůrců politik v rámci randomizované kontrolované studie (RCT) využívající jak kvalitativní, tak kvantitativní analýzy dat z průzkumu, rozhovorů a pozorování, aby bylo možné pochopit použití výzkum v oblasti politiky a spolupráce. Využití výzkumu zákonodárců bude posuzováno několika metodami, včetně (1) self-reportu prostřednictvím protokolu z průzkumu, (2) legislativní činnosti (tj. předložených návrhů zákonů a oficiálních prohlášení) a (3) kvalitativních rozhovorů. Rozhovory a průzkumy navíc posoudí uváděnou účinnost, dovednosti a zapojení výzkumných pracovníků do veřejné politiky a rozsah, v jakém je jejich práce informovaná procesem politiky.

Intervence: Research-to-Policy Collaboration (RPC) staví na teoretické a empirické literatuře, která naznačuje potřebu (a) převést výzkum relevantní pro současné politické priority a (b) usnadnit produktivní interakce mezi tvůrci politik a výzkumníky. RPC je nestranný, manuální model implementovaný zprostředkovatelskou organizací, která pěstuje vztahy mezi výzkumníky a legislativními úřady. Implementace probíhá ve dvou fázích zahrnujících sérii sedmi vzájemně souvisejících činností. Během fáze budování kapacit se RPC současně zaměřuje na podporu rozvoje poctivých dovedností zprostředkovatele znalostí u výzkumníků prostřednictvím školení a koučování a zároveň provádí iterativní hodnocení potřeb s kancelářemi Kongresu s ohledem na jejich současné priority a touhu po důkazech z výzkumu. Ve fázi spolupráce jsou výzkumní pracovníci s příslušnými odbornými znalostmi spojeni do týmů rychlé reakce, které jsou spojeny s legislativními kancelářemi. Prostřednictvím řady interakcí s lešením se model RPC používá ke kultivaci produktivních vztahů mezi výzkumníkem a tvůrcem politik a podpoře reakcí na legislativní požadavky. Současná studie se zaměřuje na hodnocení účinnosti RPC.

Studovat design:

Tato studie využívá jak kvalitativní, tak kvantitativní analýzy dat z průzkumu, rozhovorů a pozorování v kontextu RCT. Tři zastřešující výzkumné otázky vedou tuto práci a jsou v souladu se třemi různými složkami studie – self-report prostřednictvím kvantitativního průzkumu, pozorování využití výzkumu prostřednictvím kódované legislativní činnosti a etnografie prostřednictvím hloubkových rozhovorů a pozorování účastníků.

1. Jak RPC ovlivňuje výzkumné pracovníky a legislativní pracovníky? (Vlastní hlášení)

   1. Uvádějí výzkumníci zlepšené politické kompetence a motivaci pro provádění výzkumu relevantního pro politiku?
   2. Budou pracovníci legislativy hlásit nárůst pozitivních postojů k výzkumným důkazům, jejich znalostí, zamýšlené aplikace a skutečného využití?
   3. Mohl by se dopad na legislativní a výzkumné účastníky lišit v závislosti na aspektech jejich vztahu spolupráce (např. posílený vzájemnou důvěrou)?

2. Jak RPC ovlivňuje legislativní činnost? (Pozorování)

   a) Zvýší úřady Kongresu využívání výzkumných důkazů v legislativních činnostech (tj. účty, oficiální prohlášení)?

3. Jak mohou představy a zkušenosti ze spolupráce prostřednictvím RPC souviset s různými formami využití důkazů mezi výzkumníky a tvůrci politik? (Etnografie)

   1. Jaké jsou překážky a facilitátoři účasti v RPC?
   2. Jaké typy interakcí mezi výzkumníky a tvůrci politik RPC ovlivňuje?
   3. Jak RPC ovlivňuje vzájemné předpoklady účastníků o sobě navzájem, vzájemné interakce a jejich záměry?
   4. Jaké typy použití důkazů podporuje účast RPC?

Rámec vzorkování Všechny součásti studie vycházejí z počátečního rámce vzorkování, jehož prostřednictvím budou výzkumníci a zaměstnanci Kongresu, kteří se rozhodnou pro účast v RPC, požádáni o účast ve studii; ti, kteří souhlasí s účastí ve studii, budou randomizováni buď do celé RPC intervence, nebo do lehké kontrolní skupiny, která obdrží malé přímé zapojení. Tato studie provede převzorkování, aby se zabránilo očekávanému opotřebení. Finální vzorek zahrnuje 96 kongresových kanceláří (48 v RPC, 48 v kontrolní skupině) a 226 výzkumníků (151 v RPC, 75 v kontrolní skupině). Tyto vzorky byly odvozeny z identifikované populace způsobilých účastníků intervence.

• Populace příslušných legislativních úřadů (Senát a Sněmovna) bude identifikována na základě počtu (spolu)sponzorovaných zákonodárci zákonů pro děti/rodiny. Proces náhodného výběru bude rozvrstven, aby bylo zajištěno poměrné stranické zastoupení a zastoupení zákonodárců, kteří se pohybují v různých činnostech souvisejících s ochranou dětí. Před randomizací bude populaci příslušných zákonodárců přiděleno hodnocení aktivity na základě toho, kolikrát zákonodárce sponzoroval zákon o dětské/rodinné politice. Hodnocení aktivity se bude pohybovat od 1 do 10, takže 10 % zákonodárců, kteří (spolu)sponzorovali nejméně zákonů, bude hodnoceno 1 a 10 % zákonodárců, kteří spolusponzorovali nejvíce zákonů, bude hodnoceno 10. Nábor a stratifikovaný výběr vzorků napříč kontinuitou činností v oblasti politiky týkající se dětí/rodin zlepší zastoupení vzorku mezi oběma stranami. Také pomoc s bipartizánským zastoupením je cílená osvětová úsilí, která se zesílí podél stranických linií, pokud se účast naruší.
• Výzkumní pracovníci, kteří pracují na relevantním výzkumu dětí/rodin, budou identifikováni prostřednictvím výzkumných institucí, profesionálních sítí a seznamových serverů, vyhledávání literatury a doporučení od jiných výzkumných pracovníků. Mezi výzkumníky patří výzkumně orientovaní praktici a hodnotitelé programů z akademického i neakademického prostředí, kteří mají zájem překládat své odborné znalosti s tvůrci politik. Poté, co se přihlásíte k účasti na zásahu politického zapojení, jsou výzkumníci požádáni o účast ve studii. Účastníci studie budou randomizováni tak, aby dostali RPC nebo kontrolní stav.

Složka studie 1: Kvantitativní vyhodnocení dopadu RPC, který si sami hlásili K posouzení schopnosti výzkumných pracovníků zapojit se do procesů veřejné politiky bude použit strukturovaný průzkum. Odpovídající protokol průzkumu posoudí postoje, znalosti, záměry a hlášené chování pracovníků legislativy ohledně použití výzkumných důkazů. Výzkumní pracovníci i legislativní pracovníci budou dotázáni na povahu jejich vzájemné spolupráce. Průzkumy budou probíhat přibližně každé tři měsíce. Konstrukce průzkumu jsou popsány v ukazatelích výsledků. Chybějící data budou zpracována pomocí vícenásobného imputování, protože to je nejlepší postup, když data nechybí náhodně. Víceúrovňové modelování bude použito ke zkoumání jednotlivých trajektorií ve výsledných proměnných. Vícenásobná regrese bude zkoumat změny mezi vybranými časovými body; například, zda se udávané politické dovednosti výzkumníků zlepšují mezi výchozím stavem a po školeních. Tyto analýzy nám umožní prozkoumat, zda je účast RPC spojena se zvýšením (1) uváděné efektivnosti výzkumných pracovníků v kontaktu s tvůrci politik, (2) zájmem a ochotou pracovníků legislativy využívat výzkumné důkazy a (3) jak výzkumníky, tak tvůrci politik. pozitivní sentiment ke spolupráci. Podélné analýzy nám dále umožní prozkoumat trajektorii výsledných proměnných v čase (např. zlepšené kompetence výzkumníků, zákonodárci využívající výzkum) – konkrétně modelování změn v používání důkazů a dalších zajímavých výstupů. Analýzy výsledků výzkumných pracovníků a legislativních pracovníků jsou všechny poháněny alespoň na 90% úrovni, aby detekovaly velikosti efektů 0,2 nebo větší (analýza výkonu prováděná pomocí Optimal Design plus Empirical Evidence).

Složka studie 2: Kvantitativní vyhodnocení pozorovaného dopadu RPC na legislativní činnost K doplnění kvantitativního hodnocení změn, které si sami hlásili, bude před a po účasti RPC pozorováno použití výzkumných důkazů v legislativních činnostech. Data budou vybrána, extrahována a kódována před kvantitativní analýzou s indikátory odvozenými z deduktivních kódů. Legislativní údaje budou vybrány na základě použití klíčových slov označujících význam pro dítě/rodinu. Protože každý návrh zákona bude obsahovat více textu, než je možné kódovat tradičními kvalitativními metodami, budou před kódováním extrahována příslušná ustanovení (ta, která obsahují klíčová slova). Dále budou zkontrolovány všechny názvy pododdílů pro každý vzorový návrh zákona z hlediska potenciální relevance a budou extrahovány, pokud jsou použity výzkumné důkazy, ale nejsou jinak zachyceny klíčovými slovy. Údaje o legislativní činnosti budou kódovány na základě podrobného číselníku informovaného o předchozích zjištěních o tom, jak byl výzkum využíván tvůrci politik a v legislativě. Toto kódovací schéma bude aplikováno dvěma kodéry a číselník bude revidován a dále upřesňován, dokud spolehlivost interkodéru nedosáhne alespoň 0,70 a bude zakódováno 30 % dat pro první časové období. Následně budou vyškolení kodéři kódovat individuálně a vedoucí výzkumník náhodně odebere 10 % z nich, aby byla zajištěna konzistentnost kvality kódování. Tyto kódy budou převedeny na kvantitativní ukazatele využití výzkumu, které jsou popsány v ukazatelích výsledků. Legislativní činnost bude každoročně vyhodnocována. Vícerozměrné Poissonovy regresní analýzy posoudí změnu ve výzkumném použití v tematických kódech (1) účtů a (2) oficiálních prohlášení mezi intervencí RPC a podmínkami kontroly. Analýza moderování dále prozkoumá, do jaké míry závisí změny v legislativní činnosti na povaze zkušeností se spoluprací, dalších údajích z průzkumu (např. vnímání hodnoty výzkumu ze strany tvůrců politik) a charakteristikách zákonodárců (např. stranická příslušnost, věk). .

Složka studie 3: Etnografické hodnocení modelu RPC Kvalitativní složka této studie je úzce spojena s kvantitativní prací a snaží se lépe porozumět zkušenostem účastníků RPC a procesům, které jsou základem použití výzkumných důkazů v kontextu RPC. Pomocí participativních a etnografických metod budou shromažďována data ze dvou zdrojů: (1) polostrukturované rozhovory s účastníky studie a pracovníky RPC a (2) pozorování školení výzkumníků a setkání výzkumníků s pracovníky. Účastníci pohovoru budou vybráni ze skupiny účastníků studie náhodně přidělených k získání RPC, včetně 11 výzkumníků RPC a 11 zaměstnanců kongresové kanceláře RPC, kteří budou dotazováni před jejich zapojením do RPC, a 11 výzkumníků RPC a 11 zaměstnanců kongresové kanceláře, kteří bude pohovor po spolupráci prostřednictvím RPC. Kromě toho budou před a po RPC vyslechnuti 3 zaměstnanci RPC. Aby bylo možné získat další vhled do operací a dopadů RPC, budou prováděna pozorování školení pro výzkumné pracovníky, formální setkání a neformální interakce mezi výzkumnými pracovníky a zaměstnanci Kongresu a setkání, která se konají jako součást jakékoli spolupráce RPC. V souladu s etnografickými osvědčenými postupy budou prováděna „otevřená pozorování“ klíčových schůzek a školení, aby se rozhovory obohatily o další informace o tom, jak účastníci interagují a jak reagují na RPC. Terénní poznámky a přepisy budou analyzovány pomocí tematické analýzy a analýzy interpretační politiky, která zkoumá různé racionality a rétoriku při projednávání důkazů používaných při spolupráci.