Оценка модели сотрудничества между исследованиями и политикой (RPC)

Цель: Целью данного исследования является изучение эффективности модели поддержки использования лицами, определяющими политику, научных данных в рамках рандомизированного контролируемого исследования (РКИ) с использованием как качественного, так и количественного анализа данных опросов, интервью и наблюдений, чтобы понять использование исследования в области политики и сотрудничества. Использование законодателями исследований будет оцениваться с помощью нескольких методов, включая (1) самоотчет с помощью протокола опроса, (2) законодательную деятельность (т. е. внесенные законопроекты и официальные заявления) и (3) качественные интервью. Кроме того, в ходе интервью и опросов будет оцениваться заявленная исследователями эффективность, навыки и участие в государственной политике, а также степень, в которой их работа зависит от политического процесса.

Вмешательство: Сотрудничество между исследованиями и политикой (RPC) основано на теоретической и эмпирической литературе, которая предполагает необходимость (а) перевода исследований, имеющих отношение к текущим политическим приоритетам, и (б) содействия продуктивному взаимодействию между политиками и исследователями. RPC — это беспристрастная ручная модель, реализуемая посреднической организацией, которая развивает отношения между исследователями и законодательными органами. Реализация осуществляется в два этапа, включающих серию из семи взаимосвязанных действий. На этапе наращивания потенциала RPC одновременно стремится поддерживать развитие у исследователей навыков честного брокера знаний с помощью обучения и коучинга, а также проводит повторяющиеся оценки потребностей с офисами Конгресса в отношении их текущих приоритетов и желания получить исследовательские данные. На этапе сотрудничества исследователи с соответствующим опытом объединяются в группы быстрого реагирования, которые сотрудничают с законодательными органами. Благодаря серии взаимодействий модель RPC используется для развития продуктивных отношений между исследователем и разработчиком политики и поддержки ответов на законодательные запросы. Оценка эффективности RPC находится в центре внимания текущего исследования.

Дизайн исследования:

В этом исследовании используется как качественный, так и количественный анализ данных опросов, интервью и наблюдений в контексте РКИ. Эта работа направляется тремя всеобъемлющими исследовательскими вопросами, которые соответствуют трем различным компонентам исследования: самоотчет с помощью количественного опроса, наблюдение за использованием исследований с помощью закодированной законодательной деятельности и этнография с помощью подробных интервью и наблюдений за участниками.

1. Как RPC влияет на исследователей и законодателей? (Самоотчет)

   1. Сообщают ли исследователи об улучшении политических компетенций и мотивации для проведения исследований, имеющих отношение к политике?
   2. Будут ли сотрудники законодательного органа сообщать об увеличении положительного отношения к знанию, предполагаемому применению и фактическому использованию данных исследований?
   3. Может ли влияние на законодательных органов и участников исследований различаться в зависимости от аспектов их отношений сотрудничества (например, усиление взаимного доверия)?

2. Как ПКР влияет на законотворческую деятельность? (Наблюдение)

   а) Будут ли офисы Конгресса расширять использование данных исследований в законодательной деятельности (т. е. законопроектов, официальных заявлений)?

3. Как восприятие и опыт сотрудничества в рамках RPC могут соотноситься с различными формами использования фактических данных исследователями и политиками? (этнография)

   1. Каковы барьеры и факторы участия в СРП?
   2. На какие типы взаимодействия между исследователями и политиками влияет RPC?
   3. Как RPC влияет на предположения участников друг о друге, взаимодействие друг с другом и их намерения?
   4. Какие типы использования доказательств поддерживаются участием RPC?

Структура выборки Все компоненты исследования основаны на исходной структуре выборки, в соответствии с которой исследователям и сотрудникам Конгресса, решившим участвовать в RPC, будет предложено принять участие в исследовании; те, кто согласится участвовать в исследовании, будут рандомизированы либо для полного вмешательства RPC, либо для легкой контрольной группы, которая получает небольшое прямое участие. В этом исследовании будет избыточная выборка для борьбы с ожидаемым истощением. Окончательная выборка включает 96 офисов конгресса (48 в RPC, 48 в контрольной группе) и 226 исследователей (151 в RPC, 75 в контрольной группе). Эти образцы были получены из определенной популяции подходящих участников вмешательства.

• Население соответствующих законодательных органов (Сенат и Палата представителей) будет определено на основе количества законопроектов о детях/семьях, которые законодатель (со)инициировал. Процесс случайного отбора будет стратифицирован для обеспечения пропорционального партийного представительства и представительства законодателей, занимающихся деятельностью, связанной с защитой детей. Перед рандомизацией совокупности соответствующих законодателей будет присвоен рейтинг активности на основе того, сколько раз законодатель спонсировал законопроект о политике в отношении детей / семьи. Рейтинги деятельности будут варьироваться от 1 до 10, так что 10% законодателей, которые (со)инициировали наименьшее количество законопроектов, будут иметь рейтинг 1, а 10% законодателей, которые выступили соавторами большинства законопроектов, будут иметь рейтинг 10. Рекрутинг и стратифицированная выборка по всему континууму деятельности по детской/семейной политике улучшит двухпартийное представительство выборки. Кроме того, двухпартийному представительству помогают целенаправленные информационно-просветительские мероприятия, которые активизируются по партийной линии, если участие становится перекошенным.
• Исследователи, которые работают над соответствующими исследованиями детей/семей, будут определены с помощью исследовательских институтов, профессиональных сетей и списков рассылки, поиска литературы и направлений от других исследователей. В число исследователей входят ориентированные на исследования практики и оценщики программ как из академических, так и из неакадемических кругов, которые заинтересованы в передаче своего опыта политикам. После согласия на участие в политическом вмешательстве исследователей просят принять участие в исследовании. Участники исследования будут рандомизированы для получения RPC или контрольного состояния.

Компонент исследования 1: Количественная оценка самоотчетов о воздействии RPC Структурированный опрос будет использоваться для оценки способности исследователей участвовать в процессах государственной политики. Соответствующий протокол опроса будет оценивать отношение, знания, намерения и поведение сотрудников законодательного органа в отношении использования данных исследований. И исследователям, и законодательным работникам будет задан вопрос о характере их взаимодействия друг с другом. Опросы будут проводиться примерно раз в три месяца. Конструкции опроса описываются в показателях результатов. Отсутствующие данные будут обрабатываться с множественным вменением, потому что это наилучшая практика, когда данные не пропадают случайно. Многоуровневое моделирование будет использоваться для изучения индивидуальных траекторий переменных результатов. Множественная регрессия исследует изменения между выбранными временными точками; например, улучшаются ли политические навыки исследователей, о которых сообщают, между исходным уровнем и после тренингов. Этот анализ позволит нам изучить, связано ли участие RPC с повышением (1) сообщаемой исследователями эффективности взаимодействия с политиками, (2) интересом и готовностью сотрудников законодательного органа использовать данные исследований и (3) заинтересованностью как исследователей, так и политиков. позитивное отношение к совместной работе. Продольный анализ также позволит нам изучить траекторию переменных результатов с течением времени (например, повышение квалификации исследователей, использование исследований законодателями), специально моделируя изменения в использовании фактических данных и другие интересующие результаты. Все анализы результатов исследователей и сотрудников законодательных органов имеют мощность не менее 90% для определения размера эффекта 0,2 или выше (анализ мощности, проведенный с помощью оптимального дизайна плюс эмпирические данные).

Компонент исследования 2: Количественная оценка наблюдаемого воздействия ПКР на законодательную деятельность В дополнение к количественной оценке изменений, о которой сообщают сами участники, будет наблюдаться использование данных исследований в законодательной деятельности до и после участия ПКР. Данные будут отобраны, извлечены и закодированы до проведения количественного анализа с использованием индикаторов, полученных с помощью дедуктивных кодов. Законодательные данные будут отобраны на основе использования ключевых слов, указывающих на отношение к ребенку/семье. Поскольку каждый законопроект будет содержать больше текста, чем возможно закодировать с помощью традиционных качественных методов, соответствующие положения будут извлечены до кодирования (те, которые содержат ключевые слова). Кроме того, все заголовки подразделов для каждого счета, включенного в выборку, будут проверены на предмет потенциальной релевантности и извлечены, если используются данные исследования, но не фиксируются другими ключевыми словами. Данные о законодательной деятельности будут кодироваться на основе подробной кодовой книги, основанной на предыдущих выводах о том, как исследования использовались политиками и в законодательстве. Эта схема кодирования будет применяться двумя кодировщиками, а кодовая книга будет пересматриваться и уточняться до тех пор, пока надежность интеркодера не достигнет по крайней мере 0,70 и не будет закодировано 30% данных за первый период времени. Впоследствии обученные кодировщики будут кодировать индивидуально, а ведущий исследователь случайным образом выберет 10% из них, чтобы обеспечить согласованность качества кодирования. Эти коды будут преобразованы в количественные показатели использования исследований, которые описаны в показателях результатов. Законодательная деятельность будет оцениваться ежегодно. Многомерный регрессионный анализ Пуассона позволит оценить изменения в использовании исследований в тематических кодах (1) счетов и (2) официальных заявлений между вмешательством RPC и условиями контроля. Анализ модерации позволит дополнительно изучить, в какой степени изменения в законодательной деятельности зависят от характера опыта сотрудничества, других данных опроса (например, восприятия политиками ценности исследований) и характеристик законодателя (например, партийная принадлежность, возраст). .

Компонент исследования 3: Этнографическая оценка модели РПЦ Качественный компонент данного исследования тесно связан с количественной работой и направлен на лучшее понимание опыта участников РПЦ и процессов, лежащих в основе использования данных исследований в контексте РПЦ. Используя партисипативные и этнографические методы, данные будут собираться из двух источников: (1) полуструктурированные интервью участников испытаний и сотрудников RPC и (2) наблюдения за тренингами исследователей и встречами исследователей с сотрудниками. Участники интервью будут выбраны из группы участников исследования, случайным образом назначенных для получения RPC, включая 11 исследователей RPC и 11 сотрудников офиса Конгресса RPC, которые будут опрошены до их участия в RPC, а также 11 исследователей RPC и 11 сотрудников офиса Конгресса, которые будут опрошены после совместной деятельности через RPC. Кроме того, 3 сотрудника ПКР будут опрошены до и после ПКР. Чтобы получить дополнительное представление о деятельности и влиянии RPC, будут проводиться наблюдения за тренингами для исследователей, формальными встречами и неформальными взаимодействиями между исследователями и сотрудниками Конгресса, а также встречами, которые происходят в рамках любого сотрудничества RPC. В соответствии с передовым этнографическим опытом будут проводиться «открытые наблюдения» за ключевыми встречами и обучающими мероприятиями, чтобы обогатить интервью дополнительной информацией о том, как участники взаимодействуют и как они реагируют на RPC. Полевые заметки и стенограммы будут проанализированы с помощью тематического анализа и анализа политики интерпретации, который исследует различные рациональности и риторику при обсуждении доказательств, используемых в сотрудничестве.