Активы для оценки независимости (AFI)

Оценка «Активы для независимости» (AFI) проводится на двух объектах. Оба сайта расположены в крупных мегаполисах на юго-западе США и обслуживают клиентов, на 60-75 процентов состоящих из латиноамериканцев. Обе программы имеют некоторые схожие характеристики: максимальный период накопления составляет 24 месяца и соответствующие суммы сбережений до 1000 долларов США. Важное значение для оценки различий в конструктивных особенностях имеют также ключевые различия в параметрах программы: требуемые часы финансового образования и показатели соответствия IDA. Сайты регистрировали свои образцы в течение 19 месяцев с января 2013 года по июль 2014 года. Члены выборки в каждом центре были случайным образом распределены по двум группам одинакового размера: экспериментальная группа (те, кто мог участвовать в программе IDA сайта) и контрольная группа (те, кто не мог участвовать).

ИССЛЕДОВАНИЕ ВОЗДЕЙСТВИЯ

Исследование воздействия является основным количественным компонентом исследования. Сбор и анализ данных позволят оценить влияние участия IDA на краткосрочные и долгосрочные результаты клиентов, измеряемые в течение 12-месячного, 36-месячного и 60-месячного периодов наблюдения.

Результаты участников будут измеряться во время случайного распределения и через 12, 36 и 60 месяцев после случайного распределения. Меры, относящиеся к краткосрочным эффектам программы, включают объем сбережений и предотвращение материальных трудностей. Это эффекты, которые, скорее всего, проявятся в течение первого года. Дополнительные меры включают статус занятости, заработок, получение государственных пособий с проверкой нуждаемости и собственный капитал. В долгосрочной перспективе, вероятно, проявятся последствия для домовладения, владения бизнесом и получения среднего образования.

Неизученной областью краткосрочных эффектов МАР является использование непревзойденных сбережений для удовлетворения чрезвычайных потребностей. На ранних этапах участия в AFI домохозяйства могут выработать привычку к сбережениям, но им может понадобиться использовать свои сбережения для покрытия непредвиденных расходов или для компенсации непредвиденного падения доходов. Предполагаемый эффект такого непревзойденного изъятия депозитов МАР заключается в том, чтобы избежать материальных трудностей в плане питания и здоровья. Этот эффект будет оцениваться с использованием небольшого набора вопросов обследования на уровне домохозяйств, включая некоторые пункты, взятые из тематического модуля по благополучию взрослых Обследования доходов и участия в программах (SIPP).

RTI International разработала веб-инструмент для регистрации выборки для сотрудников проекта IDA в каждом центре, чтобы использовать его при администрировании информированного согласия, базового вопросника и случайного распределения для каждого кандидата, имеющего право на участие в исследовании. 30-минутный базовый вопросник исследования собирал информацию в следующих модулях опроса: демография, использование финансовых услуг, текущее место жительства, занятость, доходы и расходы домохозяйства, финансовый опыт и активы, долги, материальные трудности, социальная активность и перспективы, а также информация о местонахождении. (в целях повторного контакта с респондентом для последующих обследований). Предоставленные сайтом административные данные обеспечат дополнительные исходные ковариаты и (для лечебных случаев) описательную информацию об открытиях, депозитах, выводах средств IDA (совпадающих и несовпадающих) и остатках.

Обратите внимание, что показатели на уровне отдельных лиц относятся к «основному члену домохозяйства»: первому лицу из его/ее домохозяйства, подавшему заявку на участие в программе IDA в течение периода зачисления в исследование. Этот человек является респондентом для исходного вопросника и последующих обследований. Если другие (второстепенные) члены того же домохозяйства впоследствии подают заявку на участие в программе IDA данного учреждения, они не подлежат отдельному распределению в случайном порядке (и не добавляются к подсчету выборки), а считаются включенными в ту же группу выборки ( лечение или контроль) в качестве основного члена. Результаты на уровне домохозяйства измеряются для домохозяйства, к которому принадлежит основной член.

Последующие опросы позволяют получить результаты и другие контекстуальные измерения. Опросы занимают 30 минут и проводятся по телефону, через Интернет или лично с интервьюером. Респондентом является основной член выборки, тот же человек, который подал заявку на участие в проекте AFI и заполнил форму информированного согласия и базовую анкету. Опросы получают данные о показателях результатов в рамках тех же тематических рубрик, что и показанные выше для базового вопросника.

При оценке воздействия программы будут использоваться традиционные методы многомерной регрессии в зависимости от статистических свойств зависимой переменной (непрерывная, дихотомическая или полиномиальная). Для каждого критерия исхода ключевым параметром, подлежащим оценке, является коэффициент при случайно назначенном (лечение или контроль) статусе случая. Этот коэффициент указывает разницу между лечением и контролем, скорректированную на регрессию, в измеренном результате. Все оценочные уравнения будут включать ковариаты, измеренные с помощью базового вопросника. Оцениваемый программный эффект представляет собой эффект намерения лечить (ITT), сравнивая результаты между случаями контрольной группы и всеми случаями группы лечения, независимо от того, открывает ли случай лечения учетную запись IDA. Иными словами, эта процедура дает оценку эффекта предложения участия в ЖДА, поскольку не все члены лечебной группы откроют ЖДА. Мы также оценим эффект «лечение на леченных» (ТОТ) (т. е. влияние программы на тех, кто ее завершает).

При решении первого исследовательского вопроса — влияния участия AFI на результаты, для которых оно предназначено (например, сбережения и покупка активов), — мы оценим эффект программы отдельно по сайту, а также по объединенной выборке, объединяющей данные обоих места. Объединенные выборочные данные обеспечат наиболее точную единую оценку эффекта программы, полностью используя все доступные выборочные наблюдения.

Второй исследовательский вопрос, касающийся воздействия на другие области результатов, на которые может повлиять программа (например, материальные трудности, использование альтернативных финансовых продуктов, экономическое благополучие), также будет решаться путем оценки воздействия на объединенную выборку и отдельно по местам.

В рамках исследовательского вопроса 3 мы проверим различия в воздействии программы на подгруппы участников. Интересующие подгруппы будут определены на основе исходных данных. Мы ожидаем, что эти подгруппы будут отражать такие различия, как возраст, первоначальный уровень дохода, первоначальная задолженность, начальный уровень образования или первоначальный статус домовладельца.

ИССЛЕДОВАНИЕ РЕАЛИЗАЦИИ

В исследовании реализации будет описано и задокументировано, как проект AFI разработан, реализован и работает на участвующих объектах-грантополучателях. Эта информация обеспечит контекст для понимания результатов анализа воздействия. Основной подход к сбору данных включал посещение объектов грантополучателей AFI, включая интервью с ключевыми администраторами, персоналом и заинтересованными сторонами; наблюдения за услугами грантополучателей; и обзоры соответствующих документов и данных.

Визиты к выбранным грантополучателям AFI длились два дня каждое и происходили в течение 2014 года. Находясь на месте, мы провели полуструктурированные личные интервью с людьми, выполняющими разные роли, чтобы получить различные точки зрения на проект AFI, включая сотрудников грантополучателей IDA, поставщиков услуг финансового образования и представителей партнерских организаций.

В интервью рассматриваются вопросы, связанные с разработкой и реализацией проекта AFI, проблемы, с которыми сталкиваются проекты, и их стратегии по их преодолению, а также другие факторы, которые могут быть не учтены в количественном анализе, но могут повлиять на результаты проекта. Вопросы о дизайне и реализации основаны на информации, собранной во время выбора площадки, обучения на площадке, первоначальных случайных назначений и контрольных звонков, и касаются того, произошли ли изменения в проекте, как и почему. Путем выбора места и интервью с персоналом на месте мы получили информацию об организационной стабильности и потенциале, уровне сложности проекта МАР, количестве и степени участия персонала, а также наборе участников. Конкретные вопросы включали: Какие информационные мероприятия вы проводили, чтобы информировать людей о вашем проекте МАР? Какие формы поддержки программы предоставляются владельцам счетов IDA? Как часто сотрудники проекта AFI связываются с участниками после того, как они откроют счет? Какие услуги программы, не относящиеся к IDA, были доступны членам группы сравнения через вашу организацию? Считаете ли вы, что есть какие-либо важные последствия (положительные или отрицательные) вашего проекта AFI для участников помимо измеряемых результатов, которые мы отслеживаем в ходе оценки?

В дополнение к опросу респондентов о проблемах, с которыми они сталкиваются, интервью с администраторами проектов МАР и персоналом дополнительно исследуют такие проблемы, как помощь участникам в достижении реалистичных целей сбережений, ориентироваться в требованиях различных источников финансирования и требованиях, привлекать нефедеральные средства и справляться с ограниченными средствами. на административные расходы. В интервью также исследуются внешние факторы или особые обстоятельства, которые могут повлиять на результаты проекта. Эта информация будет иметь жизненно важное значение как для интерпретации результатов анализа воздействия, так и для распространения результатов на другие сайты. Принципиально важно понять, почему программа привела к предполагаемому воздействию на участников и можно ли воспроизвести такое воздействие где-либо еще. Наконец, интервью дают респондентам возможность определить нематериальные результаты, как положительные, так и отрицательные, которые они считают важными, но которые могут быть не отражены в формальном анализе воздействия, и помогают определить истории участников, которыми можно поделиться.

Во время посещений объектов мы наблюдали за уроками финансового образования и другим взаимодействием участников проекта, чтобы понять, что на самом деле происходит во время предоставления услуг по проекту. Наблюдения проводились по заранее определенным темам, которые соответствовали конкретным проблемам исследования, и наблюдатели были максимально ненавязчивыми. Наблюдения дадут представление о том, как конкретные аспекты проекта могут повлиять на результаты участников.

Исследование реализации также будет включать обзор документов, чтобы понять, как административная структура проекта AFI и структура проекта могут повлиять на результаты проекта. Письменная документация о количестве и ролях сотрудников и волонтеров, участвующих в проекте IDA и в самой организации, правилах проекта и общих целях и задачах проекта задаст контекст для определения переменных, которые могут повлиять на результаты участников. Коммуникационные материалы проекта, предоставляемые участникам проекта, такие как листовки по набору персонала, ознакомительные материалы и приветственные письма программы, будут собираться для понимания сообщений проекта. Кроме того, мы получаем данные, которые собирают проекты, например, данные об использовании услуг.