Aktywa do oceny niezależności (AFI)

Ocena Assets for Independence (AFI) jest prowadzona w dwóch lokalizacjach. Obie placówki znajdują się w głównych obszarach metropolitalnych południowo-zachodnich Stanów Zjednoczonych i obsługują populacje klientów, które w 60-75 procentach stanowią Latynosi. Oba mają podobne cechy programu: maksymalny okres oszczędzania wynoszący 24 miesiące i możliwe do dopasowania kwoty oszczędności do 1000 USD. Ważne dla oszacowania różnic w funkcjach projektu są również kluczowe różnice w parametrach programu: wymagane godziny edukacji finansowej i współczynniki dopasowania IDA. Witryny zarejestrowały swoje próbki w okresie 19 miesięcy od stycznia 2013 do lipca 2014. Próbni członkowie w każdym ośrodku zostali losowo przydzieleni do dwóch równych grup: grupy terapeutycznej (osoby, które mogły wejść do programu IDA) i grupy kontrolnej (osoby, które nie mogły wejść).

BADANIE WPŁYWU

Badanie wpływu jest podstawowym elementem ilościowym badania. Gromadzenie i analiza danych zapewni oszacowanie wpływu udziału IDA na krótko- i długoterminowe wyniki klientów, mierzone w 12-miesięcznych, 36-miesięcznych i 60-miesięcznych okresach obserwacji.

Wyniki uczestników zostaną zmierzone w czasie losowego przydziału oraz 12, 36 i 60 miesięcy po losowym przydziale. Miary odnoszące się do krótkoterminowych efektów programu obejmują wysokość oszczędności i unikanie trudności materialnych. Są to efekty, które najprawdopodobniej pojawią się w ciągu pierwszego roku. Dodatkowe miary obejmują status zatrudnienia, zarobki, wpływy z świadczeń publicznych uzależnione od dochodów i majątek netto. W dłuższej perspektywie prawdopodobnie pojawią się skutki dla posiadania domu, własności firmy i poziomu wykształcenia średniego.

Niezbadanym obszarem krótkoterminowych skutków IDA jest wykorzystanie niezrównanych oszczędności na zaspokojenie potrzeb kryzysowych. Na wczesnych etapach uczestnictwa w AFI gospodarstwa domowe mogą ustanowić nawyk oszczędzania, ale mogą potrzebować wykorzystać swoje oszczędności na nieoczekiwane wydatki lub zrekompensować nieprzewidziany spadek dochodów. Hipotetycznym skutkiem takich niezrównanych wypłat depozytów IDA jest uniknięcie trudności materialnych w żywności i zdrowiu. Efekt ten zostanie oszacowany przy użyciu niewielkiego zestawu pytań ankiety na poziomie gospodarstw domowych, w tym niektórych elementów pochodzących z modułu tematycznego dotyczącego dobrostanu osób dorosłych w ankiecie dotyczącej dochodów i uczestnictwa w programach (SIPP).

RTI International opracował internetowe narzędzie do rejestracji próbek dla personelu projektu IDA w każdym ośrodku do wykorzystania w administrowaniu świadomą zgodą, podstawowym kwestionariuszem i losowym przydziałem dla każdego kwalifikującego się do badania wnioskodawcy. 30-minutowy podstawowy kwestionariusz badania zebrał informacje w następujących modułach ankiety: dane demograficzne, korzystanie z usług finansowych, obecne miejsce zamieszkania, zatrudnienie, dochody i wydatki gospodarstwa domowego, doświadczenie finansowe i majątek, długi, trudności materialne, zaangażowanie społeczne i perspektywy oraz informacje o lokalizacji (w celu ponownego kontaktu z respondentem w celu przeprowadzenia ankiet uzupełniających). Dane administracyjne dostarczane przez witrynę dostarczą dodatkowych współzmiennych bazowych i (w przypadku leczenia) opisowych informacji na temat otwarć IDA, depozytów, wypłat (dopasowanych i niedopasowanych) oraz sald.

Należy zauważyć, że miary na poziomie osoby są specyficzne dla „głównego członka gospodarstwa domowego”: pierwszej osoby ze swojego gospodarstwa domowego, która złożyła wniosek o udział w programie IDA w okresie zapisów na badanie. Ta osoba jest respondentem kwestionariusza podstawowego i ankiet uzupełniających. Jeżeli inni (drugorzędni) członkowie tego samego gospodarstwa domowego zgłoszą następnie wniosek o przystąpienie do programu IDA obiektu, nie podlegają oni oddzielnie losowemu przydzieleniu (i nie są doliczani do liczby próbek), ale uważa się, że zostali przydzieleni do tej samej grupy próbnej ( leczenie lub kontrola) jako główny członek. Wyniki na poziomie gospodarstwa domowego są mierzone dla gospodarstwa domowego, do którego należy główny członek.

Ankiety uzupełniające uzyskują wyniki i inne miary kontekstowe. Ankiety trwają 30 minut i są przeprowadzane przez telefon, Internet lub osobiście. Respondentem jest główny członek próby, ta sama osoba, która złożyła wniosek o przystąpienie do projektu AFI i która wypełniła formularz świadomej zgody oraz podstawowy kwestionariusz. Ankiety pozwalają uzyskać dane dotyczące miar wyników, w ramach tych samych nagłówków tematycznych, jak pokazano wcześniej w kwestionariuszu bazowym.

Oszacowanie wpływu programu będzie wykorzystywać konwencjonalne techniki regresji wielowymiarowej odpowiednio do właściwości statystycznych zmiennej zależnej (ciągła, dychotomiczna lub wielomianowa). Dla każdej miary wyniku kluczowym parametrem, który należy oszacować, jest współczynnik losowo przypisanego (leczenie vs. kontrola) statusu przypadku. Współczynnik ten wskazuje skorygowaną o regresję różnicę między leczeniem a kontrolą w zmierzonym wyniku. Wszystkie równania szacunkowe będą zawierać współzmienne mierzone za pomocą kwestionariusza podstawowego. Oszacowany efekt programu to efekt zamiaru leczenia (ITT), porównujący wyniki między przypadkami z grupy kontrolnej a wszystkimi przypadkami z grupy terapeutycznej, niezależnie od tego, czy przypadek terapeutyczny otwiera konto IDA. Innymi słowy, ta procedura daje oszacowanie efektu oferty uczestnictwa w ADR, ponieważ nie wszyscy członkowie grupy terapeutycznej otworzą IDA. Oszacujemy również efekt leczenia po leczeniu (TOT) (tj. wpływ programu na osoby, które go ukończą).

Odnosząc się do pierwszego pytania badawczego — wpływu udziału AFI na wyniki, do których ma się odnosić (np. witryny. Połączone dane z próby dostarczą najdokładniejszego pojedynczego oszacowania efektu programu, w pełni wykorzystując wszystkie dostępne obserwacje z próby.

Drugie pytanie badawcze — dotyczące wpływu programu na inne domeny wynikowe (np. trudności materialne, korzystanie z alternatywnych produktów finansowych, dobrobyt ekonomiczny) — zostanie również uwzględnione poprzez oszacowanie wpływu na zbiorczą próbę i oddzielnie dla poszczególnych ośrodków.

W ramach pytania badawczego 3 przetestujemy wpływ różnych programów na podgrupy uczestników. Podgrupy będące przedmiotem zainteresowania zostaną zidentyfikowane na podstawie danych wyjściowych. Przewidujemy, że te podgrupy będą odzwierciedlać takie różnice, jak wiek, początkowy poziom dochodów, początkowe zadłużenie, początkowy poziom wykształcenia lub początkowy status posiadania domu.

STUDIUM WDROŻENIOWE

Badanie wdrożeniowe opisze i udokumentuje, w jaki sposób projekt AFI jest projektowany, wdrażany i obsługiwany w uczestniczących lokalizacjach beneficjentów. Informacje te zapewnią kontekst dla zrozumienia wniosków z analizy wpływu. Główne podejście do gromadzenia danych obejmowało wizyty na miejscu u stypendystów AFI, które obejmowały wywiady z kluczowymi administratorami, personelem i zainteresowanymi stronami; obserwacje usług beneficjentów; oraz przeglądy odpowiednich dokumentów i danych.

Wizyty na miejscu u wybranych stypendystów AFI trwały dwa dni i miały miejsce w 2014 r. Na miejscu przeprowadziliśmy częściowo ustrukturyzowane wywiady osobiste z osobami pełniącymi różne role, aby uzyskać różne punkty widzenia na projekt AFI, w tym z pracownikami stypendysty IDA, dostawcami edukacji finansowej i przedstawicielami organizacji partnerskich.

Wywiady badają kwestie związane z projektowaniem i wdrażaniem projektu AFI, wyzwania stojące przed projektami i strategie ich przezwyciężenia oraz inne czynniki, których nie można uchwycić w analizie ilościowej, ale mogą mieć wpływ na wyniki projektu. Pytania dotyczące projektowania i wdrażania opierają się na informacjach zebranych podczas wyboru lokalizacji, szkolenia na miejscu, wstępnych losowych przydziałów i wezwań monitorujących oraz dotyczą tego, czy, jak i dlaczego nastąpiły zmiany w projekcie. Poprzez wybór lokalizacji i wywiady na miejscu z pracownikami uzyskaliśmy informacje na temat stabilności i potencjału organizacyjnego, poziomu złożoności projektu IDA, liczby personelu i stopnia zaangażowania personelu oraz rekrutacji uczestników. Szczegółowe pytania obejmowały: Jakie działania informacyjne przeprowadziłeś, aby poinformować osoby prywatne o swoim projekcie IDA? Jakie formy wsparcia programu są dostępne dla posiadaczy kont ARP? Jak często personel projektu AFI kontaktuje się z uczestnikami po otwarciu przez nich konta? Jakie usługi spoza programu IDA były dostępne dla członków grupy porównawczej za pośrednictwem Twojej organizacji? Czy uważasz, że istnieją jakieś ważne skutki (pozytywne lub negatywne) Twojego projektu AFI dla uczestników poza mierzonymi wynikami, które śledzimy w ramach ewaluacji?

Oprócz pytania respondentów o wyzwania, przed którymi stoją, wywiady z administratorami projektów IDA i personelem badają dalej wyzwania, takie jak pomoc uczestnikom w osiągnięciu realistycznych celów oszczędnościowych, poruszanie się po wymaganiach różnych źródeł finansowania i wymaganiach, pozyskiwanie funduszy niefederalnych i radzenie sobie z ograniczonymi funduszami na koszty administracyjne. Wywiady badają również czynniki zewnętrzne lub szczególne okoliczności, które mogą mieć wpływ na wyniki projektu. Informacje te będą miały kluczowe znaczenie zarówno dla interpretacji wyników analizy wpływu, jak i dla możliwości uogólnienia wyników na inne obiekty. Fundamentalnie ważne będzie zrozumienie, dlaczego program przyniósł szacunkowe skutki dla uczestników i czy takie efekty można powielić gdzie indziej. Wreszcie, wywiady dają respondentom możliwość zidentyfikowania niematerialnych rezultatów, zarówno pozytywnych, jak i negatywnych, które ich zdaniem są znaczące, ale których nie można ująć w formalnej analizie wpływu, oraz pomagają zidentyfikować historie uczestników, którymi można się podzielić.

Podczas wizyt na miejscu obserwowaliśmy zajęcia z edukacji finansowej i inne interakcje między uczestnikami projektu, aby uchwycić to, co faktycznie dzieje się podczas świadczenia usług projektowych. Obserwacje były kierowane przez z góry określone tematy, które odwzorowują konkretne zagadnienia badawcze, a obserwatorzy byli tak dyskretni, jak to tylko możliwe. Obserwacje zapewnią wgląd w to, jak poszczególne aspekty projektu mogą wpływać na wyniki uczestników.

Badanie wdrożenia obejmie również przegląd dokumentów, aby zrozumieć, w jaki sposób struktura administracyjna projektu AFI i projekt projektu mogą wpływać na wyniki projektu. Pisemna dokumentacja dotycząca liczby i ról pracowników i wolontariuszy zaangażowanych w projekt IDA oraz w samą organizację, zasad projektu oraz ogólnych celów i celów projektu stworzy kontekst dla identyfikacji zmiennych, które mogą mieć wpływ na wyniki uczestników. Materiały komunikacyjne dotyczące projektu dostarczane uczestnikom projektu, takie jak ulotki rekrutacyjne, materiały wprowadzające i listy powitalne dotyczące programu, zostaną zebrane w celu zrozumienia komunikatów projektu. Ponadto pozyskujemy dane, które gromadzą projekty, takie jak dane dotyczące absorpcji usług.