Omaisuus itsenäisyyden arviointiin (AFI)

Assets for Independence (AFI) -arviointi on käynnissä kahdella paikkakunnalla. Molemmat sivustot sijaitsevat lounais-Yhdysvaltojen suurilla suurkaupunkialueilla ja palvelevat asiakkaita, joista 60–75 prosenttia on latinalaisamerikkalaisia. Molemmilla on joitain samanlaisia ​​​​ohjelman ominaisuuksia: maksimi säästöjaksot 24 kuukautta ja vastaavat säästösummat jopa 1 000 dollaria. Suunnitteluominaisuuksien erojen arvioinnin kannalta tärkeitä eroja ovat myös ohjelman parametrit: vaaditut talouskoulutuksen tunnit ja IDA-vastaavuusprosentit. Sivustot rekisteröivät näytteensä 19 kuukauden aikana tammikuusta 2013 heinäkuuhun 2014. Näytteen jäsenet kussakin paikassa jaettiin satunnaisesti kahteen samankokoiseen ryhmään: hoitoryhmään (jotka pystyivät osallistumaan paikan IDA-ohjelmaan) ja kontrolliryhmään (jotka eivät voineet osallistua).

VAIKUTUSTUTKIMUS

Vaikutustutkimus on tutkimuksen ensisijainen määrällinen osa. Tiedonkeruu ja analyysi antavat arvioita IDA:n osallistumisen vaikutuksesta asiakkaiden lyhyen ja pitkän aikavälin tuloksiin mitattuna 12 kuukauden, 36 kuukauden ja 60 kuukauden seurantajaksoilla.

Osallistujien tulokset mitataan satunnaistehtävässä ja 12, 36 ja 60 kuukauden kuluttua satunnaistehtävästä. Ohjelman lyhytaikaisiin vaikutuksiin liittyviä toimenpiteitä ovat säästöjen määrä ja aineellisten vaikeuksien välttäminen. Nämä vaikutukset ilmenevät todennäköisimmin ensimmäisen vuoden aikana. Muita toimenpiteitä ovat työllisyystilanne, ansiot, tarveharkintainen yleishyödyllinen kuitti ja nettovarallisuus. Pitkällä aikavälillä vaikutukset asunnon, yrityksen omistukseen ja toisen asteen koulutukseen todennäköisesti ilmenevät.

IDA:n lyhytaikaisten vaikutusten tutkimaton alue on vertaansa vailla olevien säästöjen käyttö hätätarpeiden tyydyttämiseen. AFI:n osallistumisen alkuvaiheessa kotitaloudet voivat omaksua säästämistavan, mutta heidän on ehkä käytettävä säästöjään odottamattomia menoja varten tai kompensoidakseen odottamatonta tulojen laskua. Tällaisten vertaansa vailla olevien IDA-talletusten poistamisen oletettu vaikutus on aineellisten vaikeuksien välttäminen ruoan ja terveyden alalla. Tämä vaikutus arvioidaan käyttämällä pientä joukkoa kotitaloustason kyselykysymyksiä, mukaan lukien tulo- ja ohjelmaosallistumistutkimuksen (SIPP) aikuisten hyvinvoinnin aihemoduulista poimittuja asioita.

RTI International on kehittänyt verkkopohjaisen näyteilmoittautumistyökalun IDA-projektin henkilökunnalle kussakin toimipisteessä, jota voidaan käyttää tietoisen suostumuksen, peruskyselylomakkeen ja satunnaisen jakamisen hallinnassa jokaiselle tutkimuskelpoiselle hakijalle. Tutkimuksen 30 minuutin peruskyselyyn kerättiin tietoa seuraavista kyselymoduuleista: väestötiedot, rahoituspalvelujen käyttö, nykyinen asuinpaikka, työllisyys, kotitalouden tulot ja menot, taloudellinen kokemus ja omaisuus, velat, aineelliset vaikeudet, sosiaalinen sitoutuminen ja näkymät sekä tiedon paikantaminen. (jotta voidaan ottaa uudelleen yhteyttä vastaajaan seurantatutkimuksia varten). Sivuston toimittamat hallinnolliset tiedot tarjoavat lisää perusviivamuuttujia ja (hoitotapauksissa) kuvailevia tietoja IDA:n avauksista, talletuksista, nostoista (vastaavista ja vastaamattomista) ja saldoista.

Huomaa, että henkilötason mittaukset koskevat "ensisijaista kotitalouden jäsentä": ensimmäinen henkilö kotitaloudestaan, joka hakee IDA-ohjelmaan opintojakson aikana. Tämä henkilö on vastaaja peruskyselyyn ja seurantatutkimuksiin. Jos saman kotitalouden muut (toissijaiset) jäsenet hakevat myöhemmin pääsyä sivuston IDA-ohjelmaan, heille ei erikseen kohdisteta satunnaisjakoa (eikä lisää otosmäärää), vaan heidät katsotaan kuuluvan samaan otosryhmään ( hoito tai valvonta) ensisijaisena jäsenenä. Kotitaloustason tuloksia mitataan kotitaloudesta, johon ensisijainen jäsen kuuluu.

Seurantatutkimuksilla saadaan tuloksia ja muita kontekstuaalisia mittareita. Kyselyt kestävät 30 minuuttia ja ne suoritetaan puhelimitse, verkossa tai henkilökohtaisen haastattelijan kautta. Vastaaja on ensisijainen otosjäsen, sama henkilö, joka haki AFI-projektiin osallistumista ja joka täytti tietoisen suostumuslomakkeen ja peruskyselylomakkeen. Kyselyistä saadaan tietoa tulosmittauksista samojen aihekohtaisten otsikoiden sisällä kuin aiemmin peruskyselylomakkeessa.

Ohjelman vaikutusten arvioinnissa käytetään tavanomaisia ​​monimuuttujaregressiotekniikoita riippuvan muuttujan (jatkuva, dikotominen tai multinomi) tilastollisten ominaisuuksien mukaan. Kunkin tulosmitan osalta keskeinen arvioitava parametri on tapauksen satunnaisesti osoitetun (hoito vs. kontrolli) -tilan kerroin. Tämä kerroin osoittaa regressiokorjatun hoidon ja kontrollin eron mitatussa tuloksessa. Kaikki estimointiyhtälöt sisältävät kovariaatteja, jotka mitataan peruskyselylomakkeen kautta. Ohjelman arvioitu vaikutus on intent-to-treat (ITT) -vaikutus, jossa verrataan tuloksia kontrolliryhmän tapausten ja kaikkien hoitoryhmätapausten välillä riippumatta siitä, avaako hoitotapaus IDA-tilin. Muutoin tämä menettely antaa arvion IDA-osallistumistarjouksen vaikutuksesta, koska kaikki hoitoryhmän jäsenet eivät avaa IDA:ta. Arvioimme myös TOT-vaikutuksen (eli ohjelman vaikutusta sen suorittaneisiin).

Käsitellessämme ensimmäistä tutkimuskysymystä – AFI:n osallistumisen vaikutusta tuloksiin, joita sillä on tarkoitus käsitellä (esim. säästöt ja omaisuuden ostot) – arvioimme ohjelman vaikutuksen erikseen toimipisteittäin sekä yhdistetystä otoksesta yhdistämällä molempien tiedot. sivustoja. Yhdistetty näytedata antaa tutkimuksen tarkimman yksittäisen arvion ohjelman vaikutuksesta hyödyntäen täysin kaikkia saatavilla olevia näytehavaintoja.

Toinen tutkimuskysymys, joka koskee vaikutusta muihin tulosalueisiin, joihin ohjelma saattaa vaikuttaa (esim. aineelliset vaikeudet, vaihtoehtoisten rahoitustuotteiden käyttö, taloudellinen hyvinvointi), käsitellään myös arvioimalla vaikutukset yhdistetyssä otoksessa ja erikseen paikkakohtaisesti.

Tutkimuskysymyksessä 3 testataan eri ohjelmien vaikutuksia osallistujaalaryhmittäin. Kiinnostavat alaryhmät tunnistetaan perustietojen perusteella. Odotamme näiden alaryhmien heijastavan sellaisia ​​eroja kuin ikä, alkutulotaso, alkuvelkaantuminen, peruskoulutustaso tai alkuperäinen asunnonomistaja.

TOTEUTUSTUTKIMUS

Toteutustutkimuksessa kuvataan ja dokumentoidaan, kuinka AFI-projekti suunnitellaan, toteutetaan ja toimitaan osallistuvissa apurahansaajissa. Nämä tiedot tarjoavat kontekstin vaikutusanalyysin tulosten ymmärtämiseen. Pääasiallinen tiedonkeruutapa sisälsi vierailut AFI:n apurahan saajien luo, joihin sisältyi keskeisten johtajien, henkilöstön ja sidosryhmien haastatteluja; havainnot apurahansaajapalveluista; sekä asiaankuuluvien asiakirjojen ja tietojen tarkastelut.

Paikkavierailut valittujen AFI-avustuksen saajien luona olivat kumpikin kaksipäiväisiä ja tapahtuivat vuoden 2014 aikana. Paikalla ollessamme suoritimme puolistrukturoituja henkilöhaastatteluja eri rooleissa olevien henkilöiden kanssa saadaksemme erilaisia ​​näkökulmia AFI-projektiin, mukaan lukien IDA:n apurahansaajien, talouskoulutuksen tarjoajien ja kumppaniorganisaatioiden edustajat.

Haastatteluissa tarkastellaan AFI-hankkeen suunnitteluun ja toteutukseen liittyviä kysymyksiä, hankkeiden kohtaamia haasteita ja strategioita niiden ratkaisemiseksi sekä muita tekijöitä, jotka eivät välttämättä näy kvantitatiivisessa analyysissä, mutta jotka voivat vaikuttaa hankkeen tuloksiin. Suunnittelua ja toteutusta koskevat kysymykset perustuvat toimipaikan valinnan, työmaakoulutuksen, alustavien satunnaisten toimeksiantojen ja seurantapyyntöjen aikana kerättyihin tietoihin, ja ne kattavat, onko, miten ja miksi projektimuutoksia on tapahtunut. Toimipaikan valinnan ja henkilöstön haastattelujen avulla saimme tietoa organisaation vakaudesta ja kapasiteetista, IDA-projektin monimutkaisuudesta, henkilöstön määrästä ja henkilöstön osallistumisesta sekä osallistujien rekrytointiin. Erityiskysymykset sisälsivät: Mitä tiedotustoimia teit tiedottaaksesi henkilöille IDA-projektistasi? Millaisia ​​ohjelmatukea IDA-tilinomistajille tarjotaan? Kuinka usein AFI-projektin henkilökunta on yhteydessä osallistujiin tilin avaamisen jälkeen? Mitä IDA-ohjelman ulkopuolisia palveluita oli vertailuryhmän jäsenten saatavilla organisaatiosi kautta? Tuntuuko sinusta, että AFI-projektillasi on muita tärkeitä vaikutuksia (positiivisia tai negatiivisia) osallistujiin kuin mitattuja tuloksia, joita seuraamme arvioinnin kautta?

Sen lisäksi, että vastaajilta kysytään heidän kohtaamistaan ​​haasteista, haastattelut IDA-projektin hallinnoijien ja henkilökunnan kanssa tutkivat edelleen haasteita, kuten osallistujien auttamista saavuttamaan realistiset säästötavoitteet, navigoimaan eri rahoituslähteiden ja -vaatimusten vaatimuksissa, keräämään muita kuin liittovaltion varoja ja selviytymään rajallisista varoista. hallintokuluja varten. Haastatteluissa selvitetään myös ulkoisia tekijöitä tai erityisolosuhteita, jotka voivat vaikuttaa hankkeen tuloksiin. Nämä tiedot ovat tärkeitä sekä vaikutusanalyysin tulosten tulkinnassa että tulosten yleistettävyyden kannalta muille kohteille. On pohjimmiltaan tärkeää ymmärtää, miksi ohjelma on johtanut sen arvioituihin vaikutuksiin osallistujiin ja voidaanko tällaisia ​​vaikutuksia toistaa muualla. Lopuksi haastattelut antavat vastaajille mahdollisuuden tunnistaa aineettomia tuloksia, olivatpa ne positiivisia tai negatiivisia, jotka he pitävät merkittävinä, mutta joita ei ehkä sisälly muodolliseen vaikutusanalyysiin, ja auttavat tunnistamaan osallistujien tarinoita jaettavaksi.

Vierailujen aikana seurasimme talousvalistustunteja ja muuta projektiin osallistujien välistä vuorovaikutusta vangitaksemme, mitä projektipalveluiden toimittamisen aikana todella tapahtuu. Havainnointia ohjasivat ennalta määrätyt aiheet, jotka liittyvät tiettyihin opiskelukysymyksiin, ja tarkkailijat olivat mahdollisimman huomaamattomia. Havainnot antavat käsityksen siitä, kuinka tietyt hankkeen näkökohdat voivat vaikuttaa osallistujien tuloksiin.

Toteutusselvitykseen sisältyy myös asiakirjakatselmus, jossa ymmärretään, kuinka AFI-hankkeen hallintorakenne ja hankesuunnittelu voivat vaikuttaa hankkeen tuloksiin. Kirjallinen dokumentaatio IDA-projektiin ja itse organisaatioon osallistuvien henkilökunnan ja vapaaehtoisten lukumäärästä ja rooleista, projektin säännöistä sekä hankkeen yleisistä tavoitteista ja tavoitteista luo puitteet sellaisten muuttujien tunnistamiselle, jotka voivat vaikuttaa osallistujien tuloksiin. Hankkeen osallistujille toimitettavat projektiviestintämateriaalit, kuten rekrytointilehtiset, perehdytysmateriaalit ja ohjelman tervetulokirjeet, kerätään, jotta projektiviestinnän ymmärtäminen onnistuisi. Lisäksi saamme tietoja, joita projektit keräävät, kuten tietoja palveluiden käyttöönotosta.