Evaluación de Activos para la Independencia (AFI)

La evaluación de Activos para la Independencia (AFI) se está realizando en dos sitios. Ambos sitios están ubicados en las principales áreas metropolitanas del suroeste de los EE. UU. y atienden a poblaciones de clientes que son entre un 60 y un 75 por ciento hispanos. Ambos tienen algunas características de programa similares: períodos máximos de ahorro de 24 meses y montos de ahorro equivalentes de hasta $1,000. Importante para estimar las diferencias de características de diseño, también existen diferencias clave en los parámetros del programa: horas requeridas de educación financiera y tasas de coincidencia de IDA. Los sitios inscribieron sus muestras dentro de un período de 19 meses desde enero de 2013 hasta julio de 2014. Los miembros de la muestra en cada sitio fueron asignados aleatoriamente a dos grupos de igual tamaño: un grupo de tratamiento (aquellos que podían ingresar al programa IDA del sitio) y un grupo de control (aquellos que no podían ingresar).

ESTUDIO DE IMPACTO

El estudio de impacto es el principal componente cuantitativo de la investigación. La recopilación y el análisis de datos proporcionarán estimaciones del efecto de la participación de IDA en los resultados de los clientes a corto y largo plazo, medidos a través de períodos de seguimiento de 12, 36 y 60 meses.

Los resultados de los participantes se medirán en el momento de la asignación aleatoria y 12, 36 y 60 meses después de la asignación aleatoria. Las medidas que se relacionan con los efectos del programa a corto plazo incluyen la cantidad de ahorros y la evitación de dificultades materiales. Estos son los efectos que con mayor probabilidad surgirán durante el primer año. Las medidas adicionales incluyen la situación laboral, los ingresos, la recepción de beneficios públicos con verificación de medios y el patrimonio neto. A largo plazo, es probable que surjan efectos sobre la propiedad de viviendas, la propiedad de empresas y el logro de la educación secundaria.

Un área inexplorada de los efectos a corto plazo de las IDA es el uso de ahorros inigualables para satisfacer necesidades de emergencia. En las primeras etapas de participación en AFI, los hogares pueden establecer un hábito de ahorro, pero es posible que necesiten utilizar sus ahorros para gastos inesperados o para compensar una caída imprevista en los ingresos. El efecto hipotético de tales retiros sin contrapartida de los depósitos de la AIF es evitar las dificultades materiales en materia de alimentación y salud. Este efecto se estimará utilizando un pequeño conjunto de preguntas de encuestas a nivel de hogar, incluidos algunos elementos extraídos del módulo temático sobre el bienestar de los adultos de la Encuesta de Ingresos y Participación en Programas (SIPP).

RTI International ha desarrollado una herramienta de inscripción de muestra basada en la web para que el personal del proyecto IDA en cada sitio la use en la administración del consentimiento informado, un cuestionario de referencia y la asignación aleatoria para cada solicitante elegible para el estudio. El cuestionario de referencia de 30 minutos del estudio recopiló información en los siguientes módulos de encuesta: datos demográficos, uso de servicios financieros, residencia actual, empleo, ingresos y gastos del hogar, experiencia y activos financieros, deudas, dificultades materiales, compromiso social y perspectiva, e información de localización (a los efectos de volver a contactar al encuestado para encuestas de seguimiento). Los datos administrativos proporcionados por el sitio proporcionarán covariables de línea de base adicionales y (para casos de tratamiento) información descriptiva sobre aperturas, depósitos, retiros (igualados y no emparejados) y saldos de IDA.

Tenga en cuenta que las medidas a nivel de persona son específicas para el "miembro principal del hogar": la primera persona de su hogar que solicita el programa IDA durante el período de inscripción en el estudio. Esta persona es el encuestado del cuestionario de referencia y de las encuestas de seguimiento. Si otros miembros (secundarios) del mismo hogar posteriormente solicitan ingresar al programa IDA del sitio, no están sujetos por separado a la asignación aleatoria (y no se suman al conteo de la muestra), pero se considera que han sido asignados al mismo grupo de muestra ( tratamiento o control) como miembro principal. Los resultados a nivel del hogar se miden para el hogar al que pertenece el miembro principal.

Las encuestas de seguimiento obtienen resultados y otras medidas contextuales. Las encuestas toman 30 minutos y se realizan por teléfono, web o un entrevistador en persona. El encuestado es el miembro principal de la muestra, la misma persona que solicitó ingresar al proyecto AFI y que completó el formulario de consentimiento informado y el cuestionario de referencia. Las encuestas obtienen datos sobre medidas de resultados, dentro de los mismos encabezados temáticos que se mostraron anteriormente para el cuestionario de referencia.

La estimación de los impactos del programa utilizará técnicas convencionales de regresión multivariada según corresponda a las propiedades estadísticas de la variable dependiente (continua, dicotómica o multinomial). Para cada medida de resultado, el parámetro clave a estimar es el coeficiente del estado del caso asignado aleatoriamente (tratamiento versus control). Este coeficiente indica la diferencia de tratamiento-control ajustada por regresión en el resultado medido. Todas las ecuaciones de estimación incluirán covariables medidas a través del cuestionario de referencia. El efecto del programa estimado es el efecto de intención de tratar (ITT), que compara los resultados entre los casos del grupo de control y todos los casos del grupo de tratamiento, independientemente de si el caso de tratamiento abre una cuenta IDA. Dicho de otro modo, este procedimiento produce una estimación del efecto de la oferta de participación en IDA, ya que no todos los miembros del grupo de tratamiento abrirán IDA. También estimaremos el efecto de tratamiento en el tratado (TOT) (es decir, el impacto del programa en quienes lo completan).

Al abordar la primera pregunta de investigación, el impacto de la participación de AFI en los resultados para los que está diseñada (por ejemplo, ahorros y compras de activos), estimaremos el efecto del programa por separado por sitio, así como a partir de la muestra combinada que combina datos de ambos. sitios Los datos de muestra agrupados proporcionarán la estimación individual más precisa del efecto del programa del estudio, utilizando completamente todas las observaciones de muestra disponibles.

La segunda pregunta de investigación, con respecto al efecto en otros dominios de resultados en los que el programa podría influir (por ejemplo, dificultades materiales, uso de productos financieros alternativos, bienestar económico), también se abordará mediante la estimación de los efectos en la muestra combinada y por separado por sitio.

Bajo la pregunta de investigación 3, probaremos los impactos diferenciales del programa por subgrupos de participantes. Los subgrupos de interés se identificarán a partir de los datos de referencia. Anticipamos que estos subgrupos reflejarán diferencias tales como la edad, el nivel de ingreso inicial, el endeudamiento inicial, el nivel de educación inicial o el estado inicial de propiedad de la vivienda.

ESTUDIO DE IMPLEMENTACIÓN

El estudio de implementación describirá y documentará cómo se diseña, implementa y opera el proyecto AFI en los sitios de los concesionarios participantes. Esta información proporcionará el contexto para comprender los hallazgos del análisis de impacto. El principal enfoque de recopilación de datos involucró visitas a los sitios de los beneficiarios de AFI que incluyeron entrevistas con administradores clave, personal y partes interesadas; observaciones de los servicios del concesionario; y revisiones de documentos y datos relevantes.

Las visitas a los sitios de los beneficiarios seleccionados de AFI fueron de dos días cada una y ocurrieron durante 2014. Mientras estábamos en el sitio, realizamos entrevistas semiestructuradas en persona con personas en diferentes roles para obtener una variedad de perspectivas sobre el proyecto AFI, incluido el personal de beneficiarios de IDA, proveedores de educación financiera y representantes de organizaciones asociadas.

Las entrevistas examinan cuestiones relacionadas con el diseño y la implementación del proyecto AFI, los desafíos que enfrentan los proyectos y sus estrategias para superarlos, y otros factores que pueden no capturarse en el análisis cuantitativo pero que pueden afectar los resultados del proyecto. Las preguntas sobre el diseño y la implementación se basan en la información recopilada durante la selección del sitio, la capacitación del sitio, las asignaciones aleatorias iniciales y las llamadas de monitoreo, y cubren si se produjeron cambios en el proyecto, cómo y por qué. A través de la selección del sitio y las entrevistas in situ con el personal, obtuvimos información sobre la estabilidad y la capacidad de la organización, el nivel de complejidad del proyecto IDA, la cantidad de personal y la cantidad de participación del personal, y el reclutamiento de participantes. Las preguntas específicas incluyeron: ¿Qué actividades de divulgación realizó para informar a las personas sobre su proyecto IDA? ¿Qué formas de apoyo del programa se brindan a los titulares de cuentas IDA? ¿Con qué frecuencia el personal del proyecto AFI se comunica con los participantes después de que abren una cuenta? ¿Qué servicios de programas no pertenecientes a IDA estaban disponibles para los miembros del grupo de comparación a través de su organización? ¿Cree que hay efectos importantes (positivos o negativos) de su proyecto AFI en los participantes más allá de los resultados medidos que estamos rastreando a través de la evaluación?

Además de preguntar a los encuestados sobre los desafíos que enfrentan, las entrevistas con los administradores de proyectos y el personal de IDA investigan más a fondo los desafíos, como ayudar a los participantes a lograr objetivos de ahorro realistas, navegar por los requisitos de diversas fuentes y requisitos de financiamiento, recaudar fondos no federales y hacer frente a fondos limitados. por gastos administrativos. Las entrevistas también exploran factores externos o circunstancias especiales que pueden afectar los resultados del proyecto. Esta información será vital tanto para interpretar los hallazgos del análisis de impacto como para la generalización de los hallazgos a otros sitios. Será de fundamental importancia entender por qué un programa ha tenido los efectos estimados en los participantes y si dichos efectos podrían reproducirse en otros lugares. Finalmente, las entrevistas brindan a los encuestados la oportunidad de identificar resultados intangibles, ya sean positivos o negativos, que sienten que son significativos pero que pueden no ser capturados en el análisis de impacto formal, y ayudan a identificar las historias de los participantes para compartir.

Durante las visitas al sitio, observamos clases de educación financiera y otras interacciones entre los participantes del proyecto para captar lo que realmente sucede durante la prestación de servicios del proyecto. Las observaciones se guiaron por temas predeterminados que se relacionan con los problemas específicos del estudio, y los observadores fueron lo más discretos posible. Las observaciones proporcionarán información sobre cómo los aspectos particulares del proyecto pueden influir en los resultados de los participantes.

El estudio de implementación también incluirá una revisión de documentos para comprender cómo la estructura administrativa del proyecto AFI y el diseño del proyecto pueden influir en los resultados del proyecto. La documentación escrita del número y las funciones del personal y los voluntarios involucrados en el proyecto IDA y en la organización misma, las reglas del proyecto y las metas y objetivos generales del proyecto establecerán el contexto para identificar las variables que podrían afectar los resultados de los participantes. Los materiales de comunicación del proyecto proporcionados a los participantes del proyecto, como folletos de reclutamiento, materiales de orientación y cartas de bienvenida al programa, se recopilarán para comprender los mensajes del proyecto. Además, estamos obteniendo datos que los proyectos están recopilando, como datos sobre la contratación del servicio.