Avaliação do impacto dos programas de saneamento total liderados pela comunidade no Mali (CLTS)

O estudo de avaliação descrito envolve 121 comunidades na região de Koulikoro na zona rural de Mali. A intervenção funciona da seguinte maneira: as comunidades são facilitadas (por meio de funcionários do governo e das ONGs) para realizar sua própria avaliação e análise da defecação a céu aberto (OD) e tomar suas próprias medidas para se livrar da defecação a céu aberto (ODF).

No Mali, o estatuto Livre de Defecação ao Ar Livre (ODF) foi definido da seguinte forma: "cada família tem uma latrina equipada com uma cobertura que limita a proliferação de moscas das fossas; todos os membros da família usam exclusivamente essa latrina para defecar; cada latrina está equipada com um dispositivo para lavar as mãos (água + sabão / água + balde de cinzas)".

Para estimar o efeito causal do CLTS, os pesquisadores precisam construir um contrafactual válido para calcular o que teria acontecido na ausência da intervenção. A alocação aleatória garante que, em média, comunidades tratadas e não tratadas compartilhem os mesmos observáveis ​​e não observáveis. A atribuição aleatória ao tratamento também supera o principal problema de seleção encontrado nas avaliações, em que aqueles que são selecionados para receber o programa podem ter atributos diferentes daqueles que não foram selecionados inicialmente. Estas diferenças podem ser causadas por atributos observáveis, comunidades mais ricas, líderes mais empenhados, melhor clima, etc., podem estar mais dispostos a participar em programas de CLTS, ou também por dimensões não observáveis. O mais importante é que tais diferenças podem estar afetando os resultados que os investigadores desejam medir. A atribuição aleatória ao programa elimina o viés de seleção porque garante que, em média, as comunidades que recebem o programa sejam semelhantes às que não o recebem.

Embora a atribuição aleatória seja no nível da comunidade, as unidades básicas de análise desta avaliação são os domicílios. Os investigadores estão interessados ​​em resultados de saúde para crianças menores de cinco anos, porque a diarreia está entre as principais causas de mortalidade infantil. Além disso, os pesquisadores estão interessados ​​em observar a morbidade e a frequência escolar de crianças em idade escolar. Finalmente, supõe-se que o saneamento melhorado produza uma redistribuição no uso do tempo ao nível do agregado familiar. Além disso, os pesquisadores estão muito interessados ​​em observar as variáveis ​​que estão diretamente relacionadas ao sucesso/fracasso da intervenção. Em particular, os investigadores monitorarão o uso de latrinas, a qualidade da água e a higiene geral. A equipe será capaz de determinar se a falta de impacto nos resultados de saúde se deve à falta de uso de latrinas, apesar de sua disponibilidade, ou se é devido à falta de higiene das mãos, apesar do uso de latrinas.

O UNICEF observou em áreas onde o programa já foi implementado que a migração é relativamente baixa, então os pesquisadores não esperam muito atrito. Esta diminuição da diarreia pode ser esperada mesmo que a aldeia não se torne totalmente ODF, mas os níveis de absorção são mais baixos.

A avaliação compreende a coleta de dados em dois pontos no tempo: a) linha de base, antes da implementação do programa, b) acompanhamento 12 meses após a implementação do programa, a fim de avaliar os efeitos e a sustentabilidade a longo prazo. Os investigadores seriam capazes de coletar dados de painel na comunidade e no nível familiar.

Embora a atribuição aleatória permita comparar resultados médios entre comunidades, os investigadores também realizariam análises de regressão multivariada para melhorar a precisão de nossas estimativas e controlar quaisquer possíveis diferenças pré-tratamento. Os dados em painel permitem o uso de uma diferença no design da diferença, se necessário, e também para incluir características iniciais (antes da intervenção) de famílias e comunidades. Os erros padrão serão agrupados no nível da comunidade.

As comunidades incluídas no estudo entendem e concordam em fazer parte do estudo, o que significa que aceitam trabalhar nas questões de saneamento com CLTS imediatamente ou dois anos depois. A randomização será concluída após a linha de base ser conduzida. A UNICEF e a Direcção de Saneamento de Koulikoro (DNACPN) conduzirão o processo de desencadeamento nas 60 comunidades atribuídas ao grupo de tratamento.

Uma das principais preocupações da atribuição aleatória é a contaminação potencial do grupo de controle. Isso acontece, por exemplo, quando há interações entre membros de comunidades de CLTS e membros de comunidades de controle. Este é um problema na presença de atividades compartilhadas. O problema é que essas interações podem causar alterações no grupo de controle. No extremo, as comunidades de controlo e as comunidades CLTS experimentam a mesma mudança, então os investigadores não serão capazes de detectar qualquer efeito. Os pesquisadores garantirão que as comunidades de estudo tenham buffers geográficos, de modo que a interação não seja muito alta. Para verificar a interação entre os membros da família que vivem em comunidades diferentes, a equipe adicionou várias perguntas às pesquisas e documentou a extensão das interações. Outra preocupação que muitas vezes surge com experimentos randomizados é que as unidades de controle podem estar recebendo benefícios semelhantes de outras intervenções. Os investigadores monitorarão as vilas de controle para garantir que isso não aconteça e documentarão esse aspecto do projeto.

A UNICEF planeia realizar uma monitorização rigorosa durante o período de intervenção (primeiros 3 meses). A equipe de pesquisa planeja complementar este trabalho medindo indicadores relevantes de adesão à intervenção durante o período de intervenção e após o término da intervenção.

Os investigadores irão dar especial atenção à variação dos impactos nos diferentes grupos, pelo que o tratamento poderá interagir com indicadores de género e idade, características pré-existentes das comunidades em termos de tomada de decisão colectiva, entre outros, de forma a identificar como estes factores podem explique por que algumas pessoas ou algumas comunidades ganham mais do que outras com o programa. Observar a heterogeneidade nos impactos do programa também ajuda a esclarecer o mecanismo por trás do sucesso (ou fracasso) do programa.

Esta é uma das primeiras avaliações usando técnicas de avaliação de impacto com dados quantitativos [e atribuição aleatória] de programas de CLTS no mundo em desenvolvimento. Também complementará as evidências já existentes. Outra vantagem dessa avaliação é que ela examinará cuidadosamente os resultados comportamentais que estão por trás da adoção de melhores práticas de saneamento e que muitas vezes são negligenciados nas avaliações relacionadas ao saneamento, que tendem a se concentrar mais nos resultados de saúde. É amplamente aceito que um melhor saneamento melhora a saúde, mas ainda há muito debate sobre qual pode ser uma maneira econômica de realizar uma intervenção de saneamento. O sucesso na entrega dependerá muito se o programa for capaz de identificar os gargalos que impedem a adoção de melhores práticas de saneamento e se for capaz de resolver os problemas identificados.