Evaluering af virkningen af ​​fællesskabsledede totale sanitetsprogrammer i Mali (CLTS)

Den beskrevne evalueringsundersøgelse involverer 121 lokalsamfund i regionen Koulikoro i Malis landdistrikter. Interventionen fungerer på følgende måde: lokalsamfund faciliteres (ved hjælp af regerings- og NGO'er) til at udføre deres egen vurdering og analyse af åben afføring (OD) og tage deres egne handlinger for at blive fri afføring (ODF).

I Mali er Open Defecation Free (ODF) status blevet defineret som følger: "hver familie har en latrin udstyret med et dæksel, der begrænser spredningen af ​​fluer fra gruberne; alle medlemmer af familien bruger udelukkende sådan latrin til at gøre afføring; hver latrin er udstyret med håndvask (vand + sæbe / vand + askespand)".

For at estimere årsagsvirkningen af ​​CLTS er forskerne nødt til at konstruere en gyldig kontrafaktisk for at beregne, hvad der ville være sket uden interventionen. Tilfældig fordeling sikrer, at behandlede og ubehandlede samfund i gennemsnit deler de samme observerbare og uobserverbare. Tilfældig tildeling til behandling overvinder også det vigtigste udvælgelsesproblem, der findes i evalueringer, hvor de, der er udvalgt til at modtage programmet, kan have andre egenskaber end dem, der ikke blev udvalgt i første omgang. Disse forskelle kan være forårsaget af observerbare egenskaber, mere velhavende samfund, mere engagerede ledere, bedre vejr osv., kan være mere villige til at engagere sig i CLTS-programmer, eller også af uobserverbare dimensioner. Hvad der er vigtigere er, at sådanne forskelle kan påvirke de resultater, efterforskerne ønsker at måle. Tilfældig tildeling til programmet eliminerer udvælgelsesbias, fordi det sikrer, at fællesskaber, der modtager programmet, i gennemsnit ligner dem, der ikke modtager det.

Selvom tilfældig tildeling er på samfundsniveau, er de grundlæggende analyseenheder i denne evaluering husstande. Efterforskerne er interesserede i sundhedsresultater for børn under fem år, fordi diarré er blandt hovedårsagerne til børnedødelighed. Forskerne er også interesserede i at se på sygelighed og skolegang for børn i skolealderen. Endelig formodes forbedret sanitet at give en omfordeling af tidsforbruget på husstandsniveau. Derudover er forskerne meget interesserede i at se på variabler, der er direkte relateret til interventionens succes/fiasko. Især vil efterforskerne overvåge latrinbrug, vandkvalitet, generel hygiejne. Teamet vil være i stand til at afgøre, om manglende indvirkning på helbredsresultater skyldes manglende latrinbrug på trods af deres tilgængelighed, eller om det skyldes manglende håndhygiejne på trods af brug af latriner.

UNICEF har i områder, hvor programmet allerede er implementeret, observeret, at migrationen er relativt lav, så forskerne forventer ikke meget nedslidning. Dette fald i diarré kan forventes, selvom landsbyen ikke bliver helt ODF, men optagelsesniveauerne er lavere.

Evalueringen omfatter indsamling af data på to tidspunkter: a) baseline, før programimplementering, b) opfølgning 12 måneder efter programimplementering for at vurdere langsigtede effekter og bæredygtighed. Efterforskerne ville være i stand til at indsamle paneldata på samfunds- og husstandsniveau.

Mens tilfældig tildeling gør det muligt at sammenligne gennemsnitlige resultater på tværs af samfund, ville efterforskerne også udføre multivariat regressionsanalyse for at forbedre præcisionen af ​​vores estimater og kontrol for eventuelle potentielle forskelle før behandling. Paneldata gør det muligt at bruge en forskel i forskelsdesign, hvis det er nødvendigt, og også at inkludere initiale (før interventionen) karakteristika for husholdninger og lokalsamfund. Standardfejl vil blive grupperet på fællesskabsniveau.

De lokalsamfund, der er inkluderet i undersøgelsen, forstår og accepterer at være en del af undersøgelsen, hvilket betyder, at de accepterer at arbejde med sanitetsproblemer med CLTS enten med det samme eller to år senere. Randomisering vil blive afsluttet, efter at baseline er udført. UNICEF og Direktoratet for Sanitet i Koulikoro (DNACPN) vil udføre den udløsende proces i de 60 lokalsamfund, der er tildelt behandlingsgruppen.

En af de største bekymringer ved tilfældig tildeling er den potentielle forurening af kontrolgruppen. Dette sker for eksempel, når der er interaktioner mellem medlemmer af CLTS-fællesskaber og medlemmer af kontrolfællesskaber. Dette er et problem i tilstedeværelsen af ​​fælles aktiviteter. Problemet er, at disse interaktioner kan forårsage ændringer i kontrolgruppen. I yderste konsekvens oplever kontrolfællesskaber og CLTS-fællesskaber den samme ændring, så vil forskerne ikke kunne opdage nogen effekt. Forskerne vil sikre, at studiesamfundene har geografiske buffere, så interaktionen ikke forventes at være særlig høj. For at tjekke for interaktion mellem familiemedlemmer, der bor i forskellige samfund, tilføjede teamet flere spørgsmål i undersøgelserne og dokumenterer omfanget af interaktioner. En anden bekymring, der ofte opstår ved randomiserede eksperimenter, er, at kontrolenheder kan modtage lignende fordele fra andre interventioner. Efterforskerne vil overvåge kontrollandsbyer for at sikre, at dette ikke sker, og dokumentere dette aspekt af designet.

UNICEF planlægger at udføre streng overvågning i interventionsperioden (første 3 måneder). Forskerholdet planlægger at supplere dette arbejde ved at måle relevante indikatorer for interventionsefterlevelse i interventionsperioden og efter afslutningen af ​​interventionen.

Efterforskerne vil være meget opmærksomme på variationen i påvirkninger på tværs af forskellige grupper, så behandlingen kan interageres med køns- og aldersindikatorer, allerede eksisterende karakteristika ved fællesskaber i form af kollektiv beslutningstagning, blandt andet for at identificere, hvordan disse faktorer kan forklare, hvorfor nogle mennesker eller nogle fællesskaber får mere ud af programmet end andre. At se på heterogenitet i programmets virkninger hjælper også med at kaste lys over mekanismen bag programmets succes (eller fiasko).

Dette er en af ​​de første evalueringer, der bruger effektevalueringsteknikker med kvantitative data [og tilfældig tildeling] af CLTS-programmer i udviklingslandene. Det vil også supplere allerede eksisterende beviser. En anden fordel ved denne evaluering er, at den omhyggeligt vil se på adfærdsmæssige resultater, der ligger bag vedtagelsen af ​​bedre sanitetspraksis, og som ofte overses i evalueringer relateret til sanitet, som har en tendens til at fokusere mere på sundhedsresultater. Det er almindeligt accepteret, at bedre sanitet forbedrer sundheden, men der er stadig megen debat om, hvad en omkostningseffektiv måde at levere et sanitetsindgreb på kan være. Succes med levering vil i høj grad afhænge af, om programmet er i stand til at identificere flaskehalse, der hindrer vedtagelse af bedre sanitetspraksis, og om det er i stand til at løse de problemer, der er identificeret.