Ocena wpływu programów kompleksowej sanitacji prowadzonych przez społeczność w Mali (CLTS)

Opisane badanie ewaluacyjne obejmuje 121 społeczności w regionie Koulikoro na obszarach wiejskich Mali. Interwencja działa w następujący sposób: społecznościom ułatwia się (za pośrednictwem personelu rządowego i organizacji pozarządowych) przeprowadzenie własnej oceny i analizy otwartej defekacji (OD) oraz podjęcie własnych działań w celu uwolnienia się od otwartej defekacji (ODF).

W Mali status wolnego od defekacji na otwartej przestrzeni (ODF) zdefiniowano w następujący sposób: „każda rodzina ma latrynę wyposażoną w pokrywę, która ogranicza rozmnażanie się much z dołów; wszyscy członkowie rodziny korzystają wyłącznie z takiej latryny do wypróżniania się; każdy latryna wyposażona jest w urządzenie do mycia rąk (woda + mydło/woda + wiadro na popiół).

Aby oszacować efekt przyczynowy CLTS, badacze muszą skonstruować ważny scenariusz alternatywny, aby obliczyć, co by się stało, gdyby nie interwencja. Losowa alokacja zapewnia, że ​​średnio leczone i nieleczone społeczności dzielą te same obserwowalne i nieobserwowalne. Losowe przypisanie do leczenia rozwiązuje również główny problem selekcji występujący w ewaluacjach, gdzie ci, którzy są wybrani do programu, mogą mieć inne cechy niż ci, którzy nie zostali wybrani w pierwszej kolejności. Różnice te mogą być spowodowane obserwowalnymi cechami, bardziej zamożnymi społecznościami, bardziej zaangażowanymi liderami, lepszą pogodą itp., mogą być bardziej skłonne do angażowania się w programy CLTS lub też nieobserwowalnymi wymiarami. Co ważniejsze, takie różnice mogą wpływać na wyniki, które badacze chcą zmierzyć. Losowe przypisanie do programu eliminuje błąd selekcji, ponieważ zapewnia, że ​​średnio społeczności otrzymujące program są podobne do tych, które go nie otrzymują.

Chociaż losowanie odbywa się na poziomie społeczności, podstawowymi jednostkami analizy tej oceny są gospodarstwa domowe. Badacze są zainteresowani skutkami zdrowotnymi dzieci poniżej piątego roku życia, ponieważ biegunka jest jedną z głównych przyczyn śmiertelności dzieci. Ponadto naukowcy są zainteresowani przyjrzeniem się zachorowalności i frekwencji szkolnej dzieci w wieku szkolnym. Wreszcie, poprawa warunków sanitarnych ma spowodować redystrybucję czasu w gospodarstwie domowym. Ponadto badacze są bardzo zainteresowani przyjrzeniem się zmiennym, które są bezpośrednio związane z sukcesem/porażką interwencji. W szczególności śledczy będą monitorować korzystanie z latryny, jakość wody, ogólną higienę. Zespół będzie w stanie określić, czy brak wpływu na wyniki zdrowotne wynika z braku korzystania z latryn pomimo ich dostępności, czy też z braku higieny rąk pomimo korzystania z latryn.

UNICEF zaobserwował, że na obszarach, na których program został już wdrożony, migracja jest stosunkowo niska, więc badacze nie spodziewają się znacznego ubytku. Tego spadku biegunki można się spodziewać, nawet jeśli wieś nie stanie się w pełni ODF, ale poziomy zajętości są niższe.

Ewaluacja obejmuje gromadzenie danych w dwóch punktach czasowych: a) punkt odniesienia, przed wdrożeniem programu, b) kontynuacja 12 miesięcy po wdrożeniu programu w celu oceny skutków długoterminowych i trwałości. Badacze byliby w stanie zebrać dane panelowe na poziomie społeczności i gospodarstw domowych.

Chociaż losowe przypisanie pozwala porównać średnie wyniki w różnych społecznościach, badacze przeprowadziliby również analizę regresji wielowymiarowej, aby poprawić precyzję naszych szacunków i kontrolować wszelkie potencjalne różnice przed leczeniem. Dane panelowe pozwalają w razie potrzeby na wykorzystanie różnic w projektowaniu różnic, a także na uwzględnienie początkowych (przed interwencją) charakterystyk gospodarstw domowych i społeczności. Błędy standardowe zostaną zgrupowane na poziomie społeczności.

Społeczności objęte badaniem rozumieją i zgadzają się wziąć udział w badaniu, co oznacza, że ​​zgadzają się pracować nad kwestiami sanitarnymi z CLTS od razu lub dwa lata później. Randomizacja zostanie zakończona po przeprowadzeniu linii bazowej. UNICEF i Dyrekcja ds. Sanitarnych Koulikoro (DNACPN) przeprowadzą proces wyzwalania w 60 społecznościach przypisanych do grupy terapeutycznej.

Jednym z głównych problemów losowego przydziału jest potencjalne zanieczyszczenie grupy kontrolnej. Dzieje się tak na przykład, gdy zachodzą interakcje między członkami społeczności CLTS a członkami społeczności kontrolnych. Jest to problem w przypadku wspólnych działań. Problem polega na tym, że te interakcje mogą powodować zmiany w grupie kontrolnej. W skrajnym przypadku społeczności kontrolne i społeczności CLTS doświadczają tej samej zmiany, wtedy naukowcy nie będą w stanie wykryć żadnego efektu. Naukowcy zapewnią, że badane społeczności będą miały bufory geograficzne, więc nie oczekuje się, że interakcja będzie bardzo duża. Aby sprawdzić interakcje między członkami rodziny mieszkającymi w różnych społecznościach, zespół dodał kilka pytań do ankiet i udokumentował zakres interakcji. Innym problemem, który często pojawia się w przypadku eksperymentów z randomizacją, jest to, że jednostki kontrolne mogą uzyskiwać podobne korzyści z innych interwencji. Badacze będą monitorować wioski kontrolne, aby upewnić się, że tak się nie stanie, i udokumentują ten aspekt projektu.

UNICEF planuje przeprowadzić ścisły monitoring w okresie interwencji (pierwsze 3 miesiące). Zespół badawczy planuje uzupełnić tę pracę o pomiary odpowiednich wskaźników zgodności interwencji w okresie interwencji i po jej zakończeniu.

Badacze zwrócą szczególną uwagę na zróżnicowanie wpływów w różnych grupach, więc leczenie może wchodzić w interakcje ze wskaźnikami płci i wieku, istniejącymi wcześniej cechami społeczności w zakresie zbiorowego podejmowania decyzji, między innymi w celu określenia, w jaki sposób te czynniki mogą wyjaśnić, dlaczego niektóre osoby lub niektóre społeczności zyskują więcej niż inne dzięki programowi. Przyjrzenie się heterogeniczności wpływu programów pomaga również rzucić światło na mechanizm sukcesu (lub porażki) programu.

Jest to jedna z pierwszych ocen wykorzystujących techniki oceny wpływu z danymi ilościowymi [i losowym przydziałem] programów CLTS w krajach rozwijających się. Uzupełni również już istniejące dowody. Kolejną zaletą tej oceny jest uważne przyjrzenie się wynikom behawioralnym, które stoją za przyjęciem lepszych praktyk sanitarnych i które są często pomijane w ocenach związanych z higieną, które zwykle koncentrują się bardziej na wynikach zdrowotnych. Powszechnie przyjmuje się, że lepsze warunki sanitarne poprawiają zdrowie, jednak wciąż toczy się wiele dyskusji na temat opłacalnego sposobu przeprowadzenia interwencji sanitarnej. Sukces w dostarczaniu będzie w dużej mierze zależał od tego, czy program jest w stanie zidentyfikować wąskie gardła, które utrudniają przyjęcie lepszych praktyk sanitarnych i czy jest w stanie rozwiązać zidentyfikowane problemy.