ÉVALUATION DE L'ENQUETE CONTINUE DEMOGRAPHIQUE ET DE SANTE AU SENEGAL - GH Pro
←
→
Transcription du contenu de la page
Si votre navigateur ne rend pas la page correctement, lisez s'il vous plaît le contenu de la page ci-dessous
ÉVALUATION DE L’ENQUETE CONTINUE DEMOGRAPHIQUE ET DE SANTE AU SENEGAL 2012-2017 Mars 2019 Ce rapport est rendu possible grâce au soutien du peuple américain par le biais de l'Agence des États-Unis pour le développement international (USAID). Ce rapport a été préparé par Stan Becker et Cheikh Mbacké avec l’aide d’Olivia Padis.
Couverture: Une femme enceinte à Bignona, Sénégal, change un bon pour un moustiquaire. Crédit: © 2013 Diana Mrazikova/ Networks/ Senegal, Avec la permission de Photoshare.
Évaluation de l’Enquête Continue Démographique et de Santé au Sénégal 2012- 2017 Mars 2019 USAID Contract No. AID-OAA-C-14-00067; Evaluation Assignment Number: 549 AVIS DE NON-RESONSABILITE Le contenu de ce rapport relève de la seule responsabilité de Global Health Program Cycle Improvement Project (GH Pro) et ne reflète pas nécessairement les vues de l'USAID ou du gouvernement des États-Unis.
This document is available online at the GH Pro website at http://ghpro.dexisonline.com/reports-
publications. Documents are also made available through the Development Experience Clearinghouse
(http://dec.usaid.gov). Additional information is available from:
Global Health Program Cycle Improvement Project
1331 Pennsylvania Avenue NW, Suite 300
Washington, DC 20006
Phone: (1-202) 625-9444
Fax: (1-202) 517-9181
http://ghpro.dexisonline.com/reports-publications
This document was submitted by GH Pro to the United States Agency for International Development
under USAID Contract No. AID-OAA-C-14-00067.RESUME
Une évaluation de l'Enquête Continue au Sénégal (ECS) (Enquête Démographique et Sanitaire Continue
[EDS-Continue] et Évaluation Continue sur la Prestation des Services [EPCS]) a été menée entre avril et
septembre 2018 pour déterminer si elle a atteint ses objectifs d'accroître l'utilisation des données
probantes dans les politiques et de renforcer l'appropriation nationale et la capacité en matière de
conception, de réalisation, d'analyse et de diffusion des enquêtes.
Nous avons constaté que les données de EDS-Continue sont largement utilisées par les ministères et les
partenaires gouvernementaux pour planifier et évaluer leurs activités. Le seul grand utilisateur de l'EPCS,
avec des données sur la qualité des services de santé, est le Ministère de la Santé et de l'Action Sociale
(MSAS), pour corréler la performance des services de santé aux données au niveau des ménages.
L'ICF a renforcé les capacités de l'Agence Nationale de la Statistique et de la Démographie (ANSD),
l'entité avec laquelle le gouvernement du Sénégal a institutionnalisé cette enquête. L'ANSD a la capacité
de soutenir l’ ECS avec un soutien minimal de la part de l'ICF. Le principal défi est que la plus grande
partie de l'expertise requise pour l’ECS relève du personnel non permanent de l'ANSD, mais des plans
sont en cours pour résoudre ce problème d'ici à la fin de l'année.
Jusqu'au présent, le Gouvernement n'a guère l’ICF contribué aux coûts de l’EC S. Le Premier ministre a
des plans pour créer un fonds pour soutenir les activités statistiques, y compris l’ECS.
EVALUATION OF THE CONTINUOUS DEMOGRAPHIC AND HEALTH SURVEY IN SENEGAL 2012–2017 / iiiREMERCIEMENTS
L'équipe d'évaluation tient à remercier le Ministère de la Santé et de l'Action Sociale, l'Agence Nationale
de la Statistique et de la Démographie, et d'autres organismes gouvernementaux, ainsi que les
nombreuses personnes des divers organismes donateurs et partenaires qui ont pris le temps de nous
rencontrer pour répondre à nos nombreuses questions. Merci beaucoup à l'USAID/Washington, D.C.,
et à l'USAID/Sénégal d'avoir non seulement participé aux entrevues, mais aussi d'avoir informé et
débriefé l'équipe, recommandé des informateurs clés pour les entrevues et fourni des commentaires
précieux pour améliorer ce rapport. Nous remercions également les nombreux professionnels de l'ICF
qui nous ont accordé des interviews et en particulier Jose Miguel Guzman et Tom Pullum qui ont
également fourni des informations pour les contrôles de qualité des données. Nous remercions Amadou
Hassane Sylla d'avoir animé l'atelier sur les constatations et les recommandations et d'avoir préparé le
rapport et Marthe J. Kadimpe d'avoir pris des notes pendant l'atelier.
Nous tenons à remercier Fatoumata Diop d'avoir organisé de nombreuses entrevues, d'avoir géré notre
calendrier, et d'avoir participé à de nombreuses autres tâches pour assurer le bon déroulement de
notre travail à Dakar. Nous remercions Mamadou Dia d'avoir assuré le transport aller-retour des
entrevues à Dakar en temps voulu et en toute sécurité. Nous remercions l'Hôtel King Fahd à Dakar
pour l'espace de travail suffisant pour notre équipe.
L'équipe d'évaluation remercie le personnel de GH Pro, en particulier Crystal Thompson pour les
questions administratives et Laurie Chamberlain and Christine E. Thomas pour son aide dans la révision
du rapport final.
EVALUATION OF THE CONTINUOUS DEMOGRAPHIC AND HEALTH SURVEY IN SENEGAL 2012–2017 / ivTABLE DE MATIERES
Résumé ................................................................................................................................................................................ iii
Remerciements ................................................................................................................................................................. iv
Abréviations ...................................................................................................................................................................... vii
Sommaire Exécutif .......................................................................................................................................................... viii
I. Introduction ..................................................................................................................................................................... 1
Objectif de l’evaluation ................................................................................................................................................ 1
Questions d’évaluation ................................................................................................................................................ 2
Equipe d’évaluation ....................................................................................................................................................... 2
II. Contexte ......................................................................................................................................................................... 3
Objectifs de l’ECS ......................................................................................................................................................... 3
Méthodologie de l’ECS................................................................................................................................................. 4
Intervenants et financement de l’ECS ...................................................................................................................... 5
III. Méthodologie ................................................................................................................................................................ 6
Interviews individuelles et de groupe ....................................................................................................................... 6
Limites.............................................................................................................................................................................. 7
IV. Résultats......................................................................................................................................................................... 8
Examen des documents ............................................................................................................................................... 8
Les interviews ................................................................................................................................................................ 8
V. Recommandations ...................................................................................................................................................... 19
Financement ................................................................................................................................................................. 19
Maitrise d’ouvrage ....................................................................................................................................................... 19
Assistance technique .................................................................................................................................................. 19
Périodicité et niveau de représentativité de l’ECS .............................................................................................. 19
Dissémination............................................................................................................................................................... 20
Analyses approfondies ............................................................................................................................................... 21
References ......................................................................................................................................................................... 23
Annex I. Scope of Work ................................................................................................................................................ 24
Annex II. Data Collection Instruments....................................................................................................................... 48
Annex III. Key Informants Interviewed....................................................................................................................... 57
Annex IV. Key Informant Consent Form ................................................................................................................... 61
Annex V. Documents Reviewed .................................................................................................................................. 63
Annex VI. Publications Citing Senegal Continuous Survey Data .......................................................................... 64
EVALUATION OF THE CONTINUOUS DEMOGRAPHIC AND HEALTH SURVEY IN SENEGAL 2012–2017 / vAnnex VII. District Health Information Software 2 (DHIS2) Quality Trends ................................................... 68
Annex VIII. Evaluation Findings and Recommendations Workshop Report ..................................................... 70
Annex IX. Disclosure of Any Conflict of Interest ................................................................................................... 81
Annex X. Short Bios of Evaluation Team Members ................................................................................................ 84
EVALUATION OF THE CONTINUOUS DEMOGRAPHIC AND HEALTH SURVEY IN SENEGAL 2012–2017 / viABREVIATIONS
ANSD l'Agence Nationale de la Statistique et de la Démographie
CNS Conseil National de la Statistique
DG Directeur General
DHIS2 District Health Information System 2
DPRS Direction de la Planification, de la Recherche et des Statistiques
ECPS l’Évaluation Continue sur la Prestation des Services
ECS l'Enquête Continue au Sénégal
EDS l'Enquête Démographique et Sanitaire
EIP l'Enquête sur les Indicateurs du Paludisme
EIS l'Enquête sur les Indicateurs du Sida
EPS l'Évaluation de la Prestation des Services
MCD Médecins Chefs de District
MCR Médecin Chef Régional
MEFP Ministère de l'Économie, des Finances et du Plan
MICS l'Enquête par Grappes à Indicateurs Multiples
MSAS Ministère de la Santé et de l'Action Sociale
OMD Objectifs du Millénaire pour le développement
PEV Programme élargi de vaccination
PNDS Plan National de Développement Sanitaire
PNLP Programme National de Lutte contre le Paludisme
PSE Plan Sénégal Emergent
SNDS Stratégie Nationale de Développement de la Statistique
UNICEF Fonds des Nations Unies pour l'Enfance
UNFPA Fonds des Nations Unies pour la Population
USAID United States Agency for International Development
EVALUATION OF THE CONTINUOUS DEMOGRAPHIC AND HEALTH SURVEY IN SENEGAL 2012–2017 / viiSOMMAIRE EXECUTIF
OBJECTIFS ET QUESTIONS D'EVALUATION
Il s'agit d'une évaluation finale de l'Enquête Démographique et Sanitaire Continue (EDS-Continue) et de
l'Évaluation Continue de la Prestation de Services (ECPS) financées par l'USAID, lancées après l'Enquête
Démographique et Sanitaire (EDS) 2010/11 combinée à l'Enquête par Grappes à Indicateurs Multiples
(MICS) du Fonds des Nations Unies pour l'Enfance (UNICEF). L’EDS-et l’ECPS constituent l'Enquête
Continue au Sénégal (ECS).
Le but de cette évaluation finale est d'évaluer dans quelle mesure l’ECS a atteint ses objectifs : 1)
Accroître l'utilisation des données pour la planification et les politiques ; 2) Renforcer les capacités
nationales, en particulier en ce qui concerne la planification, la mise en œuvre et la diffusion des résultats
de l'enquête ; et 3) Encourager l'appropriation de l'enquête par le gouvernement du Sénégal (GdS).
CONTEXTE DU PROJET
L’ECS a été formulé avec trois objectifs principaux :
1. Répondre aux besoins continus de données pour la planification, la surveillance et l'évaluation
des programmes de santé et de population.
2. Renforcer la capacité des institutions sénégalaises à collecter, traiter, analyser, diffuser et utiliser
les données.
3. Favoriser l'appropriation de l'enquête par le pays hôte.
En résumé, la logique était que le maintien courant d'un bureau central et d'un personnel de terrain sur
une période continue conduirait à l'institutionnalisation des processus de l'EDS et à une augmentation
des capacités du personnel. Ces deux résultats devraient permettre d'améliorer la qualité des données
et de réduire le besoin d'assistance technique, ce qui se traduira par des économies et une appropriation
accrue de l'enquête par le Gouvernement du Sénégal.
Les questions d'évaluation, la conception, les méthodes et les limites de l'évaluation
L'évaluation a été conçue pour répondre aux questions suivantes :
Concernant l'utilisation des données :
1a. Comment les données de l’ECS ont-elles été utilisées par divers intervenants pour planifier,
surveiller et évaluer les programmes de santé ?
1b. La mise en œuvre simultanée de l’EDS-Continue et de l'ECPS est-elle utile ? Dans quel sens ? Et pour
quelles parties prenantes ?
2. Quelles ont été les réalisations et les défis en matière de renforcement des capacités depuis le début
de l’ECS ?
3. Le Gouvernement du Sénégal s'est-il progressivement approprié l’ECS au fil du temps ?
EVALUATION OF THE CONTINUOUS DEMOGRAPHIC AND HEALTH SURVEY IN SENEGAL 2012–2017 / viiiDe plus, comme la question a été soulevée par bon nombre de nos personnes interrogées, l'équipe a
ajouté une quatrième question :
4. Quelles sont les exigences d'une ECS pour guider le pilotage des politiques publiques et du Plan
Sénégal Emergent (PSE) ?
METHODOLOGIE
Trois méthodes principales ont été utilisées pour cette évaluation : 1) un examen des documents de
l'USAID et d'autres publications liées à l’ECS, 2) des entretiens individuels et de groupe, et 3) un bref
examen de la qualité des données de l’EDS-Continue et du District Health Information System 2
(DHIS2).
Pour la première, l'USAID a fourni à l'équipe d'évaluation une vingtaine de documents relatifs à l'enquête
ainsi que l'évaluation de l'enquête en cours au Pérou, qui possède le seul autre EDS-Continue dans le
monde (Professeur Becker faisait partie de l'équipe d'évaluation de cette enquête en 2007). L'équipe a
également examiné une liste de publications fournie par ICF sur les publications qui utilisaient des
données ECS.
Pour la deuxième, l'équipe a reçu une liste de personnes et/ou d'organisations à contacter pour les
entrevues et, au cours de notre travail, l'équipe a ajouté quelques autres personnes qui nous semblaient
importantes de rencontrer. La liste comprend cinq groupes principaux : 1) USAID, 2) ICF, 3) l’Agence
Nationale de la Statistique et de la Démographie (ANSD), 4) GdS, et 5) Partenaires.
Pour la troisième, l'équipe a examiné certains indices de qualité des données de l’EDS-Continue à partir
des tabulations des données de l’EDS-Continue et aussi un indicateur produit à partir du DHIS2.
RESULTATS ET CONCLUSIONS
Question 1a : Comment les données de l’ECS ont-elles été utilisées par divers intervenants pour
planifier, surveiller et évaluer les programmes de santé ?
Les données de l’ ECS sont largement utilisées par les ministères et les partenaires pour planifier et
évaluer leurs activités dans le pays. Le fait que tous les ministères sont tenus par le Ministère de
l'Économie, des Finances et du Plan (MEFP) de produire un rapport annuel sur leur performance rend
les données indispensables pour un grand nombre d'organismes gouvernementaux.
Question 1b : La mise en œuvre simultanée de l’EDS-Continue et de l'ECPS est-elle utile ? Dans quel
sens ? Et pour quelles parties prenantes ?
Le seul grand utilisateur de l'ECPS est le ministère de la Santé et de l'Action sociale (MSAS). Le fait
d'effectuer les deux enquêtes en même temps permet au personnel du ministère d'établir une
corrélation entre le rendement des services de santé et les données recueillies au niveau des ménages. Il
est à noter que l'ECPS est la seule source d'information sur l'évaluation de la qualité des services de
santé par la population.
Question 2 : Quelles ont été les réalisations et les défis en matière de renforcement des capacités
depuis le début de l’ECS?
L’ICF a pris un bon départ dans le domaine du renforcement des capacités à l'ANSD. Au départ, l’ICF
s'occupait de presque tout : échantillonnage, programmation pour la saisie et le rapprochement des
EVALUATION OF THE CONTINUOUS DEMOGRAPHIC AND HEALTH SURVEY IN SENEGAL 2012–2017 / ixdonnées, calcul des poids pour différents fichiers, ainsi que l'élaboration du programme de tabulation. Le
renforcement des capacités du personnel technique de l'ANSD a été couronné de succès dans presque
tous les domaines.
Le principal défi qui ressort de nos entretiens est qu'une grande partie de l'expertise nécessaire à la
réalisation des enquêtes repose sur le personnel non permanent de l'ANSD. Une analyse plus
approfondie est un autre défi qu'il faudra relever si l'on veut que l’ECS se poursuive.
Question 3 : Le Gouvernement du Sénégal s'est-il progressivement approprié l’ECS au fil du temps ?
Nous avons examiné la propriété de l’ECS sous deux angles : technique et financier.
Au niveau technique, le Gouvernement du Sénégal a institutionnalisé l'enquête au sein de l'ANSD,
l'organisme public chargé de produire les statistiques nationales.
Toutefois, le Gouvernement Sénégalais n'a jusqu'à présent guère contribué aux coûts des deux
enquêtes.
Question 4 : Quelles sont les exigences d'une ECS durable pouvant guider le pilotage des politiques
publiques et du Plan Sénégal Emergent (PSE) ?
Le financement axé sur les résultats, une pratique qui lie le financement continu des programmes à leurs
résultats positifs avérés, est maintenant la norme au Sénégal, ce qui rend le suivi et l'évaluation des
programmes essentiels. En l'absence d'un système d'information sur la santé entièrement fonctionnel ,
les EDS-Continue et l'ECPS sont les principales sources de données pour les indicateurs de rendement
du système de santé à l'échelle nationale. Ils sont essentiels pour le suivi de l'éducation postsecondaire
et des politiques sectorielles.
Tous nos interlocuteurs souhaitent que l’ EDS-Continue et l'ECPS se poursuivent.
Idéalement, un échantillon représentatif devrait être prélevé chaque année dans les 14 régions du
Sénégal, mais cela pourrait entraîner des coûts beaucoup plus élevés.
Les Médecins Chefs de District (MCD) doivent relever le défi d'obtenir des données fiables sur la santé
de la population de leur district. En l'absence de telles données, ils doivent utiliser la moyenne régionale
pour leurs besoins de planification et de suivi, ce qui est loin d'être suffisant. Ceci constitue un grand défi
persistant dans les 76 districts sanitaires qui représentent le niveau opérationnel du système de santé
sénégalais. Évidemment, ce besoin ne peut pas être satisfait avec l’EDS-Continue.
RECOMMANDATIONS
1. Financement : Plaider auprès du Premier ministre et, le cas échéant, du président de la république
pour qu'ils puissent voir à la mise en œuvre effective du Fonds de développement de la statistique qu'ils
ont déjà initié (voir ci-dessous). Encourager également la participation des partenaires non
gouvernementaux intéressés, tant au comité de financement qu'au comité directeur de l’ECS.
2. Autorité contractante : Poursuivre la collaboration avec l'ANSD et veiller à ce que la régularisation
des agents contractuels professionnels soit effective d'ici la fin 2018.
3. Assistance technique : Poursuivre la relation avec l'ICF aussi longtemps que nécessaire pour assurer la
qualité des aspects techniques non encore maîtrisés par l'ANSD.
EVALUATION OF THE CONTINUOUS DEMOGRAPHIC AND HEALTH SURVEY IN SENEGAL 2012–2017 / x4. Fréquence et niveau de représentativité de l’ECS : Idéalement, EDS-Continue et l'ECPS devraient
continuer d'être menées chaque année avec un échantillon de taille suffisante pour fournir des
estimations fiables au niveau régional. Plusieurs alternatives ont été suggérées pour la poursuite de l’ECS
si les fonds disponibles ne sont pas suffisants pour réaliser l'enquête idéale.
Compte tenu des difficultés créées par l'instabilité de la plupart des indicateurs d'une année à l'autre (y
compris au niveau national), la meilleure solution serait de mener une enquête auprès des ménages tous
les deux ou trois ans, ainsi qu'une enquête d'Évaluation de la Prestation des Services (EPS) sur un
échantillon plus large pour obtenir des estimations stables au niveau régional. En outre, de résoudre le
problème de l'instabilité des indicateurs, une telle solution donnerait beaucoup plus de temps pour
l'analyse des données.
En ce qui concerne la production de données fiables sur la santé de la population au niveau des districts,
nous suggérons de renforcer et d'utiliser le DHIS2 de routine comme alternative. 1
5. Dissémination : La diffusion devrait avoir lieu dès que possible après la publication des rapports. En
outre, l'ANSD devrait s'efforcer d'assurer la diffusion dans toutes les régions. Les rapports devraient
être largement diffusés bien avant leur dissémination afin de s'assurer qu'au moins tous les médecins
régionaux et de district les ont reçus pour qu'ils puissent en participer activement.
6. Analyses approfondies : Pour faire progresser la science et la compréhension des interrelations entre
la population et la santé au Sénégal, il est essentiel d'analyser en profondeur ce vaste ensemble de
données. Le Gouvernement Sénégalais pourrait envisager de créer un fonds compétitif avec des appels à
propositions où tous les experts pourraient concourir.
De plus, comme l'ont fait remarquer de nombreuses personnes interrogées, les données de l'ECPS
devraient aider à mieux comprendre ce qui se passe au niveau de la population. Par conséquent, une
analyse conjointe des données des deux enquêtes est nécessaire. L’ICF pourrait aider à l'utilisation de
méthodes d'analyse appropriées.
1 Pour obtenir des estimations au niveau du district, il est nécessaire de poser un nombre limité de questions aux femmes qui
viennent accoucher dans les services de santé ou qui y vont après accouchement. L'approche proposée produit une série
continue d'estimations du niveau de mortalité avant le troisième anniversaire. Comme le poids à la naissance qui est déjà
disponible dans le DHIS2, il constitue un indicateur clé de la santé maternelle et infantile au niveau le plus bas.
EVALUATION OF THE CONTINUOUS DEMOGRAPHIC AND HEALTH SURVEY IN SENEGAL 2012–2017 / xiI. INTRODUCTION
L'USAID accorde une grande importance à la collecte, l'analyse, la diffusion et l'utilisation de données sur
la santé représentatives au niveau national, de qualité, disponibles en temps opportun, aux fins de la
planification, du suivi, de l'évaluation et de l'élaboration des politiques. En conséquence, l'USAID a été le
chef de file du programme des Enquêtes Démographiques et de Santé (EDS) depuis son lancement en
1984. En 34 ans, le programme EDS a fourni une assistance technique pour la mise en œuvre de plus de
320 enquêtes dans 90 pays. Il s'agit du programme le plus important et le plus durable de son genre.
Grâce à une méthodologie et une approche standardisée, les enquêtes sont comparables dans le temps
et dans l'espace. Et en raison d’une approche ouverte depuis longtemps, les données EDS sont librement
disponibles pour téléchargement et sont largement utilisées. Au fil du temps, le programme EDS a joué
un rôle de plus en plus important dans le renforcement des capacités locales, la promotion de l'accès
aux données et la facilitation de l'utilisation des données. La version actuelle du programme, EDS-7, vise
à améliorer la collecte, l'analyse et la présentation des données sur la population, la santé et la nutrition
et à faciliter l'utilisation de ces données pour la planification, l'élaboration des politiques et la gestion des
programmes afin de promouvoir la prise de décisions fondées sur des données probantes .
Le soutien technique que le programme EDS fournit se rapporte généralement à un ensemble spécifique
d'enquêtes et à leurs activités. Les enquêtes du programme comprennent plusieurs enquêtes auprès des
ménages : l'Enquête Démographique et de Santé (EDS) ; l'Enquête sur les Indicateurs du Sida (EIS) qui
recueille des données pour le suivi et l'évaluation des programmes de lutte contre le VIH/sida ; et
l'Enquête sur les Indicateurs du Paludisme (EIP) qui recueille des données pour le suivi de la performance
des programmes de lutte contre le paludisme. De plus, le programme comprend également des
enquêtes sur la performance des services de santé (EPS), qui recueillent des données au niveau des
établissements de santé sur la disponibilité des services, l'état de préparation des établissements à
fournir des services de santé essentiels, la qualité de ces services et la satisfaction des clients et des
fournisseurs.
En plus de cette série d'enquêtes, il y a eu deux expériences avec une EDS continue, conduite chaque
année, au lieu de l’enquête standard qui a lieu tous les cinq ans. L'objectif fondamental d'un EDS continu
est de produire des informations sur une base régulière (annuellement ou semestriellement) à l'aide d'un
bureau et d'un personnel permanents dédié l'EDS. Le premier a commencé au Pérou à partir de 2004 ;
le second, un programme quinquennal au Sénégal, qui a débuté en 2012 comprenait à la fois une EDS
continue (EDS-C) et une EPS continue (ECPSS). La section qui suit donne de plus amples informations
sur l'Enquête Continue au Sénégal (ECS) qui fait l’objet de cette évaluation finale.
OBJECTIF DE L’EVALUATION
La présente évaluation finale visait à déterminer dans quelle mesure l’ECS avait atteint ses objectifs : 1)
accroître l’utilisation des données pour la planification et les politiques ; 2) renforcer les capacités
nationales, notamment en ce qui concerne la planification, la mise en œuvre et la diffusion des résultats
de l’enquête ; et 3) favoriser l'appropriation de l'enquête par le pays hôte. L'évaluation portera sur des
considérations techniques et de gestion afin de mieux comprendre les défis et les succès de la mise en
œuvre d'une enquête continue. Cette évaluation sera utilisée par les différents groupes de parties
prenantes : les ministères du Gouvernement sénégalais concernés, USAID / Sénégal, les autres
donateurs soutenant le Ministère de la Santé et de l'Action Sociale ou MSAS et l'Agence Nationale de la
EVALUATION OF THE CONTINUOUS DEMOGRAPHIC AND HEALTH SURVEY IN SENEGAL 2012-2017 / 1Statistique et du Développement. Démographie (ANSD) et USAID / Washington, DC, responsables de
programme.
QUESTIONS D’EVALUATION
L’évaluation devait répondre à quatre questions spécifiques de l’USAID (1a, 1b, 2 et 3). Comme
beaucoup de nos intervenants avaient des questions sur la pérennisation de l’ECS, une question
additionnelle (4) qui vise à guider le gouvernement du Sénégal dans ses efforts de pérennisation de l’ECS
a été ajouté :
1. Concernant l’utilisation des données :
a) a. Comment les données de l’ECS ont-elles été utilisées par diverses parties prenantes
pour planifier, suivre et évaluer les programmes de santé ?
b) b. La mise en œuvre concomitante de l’EDS-Continue et l’ECPSS est-elle utile ? Dans quel
sens ? Et pour quelles parties prenantes ?
2. Quelles ont été les réalisations et les défis dans le renforcement des capacités depuis le début
de l’ECS ?
3. Le gouvernement du Sénégal s’est-il progressivement approprié l’ECS au fil du temps ?
4. Quelles sont les exigences d’une ECS pérenne et apte à guider le pilotage des politiques
publiques et du PSE ?
EQUIPE D’EVALUATION
Les membres de l’équipe étaient Stan Becker (démographe et chef de l’équipe), Cheikh Mbacké
(démographe et membre de l’équipe) et Olivia Padis (membre de l’équipe qui assistait à Becker et
Mbacké).
EVALUATION OF THE CONTINUOUS DEMOGRAPHIC AND HEALTH SURVEY IN SENEGAL 2012-2017 / 2II. CONTEXTE
La première enquête continue de l'USAID a commencé en 2004 au Pérou et se poursuit aujourd'hui. La
nouvelle approche a été adoptée en réponse aux pressions des pays et des donateurs pour : a) disposer
de données de type EDS plus fréquemment que l'intervalle standard de cinq ans et b) mieux
institutionnaliser la capacité locale à mener des enquêtes à grande échelle. L'EDS-Continue du Pérou
fournit chaque année des données clés sur la population, la santé et la nutrition. Environ cinq ans après
le début de l'enquête, le gouvernement péruvien l'a institutionnalisée, fournissant l’essentiel du
financement tout en augmentant la taille de l'échantillon pour permettre des estimations annuelles à
l'échelle régionale (Rutstein and Way, 2014).
Suite au succès de l'expérience péruvienne, l'USAID a voulu étendre l'approche continue à l'Afrique
subsaharienne. Reconnaissant de plus en plus les avantages d'une collecte simultanée de données sur la
population et les structures de santé, l'USAID s'est également intéressée à la mise en œuvre d'une
enquête continue qui intégrerait à la fois les activités de collecte de l’EDS et de l’EPS. Par conséquent,
en 2010-11, l'USAID a commencé à explorer la possibilité de mener une deuxième expérience
d'enquête continue dans un pays d'Afrique subsaharienne. En réponse à l'intérêt de la mission AID et du
gouvernement du pays hôte, le Sénégal a été choisi pour devenir le site de la deuxième enquête
continue, conçue comme une expérience avec une évaluation formelle de base, à mi-parcours et en fin
de période.
L'un des avantages de l'expérimentation de l'approche de l’enquête continue au Sénégal était sa longue
histoire de mise en œuvre de l'enquête du programme EDS. Le Sénégal avait déjà mis en œuvre une
série d’enquêtes EDS standard (1986, 1992-93, 1997, 1999, 2005 et 2010-11) et deux enquêtes sur les
indicateurs du paludisme (2006 et 2008-09).
En plus de sa longue histoire avec le programme EDS, l'une des principales raisons de l'intérêt du
Sénégal pour la mise en œuvre de l'enquête continue a été la grève nationale des données, qui a
commencé en 2010. Pendant la grève, le personnel de santé a procédé à une rétention des données
créant ainsi un vide informationnel qui a eu un impact négatif sur les systèmes d'information de santé
publique affectant négativement toutes les parties prenantes du secteur de la santé. En réponse, le
Gouvernement a lancé l’Enquête continue du Sénégal (ECS) en 2012 pour assurer le suivi des progrès
vers la réalisation des objectifs du Millénaire pour le développement (OMD) et d'autres objectifs du
programme de santé. Afin de maintenir un flux continu de données pour mieux informer la politique,
l’ECS a remplacé le modèle standard de l’EDS qui collectait les données auprès des ménages environ une
fois tous les cinq ans.
OBJECTIFS DE L’ECS
L’ECS a été formulée avec trois objectifs principaux :
a) Répondre aux besoins continus de données pour planifier, surveiller et évaluer les
programmes de santé et de population.
b) Renforcer la capacité des institutions sénégalaises à collecter, traiter, analyser, diffuser et
utiliser les données.
c) Favoriser l'appropriation de l'enquête par le pays hôte.En plus de ces deux objectifs
principaux, il y avait d'autres avantages hypothétiques. Premièrement, dans le cas de l’ECPSS,
EVALUATION OF THE CONTINUOUS DEMOGRAPHIC AND HEALTH SURVEY IN SENEGAL 2012-2017 / 3une évaluation fréquente des données sur la santé et de la disponibilité des services aux
clients dans les établissements de soins de santé et de l'état de préparation des
établissements à fournir des services permettraient d'améliorer rapidement les programmes
grâce à un feedback (boucle de rétroaction) plus rapide. Deuxièmement, le maintien d'un
bureau central et du personnel sur le terrain au fil du temps réduirait les coûts et conduirait
à l'institutionnalisation du processus de l'EDS, ce qui apporterait des avantages en dehors du
champ d'application de l'EDS transversale. Le renforcement des capacités du personnel et
l'institutionnalisation des processus de l'EDS devraient permettre d'améliorer la qualité des
données et de réduire le besoin d'assistance technique, ce qui permettrait au gouvernement
sénégalais de s'approprier davantage les enquêtes. En outre, la conception de l’ECS
permettrait une plus grande souplesse et une plus grande réactivité aux besoins des pays en
matière de données, car les séries d'enquêtes seraient adaptées à des sujets particuliers qui
seraient difficiles à traiter dans le cadre d'une opération EDS standard qui a lieu seulement
tous les cinq ans.
Cette évaluation permettra de déterminer si les avantages prévus ont été réalisés, y compris les
réussites et les défis rencontrés.
METHODOLOGIE DE L’ECS
L'enquête continue du Sénégal s'est fondée sur les enseignements tirés de l'expérience péruvienne, en
particulier en ce qui concerne l'attention portée à plusieurs questions, notamment la taille de
l'échantillon et sa relation avec les rapports annuels. Plus précisément, à l'instar du plan d'échantillonnage
original pour le Pérou, la composante de l'EDS continue ne produit pas d'estimations représentatives au
niveau régional chaque année. Les données de deux phases consécutives doivent être mises ensemble
afin d'obtenir des indicateurs représentatifs de chacune des 14 régions du Sénégal. En revanche,
l'évaluation de la prestation de services continus (EPS-C) est en mesure de fournir des estimations
régionales pour chaque phase de la collecte de données.
La phase 1 de l’ECS s'est déroulée en 2012-2013, suivie de la phase 2 en 2014, de la phase 3 en 2015, de
la phase 4 en 2016 et de la phase 5 en 2017. Au moment de la rédaction du présent rapport en 2018, le
travail sur le terrain pour la phase 5 est terminé depuis décembre 2017. Les éléments de base de l'EDS
sont restés les mêmes dans les cinq phases, mais d'autres éléments ont changé au cours du processus à
la suite de plans initiaux ou d'adaptations nécessaires. Par exemple, la taille de l'échantillon a été fixée à
200 grappes et environ 4 000 ménages pour les quatre premières phases, mais elle est passée à 400
grappes au cours de la cinquième phase, en raison de l'inclusion du dépistage du VIH et de la mesure de
la mortalité maternelle. Les femmes âgées de 15 à 49 ans ont été interrogées à chaque phase, mais les
hommes âgés de 15 à 59 ans ont été interrogés à partir de la phase 2. Chaque phase comprenait des
tests anthropométriques, des tests d'anémie et des tests de dépistage du paludisme pour les enfants,
tandis que la phase 5 comprenait des tests d'anémie et de dépistage du VIH pour les hommes et les
femmes de l'échantillon. Chaque phase utilisait un questionnaire EDS standard abrégé et comprenait un
module spécial en fonction des priorités nationales.
Comme l’EDS-Continue, l’ECPSS a également été conçu pour avoir cinq phases, certains éléments
restant les mêmes à travers les cinq phases, tandis que d'autres changent d'une phase à l'autre. Les
indicateurs pour chacune des cinq phases étaient représentatifs par type d'établissement, par autorité de
gestion et par région du Sénégal. Au cours de chaque phase, 50% des hôpitaux et centres de santé du
Sénégal ont été interrogés, ainsi que 20% des postes de santé et un échantillon de leurs cases de santé
EVALUATION OF THE CONTINUOUS DEMOGRAPHIC AND HEALTH SURVEY IN SENEGAL 2012-2017 / 4associées, le niveau le plus bas de la pyramide sanitaire. Au cours des troisième, quatrième et cinquième
phases, 10 % des installations interrogées au cours de la phase précédente ont fait l'objet d'une nouvelle
enquête. L’ECPSS a utilisé quatre méthodes de collecte de données pour chaque phase : inventaires,
entretiens avec les prestataires de soins de santé, observations de consultation, entretiens de sortie avec
les clients des établissements de santé et, certaines années, un questionnaire spécial pour les cases santé.
Au cours de chaque phase, les thèmes des observations de la consultation étaient les mêmes que ceux
des entretiens avec les clients des formations sanitaires. Cependant, les sujets de ces thèmes ont changé
d'une phase à l'autre. Par exemple, au cours de la phase 1, les thèmes étaient la planification familiale et
les soins curatifs pour les enfants, tandis qu'au cours de la phase 2, les thèmes étaient les soins prénatals
et les soins curatifs pour les enfants.
INTERVENANTS ET FINANCEMENT DE L’ECS
Depuis le début, l’ECS a été menée en conformité avec le programme d'action de l'Agence Nationale de
la Statistique et de la Démographie (ANSD) en étroite collaboration avec le Ministère de la Santé et de
l'Action Sociale (MSAS), avec l'assistance technique d'ICF International, et le financement fourni par le
Gouvernement du Sénégal, le Fonds Mondial, USAID, l'UNICEF, l'UNFPA, la Banque Mondiale, PMI, et
Nutrition International.
Le tableau en annexe I donne la distribution des financements par année et bailleur.
EVALUATION OF THE CONTINUOUS DEMOGRAPHIC AND HEALTH SURVEY IN SENEGAL 2012-2017 / 5III. METHODOLOGIE
Nous avons essentiellement utilisé trois méthodes pour cette évaluation : 1) l'examen des documents et
2) les entrevues individuelles et de groupe et 3) l’examen des données de l’ECS et de DHIS2. Pour la
première, l'USAID nous a fourni une vingtaine de documents relatifs à l'enquête ainsi que l'évaluation de
l'enquête continue au Pérou qui est la seule autre enquête continue dans le monde (Prof Becker était
dans l’équipe d’évaluation pour cette enquête en 2007). Pour la deuxième méthode, nous avions aussi
une liste de personnes et/ou d'organisations à contacter pour des entrevues, et pendant le travail, nous
avons ajouté quelques autres personnes que nous considérions importantes à rencontrer. Pour la
troisième méthode, nous avons ajouté un examen de la qualité des données de l'EDS-Continue puisque
les analyses des données de l'Enquête Continue au Pérou ont révélé une détérioration de la qualité des
données pour certaines mesures. L'USAID a également fourni un accès temporaire à la base de données
DHIS2. L'examen des données du DHIS2 a donné à l'équipe une meilleure idée des limites et des
possibilités offertes par ce système de collecte systématique de données.
Auparavant, nous avions préparé, avec l'aide de l'USAID, une liste de questions à poser aux personnes
interrogées. Bien qu'il y ait eu quelques questions communes, la liste variait pour les cinq principaux
groupes de parties prenantes : 1) USAID ; 2) ICF ; 3) ANSD ; 4) Gouvernement du Sénégal ; 5)
Partenaires. Les questionnaires se trouvent à l'annexe II.
INTERVIEWS INDIVIDUELLES ET DE GROUPE
A Washington, D.C.
1. USAID
2. ICF
Au Sénégal
3. USAID/Sénégal
4. ANSD
5. MSAS
6. Autres organismes du Gouvernement du Sénégal
7. Partenaires
a. UNICEF
b. UNFPA
c. Nutrition International
d. La Banque Mondiale
e. Helen Keller International
f. Sustaining Health Outcomes through Private Sector (SHOPS)-Plus
g. IntraHealth
h. Population Council
i. Abt Associates
j. Human Resources for Health (HRH) 2030
k. PMI
EVALUATION OF THE CONTINUOUS DEMOGRAPHIC AND HEALTH SURVEY IN SENEGAL 2012-2017 / 6Une liste de toutes les personnes interrogées figure à l'annexe III. Nous avons présenté à chaque
interlocuteur un formulaire de consentement éclairé à signer qui comprenait la permission d'enregistrer
l'entrevue et d'utiliser éventuellement des citations, mais anonyme (Annex IV). Toutes nos
interlocuteurs étaient d’accord pour signer le formulaire.
Enfin, ICF nous a préparé des tabulations concernant les indices de qualité des données de l’EDS-
Continue.
LIMITES
Les limites de l'évaluation sont les suivantes :
1. Certaines personnes interrogées peuvent avoir été empêchées de parler ou de dire ce qu'elles
ont dit en raison de la présence d'une personne qui est leur supérieur ou d'une autre personne
dominante dans l'organisation.
2. Quelques-unes de nos personnes interrogées n'ont pas été dans leur position actuelle pour
connaître l’ECS pendant toute la période écoulée depuis 2012. Inversement, plusieurs des
personnes interrogées étaient présentes et ont participé à l’ECS au début du projet, mais pas
dans un passé plus récent ni à l'heure actuelle.
3. Les deux membres de l'équipe, Becker et Mbacké, ont parfois « mené le témoin » , c'est-à-dire
qu'ils ont interrompu l'orateur pour terminer la réflexion ou ont reformulé la question d'une
façon quelque peu tendancieuse. Ce n'est qu'en écoutant les cassettes que l'on s'est aperçu qu'il
s'agissait d'un problème non négligeable. En effet, nous avons eu des discussions avec les
personnes interrogées plutôt que de nous contenter de poser des questions et de les écouter.
D'une certaine façon, cela a donné lieu à des discussions plus riches, mais ce n'est pas acceptable
dans le cadre d'une méthodologie qualitative typique.
4. Certaines des personnes interrogées avaient des intérêts particuliers dans l'un ou l'autre aspect
de l’ECS. Il s'agit là d'un « préjugé » acceptable, car nous voulions entendre les commentaires
des personnes qui s'occupent de l’ECS d'une manière ou d'une autre.
5. Quelques personnes interrogées ont dû se dépêcher de participer à l'entretien en raison
d'autres engagements et plusieurs se sont jointes à la conversation (c’est-à-dire ont commencé
avec d'autres collègues) en retard.
6. Nous, les auteurs du rapport, avons probablement choisi des citations avec lesquelles nous
sommes d'accord plus que des citations avec lesquelles nous ne sommes pas d'accord. Par
exemple, deux personnes interrogées ont déclaré qu'il serait bon de disposer en permanence
d'estimations de la prévalence du VIH ou de la mortalité maternelle d'après l’EDS-C. De toute
évidence, ces personnes ne comprenaient pas les implications de ces demandes par rapport à la
taille de l'échantillon et aux coûts très élevés associés, et l'équipe a choisi de ne pas inclure ces
déclarations.
7. Deux limitations assez mineures étaient :
a) L'enregistrement a mal fonctionné pour une entrevue.
b) Certains points peuvent avoir été perdus lors de la traduction.
8. Avec plus de temps, nous aurions également pu interviewer davantage de parties prenantes qui
n'étaient pas disponibles pendant la présence de l'équipe au Sénégal.
EVALUATION OF THE CONTINUOUS DEMOGRAPHIC AND HEALTH SURVEY IN SENEGAL 2012-2017 / 7IV. RESULTATS
EXAMEN DES DOCUMENTS
Plusieurs éléments ressortent de l’examen des documents (énumérés à l'annexe V) comme suit :
1. Il était instructif de voir qu'au Pérou, lorsque l'USAID s'est retirée et que le gouvernement a
repris l'enquête financièrement, la taille de l'échantillon de femmes en âge de procréer était
augmenté à 20,000 - 25 000 afin que des estimations d'indicateurs clés puissent être disponibles
au niveau régional chaque année.
2. Nous notons que les recommandations suivantes dans l’Evaluation à Mi-parcours (2012/15) sont
encore valables :
• Sur l'accès aux données et leur utilisation : « (2) Un comité technique. ... peut servir de
véhicule efficace pour définir des stratégies de renforcement des capacités. »
• Sur la nécessité d'améliorer la communication et la diffusion : « (3) Le MSAS doit être
associé plus efficacement aux activités de diffusion des résultats, y compris aux niveaux
décentralisés. »
• En ce qui concerne les ressources humaines : « (4) La création d'un poste pour une
personne médicale impliquée dans l'équipe technique est importante. »
3. Le rapport avec les données combinées de l'EDS pour trois ans (2012-2014) rend difficile une
datation précise des estimations, en particulier pour les indicateurs qui ont déjà une période de
référence pluriannuelle comme la fécondité et la mortalité infantile et juvénile.
4. Des documents d'analyse utilisant l’EDS-Continue et l’ECPSS ou les deux manquaient dans les
rapports d'études analytiques et/ou d'analyses approfondies de l'ICF.
LES INTERVIEWS
Cette section répond directement aux questions spécifiques posées dans les termes de référence de
l’évaluation, illustrée avec des citations directes de nos interlocuteurs.
Question 1a : Comment les données de l’ECS ont-elles été utilisées par diverses parties
prenantes pour planifier, suivre et évaluer les programmes de santé ?
Les données de l’ECS sont beaucoup utilisées aussi bien par les différentes composantes du
gouvernement que par les partenaires, pour la planification et l’évaluation de leurs activités dans le pays.
Pour le MSAS « les résultats de ces enquêtes ont été utilisés surtout pour la planification. Nous-nous fixons
des cibles sur la base de ce qui s’est passé antérieurement afin de mieux mesurer notre progression. Depuis
2012, l’ensemble des documents de stratégie portent la marque de l’EDS en termes de décisions. On peut
citer par exemple la lettre de politique sectorielle de développement, les documents pluriannuels de
dépenses, la stratégie nationale de financement de la santé. » [GdS]
« Certainement, l'ambassade utilise les données de l'EDS pour faire référence à des choses lorsqu'elle fait
rapport à Washington. » [USAID]
EVALUATION OF THE CONTINUOUS DEMOGRAPHIC AND HEALTH SURVEY IN SENEGAL 2012-2017 / 8Vous pouvez aussi lire
