UTILISATION DE DONNÉES POUR ÉCLAIRER LA PRISE DE DÉCISIONS - WESTIN OTTAWA - CANWACH
←
→
Transcription du contenu de la page
Si votre navigateur ne rend pas la page correctement, lisez s'il vous plaît le contenu de la page ci-dessous
Utilisation de données pour éclairer
la prise de décisions
Westin Ottawa 18-19 AVRIL 2018
Panélistes
• Ibrahim Daibes, directeur, Paramètres de mesure (CanSFE)
• Abena Thomas, gestionnaire des subventions/conseillère en S&É,
projet ENRICH (Vision Mondiale Canada)
• Rudy Broers, directeur, Suivi et évaluation (Plan International
Canada)
• Peter Berti, directeur adjoint/conseiller en nutrition (HealthBridge
Foundation of Canada)
• Vaughn Lantz, directeur, Cohérence et efficacité des programmes
(Affaires mondiales Canada)
APRIL 18-19 AVRIL, 2018
Ibrahim Daibes
Directeur, Paramètres de mesure,
CanSFE
Westin Ottawa APRIL 18-19 AVRIL, 2018
Abena Thomas
Gestionnaire des subventions/
conseillère en S&É, projet ENRICH
Vision Mondiale Canada
Westin Ottawa APRIL 18-19 AVRIL, 2018
Suivi annuel des résultats :
Établissement de systèmes de suivi axés sur les résultats au moyen du
contrôle par échantillonnage de la qualité des lots (LQAS)
Westin Ottawa APRIL 18-19 AVRIL, 2018
Projet de renforcement des services de nutrition aux fins d’améliorer
la santé maternelle et infantile en Afrique et en Asie (ENRICH)
Où : Bangladesh, Kenya, Myanmar, Pakistan, Tanzanie
Quand : mars 2016 – septembre 2020
Bénéficiaires directs :
2 millions de personnes, y compris :
740 000 enfants de moins de 2 ans
835 000 femmes enceintes et allaitantes
Partenaire du consortium : Nutrition International
Partenaires de mise en œuvre : Harvest Plus, Société
canadienne de santé internationale, Université de
Toronto
APRIL 18-19 AVRIL, 2018
Base de référence
Octobre 2016 – janvier 2017
Début du projet
Mars 2016 Évaluation
Septembre – octobre 2018
Évaluation finale
Avril – juin 2020
Fin du projet
Septembre 2020
AF 2016 AF 2017 AF 2018 AF 2019 AF 2020
Calendrier de S&É conventionnel
APRIL 18-19 AVRIL, 2018
Mise en œuvre du projet : observations, défis et solutions
• Changements dans les contextes,
circonstances, besoins/priorités
• Suivi et rapport semestriels des résultats • Collecte fréquente de données nécessaire
immédiats et rapport annuel des résultats pour gestion axée sur les résultats
intermédiaires exigés par le bailleur de dynamique
fonds • Négociation du suivi et rapport annuel des
• Suivi du rendement et des activités montrant résultats
« ce qui a été accompli », sans indiquer si
« nous avons fait les BONNES choses » ou si • Méthodologie d’enquête efficiente
« ce que nous faisons mène à des nécessaire pour mesurer l’acquisition de
changements » connaissances et le changement de
• Absence d’outils/de plateformes efficientes comportement
nécessaires pour collecte de données aux
fins de prise de décisions et de planification
annuelle du travail
APRIL 18-19 AVRIL, 2018
Peut aider à établir l’étendue de la couverture du
secteur d’intervention du programme, ET
• cerner les zones de supervision (ZS) à faible
Contrôle par couverture :
échantillonnage de la • Cerner les causes de la faible couverture
• Axer les efforts et ressources sur les ZS peu
qualité des lots (LQAS) : couvertes
méthode • Augmenter la couverture du secteur de
programme en améliorant la couverture dans
d’échantillonnage ces ZS
aléatoire simple et peu • cerner les zones de supervision à grande
couverture :
coûteuse • Étudier et cerner ce qui fonctionne bien
• Cerner des stratégies pouvant être appliquées à
d’autres ZS
Valadez, J., Weiss, W., Leeburg, C., Davis, R. 2003. Assessing Community Health Programs: A Trainer’s Guide Using LQAS for Baseline Surveys and Regular Monitoring.
APRIL 18-19 AVRIL, 2018
Principaux secteurs d’intervention ENRICH – District Thakurgaon,
Bangladesh
Identification des 8 Unions
principaux secteurs 39 Villages
d’intervention et
21 Unions
105 Villages
regroupement en sites
de mise en œuvre
gérables 8 Unions
47 Villages
Ensemble, les sous-
districts représentent la
zone desservie 6 Unions Bureau de projet
29 Villages de sous-district
10 Unions
Individuellement, ils 69 Villages
représentant les 5 zones
de supervision
APRIL 18-19 AVRIL, 2018Zones de supervision RËEL Cible
Taille de
thakurgaon Pourcentage Rèlge de thakurgaon Règle de thakurgaon
Indicateur Question de l'enquête baliadangi haripur pirganj ranisankail
_sadar
Total l’échantilli
Total décision
baliadangi haripur pirganj ranisankail
_sadar
Pourcentage
d´cision
baliadangi haripur pirganj ranisankail
_sadar
on
Poursuite de l'allaitement au sein
20 21 20 21 21 103 105 98.1 18 Y Y Y Y Y
% d'enfants de 6 à 23,9 mois ayant
reçu un apport alimentaire minimum Diversification alimentaire 13 9 13 13 11 59 105 56.2 10 Y N Y Y Y
acceptable (diversification alimentaire
minimum et nombre minimum de Fréquence des repas
repas) 18 19 18 16 16 87 105 82.9 16 Y Y Y Y Y
Apport alimentaire minimum
acceptable
11 7 11 12 10 51 105 48.6 8 Y N Y Y Y 43.8 6 Y Y Y Y Y
14 Couverture totale 48,6 % % des enfants de 6 à 23,9 mois ayant reçu un apport alimentaire
70 minimum acceptable (AAMA) , SUR 4 ANS
12
12 60
# de réponses correctes
10 11 11
10 50
8
40
6 7
30 ENRICH - Bangladesh
4 Target
20
2
10
0 0
Baliadangi Haripur Pirganj Ranisankail Tharkurgaon S. Baseline Year1 Year2 Year3 Year4
# Correct Responses Actual Decision Rule Target Decision Rule
Utilisation de LQAS pour éclairer la prise de décisions liées aux programmes
APRIL 18-19 AVRIL, 2018Outils et plateformes de collecte de données
Base de données Suivi du rendement Suivi des résultats Évaluation
de suivi annuels - Enquête en grappes
- Sur Excel (format - Consolidation des - Échantillon de - Évaluation
numérique en données de suivi contrôle de la qualitative
développement) - Rapports qualité des lots - Désagrégation selon
- Suit les semestriels (enquête auprès l’âge et le sexe
activités/sous- - Désagrégation des ménages) - Évaluateur
activités selon le sexe - Évaluation externe/partenaire
- Désagrégation qualitative universitaire
selon le sexe - Rapports annuels
- Désagrégation
selon l’âge (non le
sexe)
APRIL 18-19 AVRIL, 2018Augmentation moyenne
de 35,5 % des
mères/fournisseurs de
Plus de 1 000 soins ayant reçu au moins
travailleurs de santé
635
Quelque 550 000 1 visite d’un TSC au cours
communautaire femmes et enfants des 3 derniers mois morts
(TSC) formés recevant éducation
Augmentation moyenne néonatales
et services de santé
Pus de 32 000 de 10,9% des mères évitées
fermiers recevant recevant au moins 4
formation, visites de soins prénataux
Plus de 150 000
semences, petits hommes, femmes et Augmentation moyenne
animaux enfants ayant un de 9,8 % de l’apport
accès accru à des alimentaire minimum
27
265 installations de
aliments nutritifs et acceptable chez les morts
diversifiés enfants de 6-23,9 mois
santé équipées maternelles
Augmentation évitées
moyenne de 12,6 % de
surveillance et
promotion de la
croissance chez les
enfants de 6-23,9 mois
Notre but : mappage de l’impact – du début à la fin
APRIL 18-19 AVRIL, 2018Rudy Broers
Directeur, Suivi et évaluation
Plan International Canada
Westin Ottawa APRIL 18-19 AVRIL, 2018La pauvreté et la vulnérabilité dans la
prise de décisions liées aux
programmes
Westin Ottawa APRIL 18-19 AVRIL, 2018Le contexte : ODD de l’ONU (2016-2030)
• 17 objectifs de développement durable (objectifs
mondiaux) pour mettre fin à la pauvreté, protéger la
planète et assurer la prospérité pour tous
• Entre autres objectifs : pas de pauvreté; faim zéro; bonne
santé; éducation de qualité; égalité entre les sexes
• Promesse de ne laisser personne de côté : responsabilité
mondiale à l’effet d’améliorer la situation pour les groupes
les plus pauvres et marginalisés
• Besoin évident de données pour cerner la situation des
groupes vulnérables
APRIL 18-19 AVRIL, 2018Projets ciblant explicitement les groupes les plus
vulnérables
Bauchi Opportunities for Responsive Neonatal and Maternal
Health (BORN) Résultat final :
• Contribuer à la réduction de la mortalité maternelle et néonatale
dans des régions ciblées chez les femmes et les nouveau-nés les
plus marginalisés et vulnérables
Strengthening Health Outcomes for Women and Children (SHOW)
Résultats intermédiaires :
• Renforcer l’utilisation des services de santé essentiels par les
femmes en âge de procréer, les adolescentes, les nouveau-nés et
les enfants de moins de 5 ans très vulnérables et vivant dans la
pauvreté
• Améliorer la qualité des services de santé essentiels pour les
femmes en âge de procréer, les adolescentes, les nouveau-nés et
les enfants de moins de 5 ans très vulnérables et vivant dans la
pauvreté
APRIL 18-19 AVRIL, 2018Détermination de la pauvreté et de la vulnérabilité
dans la programmation et l’évaluation
• Définition générale de la vulnérabilité : exposition au risque de chocs
négatifs portant atteinte au bien-être du ménage.
• À l’étape de la conception, l’analyse et les sources de données
existantes peuvent fournir certains éléments quant à la pauvreté et
la vulnérabilité.
• À l’étape de mise en œuvre, comment pouvons-nous mieux
comprendre les progrès faits par les groupes pauvres et
vulnérables, et savoir si nos programmes sont bien ciblés sur les
populations pauvres et vulnérables?
APRIL 18-19 AVRIL, 2018Atteindre les personnes les plus marginalisées :
indicateurs de pauvreté et de vulnérabilité :
• Indicateur de pauvreté – le Poverty Probability Index (PPI) ou
indicateur de probabilité de pauvreté, comprend 10 questions
adaptées au pays posées pour évaluer la probabilité de se situer
sous le seuil de pauvreté du ménage.
• Indicateur de vulnérabilité – créé par Plan International Canada
afin de déterminer le degré de vulnérabilité au moyen de 15
questions socioéconomiques posées tant à l’individu qu’au
ménage, assorti d’une grille de notation et d’un classement par
catégories.
APRIL 18-19 AVRIL, 2018Indicateur de probabilité de pauvreté (PPI)
Quand :
• Comme pour l’indicateur de vulnérabilité, les questions du PPI ont été intégrées dans l’enquête
de référence et seront posées de nouveau à mi-chemin et à terme
• Un classement par catégorie était nécessaire pour grouper les répondants à des fins d’analyse
Notation :
• 10 questions adaptées en fonction du pays
• Catégories de ménages : très pauvres, modérément pauvres, légèrement pauvres, non
pauvres, riches
• Types de variables différents selon les pays
Exemples : propriété foncière, télévisions, téléphones mobiles, véhicules, bicycles, bétail; niveau
d’instruction; type de carburant, matériaux utilisés pour les planchers, les murs; emplacement; envoi
d’argent
APRIL 18-19 AVRIL, 2018Indicateur de vulnérabilité : méthodologie
Quand :
• Variables recueillies dans l’enquête de référence auprès des ménages; le seront de nouveau à
mi-chemin et à terme
• Enquête de référence menée auprès de femmes ayant des enfants de moins de 2 ans et de
leur époux, mais questions posées seulement aux femmes
• 15 questions socio-démographiques
Notation :
• Chaque réponse recevait entre 0 et 7 points (0 étant le degré de vulnérabilité le plus élevé)
• Pas de questions à choix multiples ou qualitatives
• Harmonisation des questions pour les 6 contextes (5 pays, 2 projets), mais notation adaptées
en fonction du contexte local
• Selon le nombre de points, les femmes ayant répondu à l’enquête étaient classées selon trois
degrés de vulnérabilité: faible, modéré et élevé
APRIL 18-19 AVRIL, 2018Corrélation entre la probabilité de pauvreté et la probabilité de
vulnérabilité
Environ 65 % des très pauvres ont un degré de vulnérabilité modéré, 32 % des modérément pauvres ont aussi un degré de vulnérabilité
modéré.
100%
6.2
90%
31.5
80%
70%
64.7
60%
50% 100.0 Vulnérabilité élevée (0-38)
93.8
40% Vulnérabilité modérée (39-56)
68.1 Vulnérabilité faible (57-94)
30%
20%
35.3
10%
0%
Très pauvres Modérément Légèrement Non pauvres
pauvres pauvres
APRIL 18-19 AVRIL, 2018Présence de personnel de santé qualifié à
l’accouchement, en fonction du niveau de pauvreté
100
0
90
80 25 Ne sais pas
70
56.2
72.2
60
50 100 Absence de
40 personnel
69.1 qualifié à
30
l'accouchement
20 40.1
27.8 Présence de
10
personnel
0 qualifié à
Très pauvres Modérément Légèrement Non pauvres l'accouchement
pauvres pauvres
APRIL 18-19 AVRIL, 2018Pourcentage de mères de 20 à 49 ans ayant accouché avec du
personnel de santé qualifié (selon le degré de vulnérabilité)
High Moderate Low
100
Un parallèle a été 79
80 73
statistiquement établi entre le
64 65 67 64
degré de vulnérabilité et 60
l’accouchement en présence de 60 51
50
personnel de santé qualifié 44 41
chez les femmes de 20-49 ans 40 35 36
au Bangladesh, au Ghana, au
Nigeria (Sokoto) et au Sénégal 20
(Test Pearson Chi Square basé 20 10
sur une valeur de pPourcentage de femmes de 20 à 49 utilisant actuellement une
méthode moderne de planification familiale par PPI et
Vulnerabilité, Sénégal
28.2%
Poverty Probability Index 52.0% Vulnerability Index
19.5%
35.7%
22.9%
17.7%
0.0%
Very Poor Moderately Poor Slightly Poor Non-Poor High Moderate Low
Plan International Canada Inc. 25Utilisation de PPI pour l'évaluation de projet (exemple illustrati
% de femmes de 20 à 49 utilisant actuellement une méthode
moderne de planification familiale
Very Poor
70%
60%
50%
40%
30%
20%
10%
0%
Baseline Midline Endline
Plan International Canada Inc. 26Leçons tirées de l’intégration de la pauvreté et
de la vulnérabilité dans les questionnaires
• Temps requis pour répondre un peu plus long, questions
socioéconomiques communes aux deux enquêtes,
• Exploration des corrélations entre pauvreté et vulnérabilité nous
permettant d’apprendre sur la population des bénéficiaires
• Apprentissage et pilotage dans d’autres secteurs (éducation,
protection etc)
• Focaliser sur la programmation!
APRIL 18-19 AVRIL, 2018Recommandations concernant l’utilisation de
ces outils dans l’évaluation
Ciblage : Permet des interventions améliorées et ciblées, et utilisation
possible pour mesurer l’évolution de l’incidence de pauvreté au fil du temps.
Le PPI permet de montrer la répartition du degré de pauvreté des
bénéficiaires dans les projets.
Le PPI est très utile pour les projets disposant de ressources limitées, mais
visant un grand impact pour les ménages plus pauvres.
Évaluation : Utilisation possible pour créer une base de référence et
évaluer l’efficacité d’interventions auprès des plus pauvres et vulnérables à
mi-chemin et à terme.
Exploration possible des liens entre les degrés de pauvreté et de
vulnérabilité et les principaux résultats.
APRIL 18-19 AVRIL, 2018À la défense des données
Peter R. Berti
Westin Ottawa APRIL 18-19 AVRIL, 2018La gestion des
données :
une opération
difficile
APRIL 18-19 AVRIL, 2018« DHIS2 est un système d’information libre qui permet aux
gouvernements et aux organisations de recueillir, de gérer et
d’analyser des données dans le domaine de la santé et au-delà. »
Source: https://www.dhis2.org/inactionDHIS2 dans les projets GROW et SANI de CARE
Atouts et défis du DHIS2
Avantages
• Logiciel libre
• Gestion et partage des données
grandement facilités
• Facilité de production de rapports à
tous les niveaux hiérarchiques
• Données entre les mains des
décideurs
• Possibilité de contribution et
d’intégration aux systèmes de santé
nationaux
APRIL 18-19 AVRIL, 2018Avantages et défis du DHIS2
Avantages Défis
• Logiciel libre • Logiciel libre
• Gestion et partage des données • Configuration très laborieuse
grandement facilités
• Pour en obtenir les avantages :
• Facilité de production de rapports à
tous les niveaux hiérarchiques • Courbe d’apprentissage pour la saisie
et la gestion des données
• Données entre les mains des
• Pour les décideurs, nécessité de
décideurs
savoir comment interpréter les
• Possibilité de contribution et données
d’intégration aux systèmes de santé
nationaux
APRIL 18-19 AVRIL, 2018Problèmes non résolus par le DHIS2
(ou tout autre système de gestion de données)
• Mauvaise interprétation – même mot,
compréhension différente
• Représentation inexacte – les données représentent
qui
• Mauvaise compréhension
APRIL 18-19 AVRIL, 2018Habiletés à décoder avec exactitude des données
présentées graphiquement
1. Diagramme de dispersion
2. Multiples diagrammes de dispersion
3. Diagramme en barres
4. Diagramme à secteurs
5. Graphique à bulles
6. Carte de densité de clics
APRIL 18-19 AVRIL, 2018Vaughn Lantz
Directeur, Cohérence et efficacité des
programmes
Affaires mondiales Canada
Westin Ottawa APRIL 18-19 AVRIL, 2018CanWaCH.ca | CanSFE.ca
Thank You
MerciVous pouvez aussi lire
