module 6. m&e - who...module 6. suivi et évaluation (s&e) session 2. mesure de...

FORMATION DES GESTIONNAIRES DE PROGRAMMES INTÉGRÉS DE LA LUTTE CONTRE LES MTN

Module 6. Suivi et évaluation (S&E) Session 2. Mesure de l’efficacité des programmes

de lutte contre les MTN


Module 6. Suivi et évaluation (S&E)

Session 2. Mesure de l’efficacité des programmes de lutte contre les MTN




Objectifs

À la fin de cette session, les participants devraient : • Comprendre l’intérêt du suivi des activités et des principaux indicateurs de

processus des programmes de lutte contre les MTN • Savoir définir et calculer le taux de couverture thérapeutique • Dresser la liste des caractéristiques d’un bon système de recueil de données • Être prêt à prendre des décisions et des mesures sur la base des constats du S&E

2




Mesures lors de la phase de gestion de l’AMM

Principaux indicateurs de S&E Processus/performance

Nombre de manifestations indésirables graves

Couverture de l’enquête

Couverture thérapeutique déclarée

Qualité des données

Efficacité des médicaments

Gestion de l’AMM

Surveillance

Mise en p

lace

Planification Gestion des médicaments

Système de gestion des

données

Innocuité de la CP

Mobilisation sociale, sensibilisation,

supports d'information,

d’éducation et de communication

Formation et supervision

Mise en œuvre de

l’AMM




MESURER LES ACTIVITÉS

4




INTRANTS Nos

investissements

ACTIVITÉS

Nos actions

RÉSULTATS Les résultats À court terme ---------------- À long terme

IMPACT PRODUITS

5




Disposons-nous de tout ce dont nous avons besoin ?

6




Activités du programme de lutte contre les MTN

• Nb de réunions de mobilisation sociale organisées au niveau national/du district • Nb de réunions de coordination organisées au niveau national/du district • Plan cadre et plans de travail annuels achevés • Nb de supports d’information, d’éducation et de communication (IEC) développés,

produits et distribués • Nb de sessions de formation organisées, nb de distributeurs

communautaires/agents de santé formés • Nb de distributeurs communautaires/agents de santé ayant participé à la CP

7




MESURER LES RÉALISATIONS

8




INTRANTS Nos

investissements

ACTIVITÉS

Nos actions

RÉSULTATS Les résultats À court terme ---------------------- À long terme

IMPACT PRODUITS

9




Comment savoir si nous allons dans la bonne direction ?

J’aperçois d’étranges formations rocheuses… nous devons aller dans

la bonne direction

10




INDICATEUR ESSENTIEL = LA COUVERTURE THÉRAPEUTIQUE

11




Couverture géographique Nombre d’UEX d’endémie où une CP est mise en œuvre

Nombre d’UEX d’endémie où une CP est nécessaire

Couverture nationale Nombre de personnes prenant des médicaments de CP dans un pays d’endémie

x 100

Nombre de personnes ayant besoin de CP au niveau national dans un pays d’endémie

Couverture thérapeutique ou épidémiologique Nb de personnes prenant des médicaments de CP au niveau de l’UEX pour une maladie donnée

Nb de personnes au niveau de l’UEX ayant besoin d’une CP dans une UEX

d’endémie Couverture programmatique Nombre de personnes prenant des médicaments de CP

Ensemble des personnes ciblées pour suivre le traitement

Couverture des personnes interrogées Nombre de personnes interrogées déclarant prendre des médicaments de CP

Nombre de personnes interrogées

x 100

x 100

x 100

x 100

Types de couvertures

12




Numérateur (pers. traitées) Types de couverture Dénominateur

(population)

UEX où la CP est mise en œuvre

Personnes ingérant le traitement

UEX d’endémie

Personnes ayant besoin d’une CP

(y compris les populations non éligibles. Elles ont besoin d’un traitement même si c’est contrindiqué dans leur cas.) • Niveau national • Niveau de l’UEX

Personnes ciblées par le programme

Couverture géographique

Couverture nationale

Couverture thérapeutique/épidémio-

logique

Couverture programmatique

Éléments essentiels de la couverture

13




Suis-je encore loin du déploiement intégral du programme ?

Quels progrès ai-je réalisés en direction de mes objectifs de lutte/d’élimination au niveau de l’UEX ?

Quels progrès ai-je réalisés en direction de mes objectifs de lutte/d’élimination au niveau national ?

Le programme a-t-il atteint la population visée ?

Les différents taux de couverture répondent à différentes questions…

14




EXEMPLES

15




Cartes d’endémicité

F C

A B

D E

STH

FL

A B F C

D E

Résultats de la cartographie

16




Endemicity maps

Traiter les plus de 2 ans dans les districts A, B et E

F C

A B

D E

STH

FL

A B F C

D E Traiter tous les enfants

d’âge scolaire dans tous les districts (1 x par an)

Stratégie de traitement

D E F

B A

C

Quelle est votre stratégie de traitement ?

17




Stratégie de traitement Endemicity maps

F C

A B

D E

A B F C

D E

STH

FL ALB pour enfants d’âge scolaire dans C, D et F

ALB + DEC pour la population éligible dans A, B et E

D E F

B A

C D

E F

B A

C

Quelle est votre stratégie de traitement ?

18

Traiter les plus de 2 ans dans les districts A, B et E

Traiter tous les enfants d’âge scolaire dans tous les districts (1 x par an)




Stratégie de traitement Cartes d’endémicité

F C

A B

D E

A B F C

D E

STH

LF

D E F

B A

C D

E F

B A

C

ALB for SAC in C, D and F


ALB pour enfants d’âge scolaire dans C, D et F

Que faire si vos moyens financiers ne vous permettent de traiter que A, B, C et E ?

19




Couverture GÉOGRAPHIQUE pour la FL ?





D E F

B A

C D

E F A

C

B

20


F C

A B

D E

A B F C

D E

STH

LF

Couverture géographique Nombre d’unités administratives d’endémie où la CP est mise en œuvre

x 100 Nombre d’unités administratives d’endémie où la CP est nécessaire

FL

3 x 100

3 = 100 %




Couverture GÉOGRAPHIQUE pour les STH ?





D E F

B A

C D

E F A

C

B

21


F C

A B

D E

A B F C

D E

STH

LF

Couverture géographique Nombre d’unités administratives d’endémie où la CP est mise en œuvre

x 100 Nombre d’unités administratives d’endémie où la CP est nécessaire

FL

3 x 100

3 = 100 %

STH 4

x 100 6

= 67 %




A

(Rappelez-vous : A est endémique pour

FL et STH)

Concentrons-nous sur le district A

22




POPULATION 100 personnes au total 40 enfants d’âge scolaire 10<2 ans

PERSONNES TRAITÉES (résultats AMM) 60 personnes traitées au total 30 enfants d’âge scolaire traités

A

Données sur la population et le traitement concernant A pour la FL (pour la distribution de ALB+DEC)

23




POPULATION 100 personnes au total 40 enfants d’âge scolaire 10<2 ans

PERSONNES TRAITÉES (résultats AMM) 60 personnes traitées au total 30 enfants d’âge scolaire traités A

Couverture du programme Nb de personnes ingérant des médicaments de CP dans la/les unités administratives d’endémie

x 100 Ensemble des personnes ciblées pour recevoir le traitement dans la/les unités administratives

d’endémie

FL

x100 = 67 % 60

90

<2 exclus du traitement, donc total des personnes ciblées pour le

traitement = 100 -10 = 90

Le programme a-t-il atteint son objectif pour la FL ?

24




FL

x100 = 60 %

POPULATION 100 personnes au total 40 enfants d’âge scolaire 10<2 ans PERSONNES TRAITÉES (RÉSULTATS AMM) 60 personnes traitées au total 30 enfants d’âge scolaire traités A

Couverture thérapeutique ou épidémiologique Nombre de personnes ingérant des médicaments de CP

au niveau de l’UEX pour une maladie donnée x 100

Population totale d’une UEX

60

100

Nous rapprochons-nous des objectifs d’élimination pour la FL ?

25




FL

X100 = 60 %

Couverture thérapeutique ou épidémiologique

Nb de pers. Ingérant des médicaments de CP au niveau de l’UEX pour une maladie donnée x 100


60

100

Couverture du programme Nb de pers. ingérant des médicaments de CP dans la/les unités administratives d’endémie

x 100 Total des pers. ciblées pour recevoir le traitement dans la/les unités administratives d’endémie

x100 = 67 % 60

90

FL

Avez-vous atteint votre objectif de référence pour la FL ?

Référence pour la FL = 65 % Non Référence

non atteinte

pour la FL

(Couverture thérapeutique ou épidémiologique)

Examen de la couverture pour la FL

26




Stratégie de traitement Cartes d’endémicité

F C

A B

D E

A B F C

D E

STH

FL ALB for SAC in C, D and F


D E F

B A

C D

E F

B A

C


Revenons à la carte de toutes les régions… Observons C

27




C

Revenons à la carte de toutes les régions… Observons C

28




Population totale : 1000 Traitement dans les écoles Nb total d’écoles : 40 Nb d’enfants d’âge scolaire : 400 Pour des raisons de financement, seules 20 écoles (200 enfants au total) ont été ciblées 160 enfants ont été traités

C

Données pour C (traitement des STH uniquement)

29





C

Quelle est la COUVERTURE DU PROGRAMME dans C pour les STH ?

Couverture du programme Nb de pers. ingérant des médicaments de CP dans la ou les unités administratives d’endémie

x 100

Total des pers. ciblées pour recevoir le traitement dans la ou les unités administratives d’endémie

STH 160 x100 200

= 80 %

30




Couverture thérapeutique ou épidémiologique Nb de pers. ingérant des médicaments de CP au niveau de l’UA pour une maladie donnée x 100


STH 160 x100 400

= 40 %



x 100


STH 160 x100 200

= 80 %

C

Quelle est la couverture Thérapeutique ou Épidémiologique de C pour les STH ?

31






STH 160 x100 400

= 40 %


x 100


STH 160 x100 200

= 80 %


La couverture du programme nous aide à répondre à cette question

C

Avez-vous atteint la population que vous comptiez traiter ?

32






STH 160 x100 400

= 40 %


x 100


STH 160 x100 200

= 80 %


C

Sur l’ensemble des personnes ayant besoin d’un traitement, combien en avez-vous atteint ?

La couverture thérapeutique/ épidémiologique nous aide à répondre à cette question

33







D E F

B A

C D

E F

B A

C

Revenons à la carte des régions…

34




Population totale

Population éligible

Personnes traitées

A 100 90 60 B 100 90 80 E 100 90 90 C 100 (non endémique) 0 D 100 (non endémique) 0 F 100 (non endémique) 0

Quelle est la COUVERTURE NATIONALE pour la FL ? Nb de pers. ingérant des médicaments CP pour une maladie donnée dans un pays d’endémie

x 100 Nb de pers. au niveau national nécessitant une CP pour une maladie donnée dans un pays d’endémie

x100 270

= 85 % 230

Stratégie d

e tra

itement

D E F

B A C



Données nationales pour la FL

35




Stratégie d

e tra

itement

D E F

B A C



Population totale


Personnes traitées


Quelle est la COUVERTURE GÉOGRAPHIQUE pour la FL ? Nombre d’unités administratives endémiques où la CP est mise en œuvre

x 100 Nombre d’unités administratives endémiques où la CP est nécessaire

x100 3

=100 % 3



x100 270

= 85 % 230


36




Population totale


Personnes traitées


Stratégie d

e tra

itement

D E F

B A C




Quelle est la COUVERTURE GÉOGRAPHIQUE pour la FL ? Nombre d’unités administratives endémiques où la CP est mise en œuvre

x 100 Nombre d’unités administratives endémiques où la CP est nécessaire

x100 3

=100 % 3



x100 270

= 85 % 230

37




Quel type de couverture répond à chaque question ?

Suis-je proche de la couverture complète ?

Ai-je progressé en direction de mes objectifs de lutte/d’élimination au niveau de l’UEX/du district ?

Ai-je progressé en direction de mes objectifs de lutte/d’élimination au niveau national ?

Le programme a-t-il atteint la population ciblée ?

Couverture géographique

Couverture nationale

Couverture thérapeutique ou épidémiologique

Couverture du programme

38




Exercice

À l’aide des données fournies, calculez les éléments suivants pour les traitements contre la FL et les STH.

• Couverture du programme (au niveau du district) • Couverture nationale (au niveau du pays) • Couverture géographique (au niveau du pays) • Couverture du district (au niveau du district) – uniquement pour la FL

39




En tant que gestionnaire de programme, en quoi ces données vous sont-elles utiles ?

Quelles mesures prendriez-vous ensuite ?

40




Les estimations relatives à la couverture sont importantes pour prendre des décisions,

mais leur qualité dépend de la qualité des données sur lesquelles repose le calcul

41




Comment les données MTN sur le nombre de personnes traitées circulent-elles dans votre pays ?

Dessinez un diagramme représentant le flux de données.

42




Figure 2: Recommended pathway for preventive chemotherapy data flow

43




Quelle est la quantité minimum de données qui devront être consignées sur les formulaires de

déclaration au niveau communautaire ?

44




Données minimales requises : niveau communautaire • Groupe d’âge et sexe de chaque personne traitée • Date de la CP • Lieu de la CP (école, village, etc.) • Nom de la personne qui administre le médicament • Nom(s) et quantités du (des) médicament(s) administrés • Les registres de médicaments devraient être adaptés au contexte local/à la langue

locale

45



de lutte contre les MTN 46




Données minimales requises : au niveau du district

• Nom du district, MTN ciblées, médicaments utilisés • Nb de médicaments reçus, utilisés et restants • Liste des établissements qui ont fourni des données • Date de réception des données • Nb de personnes ciblées dans chaque établissement • Nb de personnes traitées dans chaque établissement par groupe d’âge et par sexe

48




Calculs : au niveau du district

• Exhaustivité des données • Actualité des données • Couverture programmatique au niveau du district :

– Totale – Ventilée par sexe – Ventilée par groupe d’âge

49




Page 17. Monitoring drug coverage for preventive chemotherapy . WHO




Que doit faire le responsable au niveau du district ?

51




Gestion des données au niveau du district

• Suivi sur les rapports manquants. • Suivi lorsque la couverture du programme est très faible ou >100 % afin de repérer

les problèmes, vérifier la qualité des données et compléter les données en temps utile.

• Transmission au niveau suivant – régional/national.

52




Contrôle de la qualité des données

• Quelles MTN ont été ciblées ? Et quels médicaments utilisés ? • Combien d’associations de médicaments ont été utilisées ? • Combien de fois la CP a-t-elle été administrée en une année ? • Comment les données ont-elles été recueillies ? • Les données sont-elles ventilées par sexe ? (si ce n’est pas le cas, il le faudrait) • Quels types d’indicateurs ont été calculés ? • Quels types de couverture ont été observés ? • La couverture était-elle très faible/très forte ? Si oui, pourquoi ? • Que peut-on dire sur l’exhaustivité et l’actualité des données ? • Comment les données ont-elles été transmises à l’échelon de supervision supérieur ? • Y a t-il eu un retour d’information au niveau du terrain après transmission au niveau

de supervision ? • Les données ont-elles été partagées entre les différents programmes ou agences chargés de la mise en

œuvre ? • Difficultés rencontrées et suggestions pour y remédier.

53




Exemples de doutes sur la qualité des données et causes possibles

54

Doutes sur la qualité des données Causes possibles

Couverture > 100 %

Fortes variations du nombre total de doses de CP utilisées d’une année sur l’autre au même niveau de déclaration

Larges écarts entre les doses de CP distribuées par les magasins et le nombre de doses rapportées comme ayant été ingérées sur la même campagne de traitement




Enquête de couverture postévénement (PECS)

• Avez-vous participé à une enquête PECS ? • Pourquoi l’enquête PECS a-t-elle été réalisée ? • Où l’enquête PECS a-t-elle été réalisée ? • Comment l’enquête PECS a-t-elle été réalisée ? • Qui l’a réalisée ? • Était-elle intégrée à d’autres programmes ? • Quelle était la qualification du personnel qui a effectué l’enquête PECS ? • Quelles étaient les principales difficultés de la validation ? • Quels constats/observations émanent de l’enquête PECS ? • Quelles conclusions sont tirées sur la qualité des données ? • L’enquête PECS a-t-elle été diffusée ? Dans l’affirmative, comment et par qui ?

55




PECS et couverture déclarée Couverture thérapeutique déclarée = suivi, couverture PECS = évaluation

0

20

40

60

80

100

1-AL

B

1-IV

M

1-PZ

Q

2-AL

B

2-IV

M

2-ZI

TH

3-AL

B

3-IV

M

3-ZI

TH

District/Drug

Cove

rage

Rat

e (%

)

x Country-Reported

I 95% CI

56




Méthodes de validation de la couverture/données déclarées Pendant l’AMM 1. Suivi de la concordance

– Recomptage par les superviseurs.

2. Évaluation rapide de la couverture – Protocole en cours d’élaboration (2015).

57




Méthodes de validation de la couverture/données déclarées Après l’AMM 1. Évaluation de la couverture

– Protocole en cours d’élaboration (2015).

2. Évaluation de la qualité des données – Évaluation de la qualité des données (EQD) : tous les 3 à 5 ans, avant de planifier le prochain

plan-cadre national de lutte contre les MTN. Effectuée avec des évaluateurs indépendants. – Directives élaborées en 2013 – 2014. Disponibles.

58




Quels sont à votre avis les principaux messages qui se dégagent de cette session ?

59




Principaux messages

• Les indicateurs de performance mesurent l’efficacité des activités. • Les indicateurs mesurés devraient être importants, utiles et réalistes, et améliorer la

qualité des activités. • La couverture du suivi est l’indicateur de performance ESSENTIEL. • Lorsque la couverture est très faible ou très élevée, le programme de lutte contre les

MTN doit en chercher et en comprendre les raisons. • Des actions devraient être engagées en réaction aux constats du S&E. • Il est important de veiller à la qualité des données.

60

module 6. m&e - who...module 6. suivi et évaluation (s&e) session 2. mesure de...

Documents