formation des gestionnaires de programmes …module 6. suivi et évaluation (s&e) session 2....

FORMATION DES GESTIONNAIRES DE PROGRAMMES INTÉGRÉS DE LA LUTTE CONTRE LES MTN

Module 6. Suivi et évaluation (S&E) Session 2. Mesure de l’efficacité des programmes

de lutte contre les MTN


Module 6. S&E

Session 2. Mesure de l’efficacité des programmes de lutte contre les MTN




Objectifs

À la fin de cette session, les participants devraient :

• Comprendre l’intérêt du suivi des activités et des principaux indicateurs de processus des programmes de lutte contre les MTN

• Savoir définir et calculer le taux de couverture thérapeutique

• Dresser la liste des caractéristiques d’un bon système de recueil de données

• Être prêt à prendre des décisions et des mesures sur la base des constats du S&E

2




Mesures lors de la phase de gestion de l’AMM

Principaux indicateurs de S&E Processus/performance

Nombre de manifestations indésirables graves

Couverture de l’enquête

Couverture thérapeutique déclarée

Qualité des données

Efficacité des médicaments

Gestion de l’AMM

Su

rve

illan

ce

Mise

en

pla

ce

Planification Gestion des

médicaments

Système de gestion des

données

Innocuité de la CP

Mobilisation sociale,

sensibilisation,

supports

d'information,

d’éducation et de communication

Formation et supervision

Mise en œuvre de

l’AMM




MESURER LES ACTIVITÉS

4




INTRANTS

Nos investissements

ACTIVITÉS

Nos actions

RÉSULTATS

Les résultats À court terme ------------ À long terme

IMPACT PRODUITS

5




Disposons-nous de tout ce dont nous avons besoin ?

6




Activités du programme de lutte contre les MTN

• Nb de réunions de mobilisation sociale organisées au niveau national/du district

• Nb de réunions de coordination organisées au niveau national/du district

• Plan cadre et plans de travail annuels achevés

• Nb de supports d’information, d’éducation et de communication (IEC) développés, produits et distribués

• Nb de sessions de formation organisées, nb de distributeurs communautaires/agents de santé formés

• Nb de distributeurs communautaires/agents de santé ayant participé à la CP

7




MESURER LES RÉALISATIONS

8




INTRANTS

Nos investissements

ACTIVITÉS

Nos actions

RÉSULTATS

Les résultats À court terme ------------ À long terme

IMPACT PRODUITS

9




Comment savoir si nous allons dans la bonne direction ?

J’aperçois d’étranges formations rocheuses… nous devons aller dans

la bonne direction

10




INDICATEUR ESSENTIEL = LA COUVERTURE THÉRAPEUTIQUE

11




Couverture géographique

Nombre d’UEX d’endémie où une CP est mise en œuvre

Nombre d’UEX d’endémie où une CP est nécessaire

Couverture nationale

Nombre de personnes prenant des médicaments de CP dans un pays d’endémie

x 100

Nombre de personnes ayant besoin de CP au niveau national dans un pays d’endémie

Couverture thérapeutique ou épidémiologique Nb de personnes prenant des médicaments de CP au niveau de l’UEX pour une maladie donnée

Nb de personnes au niveau de l’UEX ayant besoin d’une CP dans une UEX

d’endémie Couverture programmatique

Nombre de personnes prenant des médicaments de CP

Ensemble des personnes ciblées pour suivre le traitement

Couverture des personnes interrogées

Nombre de personnes interrogées déclarant prendre des médicaments de CP

Nombre de personnes interrogées

x 100

x 100

x 100

x 100

Types de couvertures

12




Numérateur

(pers. traitées) Types de couverture

Dénominateur

(population)

UEX où la CP est

mise en œuvre

Personnes ingérant

le traitement

UEX d’endémie

Personnes ayant besoin

d’une CP (y compris les populations non éligibles. Elles ont besoin d’un traitement même si c’est contrindiqué dans leur cas.)

• Niveau national

• Niveau de l’UEX

Personnes ciblées par le

programme

Couverture

géographique

Couverture

nationale

Couverture

thérapeutique/épidémio-

logique

Couverture

programmatique

Éléments essentiels de la couverture

13




Suis-je encore loin du déploiement intégral du programme ?

Quels progrès ai-je réalisés en direction de mes objectifs de

lutte/d’élimination au niveau de l’UEX ?

Quels progrès ai-je réalisés en direction de mes objectifs de

lutte/d’élimination au niveau national ?

Le programme a-t-il atteint la population visée ?

Les différents taux de couverture répondent à différentes questions…

14




Exemples

15




Cartes d’endémicité

F C

A B

D

E

STH

FL

A B

F C

D

E

Résultats de la cartographie

16




Endemicity maps

F C

A B

D

E

STH

FL

A B

F C

D

E

Stratégie de traitement

D

E F

B A

C

Quelle est votre stratégie de traitement ?

17




Stratégie de traitement Endemicity maps

F C

A B

D

E

A B

F C

D

E STH

FL ALB pour enfants d’âge scolaire dans C, D et F

ALB + DEC pour la population éligible dans A, B et

E

D

E F

B A

C

D

E F

B A

C

Quelle est votre stratégie de traitement ?

18




Stratégie de traitement Cartes d’endémicité

F C

A B

D

E

A B

F C

D

E STH

LF

D

E F

B A

C

D

E F

B A

C

ALB for SAC in C, D and F


E

ALB pour enfants d’âge scolaire dans C, D et F

Que faire si vos moyens financiers ne vous permettent de traiter que A, B, C et E ?

19







E


F C A

B

D

E

A B

F C

D

E STH


FL

Couverture géographique Nombre d’unités administratives d’endémie où la CP est mise en œuvre

x 100 Nombre d’unités administratives d’endémie où la CP est nécessaire

FL

3 x 100

3 = 100 %

D

E F

B A

C

D

E F

A

C

B

Couverture GÉOGRAPHIQUE pour la FL ?

20







E

D

E F

B A

C

D

E F

B A

C


F C

A B

D

E

A B

F C

D


E STH

FL

Couverture géographique Nombre d’unités administratives d’endémie où la CP est mise en œuvre

x 100 Nombre d’unités administratives d’endémie où la CP est nécessaire

LF

3 x 100

3 = 100%

STH

4 x 100

6 = 67 %

Couverture GÉOGRAPHIQUE pour les STH ?

21




A

(Rappelez-vous : A est endémique pour

FL et STH)

Concentrons-nous sur le district A

22




POPULATION

100 personnes au total

40 enfants d’âge scolaire

10<2 ans

PERSONNES TRAITÉES (résultats AMM)

60 personnes traitées au total

30 enfants d’âge scolaire traités

A

Données sur la population et le traitement concernant A pour la FL (pour la distribution de ALB+DEC)

23




POPULATION



10<2 ans

PERSONNES TRAITÉES (résultats AMM)



A

Couverture du programme

Nb de personnes ingérant des médicaments de CP dans la/les unités administratives d’endémie

x 100 Ensemble des personnes ciblées pour recevoir le traitement dans la/les unités administratives

d’endémie

FL

x100 = 67 % 60

90

<2 exclus du traitement, donc total des personnes

ciblées pour le traitement = 100 -10 = 90

Le programme a-t-il atteint son objectif pour la FL ?

24




FL

x100 = 60 %

POPULATION



10<2 ans

PERSONNES TRAITÉES (RÉSULTATS AMM)



A

Couverture thérapeutique ou épidémiologique Nombre de personnes ingérant des médicaments de CP

au niveau de l’UEX pour une maladie donnée

x 100 Population totale d’une UEX

60

100

Nous rapprochons-nous des objectifs d’élimination pour la FL ?

25




FL

X100 = 60 %

Couverture thérapeutique ou épidémiologique

Nb de pers. Ingérant des médicaments de CP au niveau de l’UEX pour une maladie donnée x 100

Population totale d’une UEX

60

100


Nb de pers. ingérant des médicaments de CP dans la/les unités administratives d’endémie x 100

Total des pers. ciblées pour recevoir le traitement dans la/les unités administratives d’endémie x100 = 67 %

60

90

FL

Avez-vous atteint votre objectif de référence pour la FL ?

Référence pour la FL = 65 %

Non Référence

non atteinte

pour la FL

(Couverture thérapeutique ou épidémiologique)

Examen de la couverture pour la FL

26



de lutte contre les MTN Stratégie de traitement Cartes d’endémicité

F C

A B

D

E

A B

F C

D

E STH

FL ALB for SAC in C, D and F


E

D

E F

B A

C

D

E F

B A

C


Revenons à la carte de toutes les régions… Observons C

27




C

Revenons à la carte de toutes les régions… Observons C

28




Population totale : 1000

Traitement dans les écoles

Nb total d’écoles : 40

Nb d’enfants d’âge scolaire : 400

Pour des raisons de financement, seules

20 écoles (200 enfants au total) ont été

ciblées

160 enfants ont été traités

C

Données pour C (traitement des STH uniquement)

29










ciblées


C

Quelle est la COUVERTURE DU PROGRAMME dans C pour les STH ?

Couverture du programme Nb de pers. ingérant des médicaments de CP dans la ou les unités administratives d’endémie

x 100

Total des pers. ciblées pour recevoir le traitement dans la ou les unités administratives d’endémie

STH 160 x100 200

= 80 %

30




Couverture thérapeutique ou épidémiologique Nb de pers. ingérant des médicaments de CP au niveau de l’UA pour une maladie donnée x 100


STH 160 x100 400

= 40 %







ciblées



Nb de pers. ingérant des médicaments de CP dans la ou les unités administratives d’endémie

x 100


STH 160 x100 200

= 80 %

C

Quelle est la couverture Thérapeutique ou Épidémiologique de C pour les STH ?

31






STH 160 x100 400

= 40 %


x 100


STH 160 x100 200

= 80 %







ciblées


C

Avez-vous atteint la population que vous comptiez traiter ?

32






STH 160 x100 400

= 40 %


x 100


STH 160 x100 200

= 80 %







ciblées


C

Sur l’ensemble des personnes ayant besoin d’un traitement, combien en avez-vous atteint ?

33



de lutte contre les MTN Stratégie de traitement



E

D

E F

B A

C

D

E F

B A

C

Revenons à la carte des régions…

34




Population

totale

Population

éligible

Personnes

traitées

A 100 90 60

B 100 90 80

E 100 90 90

C 100 (non endémique) 0

D 100 (non endémique) 0

F 100 (non endémique) 0

Quelle est la COUVERTURE NATIONALE pour la FL ? Nb de pers. ingérant des médicaments CP pour une maladie donnée dans un pays d’endémie

x 100 Nb de pers. au niveau national nécessitant une CP pour une maladie donnée dans un pays d’endémie

x100 270

= 85 % 230

Stra

tég

ie d

e

traite

me

nt

D E F

B A

C

ALB + DEC pour la population éligible dans A, B et E


Données nationales pour la FL

35




Stra

tég

ie d

e

traite

me

nt

D E F

B A

C



Population

totale

Population

éligible

Personnes

traitées

A 100 90 60

B 100 90 80

E 100 90 90




Quelle est la COUVERTURE GÉOGRAPHIQUE pour la FL ? Nombre d’unités administratives endémiques où la CP est mise en œuvre

x 100 Nombre d’unités administratives endémiques où la CP est nécessaire

x100 3

=100 % 3



x100 270

= 85 % 230


36




Population

totale

Population

éligible

Personnes

traitées

A 100 90 60

B 100 90 80

E 100 90 90




Stra

tég

ie d

e

traite

me

nt

D E F

B A

C




Quelle est la COUVERTURE GÉOGRAPHIQUE pour la FL ? Nombre d’unités administratives endémiques où la CP est mise en œuvre

x 100 Nombre d’unités administratives endémiques où la CP est nécessaire

x100 3

=100 % 3



x100 270

= 85 % 230

37




Quel type de couverture répond à chaque question ?

Suis-je proche de la couverture complète ?

Ai-je progressé en direction de mes objectifs de

lutte/d’élimination au niveau de l’UEX/du district ?

Ai-je progressé en direction de mes objectifs de

lutte/d’élimination au niveau national ?

Le programme a-t-il atteint la population ciblée ?

Couverture

géographique

Couverture

nationale

Couverture

thérapeutique ou

épidémiologique

Couverture du

programme

38




Exercice

À l’aide des données fournies, calculez les éléments suivants pour les traitements contre la FL et les STH.

• Couverture du programme (au niveau du district)

• Couverture nationale (au niveau du pays)

• Couverture géographique (au niveau du pays)

• Couverture du district (au niveau du district) – uniquement pour la FL

39




En tant que gestionnaire de programme, en quoi ces données vous sont-elles utiles ?

Quelles mesures prendriez-vous ensuite ?

40




Les estimations relatives à la couverture sont importantes pour prendre des décisions,

mais leur qualité dépend de la qualité des données sur lesquelles repose le calcul

41




Comment les données MTN sur le nombre de personnes traitées circulent-elles dans votre pays ?

Dessinez un diagramme représentant le flux de données.

42




Figure 2: Recommended pathway for preventive chemotherapy data flow

43




Quelle est la quantité minimum de données qui devront être consignées sur les formulaires de

déclaration au niveau communautaire ?

44




Données minimales requises : niveau communautaire

• Groupe d’âge et sexe de chaque personne traitée

• Date de la CP

• Lieu de la CP (école, village, etc.)

• Nom de la personne qui administre le médicament

• Nom(s) et quantités du (des) médicament(s) administrés

• Les registres de médicaments devraient être adaptés au contexte local/à la langue locale

45



de lutte contre les MTN 46




Données minimales requises : au niveau du district

• Nom du district, MTN ciblées, médicaments utilisés

• Nb de médicaments reçus, utilisés et restants

• Liste des établissements qui ont fourni des données

• Date de réception des données

• Nb de personnes ciblées dans chaque établissement

• Nb de personnes traitées dans chaque établissement par groupe d’âge et par sexe

48




Calculs : au niveau du district

• Exhaustivité des données

• Actualité des données

• Couverture programmatique au niveau du district : – Totale

– Ventilée par sexe

– Ventilée par groupe d’âge

49




Page 17. Monitoring drug

coverage for preventive

chemotherapy . WHO




Que doit faire le responsable au niveau du district ?

51




Gestion des données au niveau du district

• Suivi sur les rapports manquants

• Suivi lorsque la couverture du programme est très faible ou >100 % afin de repérer les problèmes, vérifier la qualité des données et compléter les données en temps utile.

• Transmission au niveau suivant – régional/national.

52




Contrôle de la qualité des données

• Quelles MTN ont été ciblées ? Et quels médicaments utilisés ? • Combien d’associations de médicaments ont été utilisées ? • Combien de fois la CP a-t-elle été administrée en une année ? • Comment les données ont-elles été recueillies ? • Les données sont-elles ventilées par sexe ? (si ce n’est pas le cas, il le faudrait) • Quels types d’indicateurs ont été calculés ? • Quels types de couverture ont été observés ? • La couverture était-elle très faible/très forte ? Si oui, pourquoi ? • Que peut-on dire sur l’exhaustivité et l’actualité des données ? • Comment les données ont-elles été transmises à l’échelon de supervision supérieur ? • Y a t-il eu un retour d’information au niveau du terrain après transmission au niveau

de supervision ? • Les données ont-elles été partagées entre les différents programmes ou agences chargés de la mise en

œuvre ? • Difficultés rencontrées et suggestions pour y remédier.

53




Table 1: Examples of data qualty concerns and possible causes

54




Enquête de couverture postévénement (PECS)

• Avez-vous participé à une enquête PECS ?

• Pourquoi l’enquête PECS a-t-elle été réalisée ?

• Où l’enquête PECS a-t-elle été réalisée ?

• Comment l’enquête PECS a-t-elle été réalisée ?

• Qui l’a réalisée ?

• Était-elle intégrée à d’autres programmes ?

• Quelle était la qualification du personnel qui a effectué l’enquête PECS ?

• Quelles étaient les principales difficultés de la validation ?

• Quels constats/observations émanent de l’enquête PECS ?

• Quelles conclusions sont tirées sur la qualité des données ?

• L’enquête PECS a-t-elle été diffusée ? Dans l’affirmative, comment et par qui ?

55




PECS et couverture déclarée Couverture thérapeutique déclarée = suivi, couverture PECS = évaluation

0

20

40

60

80

100

1-A

LB

1-IV

M

1-P

ZQ

2-A

LB

2-IV

M

2-Z

ITH

3-A

LB

3-IV

M

3-Z

ITH

District/Drug

Cov

erag

e R

ate

(%)

x Country-

Reported

I 95% CI

56




Méthodes de validation de la couverture/données déclarées

Pendant l’AMM

1. Suivi de la concordance – Recomptage par les superviseurs.

2. Évaluation rapide de la couverture – Protocole en cours d’élaboration (2015).

57




Méthodes de validation de la couverture/données déclarées

Après l’AMM

3. Évaluation de la couverture – Protocole en cours d’élaboration (2015).

4. Évaluation de la qualité des données – Évaluation de la qualité des données (EQD) : tous les 3 à 5 ans, avant de planifier le prochain

plan-cadre national de lutte contre les MTN. Effectuée avec des évaluateurs indépendants.

– Directives élaborées en 2013 – 2014. Disponibles.

58




Quels sont à votre avis les principaux messages qui se dégagent de cette session ?

59




Principaux messages

• Les indicateurs de performance mesurent l’efficacité des activités.

• Les indicateurs mesurés devraient être importants, utiles et réalistes, et améliorer la qualité des activités.

• La couverture du suivi est l’indicateur de performance ESSENTIEL.

• Lorsque la couverture est très faible ou très élevée, le programme de lutte contre les MTN doit en chercher et en comprendre les raisons.

• Des actions devraient être engagées en réaction aux constats du S&E.

• Il est important de veiller à la qualité des données.

60

formation des gestionnaires de programmes …module 6. suivi et évaluation (s&e) session 2....

Documents