Mesures et paramètres

Les mesures choisies doivent répondre aux critères SMART.

Mesures

Différentes mesures sont requises à chaque étape au moment de mesurer l'impact par rapport à la théorie du changement. Cela veut dire que vous pouvez utiliser des mesures d'impact, des mesures de résultats et des mesures d'extrants. Ces derniers ont une incidence sur les résultats, qui, à leur tour, influent sur l'impact voulu. Ensemble, ils peuvent vous rapprocher de votre vision de changement.

Nous utilisons ici les termes « mesures » et « indicateurs » de façon interchangeable.

Mesures d'impact

Les mesures d'impact sont des indicateurs liés aux objectifs de votre intervention et habituellement obtenus à moyen et long terme. Voici certains exemples d'indicateurs d'impact dans le domaine de la santé infantile¹ :

• % de poids insuffisant des enfants de moins de trois ans (ou cinq ans);

• % d'enfants avec un faible poids à la naissance;

• incidence des maladies ayant un impact sur la nutrition (Malaria, diarrhée, infection aiguë des voies respiratoires et VIH/Sida).

Mesures de résultats

Les mesures de résultats sont des indicateurs liés aux résultats. Voici certains exemples d'indicateurs de résultats dans le domaine de la santé infantile² :

• % de fournisseuses et fournisseurs de soins de santé qui connaissent les messages nutritionnels clés ainsi que les mesures à prendre aux étapes critiques du cycle de vie des femmes et des enfants;

• % d'établissements de santé qui n'ont pas en stock de l'acide folique ou de la vitamine A;

• Type et couverture des initiatives communautaires qui visent à encourager la diversification alimentaire, y compris la production, le traitement, la préparation et la conservation des ressources disponibles.

Mesures d'extrants

Les mesures d'extrants sont des indicateurs liés aux activités de votre intervention (processus, produit ou service). Ils surveillent les extrants (ou données de sortie) immédiats d'une intervention. Voici certains exemples d'indicateurs d'extrants dans le domaine de la santé infantile³ :

• % d'enfants allaités dans l'heure suivant leur naissance;

• Utilisation de sel iodé;

• % de femmes ayant donné naissance qui reçoivent des suppléments de vitamine A (200 000 UI) dans les huit semaines suivant l'accouchement.

Vous remarquerez peut-être que ces indicateurs d'impact, de résultats et d'extrants combinent des données qualitatives et quantitatives. Il importe de toujours recueillir un mélange de ces deux types de données dans vos mesures.

Source 1, 2, 3 : http://motherchildnutrition.org/information-management/planning-monitoring-evaluation/indicators.html

Indicateurs précurseurs et tardifs

La mesure d'un changement systémique doit se concentrer sur deux choses :

• La mesure du changement

• La mesure pour le changement

Les indicateurs peuvent généralement être précurseurs ou tardifs. Les indicateurs tardifs sont ceux qui viennent après un événement. Ils mesurent le changement (en vous indiquant ce qui se produit ou ne se produit pas), mais ne vous disent pas quoi changer. Le poids est un exemple. Les indicateurs précurseurs sont ceux qui renvoient à des événements futurs, par exemple l'apport en calories. Ce sont des mesures qui doivent changer et qui vous indiquent habituellement ce que vous devez changer pour améliorer les résultats. Les indicateurs précurseurs ne sont souvent pas très utiles pour vous dire quoi changer. Selon le contexte, vous aurez et devriez avoir un mélange des deux types d'indicateurs.

Les indicateurs de processus ou d'intrant vous donnent une meilleure idée de vos interventions, mais ils ne sont normalement pas utilisés dans les systèmes à grande échelle. Les indicateurs tardifs ou de résultat vous renseignent sur l'état des choses, ce qui est utile pour voir s'il y a eu un impact. Au bout du compte, vous devez mesurer le changement et pour y arriver, vous devez mesurer les résultats. Une combinaison d'indicateurs tardifs et précurseurs vous donnera une meilleure idée à savoir si vous créez un changement ou non, et par rapport à ce que vous devez modifier dans vos interventions, parce qu'une bonne évaluation permet aussi de répondre à la question suivante : Comment êtes-vous arrivé ici?

Paramètres

Un paramètre est un échantillon d'indicateurs et un chiffre qui fournit de l'information importante sur un état.

Les indicateurs choisis doivent répondre aux critères SMART :

• Spécifique : une cible claire et bien définie d'amélioration.

• Mesurable : un indicateur qui permet d'obtenir de la valeur d'une façon quelconque.

• Atteignable : des résultats faisables.

• Réaliste : par rapport à ce qui peut être fait sur le plan de l'évaluation (p. ex. la faisabilité selon les ressources, etc.).

• Temporel : précise quand les résultats sont attendus.

À garder en tête : Vous devez choisir des indicateurs qui vous donneront de l'information utile sur ce que vous voulez changer. En d'autres mots, ne mesurez pas les choses qui n'en valent pas la peine.

De plus, vos indicateurs devraient et doivent changer au fil du temps dans un contexte de labo d'innovation sociale, puisque ce que vous allez mesurer évoluera en cours de route selon l'itération de vos prototypes.