Méthode de suivi-évaluation : comment la choisir selon sa question d’évaluation
Questionnaire, entretiens, enquête quantitative, groupe de discussion, analyse documentaire. Face à la diversité des méthodes disponibles, le choix méthodologique devient rapidement une question d’outils. Pourtant, en évaluation, la première question à se poser n’est pas « comment allons-nous collecter les données ? » mais « qu’avons-nous besoin de comprendre ? »
Un projet peut disposer de nombreux indicateurs, produire régulièrement des rapports et collecter une quantité importante de données sans être réellement en mesure de répondre aux questions essentielles sur ses résultats.
C’est pourquoi le choix d’une méthode de suivi-évaluation doit partir de la question d’évaluation, et non de l’outil que l’équipe maîtrise déjà ou qu’elle envisage d’utiliser.
Cette séquence permet de construire un dispositif cohérent et proportionné à l’objectif de l’évaluation.
La question d'évaluation détermine le type d'information recherché
Toutes les questions d’évaluation ne cherchent pas à produire le même type d’information. Prenons trois questions.
« Dans quelle mesure la couverture du programme a-t-elle évolué entre 2024 et 2026 ? »
Il faut ici mesurer une évolution, comparer des valeurs et éventuellement analyser les écarts entre groupes ou territoires. Une approche quantitative sera probablement centrale.
« Pourquoi certaines catégories de bénéficiaires utilisent-elles moins le service proposé ? »
Cette question ne porte plus sur une ampleur, mais sur des mécanismes, des perceptions et des contraintes vécues. Les données chiffrées ne suffiront pas à y répondre.
« Dans quelle mesure le projet a-t-il contribué à l’amélioration observée et quels facteurs ont facilité ou limité cette contribution ? »
Cette dernière question porte à la fois sur le changement observé, la contribution de l’intervention et les conditions dans lesquelles cette contribution s’est produite. Plusieurs sources de données et méthodes peuvent alors être nécessaires.
On peut ainsi distinguer plusieurs grandes intentions : décrire une situation, mesurer l’ampleur ou l’évolution d’un phénomène, comparer des groupes, des périodes ou des territoires, expliquer un résultat ou un écart, comprendre des mécanismes ou des expériences, examiner une contribution de l’intervention à un changement observé, ou porter un jugement sur la performance ou la pertinence d’une intervention.
Cette distinction constitue le premier niveau du raisonnement méthodologique.
Une grille simple pour orienter le choix
À chaque intention d’évaluation correspond une approche dominante et des méthodes de collecte généralement adaptées. La grille ci-dessous permet de visualiser ces correspondances.
Quantitatif, qualitatif, mixte : ce que chaque approche permet
Derrière ces correspondances se trouvent trois logiques distinctes, dont chacune possède sa zone de pertinence et ses limites propres.
L'approche quantitative : mesurer sans nécessairement expliquer
L’approche quantitative est particulièrement adaptée lorsque l’évaluation doit mesurer des niveaux, des proportions, des écarts ou des évolutions. Quelle proportion des bénéficiaires a adopté une nouvelle pratique ? Quel est le niveau de couverture du service ? Quelle évolution peut être observée entre deux périodes ? Existe-t-il une différence entre deux groupes ?
Les données quantitatives permettent de standardiser les mesures, de comparer des populations et d’analyser certaines variations. Mais elles ne permettent pas nécessairement d’expliquer ces variations. Un indicateur peut montrer que l’utilisation d’un service a diminué sans permettre de déterminer si cette baisse est liée au coût, à l’accessibilité, à la qualité du service, aux pratiques existantes ou à une évolution du contexte.
Mesurer un changement et expliquer ce changement sont deux questions différentes.
L'approche qualitative : comprendre les mécanismes et le contexte
L’approche qualitative est particulièrement pertinente lorsque l’évaluation cherche à comprendre les perceptions, les expériences, les comportements ou les mécanismes associés à un résultat. Elle peut mobiliser des entretiens individuels, des entretiens avec des informateurs clés, des groupes de discussion, l’observation, l’analyse documentaire ou des études de cas.
Elle est notamment pertinente lorsque la question porte sur le « pourquoi », le « comment » ou les conditions dans lesquelles un changement s’est produit. Son intérêt ne réside pas dans le nombre de personnes interrogées, mais dans la profondeur et la pertinence des informations recueillies.
Elle exige néanmoins une rigueur spécifique : sélection raisonnée des participants, protocole cohérent, traçabilité de l’analyse et explicitation des limites. Les résultats qualitatifs ne sont pas automatiquement généralisables statistiquement à une population entière. Ils peuvent cependant être essentiels pour comprendre les mécanismes et les facteurs contextuels que les indicateurs ne permettent pas de saisir.
L'approche mixte : articuler les données plutôt que les additionner
Certaines questions nécessitent de combiner les deux approches. Imaginons qu’un projet accompagne des producteurs dans l’adoption d’une nouvelle pratique. Une enquête montre que 42 % des producteurs interrogés ont adopté la pratique, alors que la cible était de 70 %. Le projet connaît désormais l’ampleur de l’écart. Mais il lui reste une question essentielle : pourquoi l’adoption reste-t-elle inférieure à l’objectif ?
Des entretiens peuvent alors permettre d’explorer les facteurs susceptibles d’expliquer cette situation : coût, disponibilité des équipements, accessibilité, pratiques existantes, perception de la nouvelle technique ou contraintes liées au contexte.
Les deux approches apportent donc des informations différentes : le quantitatif mesure l’ampleur du phénomène, le qualitatif contribue à en comprendre les mécanismes et les facteurs explicatifs. Une approche mixte ne consiste toutefois pas à additionner mécaniquement une enquête et quelques entretiens. Les méthodes doivent être conçues ensemble et leurs résultats articulés dans l’analyse. L’objectif n’est pas d’accumuler les données, mais de produire les éléments de preuve nécessaires pour répondre à la question.
Du simple outil au design d'évaluation : ne pas confondre les niveaux
Une autre source de confusion vient du fait que les termes « outil », « méthode » et « approche » sont souvent utilisés comme s’ils désignaient la même chose. Or, ils interviennent à des niveaux différents.
Ces éléments ne remplissent pas la même fonction. Une évaluation peut utiliser une théorie du changement pour structurer son raisonnement, une enquête et des entretiens pour produire les données, puis plusieurs méthodes d’analyse pour les interpréter.
Il est donc plus pertinent de réfléchir en termes de design d’évaluation que de chercher une méthode unique qui serait, par principe, la meilleure.
Le cadre logique et la théorie du changement structurent le raisonnement
Le choix de la méthode doit également rester cohérent avec la logique de l’intervention. Le cadre logique, la théorie du changement ou la matrice des résultats permettent de représenter les liens entre les activités, les produits, les résultats et les changements attendus.
Ils aident ainsi à déterminer ce qui doit être observé, à quel niveau du changement, quelles données sont nécessaires, quelles hypothèses doivent être examinées et quels éléments de preuve sont attendus. Cette articulation suppose toutefois que le cadre logique lui-même reste à jour, ce qui renvoie à la question de son évolution au fil de la mise en œuvre.
La distinction entre niveaux de résultats est ici importante. Le fait qu’une activité ait été réalisée ne signifie pas nécessairement que le produit attendu a été obtenu. De même, l’atteinte d’un produit ne suffit pas à démontrer qu’un changement a eu lieu chez les bénéficiaires. Et l’observation d’un changement ne permet pas automatiquement de conclure que ce changement résulte de l’intervention. C’est exactement la limite que révèle la lecture exclusive des taux de réalisation.
Plus la question d’évaluation porte sur les niveaux supérieurs de la chaîne de résultats, plus le raisonnement méthodologique doit être explicite.
La matrice d’évaluation permet alors de relier les questions d’évaluation aux indicateurs ou éléments de preuve recherchés, aux sources de données, aux méthodes de collecte et aux méthodes d’analyse. Elle permet également d’identifier une faiblesse fréquente : une question jugée importante au moment de l’évaluation, mais pour laquelle le dispositif de suivi n’a prévu aucune donnée suffisamment pertinente.
La finalité de l'évaluation influence également le choix
Le choix méthodologique ne dépend pas uniquement de la question. Il dépend également de l’usage qui sera fait des résultats.
Une évaluation formative peut chercher à comprendre rapidement les difficultés rencontrées dans la mise en œuvre afin d’ajuster une intervention. Une évaluation sommative peut davantage chercher à apprécier la performance ou les résultats obtenus à un moment donné. Dans les deux cas, plusieurs approches méthodologiques peuvent être mobilisées.
Ce qui change, c’est le niveau de preuve recherché, le calendrier, les ressources disponibles et la nature de la décision à éclairer. Une question destinée à améliorer une activité en cours ne nécessitera pas le même dispositif qu’une question destinée à éclairer une décision majeure de financement ou de renouvellement.
Cinq critères à examiner avant de choisir une méthode
Même lorsque la question est claire, plusieurs critères doivent être examinés avant de retenir une méthode.
1. La nature de la question
Cherche-t-on à mesurer, expliquer, comparer, comprendre ou examiner une contribution ?
2. Le niveau de preuve recherché
La décision nécessite-t-elle une simple description de la situation, une compréhension approfondie, ou des éléments permettant d’examiner plus rigoureusement une relation causale ou une contribution ?
3. La disponibilité et la qualité des données
Les données existantes sont-elles suffisamment complètes, fiables et comparables ? Une base disponible n’est pas nécessairement une base exploitable pour toutes les analyses.
4. Le contexte et les ressources
L’accès aux bénéficiaires, les contraintes institutionnelles, la sensibilité du sujet, les compétences de l’équipe, le budget et le calendrier influencent le dispositif possible.
5. L’utilisation attendue des résultats
Qui utilisera les résultats ? Pour quelle décision ? À quel moment ? Cette question est souvent déterminante pour trouver le juste niveau de complexité.
Une méthode pertinente est d'abord une méthode alignée
Le choix d’une méthode de suivi-évaluation ne devrait donc pas commencer par un questionnaire, une plateforme ou une technique de collecte. Il devrait commencer par une série de questions : que voulons-nous savoir ? Que devons-nous observer pour pouvoir répondre ? Quel niveau de preuve est nécessaire ? Quelles données avons-nous déjà ? Quelles données devons-nous produire ? Et surtout, quelle décision cette information doit-elle permettre d’éclairer ?
Cette logique permet d’éviter deux écueils fréquents : collecter des données qui ne répondent à aucune question importante, ou poser des questions d’évaluation auxquelles le dispositif de suivi n’est pas capable de répondre.
Dans les projets de développement, cette cohérence doit également se prolonger dans la gestion quotidienne des données. Les équipes doivent pouvoir retrouver les informations, suivre les indicateurs, consolider les données provenant de différentes sources et disposer d’une vision structurée pour alimenter l’analyse et le pilotage.
Un dispositif qui suit la question, pas l’inverse
Delta Monitoring permet de structurer les indicateurs, de consolider des données issues de sources différentes et de relier chaque élément de preuve à la question qu’il doit éclairer. Les équipes gardent ainsi la traçabilité entre questions d’évaluation, données collectées et décisions prises, quelle que soit l’approche méthodologique retenue.
Voir comment Delta Monitoring structure la matrice d’évaluation →
Une méthode n’est jamais bonne ou mauvaise dans l’absolu. Elle est alignée, ou elle ne l’est pas. Un dispositif modeste mais cohérent avec la question posée produira des éléments plus utiles qu’un dispositif ambitieux construit sans savoir ce qu’il cherche à établir.
C’est là que se joue la maturité d’un système de suivi-évaluation : non pas dans la sophistication des techniques employées, mais dans la capacité à relier chaque donnée collectée à une question qui compte, et chaque question à une décision qui attend une réponse.