Étape 5 : Choix du plan d’enquête et des méthodes de collecte
Dans la cinquième étape du processus d’évaluation, les évaluateurs planifient la procédure méthodologique concrète et la mettent en œuvre. À cette fin, il faut d’abord clarifier si une collecte des données est nécessaire ou si la base de données est déjà suffisante pour répondre aux questions d’évaluation. Si une enquête (supplémentaire) est nécessaire, un plan de collecte de données est établi. Ce dernier consigne par écrit quelles données doivent être collectées, avec quelle méthode, auprès de qui et à quel moment.
En fonction des questions d’évaluation, des conditions cadres organisationnelles et temporales, des exigences en matière de protection des données, de l’accès au terrain, des possibilités d’échantillonnage et des ressources financières, différentes options doivent être pondérées avec soin quant au choix du plan d’enquête :
- Si, par exemple, il y a un intérêt pour l’atteinte des objectifs ou des changements dans un groupe de personnes, il peut être utile de procéder à plusieurs collectes de données successives auprès de ce public cible, par exemple une première collecte avant le début de l’objet de l’évaluation et d’autres pendant et à la fin, voire même à un stade ultérieur.
- Si l’on veut prouver des effets allant au-delà, c’est-à-dire prouver que c’est l’objet de l’évaluation qui a contribué de manière déterminante à la réalisation des objectifs, il peut éventuellement s’avérer nécessaire de mener des enquêtes également auprès de groupes de personnes qui n’ont pas participé à l’objet de l’évaluation.
Les plans d’enquête avec collecte de données auprès de plusieurs groupes à plusieurs moments sont particulièrement complexes et nécessitent une planification précise et de nombreuses ressources.
Le choix de la méthode de collecte des données doit également se fonder sur les questions d’évaluation et les conditions cadres, et être étroitement lié au plan d’enquête retenu. De manière générale, le répertoire des méthodes en sciences sociales comprend trois grands groupes :
- Utilisation de données existantes (traces comportementales) ou de données de processus.
- Observation systématique, cachée ou participative, en particulier des interactions verbales et non verbales.
- Enquête orale ou écrite ; ces enquêtes peuvent se dérouler en face à face, au téléphone ou par ordinateur, les questions concrètes pouvant être posées de manière plus ou moins ouverte resp. structurée et standardisée.
Les méthodes de collecte des données peuvent être utilisées pour collecter ou générer des données aussi bien qualitatives que quantitatives. Toutes les méthodes ayant des forces et des faiblesses différentes, elles se prêtent plus ou moins bien à la collecte de données en fonction du but, de la question et du budget de l’évaluation, etc. Dans chaque évaluation concrète, il s’agit de trouver l’approche méthodologique la plus appropriée. Il est donc essentiel que les évaluateurs resp. les équipes d’évaluation disposent d’un large répertoire de méthodes.
À cette étape du processus d’évaluation, il peut être nécessaire ou avantageux d’impliquer les parties prenantes dans les décisions méthodologiques. Toutefois, plus que pour d’autres étapes, la responsabilité incombe ici aux évaluateurs, car ils possèdent l’expertise et une vaste expérience des méthodes et des instruments de collecte des données.