L'évaluation de programme
Qu’est-ce que l’évaluation de programme?
Champ de connaissances et de pratique qui vise à déterminer la valeur d’une intervention ou d’une non-intervention pour la société. L’expression entend aussi, dans la pratique, la démarche rigoureuse et systématique de collecte et d’analyse de données probantes sur les interventions afin de les améliorer ou de poser un jugement sur leur valeur et, ainsi, d’éclairer la prise de décision.
Selon les préoccupations de son demandeur, l’évaluation pourra aborder la question de la pertinence de l’intervention et des moyens d’intervention choisis, de la mise en œuvre de l’intervention, de ses résultats, de l’efficacité avec laquelle ses objectifs sont poursuivis ou de l’efficience de l’action.
(Source : Glossaire des termes usuels en mesure de performance et en évaluation)
Qu’est-ce qu’une intervention?
Action conduite dans l’intention d’avoir un effet sur la société, qu’elle soit qualifiée de programme, d’initiative, de projet, de politique, de règlement, etc.
(Source : Glossaire des termes usuels en mesure de performance et en évaluation)
Pourquoi évaluer?
Les programmes font l’objet de jugements même sans évaluation de programme. Aussi, est-il dans l’intérêt de tous que les jugements portés soient fondés sur une démarche rigoureuse, systématique et méthodique plutôt que sur des idées préconçues ou des impressions subjectives. En ce sens, l’évaluation de programme sert principalement de soutien au processus de décision et de planification et vise l’optimisation des ressources. Il en découle une amélioration de la qualité de la gestion et de la qualité dans la prestation des produits et services.
Les étapes d’une évaluation
Il n’y a pas qu’une seule façon de procéder à une évaluation de programme mais les étapes ci-dessous, inspirées de l’offre de service en évaluation de programme du Ministère de la santé et des services sociaux, constituent un bon guide à suivre.
1. DÉMARRAGE ET MANDAT D’ÉVALUATION
- cerner le besoin d’évaluation : pour qui l’évaluation est-elle faite, quel est le motif d’évaluation, quelle est l’utilisation prévue des résultats, etc.;
- préciser les enjeux et les livrables;
- cerner le contexte d’évaluation : facteurs externes ou internes pouvant influer sur l’intervention, contexte politique, interventions antérieures;
- obtenir l’engagement du mandant : ressources disponibles, modalités de collaboration;
- analyser la faisabilité de l’évaluation : échéancier, type d’évaluation, disponibilité des données.
2. ÉLABORATION DU CADRE D’ÉVALUATION
- Le cadre d’évaluation est élaboré par le responsable de l’évaluation en collaboration avec le mandant de manière à apporter une réponse adéquate à ses besoins d’information.
- Principaux éléments du cadre d’évaluation :
- contexte, objet, question générale, questions opérationnelles et objectifs d’évaluation;
- stratégie globale d’évaluation;
- méthodologie : approche, participants, sources de données, outils, collecte de données, analyses;
- échéancier et plan de diffusion de résultats.
3. MISE SUR PIED DU COMITÉ DE SUIVI D’ÉVALUATION
- Le comité de suivi est consultatif et son action, ponctuelle. Son rôle consiste à donner son avis sur le cadre d’évaluation, les outils conçus pour recueillir l’information et les résultats. Il peut également contribuer à la mise à profit des résultats, le cas échéant;
- Le comité regroupe des représentants des secteurs visés par l’intervention à évaluer mais peut également inclure toute autre personne concernée par l’évaluation.
4. RÉALISATION DE L’ÉVALUATION ET DU RAPPORT D’ÉVALUATION
- Opérationnalisation du cadre d’évaluation :
- identification des sources de données;
- choix des participants;
- élaboration d’outils de collecte de données;
- collecte et analyse d’information;
- Rédaction du rapport d’évaluation :
- incluant des pistes de réflexion ou des recommandations qui doivent être réalistes et opérationnelles. Elles doivent également être discutées avec le mandant.
5. DIFFUSION DE RÉSULTATS
- Les résultats sont communiqués en continu aux secteurs responsables de l’intervention;
- Le rapport est publié sur le web conformément à la Directive sur la diffusion de l’information et sur la protection des renseignements personnels;
- S’il y a lieu, le rapport d’évaluation est transmis au Secrétariat du Conseil du trésor.
6. SUIVI DES ÉVALUATIONS
- Un suivi des recommandations ou des pistes de réflexion est préconisé afin de s’assurer que les décisions au regard des résultats d’évaluation mènent à l’action. Ce suivi peut prendre la forme d’un plan d’action préparé par le secteur qui a demandé l’évaluation.