Cadrage et référentiel d'évaluation
Questions évaluatives et critères partagés (pertinence, efficacité, efficience, utilité, cohérence) pour cadrer ce que l'on cherche à apprécier.
L'évaluation d'une politique publique consiste à apprécier ses résultats au regard des objectifs fixés et des moyens engagés. Conduite par un institut d'opinion indépendant, elle mesure sur un échantillon représentatif la notoriété du dispositif, la satisfaction et l'impact perçu par les habitants et les usagers, pour éclairer la décision et ajuster l'action publique.
Les directions, les cabinets et les services évaluation d'une collectivité nous sollicitent au moment de rendre compte d'un dispositif ou d'ajuster une politique en cours.
Les tableaux de bord budgétaires et les statistiques d'activité disent ce qui a été fait. Ils ne disent pas si la population connaît le dispositif, y a recours, en est satisfaite, ni ce qu'il a changé dans le vécu des habitants. La raison est structurelle : celui qui ne recourt pas ne produit aucune trace dans les fichiers de gestion, exactement comme celui qui renonce à un soin n'apparaît dans aucune donnée de remboursement, ainsi que le montre notre observatoire local de l'accès aux soins.
Institut Quorum a fait de l'écoute des territoires son socle. Une évaluation appuyée sur l'enquête objective, sur un échantillon représentatif des habitants et des usagers, l'atteinte des objectifs, la notoriété, la satisfaction et l'impact perçu d'une politique, avec la neutralité d'un tiers indépendant. Elle apporte à la démarche d'évaluation la brique d'opinion qui manque souvent aux données administratives, et prolonge nos dispositifs d'écoute comme l'enquête de satisfaction des usagers et la consultation citoyenne représentative. Selon l'objet évalué, elle s'appuie aussi sur l'observation directe du service rendu par client mystère, et sur la mise en perspective régionale qu'apporte un baromètre d'opinion régional lorsque le dispositif évalué dépasse le périmètre d'une seule collectivité. Lorsque la question porte non plus sur une politique isolée mais sur l'ensemble de l'action d'une collectivité, ce même socle d'enquête prend la forme d'une étude d'opinion pour une collectivité territoriale.
Chaque évaluation est conçue sur mesure, à partir des objectifs de la politique et des publics concernés.
Questions évaluatives et critères partagés (pertinence, efficacité, efficience, utilité, cohérence) pour cadrer ce que l'on cherche à apprécier.
Mesure des résultats au regard des objectifs assignés à la politique, auprès des publics qu'elle vise directement.
Connaissance du dispositif, accès effectif et non-recours, pour comprendre ce qui freine ou favorise son utilisation.
Satisfaction des usagers et des habitants et effet ressenti sur le quotidien, mesurés sur un échantillon représentatif.
Une base de référence datée et une comparaison dans le temps et par territoire pour isoler ce qui a réellement évolué.
Des recommandations opérationnelles et une restitution devant l'exécutif pour ajuster la politique évaluée.
L'écoute des habitants et des décideurs locaux est au cœur de nos travaux depuis la fondation de l'Institut. Nous accompagnons les collectivités du cadrage évaluatif à la restitution devant l'exécutif, et nous inscrivons la mesure dans la durée, au besoin sous la forme d'un baromètre territorial, pour comparer la situation avant et après le déploiement d'une politique.
Nos référencesÉchantillon représentatif des habitants et des usagers, recueil multicanal, comparaison avant et après, référentiel d'évaluation partagé, marges d'erreur affichées et conformité RGPD.
L'évaluation d'une politique publique consiste à apprécier ses résultats au regard des objectifs fixés et des moyens engagés. Conduite par un institut d'opinion indépendant, elle mesure sur un échantillon représentatif la notoriété du dispositif, la satisfaction et l'impact perçu par les habitants et les usagers, pour éclairer la décision et ajuster l'action publique.
Les données administratives et budgétaires disent ce qui a été produit. L'enquête auprès d'un échantillon représentatif apporte la mesure de la notoriété du dispositif, du recours et du non-recours, de la satisfaction et de l'impact perçu par les habitants et les usagers. C'est la brique d'opinion qui permet d'apprécier si une politique a atteint ses objectifs tels qu'ils sont vécus.
La démarche s'applique à de nombreux dispositifs locaux : un Contrat Local de Santé, un plan de mobilité, un projet de territoire, une politique de tranquillité publique, une marque d'attractivité, un dispositif de satisfaction des usagers. Dans chaque cas, l'évaluation compare les effets perçus aux objectifs fixés au lancement.
La fiabilité tient à la représentativité de l'échantillon, à la méthode des quotas, à un recueil multicanal et à une comparaison avant et après menée à méthode constante. La neutralité d'un institut tiers indépendant écarte le biais de l'auto-évaluation, et les marges d'erreur sont affichées pour une lecture honnête des résultats. Une évaluation gagne enfin à interroger ceux qui mettent en oeuvre la politique autant que ceux qui la reçoivent : le baromètre social de la collectivité fait apparaître les obstacles internes qu'une enquête auprès des seuls usagers ne voit jamais.
Le bon moment dépend de la question posée. Une mesure initiale avant le déploiement fixe un point de départ, une mesure en cours de route permet de corriger le dispositif, et une mesure finale à distance de la mise en œuvre apprécie les effets perçus. Répéter le même questionnaire à intervalles réguliers, par exemple dans un baromètre territorial, permet de comparer les résultats dans le temps. Le dispositif d'enquête est défini dans le cahier des charges de l'étude.
Des objectifs à confronter aux résultats, un dispositif dont il faut mesurer la notoriété et l'impact, une politique à ajuster : nos équipes vous accompagnent du cadrage évaluatif à la restitution devant l'exécutif et les partenaires.