Un portail consacré à l’impact : l’IPSEE, ou Inventaire des problèmes, des solutions et des preuves des effets.
Évaluation de l’impact : un nouvel éclairage
Cette année, nous avons consacré un certain nombre d’articles au suivi et à l’évaluation, aux outils d’analyse et, enfin, à l’évaluation d’impact, qui font l’objet d’une section distincte du guide. Nous complétons notre couverture du sujet en présentant le contenu de l’IPSEE, l’Inventaire des problèmes, des solutions et des données probantes sur les effets. L’IPSEE est une plateforme dédiée au sujet et gérée par l’ASVAPP, l’Association pour le développement de l’évaluation et de l’analyse des politiques publiques. Plus précisément, il s’agit du premier site web italien consacré aux effets des politiques publiques. Il passe en revue les problèmes auxquels les politiques publiques devraient répondre, les solutions adoptées et, surtout, les preuves empiriques existantes sur leurs effets. Sa mission est illustrée par une analogie claire : les politiques publiques, comme les médicaments, sont nées pour « guérir » les problèmes. Mais fonctionnent-elles ? Produisent-elles les effets escomptés ? La même analogie, bien que plus circonscrite et spécifique, peut être appliquée aux projets européens. La plateforme IPSEE propose trois contenus principaux : un un glossaire glossaire des termes utilisés dans le domaine de l’évaluation d’impact, une vue d’ensemble des méthodes d’évaluation d’impact. méthodes méthodes utilisées dans ce domaine, et une archives de « cas » de politiques publiques, avec une analyse des politiques publiques, avec une analyse (étayée par des preuves scientifiques) de leur impact.
Glossaire sur l’impact
Le glossaire d’IPSEE propose une revue des termes utilisés dans le contexte de l’évaluation d’impact. Certains exemples incluent des termes déjà mentionnés dans notre guide et en particulier dans la section sur l’évaluation d’impact, d’autres sont plus spécifiques et spécialisés, mais tout aussi suggestifs pour les praticiens de projets. Quelques exemples : Analyse coût-bénéfice, conception d’un groupe de contrôle, poids mort, différence dans les différences, effet de verrouillage, efficacité, factuel/contrefactuel, impact, résultat, conception avant/après, biais de sélection.
Aperçu des méthodes d’analyse d’impact
La même section de la plateforme propose un guide des principales méthodes utilisées dans l’évaluation de l’impact des politiques publiques, qui peuvent être empruntées à l’approche de l’évaluation ou du moins l’inspirer. La première partie présente une vue d’ensemble : qu’est-ce que l’évaluation d’impact, les variables de résultat et de traitement, le paradigme contrefactuel et les stratégies de base pour estimer l’effet d’une politique. Une deuxième partie décrit, brièvement et dans des termes plus formels que ceux présentés dans notre guide, les différentes méthodes utilisées : L’évaluation expérimentale, l’analyse transversale, l’appariement statistique, les séries temporelles interrompues et la différence dans les différences, pour n’en citer que quelques-unes.
Analyse d’impact : exemples et politiques
La plus grande partie de la plateforme est consacrée à l’analyse de l’impact des politiques publiques. L’approche suivie est simple et informative :
- une question (normalement intéressante et stimulante) sur un problème de politique publique, résumée en quelques lignes, classée (et consultable) par domaine, type d’activité, pays et modèle d’évaluation suivi ;
- la définition de l’objectif de la politique en question, ses principaux aspects et les résultats de l’évaluation (également en quelques lignes) ;
- des références académiques à la question et un résumé de deux pages du problème abordé par la politique, de la solution proposée par la politique, des résultats de l’évaluation et de la méthode suivie.
Les domaines et les outils couverts sont très variés. La plateforme propose près de 200 fiches spécifiques sur l’analyse de « cas » de politiques publiques et l’évaluation de leurs effets. Un référentiel similaire, également édité par l’ASVAPP, est disponible dans la section Valut-AZIONE du projet CAPIRe, dont la mission est de promouvoir la culture et l’utilisation de l’évaluation des politiques dans les assemblées législatives des régions et des provinces autonomes. De nombreuses analyses présentées sur la plateforme peuvent fournir un matériel de réflexion utile pour le développement d’un bon projet : ce qui est (outre les aspects plus techniques des méthodologies d’évaluation) l’objectif ultime de notre guide. Dans le même temps, nous avons mis à jour le chapitre sur le suivi et l’évaluation afin d’y inclure quelques nouvelles idées de l’ASVAPP.
- Une petite activité sportive à l’école améliore-t-elle l’état de santé des enfants ?
- La formation professionnelle et l’apprentissage favorisent-ils l’intégration des jeunes chômeurs ?
- Des offres et des activités spécifiques dans les écoles augmentent-elles la fréquentation des musées par les jeunes ?
- Les stratégies de communication basées sur le web contribuent-elles à réduire les infections virales ?
- La redistribution des réfugiés sur le territoire favorise-t-elle l’inclusion ?
- Le travail agile augmente-t-il la productivité et le bien-être des travailleurs ?
- Y a-t-il des avantages à long terme pour ceux qui ont des classes plus petites à l’école ?
- Le jeu d’échecs facilite-t-il l’apprentissage des mathématiques ?
- L’expérience professionnelle temporaire favorise-t-elle la réinsertion des anciens détenus ?
- L’enseignement de l’esprit d’entreprise fonctionne-t-il avec les enfants ?
- La qualité de l’enseignement de l’apprentissage en ligne est-elle égale à celle des cours en face à face ?
- Un service de soins pour les personnes âgées sortant de l’hôpital peut-il réduire le risque de ré-hospitalisation ?