Fondement scientifique
Le fondement de EvaluatieScore
EvaluatieScore évalue si un rapport d'évaluation de projet produit un moment d'apprentissage ou reste un exercice de conformité, sur 7 catégories dérivées de quatre cadres faisant autorité, développés indépendamment : OECD DAC, UK Gateway Gate 5, PRINCE2 et le modèle d'évaluation CIPP. Aux Pays-Bas, contrairement à avant le démarrage d'un projet, il n'existe aucun instrument obligatoire pour l'évaluation a posteriori — même la Cour des comptes néerlandaise a constaté que la capacité d'apprentissage de l'État sur ce point en est encore à ses balbutiements. Le référentiel repose donc sur un socle normatif solide, mais EvaluatieScore ne prétend pas qu'une bonne évaluation mène scientifiquement, de manière prouvée, à de meilleurs projets futurs — cette preuve directe reste ténue et demeure, même après des recherches approfondies, le point le plus faible de ce fondement. En tant que produit d'entrée de la suite Dutchmind (15 €), cette modestie est de mise : EvaluatieScore vérifie la conformité aux cadres, pas une garantie de résultat.
Comment cette évaluation est fondée
La base de connaissances sous-jacente a été constituée via une recherche approfondie selon six axes de recherche, complétée par une ronde de suivi ciblée, avec une vérification contradictoire par trois contrôles indépendants par affirmation (37 affirmations testées, 20 confirmées). Seules les affirmations confirmées figurent dans cette justification ; le matériel rejeté ou non vérifié en est explicitement exclu.
Les catégories d'évaluation et leur fondement
1 Portée, objectif & questions d'évaluation
L'OCDE CAD (EvalNet, révisé en 2019) souligne que les critères d'évaluation ne doivent pas être appliqués mécaniquement, mais adaptés à l'objectif et au contexte de l'évaluation. Le règlement néerlandais sur l'évaluation périodique (RPE 2022) exige que les questions d'évaluation correspondent à la phase du projet et traitent explicitement l'efficacité et l'efficience.
2 Réalisation des bénéfices vs. business case/plan
UK Gateway Gate 5 (Cabinet Office/IPA, désormais NISTA), en tant qu'examen externe indépendant, évalue explicitement si les bénéfices du business case sont réellement réalisés et s'il existe une gouvernance pour la mesure future des bénéfices. En complément, le critère de durabilité de l'OCDE porte sur la capacité institutionnelle et financière à maintenir les bénéfices dans le temps, et la pratique PRINCE2 (End Project Report) décrit une comparaison entre bénéfices réalisés et attendus.
3 Efficacité & efficience
L'OCDE CAD cite l'efficacité et l'efficience parmi ses six critères d'évaluation fondamentaux. Le RPE 2022 exige que les ministères évaluent périodiquement les politiques et projets sur l'efficacité et l'efficience, chacune justifiée séparément plutôt que noyée dans une conclusion vague.
4 Qualité méthodologique & indépendance
Le modèle CIPP de Stufflebeam exige que l'évaluation elle-même soit soumise à des normes de méta-évaluation, de préférence via une méta-évaluation indépendante. UK Gateway Gate 5 constitue lui-même une couche d'assurance externe et indépendante par-dessus la Post Implementation Review interne, et le RPE 2022 impose des experts indépendants pour les évaluations de subventions supérieures à 10 millions d'euros — trois cadres développés indépendamment qui désignent chacun l'indépendance comme garantie de qualité.
5 Performance en délai, coût, qualité, portée, risque
La pratique PRINCE2 (End Project Report et Lessons Report) décrit une comparaison factuelle entre estimation et réalité en termes de délai, coût et effort, ainsi qu'une évaluation de l'efficacité des contrôles de gestion. Il s'agit d'une source secondaire (prince2.wiki, pas un manuel officiel AXELOS) et elle est donc présentée comme une pratique courante de PRINCE2, non comme une exigence officielle.
6 Leçons apprises & actions de suivi
Le modèle CIPP de Stufflebeam exige que les rapports d'évaluation finaux énoncent explicitement les leçons, y compris les erreurs à éviter. Williams (2007, University of Southampton ePrints) montre que les leçons issues de projets individuels sont rarement intégrées, dans la pratique, à la politique plus large d'une organisation sans effort dédié et un processus désigné — documenter n'équivaut pas à apprendre.
7 Cohérence, impact plus large & durabilité
Dans sa révision de 2019, l'OCDE CAD a ajouté le critère de cohérence : la compatibilité d'une intervention avec d'autres politiques et interventions dans le même secteur ou la même organisation. Les critères d'impact et de durabilité portent sur les effets plus larges et à long terme et sur la capacité institutionnelle à maintenir les bénéfices.
Affirmations clés issues de la recherche
Chaque affirmation ci-dessous a été vérifiée de manière contradictoire : trois contrôles indépendants par affirmation, et seul ce qui a résisté a été retenu.
Quatre cadres faisant autorité, développés indépendamment les uns des autres — OECD DAC, UK Gateway Gate 5, PRINCE2 et le modèle CIPP — convergent sur presque les mêmes éléments constitutifs d'un bon rapport d'évaluation : vérifier les bénéfices par rapport à la promesse initiale, une validation indépendante, des critères prédéfinis et des leçons apprises orientées vers l'action.
Source : OECD DAC (2019); HM Government/Cabinet Office-IPA Gate 5 (2021); PRINCE2-praktijk; Stufflebeam CIPP (2015)
Les critères d'évaluation de l'OCDE CAD (révisés en 2019) distinguent six critères — pertinence, cohérence, efficacité, efficience, impact, durabilité — avec une mise en garde explicite contre une application mécanique.
Source : OECD DAC Network on Development Evaluation (EvalNet), Evaluation Criteria, herzien 2019 (DCD/DAC(2019)58 FINAL)
UK Gateway Gate 5 (Cabinet Office/IPA, désormais NISTA) est un examen d'assurance externe et indépendant qui évalue explicitement si les bénéfices du business case sont réellement réalisés et s'il existe une gouvernance pour la mesure future des bénéfices.
Source : HM Government/Cabinet Office-IPA (nu NISTA), Gate 5: Operations Review and Benefits Realisation (Assurance Portfolio Standard, V1.0, juli 2021)
Le modèle CIPP de Stufflebeam exige que l'évaluation elle-même soit soumise à des normes de méta-évaluation (utilité, faisabilité, probité, exactitude, responsabilité de l'évaluateur), de préférence via une méta-évaluation indépendante.
Source : Stufflebeam, D.L. (2015). CIPP Model checklist (2e ed.)
La commission parlementaire Elias a conclu qu'avant le démarrage des projets informatiques, le comment et le pourquoi ne sont pas suffisamment réfléchis ; les dix règles de base qui en ont résulté sont exclusivement orientées ex-ante — il n'existe aucun instrument gouvernemental néerlandais obligatoire comparable pour l'évaluation a posteriori après la fin d'un projet informatique.
Source : Commissie-Elias, Eindrapport 'Grip op ICT' + kabinetsreactie (2014/2015)
En 2013, la Cour des comptes néerlandaise a déclaré littéralement que le processus d'apprentissage mutuel fondé sur les leçons générales tirées des Gateway Reviews réalisées en est encore à ses débuts, et a conclu que la réalisation des bénéfices des business cases est encore insuffisamment surveillée.
Source : Algemene Rekenkamer (2013), Aanpak van ICT door het Rijk 2012
Williams (2007) montre que les leçons issues de projets individuels sont rarement intégrées, dans la pratique, à la politique plus large d'une organisation ; sans effort dédié et processus désigné, les leçons se perdent et les erreurs se répètent.
Source : Williams, T. (2007). Post-Project Reviews to Gain Effective Lessons Learned (via University of Southampton ePrints)
Le Regeling Periodiek Evaluatieonderzoek (RPE 2022) impose aux ministères néerlandais d'évaluer périodiquement les politiques et projets sur l'efficacité et l'efficience, selon des cycles de 4 à 7 ans, avec une validation obligatoire par des experts indépendants pour les régimes de subvention supérieurs à 10 millions d'euros.
Source : Regeling periodiek evaluatieonderzoek 2022 (RPE), wetten.overheid.nl
Sources principales
- OECD DAC Network on Development Evaluation (EvalNet). Evaluation Criteria (herzien 2019, DCD/DAC(2019)58 FINAL). one.oecd.org
- OECD. Evaluation criteria (institutionele samenvattingspagina). oecd.org
- HM Government / Cabinet Office–IPA (nu NISTA). Gate 5: Operations Review and Benefits Realisation (Assurance Portfolio Standard, V1.0, juli 2021). assets.publishing.service.gov.uk
- Stufflebeam, D. L. (2015). CIPP Model checklist (2e ed.). rszarf.ips.uw.edu.pl
- Commissie-Elias. Eindrapport "Grip op ICT" + kabinetsreactie (2014/2015). pianoo.nl
- Regeling periodiek evaluatieonderzoek 2022 (RPE). wetten.overheid.nl
- Kotnour, T. (2000). Organizational learning practices in the project management environment. International Journal of Quality & Reliability Management. researchgate.net
- Algemene Rekenkamer (2013). Aanpak van ICT door het Rijk 2012. rekenkamer.nl + zoek.officielebekendmakingen.nl/kst-33584-2.html
- Williams, T. (2007). Post-Project Reviews to Gain Effective Lessons Learned. eprints.soton.ac.uk
- Flyvbjerg, B. (2021/2022). Top Ten Behavioral Biases in Project Management: An Overview. Project Management Journal 52(6), SAGE; arxiv.org/pdf/2202.00125
Basé sur notre Body of Knowledge, v1.1 (11 juli 2026)