Évaluer pour décider : quand l’évaluation devient réellement utile

Une organisation peut consacrer beaucoup de temps et de ressources à une évaluation, mobiliser des données solides, consulter les bonnes personnes et produire un rapport méthodologiquement rigoureux. Pourtant, quelques mois plus tard, une question demeure : qu’a-t-on réellement fait des résultats?

Le rapport existe. Les constats sont documentés. Des recommandations ont parfois été formulées. Mais les décisions continuent leur chemin et l’évaluation finit par rejoindre d’autres documents dans les archives de l’organisation.

Ce paradoxe rappelle une évidence parfois oubliée : réaliser une évaluation et produire une évaluation utile ne sont pas exactement la même chose.

La rigueur méthodologique demeure indispensable. Mais elle ne constitue pas, à elle seule, la finalité de l’exercice. L’évaluation prend toute sa valeur lorsqu’elle permet de mieux comprendre une intervention, d’en tirer des apprentissages, d’éclairer les choix et, lorsque cela est nécessaire, d’améliorer l’action.

Son utilité ne se joue donc pas seulement au moment de présenter les résultats. Elle se construit dès le départ.

L’utilité se construit avant la collecte des données

Lorsqu’une organisation entreprend une évaluation, la tentation peut être grande de commencer rapidement par les outils : questionnaire, entrevues, données administratives, indicateurs, groupes de discussion.

Ces outils sont importants. Mais ils viennent après une question plus fondamentale : pourquoi évaluons-nous?

Une même intervention peut être examinée sous plusieurs angles. On peut chercher à savoir si elle répond toujours à un besoin, si elle atteint les résultats attendus, si sa mise en œuvre fonctionne comme prévu, si ses ressources sont utilisées adéquatement ou encore si certains ajustements devraient être envisagés.

Tout mesurer n’est ni possible ni nécessaire.

Avant de déterminer les données à recueillir, il faut comprendre les préoccupations de l’organisation, les décisions auxquelles elle fait face, les apprentissages qu’elle recherche, les utilisateurs potentiels de l’évaluation et les questions auxquelles ceux-ci auront réellement besoin de réponses.

Cette étape permet de distinguer ce qui serait simplement intéressant à connaître de ce qui sera véritablement utile pour agir.

Elle oblige aussi à reconnaître que les besoins des différents acteurs ne sont pas toujours identiques. Un gestionnaire, une équipe responsable de la mise en œuvre, une direction, un partenaire ou un bailleur de fonds peuvent regarder une même intervention à partir de préoccupations différentes.

Une bonne démarche ne cherche pas nécessairement à répondre à toutes ces attentes. Elle les comprend, les met en perspective et établit des priorités.

Comprendre avant de proposer devient alors beaucoup plus qu’un principe de travail. C’est une condition de pertinence de l’évaluation.

La méthode doit être proportionnée à la question

Une fois les bonnes questions établies, vient le choix de la méthode.

La sophistication méthodologique peut parfois être confondue avec la qualité. Plus une démarche comporte d’outils, de données ou de traitements complexes, plus elle peut donner l’impression d’être robuste.

Ce n’est pourtant pas le nombre d’outils qui fait la qualité d’une évaluation.

Une méthode est pertinente lorsqu’elle permet de répondre de manière suffisamment fiable aux questions posées, compte tenu du contexte, des données accessibles, du temps disponible et de l’usage attendu des résultats.

Certaines questions nécessitent des dispositifs méthodologiques importants. D’autres peuvent être éclairées avec des données administratives existantes, quelques entrevues bien ciblées, une analyse documentaire ou une combinaison raisonnable de plusieurs sources.

L’enjeu consiste à rechercher le niveau de preuve approprié à la décision à éclairer.

Cette proportionnalité ne signifie pas réduire les exigences de rigueur. Elle consiste à éviter deux écueils : une démarche trop légère pour soutenir les conclusions attendues ou, à l’inverse, une démarche tellement complexe qu’elle mobilise des ressources sans améliorer réellement la qualité des connaissances produites.

Pas de méthode plus lourde que le problème à résoudre.

La méthode doit servir la question. Pas l’inverse.

Produire des résultats fiables ne suffit pas

Une évaluation peut être techniquement excellente et demeurer difficile à utiliser.

Des dizaines de tableaux, des résultats détaillés et une analyse exhaustive peuvent être nécessaires au travail de l’évaluateur. Ils ne constituent pas nécessairement la meilleure façon de communiquer avec ceux qui devront utiliser les résultats.

Entre la donnée et la décision se trouve une étape essentielle : transformer l’information en connaissance utilisable.

Cela suppose de hiérarchiser les résultats.

Qu’avons-nous réellement appris? Quels constats sont suffisamment robustes? Lesquels doivent être interprétés avec prudence? Qu’est-ce qui fonctionne bien? Où observe-t-on des difficultés? Que savons-nous des raisons qui peuvent expliquer ces résultats?

Et surtout : quelles informations sont déterminantes pour la réflexion et les décisions qui suivront?

Cette capacité de synthèse n’appauvrit pas l’analyse. Elle exige au contraire d’avoir suffisamment compris les résultats pour distinguer l’essentiel de l’accessoire.

Un rapport complet peut rester nécessaire pour documenter la démarche et assurer la traçabilité de l’analyse. Mais il peut être accompagné d’une synthèse décisionnelle, d’un tableau de résultats, d’une présentation ou d’un autre format adapté aux personnes qui utiliseront les conclusions.

La connaissance devient réellement utile lorsqu’elle peut circuler, être comprise et être mobilisée.

C’est précisément à cet endroit que l’évaluation et la communication des connaissances se rencontrent.

Éclairer la décision sans décider à la place de l’organisation

Une évaluation utile ne doit pas devenir une décision déguisée.

L’évaluateur apporte une méthode, recueille et analyse des éléments probants, met en évidence les constats, explicite les limites et peut dégager des pistes d’amélioration. Mais la décision appartient à l’organisation.

Une décision peut dépendre de facteurs qui dépassent le périmètre de l’évaluation : ressources disponibles, priorités organisationnelles, contraintes réglementaires, contexte institutionnel, capacité de mise en œuvre ou arbitrages entre plusieurs objectifs légitimes.

L’évaluation n’a donc pas vocation à remplacer le jugement du décideur. Elle contribue à réduire l’incertitude dans laquelle ce jugement s’exerce.

Cela suppose également une certaine humilité dans la présentation des résultats.

Toutes les évaluations ne permettent pas d’établir des relations causales. Toutes les données ne sont pas parfaites. Certains effets apparaissent à long terme. Certaines réalités sont difficiles à mesurer. Et plusieurs facteurs peuvent expliquer simultanément un résultat.

Reconnaître ces limites ne fragilise pas l’évaluation. Cela renforce sa crédibilité.

L’enjeu n’est pas de donner l’impression que l’analyse sait tout. Il est de permettre à l’organisation de distinguer clairement ce que les données permettent d’affirmer, ce qu’elles suggèrent et ce qu’elles ne permettent pas de conclure.

L’organisation conserve ainsi la maîtrise de ses enjeux. L’expertise externe apporte le regard, la méthode et l’analyse nécessaires pour les éclairer.

L’utilisation des résultats se prépare pendant l’évaluation

Attendre la remise du rapport final pour se demander comment les résultats seront utilisés est souvent trop tard.

Cela ne signifie pas laisser les parties prenantes déterminer les conclusions. L’indépendance de l’analyse doit demeurer entière. Mais il est possible d’associer les acteurs concernés à la compréhension du contexte, de valider certains faits, de clarifier les besoins d’information et de préparer progressivement l’organisation à recevoir les résultats.

Cette collaboration peut également améliorer la qualité de l’évaluation.

Les personnes qui travaillent quotidiennement avec une intervention détiennent une connaissance du terrain que les données seules ne révèlent pas toujours. À l’inverse, le regard externe peut mettre en évidence des tendances, des écarts ou des questions que la proximité avec l’intervention rend moins visibles.

L’évaluation devient alors un espace où plusieurs formes de connaissances peuvent se rencontrer sans se confondre.

Travailler avec l’organisation ne signifie pas renoncer à l’indépendance du jugement. Cela signifie créer les conditions pour que les résultats puissent être compris et appropriés.

Cinq conditions pour une évaluation réellement utile

Une finalité claire. L’organisation doit savoir pourquoi elle évalue, ce qu’elle souhaite apprendre et quelles décisions ou réflexions l’exercice doit éclairer.

Des questions pertinentes. L’évaluation doit se concentrer sur les enjeux qui comptent réellement plutôt que chercher à tout documenter.

Une méthode proportionnée. Les moyens méthodologiques doivent être suffisamment robustes pour répondre aux questions, sans complexité inutile.

Des résultats compréhensibles. La rigueur de l’analyse doit s’accompagner d’un véritable effort de hiérarchisation, de synthèse et de communication.

Un dialogue avec les utilisateurs des résultats. L’utilité se prépare pendant la démarche, tout en préservant l’indépendance de l’analyse.

Ces conditions ne garantissent pas qu’une organisation suivra chacune des pistes dégagées par une évaluation. Ce n’est d’ailleurs pas le rôle de l’évaluation.

Elles augmentent toutefois les chances que le travail réalisé contribue effectivement à l’apprentissage organisationnel, à la réflexion et à des décisions mieux informées.

De l’évaluation à l’action

L’évaluation ne devrait pas être jugée uniquement à l’épaisseur du rapport produit, au nombre de données recueillies ou à la sophistication de la méthode employée.

Sa valeur réside aussi dans sa capacité à rendre une intervention plus intelligible.

Évaluer, c’est produire de la connaissance. Mais cette connaissance prend toute sa portée lorsqu’elle permet aux organisations de mieux comprendre ce qu’elles font, ce qui fonctionne, ce qui mérite d’être ajusté et les choix qui s’offrent à elles.

C’est à cette condition que l’évaluation cesse d’être seulement un exercice de mesure ou de reddition de comptes pour devenir également un instrument d’apprentissage et d’aide à la décision.

Une évaluation atteint pleinement sa valeur lorsqu’elle ne se contente pas de dire ce qui s’est passé, mais aide une organisation à comprendre pourquoi — et ce qu’elle peut raisonnablement faire ensuite.