Savoir si une réorganisation améliore réellement le service

Définir le résultat avant de lire le tableau de bord

Dans le cas fictif, la communauté de communes a regroupé l’accueil et simplifié l’instruction de plusieurs aides. La transformation a mobilisé 60 000 euros de dépenses initiales et un renfort de six mois. Au terme du semestre, le service annonce 20 pour cent de dossiers traités en plus et une diminution du délai médian. Ces deux chiffres sont encourageants, mais ils ne suffisent pas à décider de supprimer le renfort ou généraliser l’organisation aux autres prestations.

Les réalisations sont les postes ouverts, les agents formés et les formulaires modifiés. Les résultats immédiats sont les délais, les décisions correctement notifiées et les demandes abouties. Les effets plus larges peuvent concerner l’accès effectif à l’aide ou l’amélioration de la situation des bénéficiaires. Le guide de France Stratégie distingue l’observation d’un changement de l’identification de l’effet propre de l’intervention. Cette différence évite de convertir automatiquement une réussite opérationnelle en preuve causale.^[1]

L’objectif initial était de réduire le délai sans dégrader l’accès ni la fiabilité des décisions. Le tableau de bord doit donc conserver ces trois dimensions. Si le service ne suit que les dossiers clôturés, il peut accélérer son indicateur en abandonnant plus vite les demandes difficiles. Si seules les décisions positives sont comptées, une modification de l’éligibilité peut expliquer l’amélioration. La définition de l’unité observée doit rester stable et être publiée avec le résultat.

Une mesure est également liée à son destinataire. Le responsable quotidien a besoin de connaître le stock et les étapes saturées. L’autorité qui finance la transformation doit comparer les coûts et les effets. Les usagers doivent comprendre le délai qu’ils peuvent attendre et les voies d’assistance disponibles. Un même chiffre peut servir à plusieurs décisions, mais il ne doit pas prétendre répondre à toutes ces questions sans explication.

Lire les résultats contradictoires d’un semestre

Avant la transformation, le service recevait 1 200 demandes par semestre, notifiait 900 décisions et clôturait 100 demandes sans décision au fond. Les 200 restantes alimentaient le stock. Après transformation, il reçoit encore 1 200 demandes, notifie 1 080 décisions et clôture 100 demandes sans décision au fond. Dans cette hypothèse simplifiée, le stock augmente de 20 au lieu de 200 dossiers. La hausse de 20 pour cent des décisions est exacte, et la maîtrise du flux s’améliore.

Cependant, le délai médian passe de 70 à 45 jours tandis que le délai au-delà duquel se situent dix pour cent des dossiers passe de 150 à 170 jours. Les demandes simples avancent plus vite ; certaines situations complexes attendent davantage. Le résultat ne justifie donc pas une déclaration uniforme d’amélioration. Il conduit à examiner la répartition des compétences et la prise en charge des dossiers qui exigent plusieurs services.

Les décisions corrigées après contrôle ou réclamation passent de 18 à 32. Rapportées aux décisions notifiées, elles représentent environ deux pour cent auparavant et trois pour cent ensuite. Une lecture en nombre brut serait trompeuse, puisque l’activité a augmenté ; une lecture en taux montre néanmoins une dégradation. Il faut distinguer les erreurs mineures corrigées sans conséquence et celles qui ont privé une personne d’une prestation ou retardé son versement.

Dans ce scénario, les deux séries ne portent pas forcément sur la même période de maturation. Les réclamations concernant les décisions les plus récentes n’ont pas toutes été reçues. Comparer un ancien semestre entièrement contrôlé à un semestre récent peut sous-estimer les erreurs nouvelles. Le protocole fixe donc un délai d’observation identique après notification, puis révise les résultats lorsque les contrôles sont complets.

Le nombre de demandes enregistrées reste stable, mais des partenaires signalent que certains usagers ne comprennent plus le nouvel accueil. Une courte enquête qualitative recherche les situations de renoncement et les transferts de charge. Les témoignages ne donnent pas à eux seuls un taux représentatif ; ils servent à découvrir des mécanismes que les statistiques administratives ignorent. Leur fonction est complémentaire, à condition de ne pas sélectionner seulement les récits favorables.

Comparer sans attribuer trop vite

Le renfort temporaire représente 300 heures sur le semestre. Il peut expliquer une partie des 180 décisions supplémentaires. Une baisse des absences ou une évolution des demandes peut aussi intervenir. Pour isoler l’effet de l’organisation, il faut comparer ce qui s’est passé à une situation plausible sans transformation. Le contrefactuel n’est pas observable directement ; sa construction repose sur une méthode et des hypothèses explicites.^[1]

Un autre territoire de taille comparable conserve son organisation. Son délai médian passe de 65 à 60 jours pendant la même période, tandis que le territoire transformé passe de 70 à 45 jours. La différence des évolutions est de 20 jours : une baisse de 25 jours contre une baisse de cinq. Ce calcul est une première indication, pas la démonstration définitive d’un effet de 20 jours.

Pour interpréter cette différence, les services doivent avoir des tendances antérieures suffisamment comparables et ne pas subir des événements différents qui expliqueraient le changement. Si le territoire témoin a reçu une nouvelle compétence ou connu une panne, il n’est plus un repère convaincant. Le guide de France Stratégie présente les méthodes comparatives et leurs conditions ; leur mobilisation exige de discuter les biais de sélection et les facteurs simultanés.^[1]

Lorsque le volume est faible ou les territoires trop différents, une estimation causale précise peut être hors de portée. Le service peut alors trianguler des éléments : observation des étapes, entretiens, séries mensuelles et vérification des hypothèses de fonctionnement. Il doit parler d’une contribution plausible plutôt que promettre une attribution certaine. Cette limite ne rend pas l’évaluation inutile : elle change le niveau de confiance et peut conduire à prolonger un test.

Une expérimentation progressive peut améliorer la comparaison, mais elle doit rester compatible avec les droits des usagers et les compétences de l’autorité. Réserver arbitrairement une prestation légalement due à un groupe témoin serait une faute de conception. Tester une organisation à périmètre limité n’autorise pas à modifier implicitement l’accès au droit. Le protocole doit expliquer ce qui varie, ce qui reste identique et comment sont traités les risques pendant le test.

Rapporter les gains aux ressources et à leur répartition

L’OCDE distingue efficacité, efficience, pertinence, cohérence, impact et viabilité dans la durée. Appliquée à une organisation publique, cette grille invite à examiner si le résultat répond au besoin, à quel coût il est obtenu et s’il pourra durer. Un semestre réussi grâce à des moyens exceptionnels ne démontre pas que le fonctionnement permanent est soutenable. Ces critères sont des instruments d’analyse, à adapter à la décision.^[2]

Dans l’exemple, les dépenses récurrentes ordinaires sont de 300 000 euros par semestre avant et après transformation. Le renfort coûte 15 000 euros et les dépenses initiales atteignent 60 000 euros. Si la période d’analyse retient, comme hypothèse explicite, trois années d’utilisation du dispositif, elle répartit les dépenses initiales sur six semestres, soit 10 000 euros par semestre. Cette répartition analytique ne prétend pas déterminer leur traitement comptable.

Le coût de référence est alors de 300 000 euros pour 900 décisions, soit environ 333 euros par décision. Le premier semestre transformé représente 325 000 euros avec le renfort et la part analytique des dépenses initiales ; pour 1 080 décisions, le ratio est d’environ 301 euros. Le coût unitaire diminue malgré la hausse des dépenses. Mais cette amélioration ne suffit pas si la qualité baisse ou si les coûts supportés par les usagers augmentent.

Retirer le renfort sans modifier le travail pourrait diminuer le volume à 950 décisions. Avec 310 000 euros de coût analytique, le ratio serait alors d’environ 326 euros. L’écart avec la situation initiale deviendrait faible. Cette projection n’est pas un résultat constaté : elle sert à éprouver la décision de pérennisation. Le service devra observer la capacité réellement conservée avant d’inscrire une économie définitive dans le budget.

Les coûts indirects doivent être décrits même lorsqu’ils sont difficiles à chiffrer. Une orientation mal faite augmente le travail des partenaires ; une nouvelle plage d’ouverture peut réduire l’accès des agents à la formation ; un accueil centralisé impose des déplacements supplémentaires. Une décision peut accepter certains coûts pour un bénéfice supérieur, mais elle doit les rendre visibles et expliquer quels publics ou métiers les supportent.

Utiliser la mesure pour corriger et rendre compte

L’évaluation ne doit pas devenir une surveillance individuelle sans nécessité. Les principes du RGPD imposent notamment de définir la finalité, limiter les données et maîtriser leur durée de conservation. Pour mesurer les délais et les reprises, des données agrégées ou pseudonymisées peuvent souvent suffire. L’usage d’un identifiant d’agent pour classer les personnes demande une justification distincte ; il ne découle pas automatiquement du besoin d’évaluer une réorganisation.^[4]

Un résultat agrégé peut cependant masquer des inégalités d’accès. Le service examine, lorsque cela est licite et nécessaire, des catégories pertinentes de demandes et de modalités d’accueil. Il doit éviter de collecter des caractéristiques sensibles simplement parce qu’elles pourraient être intéressantes. Des entretiens ciblés ou des données déjà disponibles sous un cadre approprié peuvent répondre à certaines questions avec moins d’intrusion.

La présentation du Conseil d’État sur l’évaluation des politiques publiques insiste sur la conduite pluraliste, la diffusion et le suivi des résultats. Pour une réorganisation, cette orientation se traduit par une discussion où les services, les représentants des agents et les usagers peuvent contester l’interprétation. Cette démarche d’évaluation ne transfère pas le pouvoir de décision à un comité : l’autorité compétente demeure responsable de l’arbitrage.^[3]

Le dossier final distingue les faits établis, les hypothèses et les incertitudes. Dans le scénario, la progression du volume et la réduction de la médiane sont constatées ; la contribution propre de la réorganisation reste partiellement incertaine ; l’allongement des dossiers complexes et la hausse des corrections imposent une réponse. L’autorité conserve l’accueil commun, renforce le traitement spécialisé et prolonge le renfort pendant une phase d’observation ciblée.

Mesurer les résultats sert ainsi à rendre une décision révisable sur des raisons explicites. Le succès ne se réduit pas à l’achèvement du projet ni à un indicateur qui progresse. Il tient à une amélioration du service dont la qualité, le coût et la répartition sont examinés ensemble. Une transformation mérite d’être poursuivie lorsqu’elle apporte un bénéfice suffisamment étayé ; elle doit être corrigée lorsque ses gains moyens cachent des difficultés que l’organisation a la capacité de résoudre.