clement13.net
Photo d’origine : Vue aérienne d'un lotissement de maisons presque identiques le long de rues sinueuses.
Description
Vue aérienne d'un lotissement de maisons presque identiques le long de rues sinueuses.
Source
Derek Jensen (Tysto) · page d’origine
Licence
PD Domaine public
Photo d’origine, non retouchée. L’arrière-plan en est une version stylisée par le site.

L'estimation par classe de référence

Avant de décrire ce que votre projet a de particulier, demandez-vous comment ont fini les projets qui lui ressemblent.

Méthode≈ 13 min de lectureVérifiéContrôle effectuéLes faits, chiffres et références ont été contrôlés au regard des sources citées dans la fiche.Rédaction assistée par IA ; sources citées en bas de page. Une erreur ? Signalez-la via le site clement13.net.Lecture
En bref
  • Quoi : estimer à partir de la distribution des résultats de projets semblables (la « vue extérieure »), et non à partir du détail de son propre plan (la « vue intérieure »).
  • Pourquoi : la vue intérieure est systématiquement trop optimiste ; la vue extérieure mesure ce qui arrive en moyenne, imprévus compris.
  • Comment : choisir une classe de référence, rassembler les résultats réels, en tirer une distribution, positionner son projet, ajuster avec prudence.
  • Limite : tout dépend de la classe choisie et de la qualité des données ; sans historique comparable, la méthode ne s'applique pas telle quelle.
Sur cette page

Définition#

Avatar de Daniel KahnemanIllustration inspirée de la personne
Daniel KahnemanIsraélo-américain5 mars 1934 – 27 mars 2024Tel Aviv → Nunningen (Suisse)Psychologue, prix Nobel d'économie 2002
Avatar de Amos TverskyIllustration fictive
Amos TverskyIsraélien16 mars 1937 – 2 juin 1996Haïfa → Stanford (États-Unis)Psychologue cognitif et mathématique
Avatar de Bent FlyvbjergIllustration fictive
Bent FlyvbjergDanoisdate de naissance non publiéeChercheur en grands projets, université d'Oxford

L'estimation par classe de référence (reference class forecasting) consiste à prévoir l'issue d'un projet en la rapprochant de celle d'un ensemble de projets comparables déjà terminés, et à en déduire une fourchette. Elle repose sur la distinction proposée par Daniel Kahneman et Dan Lovallo (1993, Management Science) entre deux manières de regarder un projet :

  • la vue intérieure : on analyse le projet lui-même, ses tâches, ses ressources, ses obstacles prévisibles, et l'on construit un scénario ;
  • la vue extérieure : on traite le projet comme un cas parmi d'autres d'une catégorie, et l'on regarde comment finissent les cas de cette catégorie.

Kahneman et Lovallo ont décrit la méthode en psychologie ; l'économiste et chercheur en grands projets Bent Flyvbjerg l'a ensuite développée et diffusée pour les grands projets d'infrastructure. Son article « From Nobel Prize to project management: getting risks right » (Project Management Journal, 2006) en expose la procédure. Au Royaume-Uni, à la suite de la révision du Green Book du Trésor (2003), le ministère des Transports et le Trésor ont décidé en 2004 d'appliquer la méthode aux grands projets de transport, avec des majorations de coût (uplifts) fondées sur l'historique.

Le principe : pourquoi ça marche#

Quand on planifie de l'intérieur, on décrit une suite d'étapes qui se déroulent bien. Les imprévus, par définition, ne figurent pas dans le scénario. Résultat : on prévoit le meilleur cas plausible et on le prend pour le cas moyen. C'est le mécanisme de l'erreur de planification, aggravé par l'optimisme et par l'ancrage sur le premier chiffre entendu.

La vue extérieure court-circuite ce mécanisme. Elle ne demande pas de deviner les imprévus : l'historique les contient déjà, y compris ceux qu'on n'aurait pas su imaginer. Elle fait aussi passer la question de « que va-t-il se passer chez nous ? » (où chacun se croit à part) à « que se passe-t-il d'habitude ? ». On connaît aujourd'hui le biais inverse, tout aussi humain : se croire une exception, c'est le travers que la méthode cherche à corriger.

Estimerun projetVue intérieuretâches, ressources,scénarioMeilleur caspris pourle cas moyenVue extérieureprojets comparablesdéjà terminésDistributionobservéedes résultatsFourchette puisajustement prudentau cas particulier
La vue intérieure construit un scénario à partir des tâches et oublie les imprévus ; la vue extérieure part de la distribution observée sur des projets comparables. La meilleure pratique combine les deux : on part de la vue extérieure et l'on ajuste avec ce que le projet a de singulier.Survolez ou touchez un élément pour en lire le détail.

Comment faire : la procédure pas à pas#

Flyvbjerg (2006) décrit trois étapes (classe de référence, distribution, position du projet). Voici une version adaptée à un chiffrage en équipe. Durée : une demi-journée pour une première fois, 30 à 60 minutes une fois les données constituées. Participants : un ou deux estimateurs et quelqu'un qui garde l'historique (PMO, qualité, finance).

  1. Estimer d'abord, en privé. Chacun note sa propre estimation (la vue intérieure), pour pouvoir la comparer ensuite. Ne pas montrer ce chiffre avant d'avoir fait l'exercice.
  2. Choisir la classe de référence. Des projets assez semblables (même type, même ordre de taille, même technologie ou contexte) pour que la comparaison ait un sens, et assez nombreux pour dégager une distribution. C'est l'étape délicate : trop étroite, on n'a que trois cas ; trop large, la moyenne ne dit plus rien.
  3. Rassembler les résultats réels. Pour chaque projet de la classe : l'estimation initiale et le résultat final (coût, durée, périmètre livré). L'important est l'écart relatif entre les deux. Utiliser les chiffres de fin de projet, pas les souvenirs.
  4. Construire la distribution. Calculer médiane, quartiles, valeurs extrêmes de l'écart. Regarder la queue : un petit nombre de projets très dérivés pèse plus que la moyenne ne le laisse croire.
  5. Positionner son projet. Se placer dans la distribution : le projet est-il typique ou extrême ? Le point de départ est la médiane de la classe.
  6. Ajuster, avec parcimonie. Déplacer l'estimation seulement pour des raisons précises, vérifiables et que les projets de la classe n'avaient pas (équipe qui a déjà réalisé exactement la même chose, outil réellement différent). Écrire la raison. Un ajustement « parce que nous, on est meilleurs » est refusé.
  7. Choisir un niveau de risque. Un budget ou un délai se fixe sur un percentile de la distribution (par exemple, un coût qui n'est dépassé que dans une minorité de cas), choisi en fonction de ce qu'on peut supporter si l'on se trompe.
  8. Enregistrer le résultat pour la fois suivante. Chaque projet terminé enrichit la classe.
1. Estimeren privé(vue intérieure)2. Choisirla classe deréférence3. Rassemblerles résultatsréels4. Distributiondes écarts5. Positionnerle projet6. Ajuster,raisons écrites7. Fixer unniveau de risque8. Archiverpour la foissuivante
L'estimation intérieure sert de point de comparaison, non de point de départ : on part de la médiane de la classe, puis on ajuste avec des raisons explicites.Survolez ou touchez un élément pour en lire le détail.

Livrables : la définition de la classe et ses critères, la distribution des écarts, l'estimation finale avec sa fourchette, la liste des ajustements justifiés.

Exemples#

Cas réel

Le manuel scolaire d'Israël années 1970 à 1980 environ#

Biais en jeu : erreur de planification, optimisme. Récit de Daniel Kahneman, Thinking, Fast and Slow (2011).

1,5 à 2,5 ansestimations des membres de l'équipe
7 à 10 ansdurée des équipes comparables qui avaient terminé
environ 40 %équipes comparables qui n'avaient jamais fini
8 ansdurée réelle

Ce qui s'est passé. Kahneman raconte avoir réuni, avec le spécialiste des programmes scolaires Seymour Fox, une équipe chargée de concevoir un cours de jugement et de décision pour les lycées israéliens, avec un manuel à la clé. Après environ un an de travail, il demande à chaque membre d'estimer en privé le temps nécessaire pour remettre un projet abouti. Les estimations vont de un an et demi à deux ans et demi.

Il pose alors la même question à Fox, mais sous un autre angle : parmi les équipes comparables qu'il a connues, comment cela s'est-il passé ? Fox répond que environ 40 % des équipes n'avaient jamais terminé, et que celles qui avaient abouti avaient mis de sept à dix ans, sans exception en dessous de sept. Il juge en outre que leur équipe se situait plutôt sous la moyenne de ces cas. L'équipe a poursuivi, et le manuel a été achevé environ huit ans plus tard ; le ministère de l'Éducation avait alors perdu son intérêt et le livre n'a guère été utilisé.

Durée jusqu'au manuel achevé (années)estimation de l'équipe : environ 2 (de 1,5 à 2,5)équipes comparables : 7 à 10 (borne basse)réalité : environ 8
Durée en années, d'après le récit de Kahneman (2011). L'équipe estimait de 1,5 à 2,5 ans (valeur centrale indiquée : 2) ; l'historique des équipes comparables donnait 7 à 10 ans.

Ce que cela illustre

Les deux informations étaient disponibles en même temps, dans la même pièce. Fox les possédait, mais personne ne les avait demandées, et lui-même ne les a pas mobilisées avant qu'on l'interroge. Kahneman en tire que l'équipe a ignoré la vue extérieure, et qu'il en était lui-même coupable. Réserve : c'est un récit personnel, rapporté par l'un des acteurs, avec des chiffres arrondis par la mémoire ; il illustre la méthode, il ne la démontre pas.

Données de masse

Les dépassements de coûts des grands projets 2002 à 2023#

Biais en jeu : optimisme, erreur de planification, manipulation stratégique des estimations.

258projets de transport étudiés (2002)
86 %dont le coût final dépassait l'estimation
28 %dépassement moyen
1 471projets informatiques étudiés (2011)

Ce qui s'est passé. Flyvbjerg, Holm et Buhl (Journal of the American Planning Association, 2002) ont rassemblé 258 projets d'infrastructure de transport (ponts, tunnels, routes, chemins de fer) dans vingt pays. Dans 86 % des cas, le coût réel dépassait le coût estimé ; l'écart moyen atteignait 28 %, et il était bien plus élevé hors d'Europe et d'Amérique du Nord. Le dépassement était le plus lourd pour le rail, nettement plus qu'en moyenne pour les ponts et tunnels, et moindre pour les routes. Les auteurs concluent que l'erreur n'est pas aléatoire : elle a toujours le même sens, et ils l'attribuent en grande partie à l'optimisme et à la manipulation stratégique de l'estimation par ceux qui veulent voir le projet approuvé.

Pour l'informatique, Flyvbjerg et Budzier (Harvard Business Review, septembre 2011) ont étudié 1 471 projets et trouvé un dépassement de coût moyen de 27 %, mais surtout une queue de distribution très lourde : environ un projet sur six dépassait son budget de 200 % en moyenne, avec un retard d'environ 70 %.

Dépassement du budget (%)ensemble des projets : 27 % en moyenneun projet sur six : environ 200 % en moyenne
Flyvbjerg et Budzier (2011) : moyenne des 1 471 projets, puis le sixième des projets le plus dérivé. La moyenne rassure ; c'est la queue de distribution qui menace.

Ce que cela illustre

L'intérêt pour un estimateur est double. D'abord, le biais est mesuré, orienté et durable : prévoir le coût « d'après le plan » rend un dépassement presque certain. Ensuite, il faut regarder toute la distribution et pas seulement la moyenne : un projet informatique n'a pas la même loi qu'un pont, et le risque ne se mesure pas au dépassement moyen mais à la fréquence des catastrophes.

Projet informatique

Chiffrer une refonte applicative Exemple illustratif#

Biais en jeu : optimisme, ancrage sur le chiffre du sponsor. Scénario inventé pour illustrer, pas un cas réel.

Situation. Le sponsor annonce « une refonte du portail client en neuf mois ». L'équipe, en découpant les fonctionnalités, arrive à dix mois. Le chiffre ressemble déjà à celui du sponsor : l'ancrage a joué.

Vue extérieure. Un PMO retrouve sept refontes d'applications de taille voisine menées dans l'entreprise ces six dernières années. Les écarts entre la durée prévue et la durée réelle vont de zéro à un doublement, avec une médiane d'environ 40 %. Deux projets sont allés à plus du double.

Conclusion. Le point de départ n'est plus dix mois mais environ quatorze, avec une fourchette honnête de dix à vingt. L'équipe ajuste seulement pour une raison précise (une partie du périmètre est reprise d'un portail déjà refondu) et la consigne. Le sponsor reçoit une fourchette, et un jalon de décision à trois mois pour la resserrer.

Ce que cela illustre

Même avec seulement sept cas, l'historique interne vaut mieux qu'un chiffre « bien décomposé » : c'est une mesure de la manière dont cette organisation dérape, ce qu'aucun découpage en tâches ne donne. Ce qui compte est la classe choisie : ici, des refontes, pas des projets « en général ».

Quand l'utiliser, quand l'éviter#

À utiliser#

  • Pour tout engagement chiffré : durée, budget, charge, avant de le communiquer.
  • Quand le sponsor ou le client a déjà un chiffre en tête : l'historique est un contrepoids (voir l'ancrage).
  • Pour les projets d'un type récurrent (refontes, migrations, déploiements, développements d'une taille donnée).
  • Pour réviser en cours de route : un projet en retard sur sa classe a une probabilité connue de l'être encore.

À éviter ou à adapter#

  • Projet vraiment unique : pas de classe sensée. On peut élargir à des projets « de la même famille de difficulté », avec prudence.
  • Aucun historique : on peut commencer par des données externes (benchmarks publics, études sectorielles), en gardant à l'esprit qu'elles décrivent d'autres contextes.
  • Classe polluée : si les chiffres de l'historique ont été « arrangés » en cours de projet (budget réajusté, périmètre réduit), la distribution est trop flatteuse.
  • Pour décider d'un risque précis : la méthode donne des fréquences, pas des causes ; compléter par un pré-mortem.

Limites et critiques#

  • Le choix de la classe est une décision de jugement. Deux estimateurs honnêtes peuvent choisir deux classes qui donnent deux fourchettes. Il faut écrire les critères et les tenir.
  • Les données sont rares et biaisées. On n'a souvent que les projets terminés (voir le biais de survie) ; ceux qu'on a abandonnés manquent à la statistique et rendent l'historique trop favorable.
  • Ajuster trop, c'est retomber dans la vue intérieure. Dans la pratique, les équipes rouvrent la discussion pour revenir à leur chiffre. La parade est d'exiger une raison écrite et vérifiable.
  • L'amélioration passée n'est pas garantie. Une organisation qui s'est réellement améliorée est pénalisée par un historique ancien ; l'inverse vaut aussi.
  • Pas de remède aux pressions politiques. Flyvbjerg insiste sur le fait que, si l'on a intérêt à sous-estimer, la meilleure méthode ne suffira pas : il faut aussi de la transparence et des sanctions pour les estimations manipulées.
  • Chiffres à manier avec précaution. Les moyennes citées (28 %, 27 %) mêlent des secteurs, des pays et des époques ; elles montrent un sens du biais, pas un coefficient à appliquer tel quel à votre projet.

Avec l'IA#

Aide de l'IA : bonne pour structurer l'historique, dangereuse pour fournir des chiffres

L'IA aide à constituer la classe (retrouver les projets, normaliser les données, calculer les distributions), et peut offrir un second avis à l'aveugle. Mais elle ne doit jamais fournir elle-même les « statistiques du secteur » : elle risque d'inventer des chiffres vraisemblables. Les données doivent venir de vos archives ou de sources que vous avez vérifiées.

Détecter#

  • Repérer, dans un historique de projets, les écarts entre prévu et réel et les projets très dérivés.
  • Signaler les chiffres sans origine ou « arrangés » dans les données de l'historique.

Remédier#

  • Aider à définir des critères de classe et à classer les projets passés.
  • Calculer médiane, quartiles et queue à partir de données fournies.

Atténuer#

  • Produire une estimation intérieure à l'aveugle, avant toute annonce de chiffre, pour la confronter à la vue extérieure.
  • Rédiger la note d'ajustement et la rendre contrôlable.

Prompts à utiliser#

1. Construire la distribution à partir de l'historique. À utiliser avec des données réelles de vos projets terminés (anonymisées).

Voici l'historique de projets terminés, avec pour chacun le type, la taille, l'estimation initiale et le résultat final : [tableau].
1. Calcule pour chaque projet l'écart relatif (final - initial) / initial, pour la durée et pour le coût.
2. Donne la médiane, les quartiles, le minimum, le maximum, et le nombre de projets dépassant de plus de 50 % et de plus de 100 %.
3. Signale les projets qui ne sont pas comparables au suivant (décris-le) : [description du projet à estimer].
Utilise UNIQUEMENT les données ci-dessus : n'ajoute aucune statistique « du marché » et dis quand l'échantillon est trop petit pour conclure.

2. Contrôler un ajustement. Quand l'équipe veut s'écarter de la médiane de la classe.

La médiane de la classe de référence donne [valeur]. L'équipe propose [valeur différente] pour ces raisons : [liste].
Pour chaque raison : dis si elle est vérifiable, si les projets de la classe en bénéficiaient aussi, et quelle preuve on pourrait demander.
Conclus : quel ajustement est justifié, lequel ne l'est pas, et pourquoi. Ne cherche pas à plaire : si l'ajustement ressemble à de l'optimisme, dis-le.

Précautions#

  • Ne demandez pas à l'IA « combien de temps prennent en général les projets de ce type ? » en attendant un chiffre fiable : la réponse sera plausible, pas sourcée.
  • Donnez les données défavorables comme les autres ; un historique nettoyé donne une distribution flatteuse.
  • Ne transmettez pas de budgets ni de données de clients à un outil non autorisé.

Sources et vérification#

Voir aussi#

Méthodes complémentaires#

À associer pour un effet plus solide.