Accueil › Git & CI/CD › Les métriques qui rendent bête
Les métriques qui rendent bête
Mesurer la chaîneavance
Certaines mesures sont faciles à produire, inutiles à lire, et orientent le travail vers ce qu'elles comptent.
| Métrique | Ce qu'elle semble dire | Ce qu'on fait pour la faire monter |
|---|---|---|
| Nombre de commits | activité | découper sans raison |
| Lignes de code | production | écrire long, éviter de supprimer |
| Nombre de demandes de fusion | débit | découper artificiellement |
| Couverture de tests | qualité | exécuter du code sans rien vérifier |
| Vélocité | capacité | estimer plus haut |
Toutes mesurent un effort. Aucune ne mesure un résultat.
La loi de Goodhart
Quand une mesure devient un objectif, elle cesse d'être une bonne mesure.
Le mécanisme n'a rien de malveillant. Un chiffre évalué devient un but, chacun cherche le chemin le moins coûteux vers ce but, et ce chemin passe presque toujours à côté de ce que le chiffre représentait. D'où une règle :
- une métrique qui sert à diagnostiquer peut être fine ;
- une métrique qui sert à évaluer des gens sera manipulée.
Le même chiffre ne tient pas les deux rôles.
Effort contre résultat
« Quarante commits cette semaine » ne dit rien à un utilisateur. « Le délai médian est passé de deux jours à quatre heures » décrit un changement réel du service rendu. Les quatre indicateurs du chapitre sont de ce second type, et c'est leur principale qualité.
Les termes à connaître
- Loi de Goodhart
Quand une mesure devient un objectif, elle cesse d'être une bonne mesure. Formulée pour la politique économique, elle vaut telle quelle pour les indicateurs d'une équipe.
- Métrique d'effort
Mesure de ce qui est dépensé : commits, lignes, tickets, heures. Elle monte quand on travaille plus, pas quand on produit mieux.
- Métrique de résultat
Mesure de ce qui arrive à l'utilisateur ou au service : délai, taux d'échec, temps de rétablissement, disponibilité.
- Couverture de tests
Part des lignes ou branches exécutées pendant la campagne de tests. Bon diagnostic pour repérer une zone non testée, mauvais objectif dès qu'on en fait un seuil.
- Vélocité
Nombre de points d'estimation terminés par itération. Unité locale, propre à une équipe et à une période, dont la comparaison entre équipes n'a pas de sens.
- Mesure de système
Indicateur attribué à un chemin de livraison, pas à une personne. Seule attribution qui laisse l'indicateur dire la vérité.
Cette page présente la partie essentielle de la leçon. Les exemples commentés, les pièges courants et les trois questions de quiz sont dans l'application.