Les métriques, c'est du bluff, diriez-vous, et vous auriez raison. Dans certains cas.
En effet, lorsqu'on parle de métriques, la toute première métrique qui vient à l'esprit est le trafic.
Beaucoup aiment méditer des heures en regardant le graphique de la fréquentation de leur site.
C'est tellement génial de voir la ligne osciller — va et vient, va et vient... Et encore mieux, quand le trafic du site augmente sans interruption.
Alors une douce chaleur se répand dans tout le corps et l'esprit s'élève vers les cieux en attendant la manne céleste.
Ah, quelle joie, quel bonheur !
Et même si le tableau est triste...
On ne peut détacher les yeux du graphique, tant il est captivant.
On a l'impression qu'il y a une signification secrète cachée dans le graphique. Encore un peu, et l'image révélera ses secrets et racontera une méthode incroyablement simple et efficace pour attirer un grand nombre de clients. Et à ce moment-là, l'argent coulera à flots.
Mais en réalité, le trafic est une métrique typiquement "sucrée (vaniteuse)", qui ne porte pas de sens utile.
Et la plupart des métriques sont de ce genre. En général, toutes les métriques que vous verrez sont vaniteuses. C'est précisément pourquoi elles ont acquis une mauvaise réputation de gaspillage de temps et d'efforts.
Mais en réalité, ce n'est pas du tout le cas. Des métriques appropriées fournissent des informations extrêmement importantes, parfois inestimables pour les affaires et le projet.
Le principal avantage et objectif des métriques est qu'elles permettent de gérer votre entreprise ou votre projet.
Comment déterminer qu'une métrique est mauvaise ?
Prenons un exemple très simple : la vitesse d'une voiture.
Dites-moi, s'il vous plaît, que signifie la vitesse...
100 km/h ?
Hm...
Hm...
Alors que signifie-t-elle ?
Je pense que vous avez probablement deviné que... cela ne signifie rien du tout !
D'accord. Maintenant, deuxième question :
100 km/h, est-ce bon ou mauvais ?
Hm...
Ni l'un ni l'autre ?
Correct !
La vitesse est une métrique totalement inutile et absurde. En l'utilisant seule, elle ne dit rien. En combinaison avec d'autres métriques, elle peut dire quelque chose, mais autrement — certainement pas.
Le trafic d'un site web est exactement la même chose que la vitesse.
C'est pourquoi rester figé devant le graphique de trafic d'un site n'a aucun sens. Il ne vous révèlera pas le secret de la vie. Comprenez-vous maintenant ?
Quelles métriques sont alors bonnes ?
Par exemple, le taux de désabonnement. Cette métrique indique combien de clients ont quitté l'entreprise/le site de manière permanente au fil du temps.
Un taux de désabonnement de 1 % indique que nous perdons seulement 1 % des clients. C'est-à-dire que nous ne perdons presque personne.
En revanche, un taux de désabonnement de 90 % signifie que nous perdons presque tous nos clients. C'est terrible!
Voyez-vous la différence entre cette métrique et la vitesse?
Le taux de désabonnement est une métrique chargée de sens, qui répond à la question de savoir si c'est bien ou mal. Et vous n'avez pas besoin de deviner ce qu'elle signifie.
C'est une métrique qui parle d'elle-même!
Et maintenant, nous sommes prêts à prendre des mesures urgentes pour réduire le taux de désabonnement.
C'est pourquoi ces métriques sont appelées actionnables. Parce qu'elles incitent à agir.
Le critère de 'sweety' des métriques
Il existe un moyen très simple de déterminer si une métrique est 'sweety / vanité'.
La plupart des métriques absolues, comme le trafic, le nombre de téléchargements, le nombre de retweets, le nombre d'e-mails/abonnés, le nombre de likes, etc. sont des métriques vaniteuses.
Les métriques relatives, pondérées, sont souvent actionnables. Mais pas toutes!
En ce qui concerne les métriques qualitatives, il n'y a pas d'affirmation claire, car l'évaluation qualitative ne peut pas être précise et univoque en soi.
Mais d'un autre côté, il est possible et nécessaire d'évaluer la convivialité du programme en fonction de la perception des utilisateurs finaux et rien d'autre.
Comment aborder les métriques en général?
Tout d'abord, il faut changer de perspective.
Sans blague.
Chaque personne qui est confrontée aux métriques commence par chercher leur raison d'être. Mais elles ne la montreront pas, malheureusement.
Les métriques sont aussi simples qu'une règle ordinaire avec laquelle nous mesurons tout ce que nous voulons.
Vous ne cherchez pas la raison d'être d'une règle en bois ordinaire, n'est-ce pas?
Chercher le sens de la vie dans une règle est ce qu'on appelle une 'approche ascendante'.
Pour travailler correctement avec les métriques, il faut changer de paradigme et commencer à travailler à l'envers, de haut en bas.
C'est-à-dire d'abord effectuer une action, puis mesurer l'effet obtenu avec les métriques.
Il convient d'utiliser les métriques comme un outil de mesure ordinaire et pas plus.
Réfléchissez à ces mots.
Mesurez l'effet de vos actions avec les métriques, et ne créez pas d'actions en fonction des indications d'une règle en bois.
Cette approche est également appelée « Hypothèse->Mesure ».
D'accord, c'est clair.
Question n° 2 : « Qu'est-ce qu'il faut mesurer ? Comment trouver les bonnes métriques ? »
Comment constituer votre ensemble de métriques ?
En parcourant Internet, vous trouverez sans aucun doute des dizaines, voire des centaines de métriques différentes sur un même sujet.
Par exemple, on peut trouver près d'une centaine de métriques de qualité logicielle. Il y a les normes GOST R ISO, les métriques calculées dans SonarQube, des variantes sur mesure, et même des métriques « qualitatives », basées sur les avis des utilisateurs.
Alors, lesquelles devriez-vous utiliser et lesquelles ne pas utiliser ?
La meilleure approche consiste à se guider par la « valeur principale ».
OMTM (One Metric That Matters)
Prenons un exemple.
Il est clair que si vous souhaitez améliorer la qualité de votre produit logiciel, vous pouvez mesurer cette qualité de différentes manières.
La qualité n'est pas seulement le nombre d'erreurs. Si l'on regarde la qualité dans son ensemble, cela inclut :
le nombre d'incidents en production,
la facilité d'utilisation et la simplicité de compréhension,
la rapidité de fonctionnement,
la complétude et la ponctualité de la mise en œuvre des fonctionnalités prévues,
la sécurité.
Il y a beaucoup de critères et il est impossible de tous les traiter simultanément. On procède très simplement : on choisit un seul critère, le plus important à ce moment-là, et on travaille uniquement avec celui-ci.
Cette approche s'appelle OMTM (One Metric That Matters) — Une (Seule) Métrique Importante.
Il est logique de choisir comme OMTM pour la qualité logicielle le nombre d'incidents sérieux (importants et critiques) en milieu industriel.
Pour les boutiques en ligne, il n'est même pas nécessaire de réfléchir à l'OMTM — il s'agit du volume des ventes ou des bénéfices (selon votre choix).
Cette Une Métrique Importante sera la valeur principale de votre ensemble de métriques. C'est en fonction de celle-ci que dépendra leur ensemble final.
Valeur Intérieure
On commence souvent à constituer un ensemble de métriques « au hasard », en fouillant sur Internet et en choisissant parmi les meilleures options trouvées selon le principe : « Oh ! Cela peut nous convenir ! »
Comme vous pouvez le comprendre, ce n'est pas la meilleure méthode, n'est-ce pas ?
Mais comment décider quelle métrique adopter et laquelle laisser de côté ?
Par exemple, on mesure souvent différents types de conversions des utilisateurs.
Mais pourquoi mesurer précisément les utilisateurs et pas autre chose ? Vous ne vous êtes jamais posé cette question ?
Naturellement, il y a une réponse.
Prenons la boutique en ligne comme l'exemple le plus simple à comprendre.
Supposons que vous souhaitiez augmenter vos ventes. Quelles métriques vous faut-il pour cela ? Comment s'y prendre ?
Il existe une méthode simple, logique et efficace. Tout devient clair lorsque vous répondez à la question :
QUI CRÉE LA VALEUR ?
Nous travaillons donc sur le volume des ventes, n'est-ce pas ? Nous voulons l'augmenter, c'est bien ça ?
Sur qui et sur quoi devons-nous agir pour augmenter le volume des ventes ?
Bien sûr,
Il faut influencer la cause —
celui qui « crée » la valeur.
Qui génère de l'argent dans une boutique en ligne ? D'où vient l'argent ?
C'est très simple : des clients.
Où, précisément dans la boutique en ligne, peut-on influencer les clients ?
Partout !
Exactement. À chaque étape du cycle de vie du client.
Pour représenter ce cycle de vie, il est pratique de construire ce qu'on appelle un « entonnoir » du parcours client.
Exemple de l'entonnoir d'une boutique en ligne :
Pourquoi cela ? Parce que les clients se perdent surtout lors des transitions d'une étape de l'entonnoir à l'autre.
En augmentant le nombre de clients à un certain niveau de l'entonnoir, nous augmentons automatiquement le volume des ventes.
Un exemple simple.
La métrique « Taux d'abandon de panier » montre essentiellement la conversion lors du passage du panier à la commande.
Supposons qu'à la première mesure, vous ayez découvert que 90% des paniers sont abandonnés, c'est-à-dire que sur 10 paniers, 1 seule commande est passée.
Il y a clairement quelque chose qui cloche avec le panier, n'est-ce pas ?
Pour simplifier, considérons que le montant d'une commande est de 100 RUB. Ainsi, le volume total des ventes serait de seulement 100 RUB.
Suite à l'optimisation du panier, le taux d'abandon a diminué de 10%, atteignant 80%. Comment cela se traduit-il en chiffres ?
Sur 10 paniers, il y a maintenant 2 commandes. 100 RUB * 2 = 200 RUB.
Mais c'est une augmentation des ventes de 100 % ! Bingo !
En augmentant la conversion d'une étape de seulement 10%, vous avez doublé le volume des ventes.
Fantastique !
Mais c'est exactement comme cela que cela fonctionne.
Comprenez-vous maintenant quel est l'avantage de métriques bien établies ?
Elles permettent d'avoir un impact fantastique sur vos processus.
Avec une boutique en ligne, c'est assez simple, mais comment appliquer cela, par exemple, à la qualité d'un produit logiciel ? De la même manière :
- Nous choisissons la valeur principale sur laquelle nous travaillons. Par exemple, réduire le nombre d'incidents en production.
- Nous comprenons qui et quoi produit cette valeur. Par exemple, le code source.
- Nous construisons une entonnoir du cycle de vie du code source et plaçons des métriques à chaque étape de l'entonnoir. Tout.
Voici, par exemple, quelles métriques de qualité pourraient en résulter (en vrac)…
Indicateur de valeur :
- densité des défauts de production pour 1000 lignes de code
Métriques selon le cycle de vie du code source :
- taux de compilations échouées,
- couverture par des tests automatisés,
- taux de tests automatisés échoués,
- taux de déploiements échoués.
Métriques selon le cycle de vie des défauts :
- dynamique de détection des défauts,
- dynamique de correction,
- dynamique de réouvertures,
- dynamique des écarts des défauts,
- temps moyen d'attente pour correction,
- temps moyen de correction.
Résultats
Comme vous pouvez le voir, le sujet des métriques est vraiment très important, nécessaire et intéressant.
Comment bien choisir des métriques :
Choisissez OMTM, réfléchissez à sa valeur principale et mesurez les producteurs de cette valeur.
Construisez des métriques sur la base de l'entonnoir du cycle de vie du producteur.
Essayez de ne pas utiliser de métriques absolues.
Que lire d'autre sur ce sujet
Le sujet des métriques est devenu populaire avec le mouvement Lean Startup, donc il est préférable de commencer la lecture avec les sources originales — les livres “Lean Startup” (traduction en russe — “Bénéfices de zéro. Méthode Lean Startup” sur Ozon) et “Lean Analytics” (pas de traduction, mais le livre en anglais est vendu sur Ozon).
Vous pouvez trouver certaines informations sur Internet même en russe, mais il n'a malheureusement pas été possible de trouver un manuel complet même dans le segment occidental.
À propos, il y a même des spécialistes appelés “produitologues”, dont la tâche est de construire un bon système de métriques pour leur produit et de proposer des moyens de les améliorer.
C'est tout.
Si cet article vous a aidé à mieux comprendre le sujet, l'auteur vous serait reconnaissant pour un “like” et un partage.
Source : habr.com
