Aperçu des métriques : comment j'ai compris ce que sont les métriques et quel est leur principal charme

Les métriques sont des conneries, dites-vous, et vous aurez raison. Dans quelque chose.

En effet, lorsqu’il s’agit de métriques, la toute première métrique qui vient à l’esprit est le trafic.

Beaucoup de gens aiment méditer pendant des heures en regardant le graphique de trafic de leur site Web.

Aperçu des métriques : comment j'ai compris ce que sont les métriques et quel est leur principal charme

Comme c'est cool de regarder la file d'attente sauter - d'avant en arrière, d'avant en arrière... Et c'est encore plus cool lorsque le trafic du site augmente continuellement.

Puis une chaleur bienheureuse se répand dans tout le corps et l’esprit s’élève vers le ciel en prévision de la manne céleste.

Ah, quelle joie, quel bonheur !

Aperçu des métriques : comment j'ai compris ce que sont les métriques et quel est leur principal charme

Et même si le tableau est triste...

Aperçu des métriques : comment j'ai compris ce que sont les métriques et quel est leur principal charme

Vous ne pouvez toujours pas quitter la carte des yeux, c’est tellement addictif.

Aperçu des métriques : comment j'ai compris ce que sont les métriques et quel est leur principal charme

Il semble qu’il y ait une signification secrète cachée dans les graphiques. Un peu plus, et la photo vous dévoilera ses secrets et vous expliquera un moyen incroyablement simple et efficace d'attirer un grand nombre de clients. Et puis l’argent coulera définitivement comme une rivière.

Mais en fait, la fréquentation est une « mesure douce (de vanité) » typique qui n’a aucune signification utile.

Et ce sont la majorité des mesures. Fondamentalement, toutes les mesures que vous voyez sont sucrées. Et c’est pourquoi les mesures ont la mauvaise réputation d’être une perte inutile de temps et d’efforts.

Mais en réalité, ce n’est pas du tout le cas. Les bonnes mesures fournissent des informations extrêmement importantes et parfois inestimables pour une entreprise et un projet.

Le principal avantage et objectif des métriques est qu’elles permettent de gérer votre entreprise ou votre projet.

Comment déterminer si une métrique est mauvaise ?

Prenons un exemple très simple : la vitesse d'une voiture.

S'il vous plaît, dites-moi ce que signifie la vitesse...

100 km/h ?

Aperçu des métriques : comment j'ai compris ce que sont les métriques et quel est leur principal charme

Hum ...

Hum ...

Alors qu’est-ce que ça veut dire ?

Je pense que vous l'avez probablement deviné vous-même, cela... ne veut rien dire !

D'ACCORD. Maintenant la deuxième question :

100 km/h, c'est bien ou mal ?

Hum ...

Ni l'un ni l'autre?

Droit

La vitesse est une mesure complètement inutile et stupide. À moins bien sûr que vous l’utilisiez seul. Combiné avec d’autres mesures, il peut bien sûr dire quelque chose, mais à lui seul, ce n’est certainement pas le cas.

Le trafic du site est exactement à la même vitesse.

Aperçu des métriques : comment j'ai compris ce que sont les métriques et quel est leur principal charme

C’est pourquoi cela ne sert absolument à rien de traîner devant le tableau de trafic du site. Il ne vous révélera pas le secret de la vie. Tu comprends maintenant?

Quelles mesures sont alors bonnes ?

Par exemple, le taux de désabonnement. Cette mesure vous indique combien de clients ont quitté l’entreprise/le site pour toujours au fil du temps.

Le taux de désabonnement = 1 % signifie que nous ne perdons que 1 % de clients. Ceux. Nous ne perdons presque personne.

Si le taux de désabonnement = 90 %, cela signifie que nous perdons la quasi-totalité de nos clients. C'est horrible!

Voyez-vous la différence entre cette métrique et la vitesse ?

Le taux de désabonnement est une mesure significative qui répond à la question de savoir si quelque chose est bon ou mauvais. Et vous n'avez pas besoin de deviner ce que cela signifie.

C’est une métrique qui parle d’elle-même !

Et maintenant, nous sommes prêts à prendre des mesures urgentes pour réduire le taux de désabonnement des clients.

Aperçu des métriques : comment j'ai compris ce que sont les métriques et quel est leur principal charme

C'est pourquoi ces mesures sont dites exploitables. Parce qu'ils encouragent l'action.

Critère de « douceur » des métriques

Il existe un moyen très simple de déterminer qu’une métrique est une « vanité ».

Mesures les plus absolues, comme le trafic, le nombre de téléchargements, le nombre de retweets, le nombre d'e-mails/abonnés, le nombre de likes, etc. sont ringards.

Les mesures relatives et pondérées sont souvent exploitables. Mais pas tout!

Quant aux mesures de qualité, il n'y a aucune certitude ici, car une évaluation qualitative en elle-même ne peut être précise et sans ambiguïté.

Mais d’un autre côté, la convivialité d’un programme peut et doit être évaluée précisément par le niveau de perception des utilisateurs finaux et rien d’autre.

Comment aborder les métriques en général ?

La première chose que vous devez faire est de faire tourner votre cerveau.

Sans blague.

Tous ceux (!) qui rencontrent des métriques commencent tout d'abord à chercher la raison d'y figurer. Mais ils ne le montreront malheureusement pas.

Les métriques sont comme une règle ordinaire avec laquelle nous mesurons tout ce que nous voulons.

Aperçu des métriques : comment j'ai compris ce que sont les métriques et quel est leur principal charme

Vous ne cherchez pas la raison de l’existence dans une règle en bois ordinaire, n’est-ce pas ?

Aperçu des métriques : comment j'ai compris ce que sont les métriques et quel est leur principal charme

Trouver le sens de la vie dans une ligne est ce qu’on appelle une « approche ascendante ».

Pour travailler correctement avec les métriques, vous devez changer de paradigme et commencer à travailler dans l'autre sens, de haut en bas.

Ceux. effectuez d’abord une action, puis utilisez des métriques pour mesurer l’effet qui en résulte.

Les métriques doivent être utilisées comme un sujet de mesure ordinaire et rien de plus.

Pensez à ces mots.

Mesurez l'effet de vos actions à l'aide de mesures, plutôt que d'inventer des actions basées sur les lectures d'une règle en bois.

Cette approche est également appelée « Hypothèse->Mesure ».

Ok, c'est clair.

Question n°2 : « Que mesurer exactement ? Comment trouver les bonnes métriques ?

Comment créer votre propre ensemble de métriques ?

Après avoir surfé sur Internet, vous trouverez probablement des dizaines, voire des centaines de métriques différentes sur un même sujet.

Par exemple, vous pouvez trouver une centaine de mesures de qualité logicielle. Il s'agit notamment des normes GOSTR-ISO, des métriques calculées dans SonarQube, de certaines options auto-écrites et même des métriques de « qualité » basées sur les avis des utilisateurs.

Alors, lesquels valent la peine d’être utilisés et lesquels ne le sont pas ?

La meilleure approche consiste à se laisser guider par une « valeur fondamentale ».

OMTM (Une métrique qui compte)

Prenons un exemple.

Il est clair que si vous souhaitez améliorer la qualité de votre produit logiciel, vous pouvez alors mesurer cette qualité de différentes manières.

La qualité ne se limite pas au nombre d’erreurs. Si vous regardez la qualité dans son ensemble, voici :

nombre d'incidents dans l'industrie,
facilité d'utilisation et facilité de perception,
rapidité de travail,
l'exhaustivité et la rapidité de la mise en œuvre de la fonctionnalité prévue,
la sécurité.

Il existe de nombreux critères et il est impossible de travailler avec tous en même temps. Ils le font très simplement : ils choisissent un critère, le plus important du moment, et travaillent uniquement avec lui.

Cette approche est appelée OMTM (One Metric That Matters) - One (Single) Important Metric.

Il est logique que l'OMTM qualité logicielle sélectionne le nombre d'incidents graves (importants et critiques) dans un environnement industriel.

Pour les boutiques en ligne, vous n’avez pas du tout besoin de penser à l’OMTM : c’est le volume des ventes ou le bénéfice (selon votre décision).

Cette métrique importante sera la valeur fondamentale de votre ensemble de métriques. Et leur set final en dépendra.

Valeur à l'intérieur

Ils commencent souvent à compiler un ensemble de mesures « à l'improviste », en parcourant Internet et en choisissant les meilleures options parmi ce qu'ils ont trouvé selon le principe : « Oh ! Cela nous conviendra !

Comme vous l'avez compris, ce n'est pas la meilleure solution, n'est-ce pas ?

Mais comment décider quelle métrique prendre ou non ?

Par exemple, différents types de conversions d'utilisateurs sont souvent mesurés.

Mais pourquoi mesurent-ils les utilisateurs et pas autre chose ? Avez-vous réfléchi à cette question ?

Naturellement, il existe une réponse.

Regardons une boutique en ligne comme l'exemple le plus simple à comprendre.

Disons que vous souhaitez augmenter vos ventes. De quelles mesures aurez-vous besoin pour cela ? Comment aborder cela ?

Il existe une méthode simple, logique et efficace. Tout se met en place lorsque vous répondez à la question :

QUI PRODUIT DE LA VALEUR ?

Nous travaillons en fonction du volume des ventes, n'est-ce pas ? Nous voulons l’augmenter, n’est-ce pas ?

Qui et quoi faut-il influencer pour augmenter les ventes ?

Bien sûr,

besoin d'influencer la cause -
sur celui qui « produit » de la valeur.

Qui gagne de l’argent dans une boutique en ligne ? D'où vient l'argent?

Très simple : auprès des clients.

Où exactement dans une boutique en ligne pouvez-vous influencer les clients ?

Oui, n'importe où !
Droite. À chaque étape du cycle de vie du client.

Pour représenter le cycle de vie, il est pratique de construire ce qu'on appelle. « entonnoir » du mouvement du client tout au long du processus.

Un exemple d'entonnoir de boutique en ligne :

Aperçu des métriques : comment j'ai compris ce que sont les métriques et quel est leur principal charme

Pourquoi cela est-il ainsi? Parce que les clients se perdent précisément lorsqu’ils passent d’une étape de l’entonnoir à une autre.

En augmentant le nombre de clients à n’importe quel niveau de l’entonnoir, nous augmentons automatiquement le volume des ventes qui en résulte.

Un exemple simple.

La métrique « Taux d'abandon de panier » montre essentiellement le taux de conversion d'un panier en une commande terminée.

Disons que lors de la première mesure vous découvrez que 90% des paniers sont perdus, c'est à dire Sur 10 paniers, 1 seule commande est effectuée.

Il y a clairement un problème avec le panier, n'est-ce pas ?

Pour plus de simplicité, nous supposerons que le montant d'une commande est de 100 roubles. Que. le volume final des ventes ne sera que de 100 roubles.

Grâce à l'amélioration des paniers, le pourcentage de paniers abandonnés a diminué de 10 % à 80 %. À quoi cela ressemble-t-il en chiffres ?

Sur 10 paniers, 2 commandes ont commencé à être passées. 100 roubles * 2 = 200 roubles.

Mais c'est une augmentation du volume des ventes de 100 % ! Bingo !

En augmentant votre conversion par étapes de seulement 10 %, vous avez augmenté votre volume de ventes de 100 %.

Fantastique!

Mais c'est exactement comme ça que ça marche.

Comprenez-vous maintenant quelle est la beauté des métriques correctement construites ?

Avec leur aide, vous pouvez obtenir un impact fantastique sur vos processus.

Avec une boutique en ligne, tout est assez simple, mais comment tout cela peut-il se traduire, par exemple, sur la qualité du produit logiciel ? Oui exactement pareil :

  1. Nous choisissons la valeur fondamentale sur laquelle nous travaillons. Par exemple, nous réduisons le nombre d’incidents dans l’industrie.
  2. Nous comprenons qui et quoi produit cette valeur. Par exemple, le code source.
  3. Nous construisons un entonnoir de cycle de vie du code source et définissons des métriques à chaque étape de l'entonnoir. Tous.

Ici, par exemple, quelles mesures de qualité pourraient être obtenues (de mémoire)…

Indicateur de valeur :

  • Densité de défauts industriels pour 1000 lignes de code

Métriques basées sur le cycle de vie du code source :

  • proportion de compilations infructueuses,
  • couverture d'autotest,
  • pourcentage d'autotests infructueux,
  • taux d’échec des déploiements.

Métriques basées sur le cycle de vie des défauts :

  • dynamique de détection des défauts,
  • dynamique de correction,
  • dynamique des redécouvertes,
  • dynamique des écarts de défauts,
  • temps d'attente moyen pour un correctif,
  • temps moyen pour réparer.

Les résultats de

Comme vous pouvez le constater, le sujet des métriques est vraiment très important, nécessaire et intéressant.

Comment choisir les bonnes métriques :

Choisissez un OMTM, réfléchissez à sa valeur fondamentale et mesurez les producteurs de cette valeur.

Créez des métriques basées sur l’entonnoir du cycle de vie du fabricant.

Évitez d'utiliser des mesures absolues.

Que lire d'autre sur ce sujet

Le sujet des métriques est devenu populaire à la suite du mouvement Lean Startup, il est donc préférable de commencer à lire à partir des sources primaires - les livres « Lean Startup » (traduction en russe - « Business from Scratch. La méthode Lean Startup » sur Ozon) et « Lean Analytics » (il n'y a pas de traduction, mais le livre en anglais est vendu sur Ozon).

Certaines informations peuvent être trouvées sur Internet même en russe, mais malheureusement, aucun manuel complet n'a encore été trouvé, même dans le segment occidental.

À propos, il existe désormais même des « spécialistes de produits » individuels dont la tâche est de créer le système de métriques correct pour leur produit et de suggérer des moyens de les améliorer.

Voilà tout.

Si l'article vous a aidé à mieux comprendre l'essence du problème, l'auteur serait reconnaissant d'un « j'aime » et d'une republication.

Source: habr.com

Ajouter un commentaire