Metriky sú nezmysly, hovoríte, a budete mať pravdu. V niečom.
V skutočnosti, keď príde na metriky, úplne prvá metrika, ktorá príde na myseľ, je návštevnosť.
Mnoho ľudí rádo celé hodiny medituje pri pohľade na graf návštevnosti svojej webovej stránky.
Aké skvelé je sledovať, ako linka skáče – tam a späť, tam a späť... A je ešte chladnejšie, keď návštevnosť stránok neustále rastie.
Potom sa blažené teplo rozšíri po celom tele a myseľ sa vznesie do neba v očakávaní nebeskej manny.
Ach, aká radosť, aká blaženosť!
A aj keď je obrázok smutný...
Stále nemôžete spustiť oči z tabuľky, je to tak návykové.
Zdá sa, že v grafike je skrytý tajný význam. Trochu viac a obrázok odhalí svoje tajomstvá a povie vám neuveriteľne jednoduchý a efektívny spôsob, ako prilákať obrovské množstvo zákazníkov. A potom tie peniaze určite potečú ako rieka.
Ale v skutočnosti je návštevnosť typická „sladká (márnosť) metrika“, ktorá nemá žiadny užitočný význam.
A toto je väčšina metrík. V podstate všetky metriky, ktoré vidíte, sú sladké. A to je dôvod, prečo majú metriky zlú povesť ako zbytočná strata času a úsilia.
Ale v skutočnosti to tak vôbec nie je. Správne metriky poskytujú mimoriadne dôležité a niekedy neoceniteľné informácie pre podnikanie a projekt.
Hlavným bonusom a účelom metrík je, že umožňujú riadiť vašu firmu alebo projekt.
Ako zistiť, či je metrika zlá?
Pozrime sa na veľmi jednoduchý príklad – rýchlosť auta.
Povedz mi, čo znamená rýchlosť...
100 km/h?
HM…
HM…
Čo to teda znamená?
Myslím, že ste pravdepodobne sami uhádli, že... to nič neznamená!
OK. Teraz druhá otázka:
Je 100 km/h dobré alebo zlé?
HM…
Ani jedno, ani druhé?
Správny!
Rýchlosť je úplne zbytočná a hlúpa metrika. Pokiaľ ho, samozrejme, nepoužívate samostatne. V kombinácii s inými metrikami to, samozrejme, môže niečo povedať, ale samo osebe to určite nie.
Návštevnosť stránok je presne rovnaká.
To je dôvod, prečo nemá absolútne zmysel trčať pred grafom návštevnosti stránok. Neprezradí ti tajomstvo života. už rozumieš?
Aké metriky sú potom dobré?
Napríklad miera migrácie. Táto metrika vám hovorí, koľko zákazníkov v priebehu času navždy opustilo spoločnosť/stránku.
Miera odchodu = 1 % hovorí, že strácame len 1 % zákazníkov. Tie. Sotva nikoho stratíme.
Ak miera miznutia = 90 %, potom to znamená, že strácame takmer všetkých našich klientov. Je to hrozné!
Vidíte rozdiel medzi touto metrikou a rýchlosťou?
Miera odchodu je zmysluplná metrika, ktorá odpovedá na otázku, či je niečo dobré alebo zlé. A nemusíte hádať, čo to znamená.
Toto je metrika, ktorá hovorí sama za seba!
A teraz sme pripravení prijať naliehavé opatrenia na zníženie odchodu zákazníkov.
Preto sa takéto metriky nazývajú použiteľné. Pretože povzbudzujú k činnosti.
Kritérium „sladkosti“ metrík
Existuje veľmi jednoduchý spôsob, ako určiť, že metrika je „márnosť“.
Väčšina absolútnych metrík, ako je návštevnosť, počet stiahnutí, počet retweetov, počet e-mailov/odberateľov, počet lajkov atď. sú syrové.
Relatívne, vážené metriky sú často použiteľné. Ale nie všetky!
Pokiaľ ide o metriky kvality, tu nie je žiadna istota, pretože kvalitatívne hodnotenie samo osebe nemôže byť presné a jednoznačné.
Ale na druhej strane, použiteľnosť programu môže a mala by sa posudzovať práve podľa úrovne vnímania koncových používateľov a nič iného.
Ako pristupovať k metrikám vo všeobecnosti?
Prvá vec, ktorú musíte urobiť, je obrátiť svoj mozog.
Žiadne srandovanie.
Každý(!), kto sa stretne s metrikami, začne v prvom rade hľadať dôvod, prečo sa v nich nachádza. Ale neukážu to, bohužiaľ.
Metriky sú ako obyčajné pravítko, ktorým meriame všetko, čo chceme.
Nehľadáte dôvod existencie v obyčajnom drevenom pravítku, však?
Hľadanie zmyslu života v rade sa nazýva „prístup zdola nahor“.
Pre správnu prácu s metrikami je potrebné zmeniť paradigmu a začať pracovať naopak, zhora nadol.
Tie. najprv urobte nejakú akciu a potom použite metriky na meranie efektu, ktorý z toho vyplýva.
Metriky by sa mali používať ako bežný predmet merania a nič viac.
Zamyslite sa nad týmito slovami.
Merajte účinok svojich akcií pomocou metrík, namiesto vymýšľania akcií založených na údajoch z dreveného pravítka.
Tento prístup sa tiež nazýva „Hypotéza->Meranie“.
Ok, toto je jasné.
Otázka č.2: „Čo presne merať? Ako nájsť správne metriky?
Ako vytvoriť svoj vlastný súbor metrík?
Po surfovaní na internete pravdepodobne nájdete desiatky alebo dokonca stovky rôznych metrík na rovnakú tému.
Môžete napríklad nájsť približne sto metrík kvality softvéru. Patria sem normy GOSTR-ISO, metriky vypočítané v SonarQube, niektoré možnosti, ktoré si sami napíšu, a dokonca aj metriky „kvality“ založené na recenziách používateľov.
Ktoré sa teda oplatí používať a ktoré nie?
Najlepším prístupom je riadiť sa „základnou hodnotou“.
OMTM (jedna metrika, na ktorej záleží)
Pozrime sa na príklad.
Je jasné, že ak chcete zlepšiť kvalitu svojho softvérového produktu, môžete túto kvalitu merať rôznymi spôsobmi.
Kvalita nie je len o počte chýb. Ak sa pozriete na kvalitu ako celok, potom je toto:
počet incidentov v priemysle,
jednoduchosť používania a ľahké vnímanie,
rýchlosť práce,
úplnosť a včasnosť implementácie plánovanej funkcionality,
bezpečnosť.
Kritérií je veľa a nie je možné pracovať so všetkými naraz. Robia to veľmi jednoducho: vyberú si jedno, momentálne najdôležitejšie kritérium, a pracujú len s ním.
Tento prístup sa nazýva OMTM (One Metric That Matters) – Jedna (Jedna) dôležitá metrika.
Pre kvalitu softvéru OMTM je logické vybrať počet vážnych (dôležitých a kritických) incidentov v priemyselnom prostredí.
Pri internetových obchodoch nemusíte o OMTM vôbec premýšľať – ide o objem predaja alebo zisk (v závislosti od vášho rozhodnutia).
Táto jedna dôležitá metrika bude základnou hodnotou pre vašu skupinu metrík. A od toho bude závisieť ich konečný set.
Hodnota vo vnútri
Často začínajú zostavovať súbor metrík „z ničoho nič“ prehľadávaním internetu a výberom najlepších možností z toho, čo našli, podľa zásady: „Ach! Toto sa nám bude hodiť!"
Ako chápete, toto nie je najlepší spôsob, však?
Ako sa však rozhodnúť, ktorú metriku použiť a ktorú nie?
Často sa napríklad merajú rôzne typy konverzií používateľov.
Prečo však merajú používateľov a nie niečo iné? Zamysleli ste sa nad touto otázkou?
Prirodzene, existuje odpoveď.
Pozrime sa na internetový obchod ako na najjednoduchšie pochopiteľný príklad.
Povedzme, že chcete zvýšiť predaj. Aké metriky na to budete potrebovať? Ako k tomu pristupovať?
Existuje jeden jednoduchý, logický a fungujúci spôsob. Všetko zapadne na svoje miesto, keď odpoviete na otázku:
KTO VYROBÍ HODNOTU?
Pracujeme na základe objemu predaja, však? Chceme to zvýšiť, však?
Koho a čo treba ovplyvniť, aby sa predaj zvýšil?
Samozrejme,
treba ovplyvniť príčinu -
na toho, kto „vyrába“ hodnotu.
Kto zarába peniaze v internetovom obchode? Odkiaľ pochádzajú peniaze?
Veľmi jednoduché: od klientov.
Kde presne v internetovom obchode môžete ovplyvniť zákazníkov?
Áno, kdekoľvek!
Správny. V každej fáze životného cyklu zákazníka.
Na znázornenie životného cyklu je vhodné postaviť tzv. „lievik“ pohybu klienta cez proces.
Príklad zúženia internetového obchodu:
Prečo je to tak? Pretože zákazníci sa stratia práve pri prechode z jedného kroku lievika na druhý.
Zvyšovaním počtu klientov na ktorejkoľvek úrovni lievika automaticky zvyšujeme výsledný objem predaja.
Jednoduchý príklad.
Metrika „Miera opustenia košíka“ v podstate zobrazuje mieru konverzie z nákupného košíka po dokončenú objednávku.
Povedzme, že pri prvom meraní ste zistili, že 90% košíkov je stratených, t.j. Z 10 košíkov sa realizuje len 1 objednávka.
S nákupným košíkom je zjavne niečo zlé, však?
Pre jednoduchosť budeme predpokladať, že množstvo jednej objednávky je 100 rubľov. To. konečný objem predaja bude iba 100 rubľov.
V dôsledku vylepšení košíkov sa percento opustených košíkov znížilo o 10 % na 80 %. Ako to vyzerá v číslach?
Z 10 košíkov sa začali robiť 2 objednávky. 100 rubľov * 2 = 200 rubľov.
Ale to je nárast objemu predaja o 100%! Bingo!
Zvýšením konverzie krokov len o 10 % ste zvýšili objem predaja o 100 %.
Fantastické!
Ale presne tak to funguje.
Už chápete, v čom je krása správne zostavených metrík?
S ich pomocou môžete dosiahnuť fantastický vplyv na vaše procesy.
S internetovým obchodom je všetko celkom jednoduché, ale ako sa to všetko dá preniesť napríklad do kvality softvérového produktu? Áno presne to isté:
- Vyberáme si základnú hodnotu, na ktorej pracujeme. Napríklad znižujeme počet incidentov v tomto odvetví.
- Rozumieme, kto a čo produkuje túto hodnotu. Napríklad zdrojový kód.
- Vytvárame lievik životného cyklu zdrojového kódu a nastavujeme metriky v každom kroku lievika. Všetky.
Tu, napríklad, aké ukazovatele kvality by sa dali získať (z hlavy)…
Indikátor hodnoty:
- Hustota priemyselných defektov na 1000 riadkov kódu
Metriky založené na životnom cykle zdrojového kódu:
- podiel neúspešných kompilácií,
- pokrytie autotestom,
- percento neúspešných autotestov,
- poruchovosť nasadení.
Metriky založené na životnom cykle defektu:
- dynamika detekcie defektov,
- dynamika korekcie,
- dynamika znovuobjavovania,
- dynamika odchýlok defektov,
- priemerná doba čakania na opravu,
- priemerný čas na opravu.
Výsledky
Ako vidíte, téma metriky je naozaj veľmi dôležitá, potrebná a zaujímavá.
Ako zvoliť správne metriky:
Vyberte si OMTM, zamyslite sa nad jeho základnou hodnotou a zmerajte výrobcov tejto hodnoty.
Zostavte metriky na základe lievika životného cyklu výrobcu.
Vyhnite sa používaniu absolútnych metrík.
Čo si ešte prečítať na túto tému
Téma metrík sa stala populárnou v dôsledku hnutia Lean Startup, takže je najlepšie začať čítať z primárnych zdrojov – kníh „Lean Startup“ (preklad do ruštiny – „Business from Scratch. The Lean Startup Method“ na Ozone) a „Lean Analytics“ (preklad neexistuje, ale kniha v angličtine sa predáva na Ozone).
Niektoré informácie sa dajú nájsť na internete aj v ruštine, ale, žiaľ, ani v západnom segmente sa zatiaľ nenašla ucelená učebnica.
Mimochodom, dnes už existujú aj jednotliví „produktoví špecialisti“, ktorých úlohou je vybudovať správny systém metrík pre svoj produkt a navrhnúť spôsoby, ako ich zlepšiť.
To je všetko.
Ak by vám článok pomohol lepšie pochopiť podstatu problému, autor by bol vďačný za „like“ a repost.
Zdroj: hab.com