Pohled na metriky: jak jsem pochopil, co jsou metriky a v čem je jejich hlavní kouzlo

Říkáte, že metriky jsou kecy, a budete mít pravdu. V něčem.

Pokud jde o metriky, úplně první metrikou, která vás napadne, je návštěvnost.

Mnoho lidí rádo celé hodiny medituje při pohledu na graf návštěvnosti svých webových stránek.

Pohled na metriky: jak jsem pochopil, co jsou metriky a v čem je jejich hlavní kouzlo

Jak skvělé je sledovat přeskakování linky - tam a zpět, tam a zpět... A je ještě cool, když návštěvnost stránek neustále roste.

Potom se blažené teplo rozšíří po celém těle a mysl se vznese do nebe v očekávání nebeské manny.

Ach, jaká radost, jaká blaženost!

Pohled na metriky: jak jsem pochopil, co jsou metriky a v čem je jejich hlavní kouzlo

A i když je obrázek smutný...

Pohled na metriky: jak jsem pochopil, co jsou metriky a v čem je jejich hlavní kouzlo

Stále nemůžete spustit oči z grafu, je to tak návykové.

Pohled na metriky: jak jsem pochopil, co jsou metriky a v čem je jejich hlavní kouzlo

Zdá se, že v grafice je skrytý tajný význam. Ještě trochu a obrázek odhalí svá tajemství a řekne vám neuvěřitelně jednoduchý a efektivní způsob, jak přilákat obrovské množství zákazníků. A pak ty peníze určitě potečou jako řeka.

Ale ve skutečnosti je návštěvnost typická „sladká (marnost) metrika“, která nemá žádný užitečný význam.

A to je většina metrik. V podstatě všechny metriky, které vidíte, jsou sladké. A proto mají metriky špatnou pověst jako zbytečné plýtvání časem a úsilím.

Ale ve skutečnosti tomu tak vůbec není. Správné metriky poskytují extrémně důležité a někdy neocenitelné informace pro firmu a projekt.

Hlavním bonusem a účelem metrik je, že umožňují řídit vaši firmu nebo projekt.

Jak zjistit, zda je metrika špatná?

Podívejme se na velmi jednoduchý příklad – rychlost auta.

Řekněte mi prosím, co znamená rychlost...

100 km/h?

Pohled na metriky: jak jsem pochopil, co jsou metriky a v čem je jejich hlavní kouzlo

Hmm ...

Hmm ...

Co to tedy znamená?

Myslím, že jste pravděpodobně uhodli sami, že... to nic neznamená!

OK. Nyní druhá otázka:

Je 100 km/h dobré nebo špatné?

Hmm ...

Ani jedno, ani druhé?

Že jo!

Rychlost je naprosto zbytečná a hloupá metrika. Pokud jej ovšem nepoužíváte samostatně. V kombinaci s dalšími metrikami to samozřejmě může něco vypovídat, ale samo o sobě rozhodně ne.

Návštěvnost stránek je přesně stejná.

Pohled na metriky: jak jsem pochopil, co jsou metriky a v čem je jejich hlavní kouzlo

To je důvod, proč absolutně nemá smysl trčet před grafem návštěvnosti stránek. Neprozradí vám tajemství života. Už rozumíš?

Jaké metriky jsou tedy dobré?

Například míra odchodu. Tato metrika vám říká, kolik zákazníků v průběhu času navždy opustilo společnost/web.

Míra odchodu = 1 % říká, že ztrácíme pouze 1 % zákazníků. Tito. Sotva nikoho ztratíme.

Pokud je míra odchodu = 90 %, pak to znamená, že ztrácíme téměř všechny naše klienty. Je to strašné!

Vidíte rozdíl mezi touto metrikou a rychlostí?

Míra odchodu je smysluplná metrika, která odpovídá na otázku, zda je něco dobré nebo špatné. A nemusíte hádat, co to znamená.

Toto je metrika, která mluví sama za sebe!

A nyní jsme připraveni přijmout naléhavá opatření ke snížení odchodu zákazníků.

Pohled na metriky: jak jsem pochopil, co jsou metriky a v čem je jejich hlavní kouzlo

Proto se takové metriky nazývají akceschopné. Protože povzbuzují k akci.

Kritérium „sladkosti“ metrik

Existuje velmi jednoduchý způsob, jak určit, že metrika je „marnost“.

Většina absolutních metrik, jako je návštěvnost, počet stažení, počet retweetů, počet e-mailů/odběratelů, počet lajků atd. jsou sýrové.

Relativní, vážené metriky jsou často použitelné. Ale ne všechny!

Pokud jde o metriky kvality, zde není jistota, protože kvalitativní hodnocení samo o sobě nemůže být přesné a jednoznačné.

Ale na druhou stranu, použitelnost programu může a měla by se posuzovat právě podle úrovně vnímání koncových uživatelů a podle ničeho jiného.

Jak přistupovat k metrikám obecně?

První věc, kterou musíte udělat, je obrátit svůj mozek.

Žádné legrace.

Každý(!), kdo se setká s metrikami, začíná v první řadě hledat důvod, proč se v nich nachází. Ale bohužel to neukážou.

Metriky jsou jako obyčejné pravítko, kterým měříme vše, co chceme.

Pohled na metriky: jak jsem pochopil, co jsou metriky a v čem je jejich hlavní kouzlo

Nehledáš důvod existence v obyčejném dřevěném pravítku, že?

Pohled na metriky: jak jsem pochopil, co jsou metriky a v čem je jejich hlavní kouzlo

Nalezení smyslu života v řadě se nazývá „přístup zdola nahoru“.

Pro správnou práci s metrikami je potřeba změnit paradigma a začít pracovat obráceně, shora dolů.

Tito. nejprve proveďte nějakou akci a poté použijte metriky k měření efektu, který z toho vyplývá.

Metriky by se měly používat jako běžný předmět měření a nic víc.

Přemýšlejte o těchto slovech.

Měřte účinek svých akcí pomocí metrik, spíše než vymýšlení akcí založených na údajích na dřevěném pravítku.

Tento přístup se také nazývá „Hypothesis->Measurement“.

Ok, to je jasné.

Otázka č. 2: „Co přesně měřit? Jak najít správné metriky?

Jak vytvořit vlastní sadu metrik?

Po procházení internetu pravděpodobně najdete desítky nebo dokonce stovky různých metrik na stejné téma.

Můžete například najít asi stovku metrik kvality softwaru. Patří mezi ně normy GOSTR-ISO, metriky vypočítané v SonarQube, některé samostatně psané možnosti a dokonce metriky „kvality“ založené na uživatelských recenzích.

Které se tedy vyplatí používat a které ne?

Nejlepším přístupem je řídit se „základní hodnotou“.

OMTM (jedna metrika, na které záleží)

Podívejme se na příklad.

Je jasné, že pokud chcete zlepšit kvalitu svého softwarového produktu, můžete tuto kvalitu měřit různými způsoby.

Kvalita není jen o počtu chyb. Pokud se podíváte na kvalitu jako celek, pak je toto:

počet incidentů v oboru,
snadné použití a snadné vnímání,
rychlost práce,
úplnost a včasnost implementace plánované funkcionality,
bezpečnostní.

Kritérií je mnoho a je nemožné pracovat se všemi najednou. Dělají to velmi jednoduše: vyberou si jedno, momentálně nejdůležitější kritérium, a pouze s ním pracují.

Tento přístup se nazývá OMTM (One Metric That Matters) – One (Single) Important Metric.

Pro kvalitu softwaru OMTM je logické vybrat počet vážných (důležitých a kritických) incidentů v průmyslovém prostředí.

U internetových obchodů nemusíte o OMTM vůbec přemýšlet – jde o objem prodeje nebo zisk (v závislosti na vašem rozhodnutí).

Tato jedna důležitá metrika bude základní hodnotou pro vaši sadu metrik. A na tom bude záviset jejich finální sestava.

Hodnota uvnitř

Často začnou sestavovat sadu metrik „z ničeho nic“ tak, že prohledají internet a z toho, co našli, vyberou nejlepší možnosti podle zásady: „Ach! To se nám bude hodit!"

Jak chápete, toto není nejlepší způsob, že?

Jak se ale rozhodnout, kterou metriku zvolit a kterou ne?

Často se například měří různé typy uživatelských konverzí.

Proč ale měří uživatele a ne něco jiného? Přemýšleli jste o této otázce?

Přirozeně existuje odpověď.

Podívejme se na internetový obchod jako na nejsnáze pochopitelný příklad.

Řekněme, že chcete zvýšit svůj prodej. Jaké metriky k tomu budete potřebovat? Jak k tomu přistupovat?

Existuje jeden jednoduchý, logický a fungující způsob. Vše zapadne na své místo, když odpovíte na otázku:

KDO VYRÁBÍ HODNOTU?

Pracujeme na základě objemu prodeje, že? Chceme to zvýšit, ne?

Koho a co je potřeba ovlivnit pro zvýšení prodeje?

Samozřejmě,

potřeba ovlivnit příčinu -
na toho, kdo „vyrábí“ hodnotu.

Kdo vydělává peníze v internetovém obchodě? Odkud peníze pocházejí?

Velmi jednoduše: od klientů.

Kde přesně v internetovém obchodě můžete ovlivnit zákazníky?

Ano, kdekoli!
Že jo. V každé fázi životního cyklu zákazníka.

Pro znázornění životního cyklu je vhodné postavit tzv. „trychtýř“ pohybu klienta procesem.

Příklad cesty internetového obchodu:

Pohled na metriky: jak jsem pochopil, co jsou metriky a v čem je jejich hlavní kouzlo

proč tomu tak je? Protože zákazníci se ztrácejí právě při přechodu z jednoho kroku trychtýře na druhý.

Zvyšováním počtu klientů na libovolné úrovni trychtýře automaticky zvyšujeme výsledný objem prodeje.

Jednoduchý příklad.

Metrika „Míra opuštění košíku“ v podstatě ukazuje míru konverze z nákupního košíku na dokončenou objednávku.

Řekněme, že při prvním měření jste zjistili, že 90 % košíčků je ztraceno, tzn. Z 10 košíků je provedena pouze 1 objednávka.

S nákupním košíkem je evidentně něco špatně, že?

Pro jednoduchost budeme předpokládat, že částka jedné objednávky je 100 rublů. Že. konečný objem prodeje bude pouze 100 rublů.

V důsledku vylepšení košíku se procento opuštěných vozíků snížilo o 10 % na 80 %. Jak to vypadá v číslech?

Z 10 košíků se začaly objednávat 2. 100 rublů * 2 = 200 rublů.

To je ale nárůst objemu prodeje o 100 %! Bingo!

Zvýšením konverze o pouhých 10 % jste zvýšili objem prodeje o 100 %.

Fantazie!

Ale přesně tak to funguje.

Už chápete, v čem je krása správně sestavených metrik?

S jejich pomocí můžete dosáhnout fantastického dopadu na vaše procesy.

U internetového obchodu je vše celkem jednoduché, ale jak to vše přenést například do kvality softwarového produktu? Ano přesně to samé:

  1. Vybíráme si základní hodnotu, na které pracujeme. Například snižujeme počet incidentů v tomto odvětví.
  2. Chápeme, kdo a co produkuje tuto hodnotu. Například zdrojový kód.
  3. Vytváříme cestu životního cyklu zdrojového kódu a nastavujeme metriky v každém kroku cesty. Všechno.

Zde například jaké metriky kvality lze získat (z hlavy)…

Ukazatel hodnoty:

  • Hustota průmyslových vad na 1000 řádků kódu

Metriky založené na životním cyklu zdrojového kódu:

  • podíl neúspěšných kompilací,
  • pokrytí autotestem,
  • procento neúspěšných autotestů,
  • poruchovost nasazení.

Metriky založené na životním cyklu defektu:

  • dynamika detekce defektů,
  • dynamika korekce,
  • dynamika znovuobjevování,
  • dynamika odchylek defektů,
  • průměrná doba čekání na opravu,
  • průměrný čas na opravu.

Výsledky

Jak vidíte, téma metrik je opravdu velmi důležité, potřebné a zajímavé.

Jak vybrat správné metriky:

Vyberte si OMTM, zamyslete se nad jeho základní hodnotou a změřte výrobce této hodnoty.

Sestavte metriky na základě cesty životního cyklu výrobce.

Nepoužívejte absolutní metriky.

Co jiného si na toto téma přečíst

Téma metrik se stalo populární po hnutí Lean Startup, takže je nejlepší začít číst z primárních zdrojů – knih „Lean Startup“ (překlad do ruštiny – „Business from Scratch. The Lean Startup Method“ na Ozonu) a „Lean Analytics“ (není žádný překlad, ale kniha v angličtině se prodává na Ozonu).

Některé informace lze najít na internetu i v ruštině, ale ani v západním segmentu se bohužel zatím nenašla ucelená učebnice.

Mimochodem, dnes už existují i ​​jednotliví „produktoví specialisté“, jejichž úkolem je sestavit správný systém metrik pro svůj produkt a navrhnout způsoby, jak je zlepšit.

To je vše.

Pokud by vám článek pomohl lépe pochopit podstatu problému, byl by autor vděčný za „like“ a repost.

Zdroj: www.habr.com

Přidat komentář