Metryki to bzdury, mówisz i będziesz miał rację. W czymś.
Rzeczywiście, jeśli chodzi o wskaźniki, pierwszą miarą, która przychodzi na myśl, jest ruch.
Wiele osób lubi godzinami medytować, patrząc na wykres ruchu na swojej stronie internetowej.
Jak fajnie jest patrzeć, jak linia przeskakuje – tam i z powrotem, tam i z powrotem… A jeszcze fajniej jest, gdy ruch w witrynie stale rośnie.
Wtedy błogie ciepło rozchodzi się po całym ciele, a umysł wznosi się do nieba w oczekiwaniu na niebiańską mannę.
Ach, co za radość, co za błogość!
I nawet jeśli obraz jest smutny...
Nadal nie możesz oderwać wzroku od wykresu, to tak uzależnia.
Wydaje się, że w grafice kryje się jakieś sekretne znaczenie. Jeszcze trochę, a zdjęcie odkryje jego tajemnice i podpowie Ci niezwykle prosty i skuteczny sposób na przyciągnięcie ogromnej liczby klientów. A wtedy pieniądze na pewno popłyną jak rzeka.
Ale tak naprawdę frekwencja jest typowym „słodkim (próżnym) wskaźnikiem”, który nie ma żadnego użytecznego znaczenia.
I to jest większość wskaźników. Zasadniczo wszystkie wskaźniki, które widzisz, są słodkie. I dlatego wskaźniki mają złą reputację jako bezsensowna strata czasu i wysiłku.
Ale w rzeczywistości wcale tak nie jest. Odpowiednie metryki dostarczają niezwykle ważnych, a czasem bezcennych informacji dla biznesu i projektu.
Główną zaletą i celem metryk jest to, że umożliwiają zarządzanie firmą lub projektem.
Jak ustalić, czy metryka jest zła?
Spójrzmy na bardzo prosty przykład - prędkość samochodu.
Proszę mi powiedzieć, co oznacza prędkość...
100 km/h?
Hmm ...
Hmm ...
Co to znaczy?
Chyba sam się domyśliłeś, że... to nic nie znaczy!
OK. Teraz drugie pytanie:
Czy 100 km/h to dobrze czy źle?
Hmm ...
Ani jeden, ani inny?
Prawidłowy!
Szybkość to całkowicie bezużyteczny i głupi miernik. Chyba, że użyjesz go samodzielnie. W połączeniu z innymi wskaźnikami może oczywiście coś powiedzieć, ale sam w sobie z pewnością tego nie robi.
Ruch w witrynie ma dokładnie taką samą prędkość.
Dlatego absolutnie nie ma sensu spędzać czasu przed wykresem ruchu w witrynie. Nie zdradzi ci tajemnicy życia. Czy teraz rozumiesz?
Jakie wskaźniki są w takim razie dobre?
Na przykład współczynnik rezygnacji. Ten wskaźnik informuje, ilu klientów na zawsze opuściło firmę/stronę w danym czasie.
Wskaźnik rezygnacji = 1% mówi, że tracimy tylko 1% klientów. Te. Prawie nikogo nie tracimy.
Jeśli wskaźnik Churn = 90%, oznacza to, że tracimy prawie wszystkich naszych klientów. To jest straszne!
Czy widzisz różnicę między tym wskaźnikiem a szybkością?
Wskaźnik rezygnacji to znaczący wskaźnik, który odpowiada na pytanie, czy coś jest dobre, czy złe. I nie musisz zgadywać, co to oznacza.
To wskaźnik, który mówi sam za siebie!
Teraz jesteśmy gotowi podjąć pilne działania, aby zmniejszyć odpływ klientów.
Dlatego takie wskaźniki nazywane są praktycznymi. Ponieważ zachęcają do działania.
Kryterium „słodyczy” metryk
Istnieje bardzo prosty sposób ustalenia, czy dana metryka jest „próżnością”.
Większość wskaźników bezwzględnych, takie jak ruch, liczba pobrań, liczba retweetów, liczba e-maili/subskrybentów, liczba polubień itp. są tandetne.
Względne, ważone wskaźniki są często przydatne. Ale nie wszystko!
Jeśli chodzi o wskaźniki jakości, nie ma tutaj pewności, ponieważ ocena jakościowa sama w sobie nie może być dokładna i jednoznaczna.
Ale z drugiej strony użyteczność programu można i należy oceniać właśnie na podstawie poziomu percepcji użytkowników końcowych i nic więcej.
Jak ogólnie podejść do metryk?
Pierwszą rzeczą, którą musisz zrobić, to odwrócić swój mózg.
Bez żartów.
Każdy(!) stykający się z metrykami zaczyna przede wszystkim szukać powodu, dla którego się w nich znalazł. Ale niestety tego nie pokażą.
Metryki są jak zwykła linijka, za pomocą której mierzymy wszystko, co chcemy.
Nie szukasz racji istnienia w zwykłej drewnianej linijce, prawda?
Odnajdywanie sensu życia w szeregu nazywa się „podejściem oddolnym”.
Aby poprawnie pracować z metrykami, należy zmienić paradygmat i zacząć pracować w drugą stronę, od góry do dołu.
Te. najpierw wykonaj jakieś działanie, a potem użyj metryk, aby zmierzyć efekt z niego wynikający.
Metryki należy traktować jako zwykły przedmiot pomiaru i nic więcej.
Pomyśl o tych słowach.
Mierz efekt swoich działań za pomocą wskaźników, zamiast wymyślać działania na podstawie odczytów drewnianej linijki.
Podejście to nazywane jest także „Hipotezą->Pomiarem”.
OK, to jasne.
Pytanie nr 2: „Co dokładnie mierzyć? Jak znaleźć odpowiednie metryki?
Jak stworzyć własny zestaw metryk?
Surfując po Internecie, prawdopodobnie znajdziesz dziesiątki, a nawet setki różnych wskaźników na ten sam temat.
Można na przykład znaleźć około stu wskaźników jakości oprogramowania. Należą do nich standardy GOSTR-ISO, metryki obliczone w SonarQube, niektóre samodzielnie napisane opcje, a nawet metryki „jakości” oparte na opiniach użytkowników.
Z jakich więc warto korzystać, a jakich nie?
Najlepszym podejściem jest kierowanie się „podstawową wartością”.
OMTM (jeden wskaźnik, który ma znaczenie)
Weźmy przykład.
Oczywiste jest, że jeśli chcesz poprawić jakość swojego oprogramowania, możesz mierzyć tę jakość na różne sposoby.
Jakość to nie tylko liczba błędów. Jeśli spojrzeć na jakość jako całość, to wygląda to następująco:
liczba incydentów w branży,
łatwość użycia i łatwość percepcji,
szybkość pracy,
kompletność i terminowość wdrożenia zaplanowanej funkcjonalności,
bezpieczeństwo.
Kryteriów jest wiele i nie da się pracować nad nimi wszystkimi na raz. Robią to bardzo prosto: wybierają jedno, w danej chwili najważniejsze kryterium i tylko nim pracują.
Podejście to nazywa się OMTM (One Metric That Matters) – Jedna (pojedyncza) ważna metryka.
Logiczne jest, że OMTM ds. jakości oprogramowania wybiera liczbę poważnych (ważnych i krytycznych) incydentów w środowisku przemysłowym.
W przypadku sklepów internetowych nie musisz w ogóle myśleć o OMTM - liczy się wielkość sprzedaży lub zysk (w zależności od Twojej decyzji).
Ta jedna ważna metryka będzie podstawową wartością Twojego zestawu wskaźników. Od tego będzie zależeć ich ostateczny set.
Wartość wewnątrz
Często zaczynają kompilować zestaw wskaźników „niespodziewanie”, przeszukując Internet i wybierając najlepsze opcje ze znalezionych, kierując się zasadą: „Och! To będzie nam odpowiadać!”
Jak rozumiesz, nie jest to najlepszy sposób, prawda?
Ale jak zdecydować, który wskaźnik przyjąć, a który nie?
Często mierzone są na przykład różne typy konwersji użytkowników.
Ale dlaczego mierzą użytkowników, a nie coś innego? Czy zastanawiałeś się nad tym pytaniem?
Naturalnie, istnieje odpowiedź.
Przyjrzyjmy się sklepowi internetowemu jako najłatwiejszemu do zrozumienia przykładowi.
Załóżmy, że chcesz zwiększyć sprzedaż. Jakie wskaźniki będą do tego potrzebne? Jak do tego podejść?
Jest jeden prosty, logiczny i działający sposób. Wszystko się układa, gdy odpowiesz na pytanie:
KTO PRODUKUJE WARTOŚĆ?
Pracujemy w oparciu o wielkość sprzedaży, prawda? Chcemy to zwiększyć, prawda?
Na kogo i na co trzeba wpływać, aby zwiększyć sprzedaż?
Oczywiście
trzeba wpłynąć na przyczynę -
na tego, który „wytwarza” wartość.
Kto zarabia w sklepie internetowym? Skąd pochodzą pieniądze?
Bardzo prosto: od klientów.
Gdzie dokładnie w sklepie internetowym możesz wpłynąć na klientów?
Tak, gdziekolwiek!
Prawidłowy. Na każdym etapie cyklu życia klienta.
Aby przedstawić cykl życia, wygodnie jest zbudować tzw. „lejek” poruszania się Klienta przez proces.
Przykład lejka sklepu internetowego:
Dlaczego tak jest? Ponieważ klienci gubią się właśnie podczas przechodzenia z jednego etapu lejka na drugi.
Zwiększając liczbę klientów na dowolnym poziomie lejka, automatycznie zwiększamy wynikający z tego wolumen sprzedaży.
Prosty przykład.
Wskaźnik „Współczynnik porzucenia koszyka” zasadniczo pokazuje współczynnik konwersji koszyka na zrealizowane zamówienie.
Załóżmy, że podczas pierwszego pomiaru odkryłeś, że 90% koszyczków przepada, tzn. Z 10 koszyków składane jest tylko 1 zamówienie.
Najwyraźniej coś jest nie tak z koszykiem, prawda?
Dla uproszczenia założymy, że kwota jednego zamówienia wynosi 100 rubli. To. ostateczna wielkość sprzedaży wyniesie tylko 100 rubli.
W wyniku ulepszeń koszyków odsetek porzuconych koszyków spadł o 10% do 80%. Jak to wygląda w liczbach?
Z 10 koszyków zaczęto składać 2 zamówienia. 100 rubli * 2 = 200 rubli.
Ale to jest wzrost wolumenu sprzedaży o 100%! Bingo!
Zwiększając konwersję krokową zaledwie o 10%, zwiększyłeś wielkość sprzedaży o 100%.
Fikcja!
Ale dokładnie tak to działa.
Czy rozumiesz teraz, na czym polega piękno poprawnie skonstruowanych metryk?
Z ich pomocą możesz osiągnąć fantastyczny wpływ na swoje procesy.
W przypadku sklepu internetowego wszystko jest dość proste, ale jak to wszystko przełożyć np. na jakość oprogramowania? Tak, dokładnie to samo:
- Wybieramy podstawową wartość, nad którą pracujemy. Na przykład zmniejszamy liczbę incydentów w branży.
- Rozumiemy, kto i co wytwarza tę wartość. Na przykład kod źródłowy.
- Budujemy lejek cyklu życia kodu źródłowego i ustalamy metryki na każdym etapie lejka. Wszystko.
Tutaj na przykład, jakie wskaźniki jakości można uzyskać (z głowy)…
Wskaźnik wartości:
- Gęstość wad przemysłowych na 1000 linii kodu
Metryki oparte na cyklu życia kodu źródłowego:
- odsetek nieudanych kompilacji,
- zasięg autotestu,
- odsetek nieudanych autotestów,
- wskaźnik awaryjności wdrożeń.
Metryki oparte na cyklu życia defektu:
- dynamika wykrywania defektów,
- dynamika korekcji,
- dynamika ponownych odkryć,
- dynamika odchyleń defektów,
- średni czas oczekiwania na naprawę,
- średni czas naprawy.
Wyniki
Jak widać temat metryk jest naprawdę bardzo ważny, potrzebny i ciekawy.
Jak wybrać odpowiednie metryki:
Wybierz OMTM, zastanów się nad jego podstawową wartością i zmierz producentów tej wartości.
Twórz wskaźniki w oparciu o lejek cyklu życia producenta.
Unikaj stosowania wskaźników bezwzględnych.
Co jeszcze przeczytać na ten temat
Temat metryk stał się popularny wraz z pojawieniem się ruchu Lean Startup, dlatego lekturę najlepiej zacząć od podstawowych źródeł – książek „Lean Startup” (tłumaczenie na rosyjski - „Biznes od podstaw. Metoda Lean Startup” na Ozon). i „Lean Analytics” (nie ma tłumaczenia, ale książka w języku angielskim jest sprzedawana na Ozonie).
Niektóre informacje można znaleźć w Internecie nawet w języku rosyjskim, ale niestety nie znaleziono jeszcze obszernego podręcznika nawet w segmencie zachodnim.
Swoją drogą, obecnie istnieją nawet indywidualni „specjaliści ds. produktu”, których zadaniem jest zbudowanie prawidłowego systemu miar dla swojego produktu i zaproponowanie sposobów jego ulepszenia.
I to wszystko.
Jeżeli artykuł pomógł Ci lepiej zrozumieć istotę problemu, autor będzie wdzięczny za „lajka” i ponowne opublikowanie.
Źródło: www.habr.com