Mätvärden är skitsnack, säger du, och du kommer att ha rätt. I något.
Faktum är att när det kommer till mätvärden är det allra första mätvärdet som kommer att tänka på trafik.
Många människor gillar att meditera i timmar och titta på trafikdiagrammet på deras webbplats.
Hur coolt det är att se linjen hoppa - fram och tillbaka, fram och tillbaka... Och det är ännu coolare när webbplatstrafiken växer kontinuerligt.
Sedan sprider sig salig värme i hela kroppen och sinnet svävar till himlen i väntan på himmelskt manna.
Åh, vilken glädje, vilken lycka!
Och även om bilden är sorglig...
Du kan fortfarande inte ta blicken från diagrammet, det är så beroendeframkallande.
Det verkar som att det finns en hemlig mening gömd i grafiken. Lite mer, och bilden kommer att avslöja sina hemligheter och berätta ett otroligt enkelt och effektivt sätt att locka ett stort antal kunder. Och då kommer pengarna definitivt att flyta som en flod.
Men i själva verket är närvaro en typisk "söt (fåfänga) mätning" som inte har någon användbar betydelse.
Och det här är majoriteten av mätvärdena. I princip är alla mätvärden du ser söta. Och det är därför som mätvärden har ett dåligt rykte som ett meningslöst slöseri med tid och ansträngning.
Men i verkligheten är det inte alls så. Rätt mått ger extremt viktig och ibland ovärderlig information för ett företag och ett projekt.
Den främsta bonusen och syftet med mätvärden är att de gör det möjligt att hantera ditt företag eller projekt.
Hur avgör man om ett mått är dåligt?
Låt oss titta på ett mycket enkelt exempel - hastigheten på en bil.
Snälla berätta vad hastighet betyder...
100 km/h?
Hm…
Hm…
Så vad betyder det?
Jag tror att du antagligen gissade det själv att... inte betyder någonting!
OK. Nu den andra frågan:
Är 100 km/h bra eller dåligt?
Hm…
Varken det ena eller det andra?
Rätt!
Hastighet är ett helt värdelöst och dumt mått. Såvida du inte använder den självklart. I kombination med andra mätvärden kan det naturligtvis säga något, men i sig gör det det absolut inte.
Webbplatstrafiken är exakt samma hastighet.
Det är därför det är absolut ingen idé att umgås framför webbplatsens trafikdiagram. Han kommer inte att avslöja livets hemlighet för dig. Förstår du nu?
Vilka mått är bra då?
Till exempel Churn rate. Detta mätvärde talar om hur många kunder som har lämnat företaget/webbplatsen för alltid över tiden.
Churn rate = 1% säger att vi bara tappar 1% av kunderna. De där. Vi förlorar knappt någon.
Om Churn rate = 90% betyder det att vi förlorar nästan alla våra kunder. Det är hemskt!
Ser du skillnaden mellan detta mått och hastighet?
Churn rate är ett meningsfullt mått som svarar på frågan om något är bra eller dåligt. Och du behöver inte gissa vad det betyder.
Detta är ett mått som talar för sig självt!
Och nu är vi redo att vidta brådskande åtgärder för att minska kundförlusten.
Det är därför sådana mätvärden kallas handlingsbara. Eftersom de uppmuntrar till handling.
Kriterium för mätvärdes "söthet".
Det finns ett mycket enkelt sätt att avgöra att ett mått är "fåfänga".
Mest absoluta mätvärden, som trafik, antal nedladdningar, antal retweets, antal e-postmeddelanden/prenumeranter, antal likes, etc. är ostliknande.
Relativa, viktade mätvärden är ofta handlingsbara. Men inte allt!
När det gäller kvalitetsmått finns det ingen säkerhet här, eftersom en kvalitativ bedömning i sig kan inte vara korrekt och entydig.
Men å andra sidan kan och bör användbarheten av ett program bedömas exakt utifrån nivån på uppfattningen hos slutanvändare och inget annat.
Hur närmar man sig mätvärden i allmänhet?
Det första du behöver göra är att vända din hjärna.
Ingen skojar.
Alla(!) som stöter på mätvärden börjar först och främst leta efter anledningen till att de finns i dem. Men de kommer inte att visa det, tyvärr.
Mått är precis som en vanlig linjal med vilken vi mäter allt vi vill ha.
Du letar inte efter orsaken till existensen i en vanlig trälinjal, eller hur?
Att hitta meningen med livet i en rad är vad som kallas en "bottom-up approach".
För att arbeta med mått korrekt måste du ändra paradigmet och börja arbeta tvärtom, uppifrån och ner.
De där. gör först en åtgärd och använd sedan mätvärden för att mäta effekten av det.
Metrik bör användas som ett vanligt ämne för mätning och inget mer.
Tänk på dessa ord.
Mät effekten av dina handlingar med hjälp av mått, snarare än att hitta på handlingar baserade på avläsningarna från en trälinjal.
Detta tillvägagångssätt kallas också för "Hypotes->Mätning".
Ok, detta är klart.
Fråga nr 2: ”Vad ska man mäta exakt? Hur hittar man rätt mått?
Hur skapar du din egen uppsättning mätvärden?
Efter att ha surfat på Internet kommer du förmodligen att hitta dussintals eller till och med hundratals olika mätvärden om samma ämne.
Till exempel kan du hitta ett hundratal kvalitetsmått för programvara. Dessa inkluderar GOSTR-ISO-standarder, mätvärden beräknade i SonarQube, några självskrivna alternativ och till och med "kvalitetsmätningar" baserade på användarrecensioner.
Så vilka är värda att använda och vilka är inte?
Det bästa tillvägagångssättet är att vägledas av ett "kärnvärde".
OMTM (One Metric That Matters)
Låt oss ta ett exempel.
Det är klart att om du vill förbättra kvaliteten på din mjukvaruprodukt så kan du mäta denna kvalitet på olika sätt.
Kvalitet handlar inte bara om antalet fel. Om du tittar på kvalitet som helhet så är detta:
antal incidenter i branschen,
lätt att använda och lätt att uppfatta,
arbetshastighet,
fullständighet och aktualitet för implementeringen av den planerade funktionaliteten,
säkerhet.
Det finns många kriterier och det är omöjligt att arbeta med alla samtidigt. De gör det väldigt enkelt: de väljer ett, det viktigaste kriteriet för tillfället, och arbetar bara med det.
Detta tillvägagångssätt kallas OMTM (One Metric That Matters) - One (Single) Important Metric.
Det är logiskt för mjukvarukvaliteten OMTM att välja antalet allvarliga (viktiga och kritiska) incidenter i en industriell miljö.
För onlinebutiker behöver du inte tänka på OMTM alls - det är försäljningsvolym eller vinst (beroende på ditt beslut).
Detta Ena Viktiga mätvärde kommer att vara kärnvärdet för din uppsättning mätvärden. Och deras slutliga uppsättning kommer att bero på det.
Värde inuti
De börjar ofta sammanställa en uppsättning mätvärden "ut ur det blå" genom att leta igenom Internet och välja de bästa alternativen från vad de hittade enligt principen: "Åh! Det här kommer att passa oss!”
Som du förstår är detta inte det bästa sättet, eller hur?
Men hur bestämmer du vilken mätning du ska ta och vilken inte?
Till exempel mäts ofta olika typer av användarkonverteringar.
Men varför mäter de användare och inte något annat? Har du tänkt på den här frågan?
Naturligtvis finns det ett svar.
Låt oss titta på en webbutik som det enklaste exemplet att förstå.
Låt oss säga att du vill öka din försäljning. Vilka mätvärden behöver du för detta? Hur ska man närma sig detta?
Det finns ett enkelt, logiskt och fungerande sätt. Allt faller på plats när du svarar på frågan:
VEM PRODUCERAR VÄRDE?
Vi jobbar väl utifrån försäljningsvolym? Vi vill öka det, eller hur?
Vem och vad behöver påverkas för att öka försäljningen?
Naturligtvis,
behöver påverka orsaken -
på den som "producerar" värde.
Vem tjänar pengar i en webbutik? Var kommer pengarna ifrån?
Mycket enkelt: från kunder.
Var exakt i en webbutik kan man påverka kunderna?
Ja, var som helst!
Höger. I varje skede av kundens livscykel.
För att representera livscykeln är det bekvämt att bygga den sk. "tratt" av klientens rörelse genom processen.
Ett exempel på en onlinebutikstratt:
Varför är det så? Eftersom kunder går vilse just när de går från ett steg i tratten till ett annat.
Genom att öka antalet kunder på vilken nivå som helst i tratten ökar vi automatiskt den resulterande försäljningsvolymen.
Ett enkelt exempel.
Mätvärdet "Cart Abandonment Rate" visar i huvudsak omvandlingsfrekvensen från en kundvagn till en slutförd beställning.
Låt oss säga att du under den första mätningen upptäckte att 90% av korgarna går förlorade, d.v.s. Av 10 korgar görs endast 1 beställning.
Det är helt klart något fel på varukorgen, eller hur?
För enkelhetens skull antar vi att beloppet för en beställning är 100 rubel. Den där. den slutliga försäljningsvolymen kommer att vara endast 100 rubel.
Som ett resultat av vagnsförbättringarna minskade andelen övergivna vagnar med 10 % till 80 %. Hur ser det här ut i siffror?
Av 10 korgar började 2 beställningar läggas. 100 rubel * 2 = 200 rubel.
Men detta är en ökning av försäljningsvolymen med 100%! Bingo!
Genom att öka din stegomvandling med bara 10 % har du ökat din försäljningsvolym med 100 %.
Fantastisk!
Men det är precis så det fungerar.
Förstår du nu vad som är skönheten med korrekt konstruerade mått?
Med deras hjälp kan du uppnå en fantastisk inverkan på dina processer.
Med en webbutik är allt ganska enkelt, men hur kan allt detta till exempel överföras till kvaliteten på mjukvaruprodukten? Ja exakt samma:
- Vi väljer det kärnvärde vi arbetar med. Till exempel minskar vi antalet incidenter i branschen.
- Vi förstår vem och vad som producerar detta värde. Till exempel källkod.
- Vi bygger en källkods livscykeltratt och ställer in mätvärden vid varje steg i tratten. Allt.
Här, till exempel, vilka kvalitetsmätningar som kan erhållas (av mitt huvud)...
Värdeindikator:
- Densitet av industriella defekter per 1000 rader kod
Mätvärden baserade på källkodens livscykel:
- andel misslyckade sammanställningar,
- autotest täckning,
- procentandel misslyckade autotester,
- misslyckandefrekvensen för implementeringar.
Mätvärden baserade på defektens livscykel:
- dynamiken för defektdetektering,
- korrigeringsdynamik,
- dynamiken i återupptäckten,
- dynamik hos defektavvikelser,
- genomsnittlig väntetid för en fix,
- genomsnittlig tid att fixa.
Resultat av
Som du kan se är ämnet mått verkligen väldigt viktigt, nödvändigt och intressant.
Så här väljer du rätt mätvärden:
Välj en OMTM, tänk på dess kärnvärde och mät producenterna av det värdet.
Bygg statistik baserat på tillverkarens livscykeltratt.
Undvik att använda absoluta mätvärden.
Vad mer att läsa om detta ämne
Ämnet med mått blev populärt i kölvattnet av Lean Startup-rörelsen, så det är bäst att börja läsa från de primära källorna - böckerna "Lean Startup" (översättning till ryska - "Business from Scratch. The Lean Startup Method" på Ozon) och "Lean Analytics" (det finns ingen översättning, men boken på engelska säljs på Ozon).
Viss information kan hittas på Internet även på ryska, men tyvärr har en heltäckande lärobok ännu inte hittats ens i det västerländska segmentet.
Förresten, nu finns det till och med enskilda "produktspecialister" vars uppgift är att bygga det korrekta måttsystemet för sin produkt och föreslå sätt att förbättra dem.
Det är allt.
Om artikeln hjälpte dig att bättre förstå kärnan i problemet, skulle författaren vara tacksam för ett "gilla" och ett repost.
Källa: will.com