Insight sobre métricas: como entendi o que são métricas e qual é o seu principal charme

Métricas são uma besteira, você diz, e estará certo. Em alguma coisa.

Na verdade, quando se trata de métricas, a primeira métrica que vem à mente é o tráfego.

Muitas pessoas gostam de meditar por horas olhando o gráfico de tráfego de seu site.

Insight sobre métricas: como entendi o que são métricas e qual é o seu principal charme

Como é legal ver a fila pular - para frente e para trás, para frente e para trás... E é ainda mais legal quando o tráfego do site cresce continuamente.

Então o calor feliz se espalha por todo o corpo e a mente se eleva ao céu em antecipação ao maná celestial.

Ah, que alegria, que felicidade!

Insight sobre métricas: como entendi o que são métricas e qual é o seu principal charme

E mesmo que a imagem seja triste...

Insight sobre métricas: como entendi o que são métricas e qual é o seu principal charme

Você ainda não consegue tirar os olhos do gráfico, é tão viciante.

Insight sobre métricas: como entendi o que são métricas e qual é o seu principal charme

Parece que existe um significado secreto escondido nos gráficos. Um pouco mais e a imagem revelará seus segredos e lhe contará uma maneira incrivelmente simples e eficaz de atrair um grande número de clientes. E então o dinheiro certamente fluirá como um rio.

Mas, na verdade, a frequência é uma típica “métrica doce (de vaidade)” que não carrega nenhum significado útil.

E essas são a maioria das métricas. Basicamente, todas as métricas que você vê são açucaradas. E é por isso que as métricas têm a má reputação de serem uma perda inútil de tempo e esforço.

Mas, na realidade, este não é o caso. As métricas corretas fornecem informações extremamente importantes e às vezes valiosas para um negócio e um projeto.

O principal bônus e finalidade das métricas é que elas possibilitam o gerenciamento do seu negócio ou projeto.

Como determinar se uma métrica é ruim?

Vejamos um exemplo muito simples - a velocidade de um carro.

Por favor me diga o que significa velocidade...

100km/h?

Insight sobre métricas: como entendi o que são métricas e qual é o seu principal charme

Hmm ...

Hmm ...

Então o que isso significa?

Acho que você provavelmente já adivinhou que... não significa nada!

OK. Agora a segunda pergunta:

100 km/h é bom ou ruim?

Hmm ...

Nem um nem outro?

Direito

A velocidade é uma métrica completamente inútil e estúpida. A menos, é claro, que você o use sozinho. Combinado com outras métricas, pode, claro, dizer alguma coisa, mas por si só, certamente não o faz.

O tráfego do site tem exatamente a mesma velocidade.

Insight sobre métricas: como entendi o que são métricas e qual é o seu principal charme

É por isso que não faz sentido ficar na frente do gráfico de tráfego do site. Ele não lhe revelará o segredo da vida. Você entende agora?

Quais métricas são boas então?

Por exemplo, taxa de rotatividade. Essa métrica informa quantos clientes deixaram a empresa/site para sempre ao longo do tempo.

Taxa de rotatividade = 1% indica que perdemos apenas 1% dos clientes. Aqueles. Dificilmente perdemos alguém.

Se a taxa de rotatividade = 90%, isso significa que estamos perdendo quase todos os nossos clientes. É horrível!

Você vê a diferença entre essa métrica e velocidade?

A taxa de rotatividade é uma métrica significativa que responde à questão de saber se algo é bom ou ruim. E você não precisa adivinhar o que isso significa.

Esta é uma métrica que fala por si!

E agora estamos prontos para tomar medidas urgentes para reduzir a rotatividade de clientes.

Insight sobre métricas: como entendi o que são métricas e qual é o seu principal charme

É por isso que essas métricas são chamadas de acionáveis. Porque eles incentivam a ação.

Critério para a “doçura” das métricas

Existe uma maneira muito simples de determinar se uma métrica é “vaidade”.

Métricas mais absolutas, como tráfego, número de downloads, número de retuítes, número de e-mails/inscritos, número de curtidas, etc. são extravagantes.

Métricas relativas e ponderadas costumam ser acionáveis. Mas nem todos!

Quanto às métricas de qualidade, não há certeza aqui, porque uma avaliação qualitativa por si só não pode ser precisa e inequívoca.

Mas por outro lado, a usabilidade de um programa pode e deve ser avaliada precisamente pelo nível de percepção dos utilizadores finais e nada mais.

Como abordar as métricas em geral?

A primeira coisa que você precisa fazer é girar seu cérebro.

Sem brincadeira.

Todos(!) que se deparam com métricas, primeiro começam a procurar a razão de estarem nelas. Mas eles não vão mostrar isso, infelizmente.

As métricas são como uma régua comum com a qual medimos tudo o que queremos.

Insight sobre métricas: como entendi o que são métricas e qual é o seu principal charme

Você não está procurando a razão da existência em uma régua de madeira comum, certo?

Insight sobre métricas: como entendi o que são métricas e qual é o seu principal charme

Encontrar o significado da vida em uma linha é o que chamamos de “abordagem de baixo para cima”.

Para trabalhar com métricas corretamente, é preciso mudar o paradigma e começar a trabalhar ao contrário, de cima para baixo.

Aqueles. primeiro execute alguma ação e depois use métricas para medir o efeito resultante dela.

As métricas devem ser usadas como um assunto comum de medição e nada mais.

Pense nessas palavras.

Meça o efeito de suas ações usando métricas, em vez de inventar ações baseadas nas leituras de uma régua de madeira.

Esta abordagem também é chamada de “Hipótese-> Medição”.

Ok, isso está claro.

Pergunta nº 2: “O que exatamente medir? Como encontrar as métricas certas?

Como criar seu próprio conjunto de métricas?

Depois de navegar na Internet, você provavelmente encontrará dezenas ou até centenas de métricas diferentes sobre o mesmo assunto.

Por exemplo, você pode encontrar cerca de cem métricas de qualidade de software. Isso inclui padrões GOSTR-ISO, métricas calculadas no SonarQube, algumas opções escritas pelo próprio e até métricas de “qualidade” baseadas em avaliações de usuários.

Então, quais valem a pena usar e quais não?

A melhor abordagem é guiar-se por um “valor central”.

OMTM (uma métrica que importa)

Vamos dar um exemplo.

É claro que se você deseja melhorar a qualidade do seu produto de software, poderá medir essa qualidade de diferentes maneiras.

A qualidade não se trata apenas do número de erros. Se você olhar para a qualidade como um todo, então isto é:

número de incidentes na indústria,
facilidade de uso e facilidade de percepção,
velocidade de trabalho,
integridade e oportunidade de implementação da funcionalidade planejada,
segurança.

Os critérios são muitos e é impossível trabalhar com todos ao mesmo tempo. Eles fazem isso de forma muito simples: escolhem um critério, o mais importante no momento, e trabalham apenas com ele.

Essa abordagem é chamada de OMTM (One Metric That Matters) - Uma (única) métrica importante.

É lógico que o OMTM de qualidade de software selecione o número de incidentes graves (importantes e críticos) em um ambiente industrial.

Para lojas online, você não precisa pensar em OMTM - é no volume de vendas ou no lucro (dependendo da sua decisão).

Esta métrica importante será o valor central para o seu conjunto de métricas. E o set final deles dependerá disso.

Valor interno

Muitas vezes eles começam a compilar um conjunto de métricas “do nada”, vasculhando a Internet e escolhendo as melhores opções a partir do que encontraram de acordo com o princípio: “Oh! Isso vai servir para nós!

Como você entende, esse não é o melhor caminho, certo?

Mas como você decide qual métrica usar e qual não?

Por exemplo, vários tipos de conversões de usuários são frequentemente medidos.

Mas por que eles medem os usuários e não outra coisa? Você já pensou sobre esta questão?

Naturalmente, há uma resposta.

Vejamos uma loja online como o exemplo mais fácil de entender.

Digamos que você queira aumentar suas vendas. Quais métricas você precisará para isso? Como abordar isso?

Existe uma maneira simples, lógica e funcional. Tudo se encaixa quando você responde à pergunta:

QUEM PRODUZ VALOR?

Trabalhamos com base no volume de vendas, certo? Queremos aumentar isso, certo?

Quem e o que precisa ser influenciado para aumentar as vendas?

Naturalmente,

precisa influenciar a causa -
naquele que “produz” valor.

Quem ganha dinheiro em uma loja online? De onde vem o dinheiro?

Muito simples: dos clientes.

Onde exatamente em uma loja online você pode influenciar os clientes?

Sim, em qualquer lugar!
Certo. Em todas as fases do ciclo de vida do cliente.

Para representar o ciclo de vida, é conveniente construir o chamado. “funil” do movimento do cliente através do processo.

Um exemplo de funil de loja online:

Insight sobre métricas: como entendi o que são métricas e qual é o seu principal charme

Porque isto é assim? Porque os clientes se perdem justamente ao passar de uma etapa do funil para outra.

Ao aumentar o número de clientes em qualquer nível do funil, aumentamos automaticamente o volume de vendas resultante.

Um exemplo simples.

A métrica “Taxa de Abandono de Carrinho” mostra essencialmente a taxa de conversão de um carrinho de compras em um pedido concluído.

Digamos que durante a primeira medição você descobriu que 90% das cestas estão perdidas, ou seja, De 10 cestas, apenas 1 pedido é feito.

Claramente há algo errado com o carrinho de compras, certo?

Para simplificar, assumiremos que o valor de um pedido é de 100 rublos. Que. o volume final de vendas será de apenas 100 rublos.

Como resultado das melhorias nos carrinhos, a porcentagem de carrinhos abandonados diminuiu de 10% a 80%. Como é isso em números?

De 10 cestas, 2 pedidos começaram a ser feitos. 100 rublos * 2 = 200 rublos.

Mas isso é um aumento de 100% no volume de vendas! Bingo!

Ao aumentar sua conversão de passos em apenas 10%, você aumentou seu volume de vendas em 100%.

Fantástico!

Mas é exatamente assim que funciona.

Você entende agora qual é a beleza das métricas construídas corretamente?

Com a ajuda deles você pode obter um impacto fantástico em seus processos.

Com uma loja online tudo é bastante simples, mas como tudo isso pode ser transferido, por exemplo, para a qualidade do produto de software? Sim, exatamente o mesmo:

  1. Escolhemos o valor central no qual estamos trabalhando. Por exemplo, estamos reduzindo o número de incidentes na indústria.
  2. Entendemos quem e o que produz esse valor. Por exemplo, código-fonte.
  3. Construímos um funil de ciclo de vida do código-fonte e definimos métricas em cada etapa do funil. Todos.

Aqui, por exemplo, quais métricas de qualidade poderiam ser obtidas (na minha cabeça)…

Indicador de valor:

  • Densidade de defeitos industriais por 1000 linhas de código

Métricas baseadas no ciclo de vida do código-fonte:

  • proporção de compilações malsucedidas,
  • cobertura de autoteste,
  • porcentagem de autotestes malsucedidos,
  • taxa de falha de implantações.

Métricas baseadas no ciclo de vida do defeito:

  • dinâmica de detecção de defeitos,
  • dinâmica de correção,
  • dinâmica de redescobertas,
  • dinâmica de desvios de defeitos,
  • tempo médio de espera por uma correção,
  • tempo médio para consertar.

Resultados de

Como você pode ver, o tema métricas é realmente muito importante, necessário e interessante.

Como escolher as métricas certas:

Escolha um OMTM, pense no seu valor central e avalie os produtores desse valor.

Crie métricas com base no funil do ciclo de vida do fabricante.

Evite usar métricas absolutas.

O que mais ler sobre este assunto

O tópico de métricas tornou-se popular na esteira do movimento Lean Startup, então é melhor começar a ler a partir das fontes primárias - os livros “Lean Startup” (tradução para o russo - “Business from Scratch. The Lean Startup Method” no Ozon) e “Lean Analytics” (não tem tradução, mas o livro em inglês é vendido na Ozon).

Algumas informações podem ser encontradas na Internet até mesmo em russo, mas, infelizmente, um livro didático abrangente ainda não foi encontrado nem mesmo no segmento ocidental.

A propósito, agora existem até “especialistas em produtos” individuais cuja tarefa é construir o sistema correto de métricas para seus produtos e sugerir maneiras de melhorá-los.

Isso é tudo.

Se o artigo ajudou você a entender melhor a essência do problema, o autor ficaria grato por um “curtir” e uma repostagem.

Fonte: habr.com

Adicionar um comentário