Las métricas son una tontería, dirás tú, y tendrías razón. En cierto modo.
De hecho, cuando se habla de métricas, la primera que viene a la mente es la asistencia.
A muchos les encanta meditar durante horas mirando el gráfico de asistencia de su sitio web.
Es genial observar cómo la línea sube y baja, sube y baja... Y aún mejor, cuando la asistencia del sitio crece continuamente.
Entonces, una calidez bendita se desliza por todo el cuerpo y la mente se eleva al cielo esperando el maná celestial.
¡Ah, qué alegría, qué éxtasis!
E incluso si la situación es desalentadora...
No puedes apartar la vista del gráfico, tan absorbente es.
Parece que en el gráfico se oculta un significado secreto. Un poco más, y la imagen revelará sus secretos y contará un método increíblemente simple y eficaz para atraer una gran cantidad de clientes. Y entonces, el dinero fluirá como un río.
Pero en realidad, la asistencia es una métrica típicamente 'empalagosamente vanidosa', que no tiene un significado útil.
Y la mayoría de las métricas son así. La mayoría de las métricas que verás son empalagosas. Y es precisamente por eso que las métricas han adquirido una mala reputación de ser una pérdida de tiempo y esfuerzo.
Pero en realidad, nada más lejos de la verdad. Las métricas correctas proporcionan información extremamente importante, a veces invaluable, para el negocio y el proyecto.
El principal beneficio y propósito de las métricas es que permiten gestionar tu negocio o proyecto.
¿Cómo determinar si una métrica es mala?
Veamos un ejemplo muy simple: la velocidad de un automóvil.
Dígame, por favor, ¿qué significa la velocidad...
100 km/h?
Hmm...
Hmm...
Entonces, ¿qué significa?
Creo que ya te habrás dado cuenta de que... ¡no significa nada!
Vale. Ahora, segunda pregunta:
¿100 km/h es bueno o malo?
Hmm...
Ni bueno ni malo?
¡Correcto!
La velocidad es una métrica completamente inútil e insensata. Si, por supuesto, se usa sola. En conjunto con otras métricas, puede decir algo, pero por sí misma, definitivamente no.
La asistencia del sitio web es exactamente la misma velocidad.
Es por eso que no tiene sentido quedarse mirando el gráfico de asistencia del sitio. No te revelará el misterio de la vida. ¿Lo entiendes ahora?
¿Y cuáles métricas son, entonces, buenas?
Por ejemplo, la tasa de abandono. Esta métrica indica cuántos clientes han abandonado la empresa/sitio de forma permanente a lo largo del tiempo.
Tasa de abandono = 1% significa que solo estamos perdiendo el 1% de los clientes. Es decir, casi no estamos perdiendo a nadie.
Si la tasa de abandono = 90%, eso significa que estamos perdiendo casi todos nuestros clientes. ¡Eso es terrible!
¿Ves la diferencia entre esta métrica y la velocidad?
La tasa de abandono es una métrica significativa que responde a la pregunta de si es buena o mala. No tienes que adivinar qué significa.
¡Es una métrica que habla por sí misma!
Y ahora estamos listos para tomar medidas urgentes para reducir la pérdida de clientes.
Es por eso que estas métricas se llaman efectivas. Porque incitan a la acción.
El criterio de 'dulzura' de las métricas.
Hay una forma muy sencilla de determinar si una métrica es 'dulce' / vanidosa.
La mayoría de las métricas absolutas, como el tráfico, la cantidad de descargas, el número de retweets, la cantidad de correos electrónicos/suscriptores, la cantidad de 'me gusta', etc. son vanidosas..
Las métricas relativas y ponderadas suelen ser efectivas. Pero no siempre.
En cuanto a las métricas cualitativas, no hay claridad, ya que la evaluación cualitativa en sí misma no puede ser precisa y única.
Pero, por otro lado, la comodidad de un programa se puede y debe evaluar según la percepción de los usuarios finales y de ninguna otra manera.
¿Cómo abordar las métricas en general?
Lo primero es cambiar la forma de pensar.
Sin bromas.
Cualquiera que se encuentre con métricas, en primer lugar, comienza a buscar el sentido de su existencia. Pero, lamentablemente, no lo mostrarán.
Las métricas son simplemente una regla común con la que medimos todo lo que queremos.
No buscas el sentido de la existencia en una regla de madera ordinaria, ¿verdad?
Buscar el sentido de la vida en una regla es lo que se llama 'enfoque de abajo hacia arriba'.
Para trabajar correctamente con métricas, es necesario cambiar la paradigma y empezar a trabajar al revés, de arriba hacia abajo.
Es decir, primero realizar alguna acción y luego medir el efecto obtenido con las métricas.
Debes utilizar las métricas como un objeto ordinario de medición y nada más.
Reflexiona sobre estas palabras.
Mide el efecto de tus acciones con las métricas, y no inventes acciones basándote en las lecturas de una regla de madera.
Este enfoque también se conoce como “Hipótesis->Medición”.
De acuerdo, esto está claro.
Pregunta nº 2: “¿Qué exactamente medir? ¿Cómo encontrar las métricas correctas?”
¿Cómo crear su propio conjunto de métricas?
Si navega por Internet, seguramente encontrará decenas, si no cientos, de métricas diferentes sobre el mismo tema.
Por ejemplo, se pueden encontrar cerca de un centenar de métricas de calidad de software. Estas incluyen estándares GOST R-ISO, métricas calculadas en SonarQube, algunas variantes personalizadas e incluso métricas “cualitativas” basadas en comentarios de usuarios.
Entonces, ¿cuáles deberíamos usar y cuáles no?
El mejor enfoque es guiarse por el “valor principal”.
OMTM (Una Métrica que Importa)
Veamos un ejemplo.
Está claro que si desea mejorar la calidad de su producto de software, puede medir esa calidad de varias maneras.
La calidad no es solo el número de errores. Si miramos la calidad en su conjunto, esto es:
el número de incidentes en producción,
la facilidad de uso y la simplicidad de percepción,
la velocidad de funcionamiento,
la integridad y la puntualidad en la implementación de las funcionalidades planificadas,
la seguridad.
Hay muchos criterios y no es posible trabajar con todos ellos a la vez. La solución es muy simple: elija uno, el criterio más importante en este momento, y trabaje solo con él.
Este enfoque se llama OMTM (Una Métrica que Importa).
Es lógico elegir como OMTM de calidad de software el número de incidentes graves (importantes y críticos) en un entorno industrial.
Para las tiendas en línea, no hay que pensar en OMTM, es el volumen de ventas o ganancias (dependiendo de su decisión).
Esta Una Métrica Importante será el valor principal de su conjunto de métricas. Y precisamente a partir de ella dependerá su conjunto final.
Valor Interior
A menudo, las personas comienzan a formar un conjunto de métricas “al azar”, buscando en Internet y eligiendo de lo encontrado las mejores opciones con el principio: “¡Oh! Esto nos servirá!”
Como entenderá, este no es el mejor método, ¿verdad?
Pero, ¿cómo decidir qué métrica tomar y cuál no?
Por ejemplo, a menudo se miden diferentes tipos de conversiones de usuarios.
¿Pero por qué se mide solo a los usuarios y no a otra cosa? ¿No se ha preguntado esto?
Naturalmente, hay una respuesta.
Veamos una tienda en línea como el ejemplo más simple de entender.
Supongamos que desea aumentar su volumen de ventas. ¿Qué métricas necesitará? ¿Cómo abordarlo?
Hay una forma simple, lógica y efectiva. Todo encaja cuando responde a la pregunta:
¿QUIÉN GENERA VALOR?
Estamos trabajando para aumentar el volumen de ventas, ¿verdad? Queremos incrementarlo, ¿cierto?
¿A quién y qué debemos influir para aumentar el volumen de ventas?
Por supuesto,
hay que influir en la causa —
en quien “genera” valor.
¿Quién genera dinero en una tienda en línea? ¿De dónde proviene el dinero?
Muy simple: de los clientes.
¿Dónde exactamente en la tienda en línea se puede influir en los clientes?
¡En cualquier lugar!
Correcto. En cada etapa del ciclo de vida del cliente.
Para representar el ciclo de vida, es conveniente construir el llamado “embudo” de movimiento del cliente a través del proceso.
Ejemplo del embudo de una tienda en línea:
¿Por qué es así? Porque los clientes se pierden precisamente al pasar de un paso a otro del embudo.
Al aumentar el número de clientes en algún nivel del embudo, automáticamente incrementamos el volumen de ventas resultante.
Un ejemplo simple.
La métrica “Porcentaje de carritos abandonados” en esencia muestra la conversión al pasar del carrito de compras al pedido realizado.
Supongamos que, en la primera medición, descubre que se pierden el 90% de los carritos, es decir, de 10 carritos solo se convierte en 1 pedido.
Claramente hay algo mal con el carrito de compras, ¿verdad?
Para simplificar, supongamos que el total de un pedido es de 100 rublos. Así que el volumen total de ventas será de solo 100 rublos.
Como resultado de la mejora del carrito, el porcentaje de carritos abandonados disminuyó en un 10%, hasta el 80%. ¿Cómo se ve esto en números?
De 10 carritos, se realizaron 2 pedidos. 100 rublos * 2 = 200 rublos.
¡Pero esto representa un aumento del 100% en el volumen de ventas! ¡Bingo!
Al aumentar la conversión del paso solo un 10%, aumentó el volumen de ventas en un 100%.
¡Fantástico!
Pero así es como funciona.
¿Entiende ahora la maravilla de las métricas bien construidas?
Con su ayuda, se puede lograr un impacto fantástico en sus procesos.
Con una tienda en línea, todo es bastante sencillo, pero ¿cómo trasladar esto, por ejemplo, a la calidad del producto de software? Así:
- Seleccionamos el valor principal sobre el que estamos trabajando. Por ejemplo, reducimos el número de incidentes en producción.
- Entendemos quién y qué genera este valor. Por ejemplo, el código fuente.
- Construimos un embudo del ciclo de vida del código fuente y establecemos métricas en cada paso del embudo. Todo.
Aquí, por ejemplo, algunas métricas de calidad que podrían salir (de forma espontánea)…
Índice de valor:
- densidad de defectos de producción por 1000 líneas de código
Métricas según el ciclo de vida del código fuente:
- tasa de compilaciones fallidas,
- cobertura de pruebas automáticas,
- tasa de pruebas automáticas fallidas,
- tasa de despliegues fallidos.
Métricas según el ciclo de vida de los defectos:
- dinámica de detección de defectos,
- dinámica de corrección,
- dinámica de reapariciones,
- dinámica de desviaciones de defectos,
- tiempo medio de espera para la corrección,
- tiempo medio de corrección.
Resultados
Como pueden ver, el tema de las métricas es realmente muy importante, necesario e interesante.
Cómo seleccionar métricas correctamente:
Elijan OMTM, piensen en su valor principal y midan los productores de ese valor.
Construyan métricas basadas en el embudo del ciclo de vida del productor.
Traten de no usar métricas absolutas.
Qué más leer sobre este tema
El tema de métricas se ha popularizado con el movimiento Lean Startup, por lo que es mejor comenzar a leer desde las fuentes primarias — los libros "Lean Startup" (traducción al ruso — "Negocios desde cero. Método Lean Startup" en Ozon) y "Lean Analytics" (no hay traducción, pero el libro en inglés se vende en Ozon).
Se puede encontrar algo de información en Internet incluso en ruso, pero desafortunadamente aún no se ha encontrado un manual completo ni siquiera en el segmento occidental.
Por cierto, ahora han surgido incluso especialistas individuales llamados "productologos", cuya tarea es construir un sistema adecuado de métricas para su producto y proponer formas de mejorarlas.
Eso es todo.
Si el artículo le ayudó a entender mejor el tema, el autor agradecería un “like” y un repost.
Fuente: habr.com
