メトリクスに関する洞察: メトリクスとは何か、そしてその主な魅力は何なのかをどのように理解したか

指標などデタラメだ、とあなたは言いますが、それは正しいでしょう。 何かで。

実際、指標というと、真っ先に思い浮かぶのはトラフィックです。

多くの人は、自分の Web サイトのトラフィック グラフを見て何時間も瞑想するのが好きです。

ラインが前後にジャンプするのを見るのはなんとクールなことでしょう...そして、サイトのトラフィックが継続的に増加すると、さらにクールになります。

すると至福の温かさが体中に広がり、心は天のマナを期待して天へと舞い上がります。

ああ、何という喜び、何という至福でしょう！

たとえその絵が悲しくても…

今でもチャートから目が離せません、とても中毒性があります。

グラフィックには何か秘密の意味が隠されているようです。 もう少し詳しく見ると、この写真がその秘密を明らかにし、膨大な数の顧客を引き付けるための信じられないほどシンプルで効果的な方法を教えてくれます。 そうすればお金は確実に川のように流れていきます。

しかし実際には、出席率は典型的な「甘い（見栄えの）指標」であり、何の有用な意味も持ちません。

これらが指標の大部分です。 基本的に、目に見える指標はすべて甘いものです。 それが、メトリクスが時間と労力の無意味な無駄であるという悪い評判がある理由です。

しかし、実際には全くそうではありません。 適切な指標は、ビジネスやプロジェクトにとって非常に重要で、時には非常に貴重な情報を提供します。

メトリクスの主な利点と目的は、メトリクスによってビジネスやプロジェクトの管理が可能になることです。

メトリクスが不良かどうかを判断するにはどうすればよいでしょうか?

非常に単純な例、車の速度を見てみましょう。

速度の意味を教えてください...

時速100キロ？

うーん...

うーん...

では、それは何を意味するのでしょうか？

おそらくあなた自身もそれを推測したと思いますが、...何の意味もありません。

わかりました。 次に XNUMX 番目の質問です。

時速100kmは良いのか悪いのか？

うーん...

どちらか一方ではないですか？

正しい

速度はまったく役に立たず、愚かな指標です。 もちろん、それを単独で使用する場合を除きます。 もちろん、他の指標と組み合わせると何かが言えますが、それだけでは確かに言えません。

サイトのトラフィックもまったく同じ速度です。

そのため、サイトの交通図の前でたむろしてもまったく意味がありません。 神はあなたに人生の秘密を明らかにしません。 もう分かりましたか？

では、どのような指標が良いのでしょうか?

たとえば、チャーンレート。 この指標は、時間の経過とともに、何人の顧客が会社/サイトから永久に離れたかを示します。

解約率 = 1% は、顧客を失うのは 1% だけであることを意味します。 それらの。 誰も失うことはほとんどありません。

解約率 = 90% の場合、これはほぼすべての顧客を失っていることを意味します。 ひどいですよ！

この指標と速度の違いがわかりますか?

チャーンレートは、何かが良いか悪いかという質問に答える意味のある指標です。 そしてそれが何を意味するかを推測する必要はありません。

これはそれ自体を物語る指標です。

そして今、私たちは顧客離れを減らすために緊急の措置を講じる準備ができています。

このような指標が実用的であると呼ばれるのはこのためです。 なぜなら、彼らは行動を促すからです。

指標の「甘さ」の基準

メトリクスが「バニティ」であるかどうかを判断する非常に簡単な方法があります。

最も絶対的なメトリクス、トラフィック、ダウンロード数、リツイート数、メール数/購読者数、いいね数など。 安っぽい.

相対的な重み付けされた指標は、多くの場合実用的です。 すべてではありません！

品質指標に関しては、確実性はありません。 定性的評価自体は正確かつ明確であることはできません。

しかしその一方で、プログラムの使いやすさは、エンド ユーザーの認識レベルによって正確に評価できるし、それ以外の何ものでもない。

一般的にメトリクスにどのようにアプローチすればよいでしょうか?

まず最初にやるべきことは、頭の回転を変えることです。

冗談じゃない。

指標に出会った人は誰でも (!)、まずその指標に含まれる理由を探し始めます。 しかし、残念ながら彼らはそれを見せません。

メトリクスは、必要なものすべてを測定するための通常の定規のようなものです。

普通の木製定規に存在理由を求めているわけではないですよね？

人生の意味を線で見つけるのが「ボトムアップ・アプローチ」と呼ばれるものです。

メトリクスを正しく操作するには、パラダイムを変更して、上から下まで逆の作業を開始する必要があります。

それらの。 まず何らかのアクションを実行し、次にメトリクスを使用してその結果生じる効果を測定します。

メトリクスは、通常の測定対象として使用されるべきであり、それ以上のものではありません。

これらの言葉について考えてみましょう。

木の定規の読み取り値に基づいてアクションを考案するのではなく、指標を使用してアクションの効果を測定します。

このアプローチは「仮説→測定」とも呼ばれます。

わかりました、これは明らかです。

質問 No. 2: 「正確に何を測定するのですか?」 適切な指標を見つけるにはどうすればよいでしょうか?

独自の指標セットを作成するにはどうすればよいですか?

インターネットをサーフィンすると、同じトピックに関する数十、場合によっては数百の異なる指標を見つけることになるでしょう。

たとえば、約 XNUMX のソフトウェア品質指標を見つけることができます。 これらには、GOSTR-ISO 標準、SonarQube で計算されたメトリクス、いくつかの自作オプション、さらにはユーザー レビューに基づく「品質」メトリクスが含まれます。

では、どれが使用する価値があり、どれがそうでないのでしょうか?

最善のアプローチは、「核となる価値観」に基づいて行動することです。

OMTM (重要な XNUMX つの指標)

例を見てみましょう。

ソフトウェア製品の品質を向上させたい場合、さまざまな方法でその品質を測定できることは明らかです。

品質とはエラーの数だけではありません。 全体としての品質を見ると、次のようになります。

業界におけるインシデントの数、
使いやすさと認識のしやすさ、
仕事のスピード、
計画された機能の実装の完全性と適時性、
安全

多くの基準があり、すべてを一度に処理することは不可能です。 彼らはそれを非常に簡単に実行します。現時点で最も重要な基準を XNUMX つ選択し、それのみを使用します。

このアプローチは、OMTM (One Metric That Matters) - XNUMX つの (単一) 重要なメトリックと呼ばれます。

ソフトウェア品質 OMTM にとって、産業環境における重大な (重要かつクリティカルな) インシデントの数を選択するのは論理的です。

オンライン ストアの場合、OMTM について考える必要はまったくありません。それは販売量または利益です (決定次第です)。

この XNUMX つの重要な指標が、一連の指標の中核となる値になります。 そして彼らの最終セットはそれにかかっています。

内部の価値

彼らは多くの場合、インターネットを調べ、見つけたものから次の原則に従って最適なオプションを選択することで、「突然」一連の指標の作成を開始します。 これなら私たちには合うよ！」

おわかりのとおり、これは最善の方法ではありませんよね?

しかし、どの指標を採用するか、どの指標を採用しないかをどのように決定するのでしょうか?

たとえば、さまざまなタイプのユーザー コンバージョンが測定されることがよくあります。

しかし、なぜ他のものではなくユーザーを測定するのでしょうか? この質問について考えたことはありますか?

当然、答えはあります。

最もわかりやすい例としてオンライン ストアを見てみましょう。

あなたが売上を増やしたいと考えているとします。 これにはどのような指標が必要ですか? これにどのようにアプローチすればよいでしょうか?

シンプルで論理的で効果的な方法が XNUMX つあります。 次の質問に答えると、すべてが適切になります。

誰が価値を生み出すのか?

私たちは売上高に基づいて仕事をしていますよね？ それを増やしたいですよね？

売上を上げるには誰に、何に影響を与える必要があるでしょうか?

もちろん、

原因に影響を与える必要がある -
価値を「生み出す」人に。

オンラインストアでお金を稼ぐのは誰ですか? お金はどこから出てくるのでしょうか？

非常にシンプルです: クライアントから。

オンライン ストアのどこで顧客に影響を与えることができるでしょうか?

そう、どこでも！
右。 顧客のライフサイクルのあらゆる段階で。

ライフサイクルを表すには、いわゆるものを構築すると便利です。 プロセスにおけるクライアントの動きの「ファネル」。

オンラインストアファネルの例:

なぜそうなるのでしょうか? なぜなら、顧客はファネルのあるステップから別のステップに移動するときにまさに道に迷うからです。

ファネルのどのレベルでもクライアントの数を増やすことで、結果として売上高も自動的に増加します。

簡単な例。

「カート放棄率」指標は基本的に、ショッピング カートから注文完了までのコンバージョン率を示します。

最初の測定中に、バスケットの 90% が紛失していることが判明したとします。 10 個のバスケットのうち、注文が行われるのは 1 個だけです。

明らかにショッピングカートがおかしいですよね？

簡単にするために、100 回の注文の金額が 100 ルーブルであると仮定します。 それ。 最終的な販売量はわずか XNUMX ルーブルになります。

カートの改善の結果、放棄されたカートの割合は 10% から 80% に減少しました。 これを数字で見るとどうなるでしょうか?

10個のカゴのうち2個の注文が入り始めました。 100 ルーブル * 2 = 200 ルーブル。

しかし、これは販売量が 100% 増加したことになります。 ビンゴ！

ステップ コンバージョンを 10% 増やすだけで、販売量は 100% 増加します。

素晴らしい！

しかし、まさにそのとおりです。

正しく構築されたメトリクスの素晴らしさは何か理解できましたか?

彼らの助けを借りて、プロセスに素晴らしい影響を与えることができます。

オンライン ストアではすべてが非常にシンプルですが、たとえばソフトウェア製品の品質などにこれらすべてをどのように反映できるのでしょうか? はい、まったく同じです:

1. 私たちは取り組んでいる核となる価値を選択します。 たとえば、業界におけるインシデントの数を削減しています。
2. 私たちは、誰が、何がこの価値を生み出すのかを理解しています。 たとえば、ソースコード。
3. ソースコードのライフサイクルファネルを構築し、ファネルの各ステップでメトリクスを設定します。 全て。

ここでは、たとえば、どのような品質指標を取得できるでしょうか (思いつきですが)…

値インジケータ:

• コード 1000 行あたりの工業的欠陥の密度

ソースコードのライフサイクルに基づくメトリクス:

• 失敗したコンパイルの割合、
• 自動テストの範囲、
• 失敗した自動テストの割合、
• 導入の失敗率。

欠陥ライフサイクルに基づく指標:

• 欠陥検出のダイナミクス、
• 補正の力学、
• 再発見のダイナミクス、
• 欠陥偏差のダイナミクス、
• 修正までの平均待ち時間、
• 修正にかかる平均時間。

結果

ご覧のとおり、メトリクスのトピックは非常に重要であり、必要であり、興味深いものです。

適切な指標を選択する方法:

OMTM を選択し、その中核となる価値について考え、その価値の生産者を測定します。

メーカーのライフサイクルファネルに基づいて指標を構築します。

絶対的なメトリクスの使用は避けてください。

このトピックに関して他に読むべきこと

メトリクスのトピックは、リーン スタートアップ運動をきっかけに人気になったので、一次情報源である書籍「リーン スタートアップ」（ロシア語への翻訳 - Ozon の「ゼロからのビジネス。リーン スタートアップ手法」）から読み始めるのが最善です。そして「Lean Analytics」（翻訳はありませんが、英語の本はOzonで販売されています）。

ロシア語でも一部の情報はインターネットで見つけることができますが、残念ながら、西側地域でも包括的な教科書はまだ見つかりません。

ちなみに、現在では、製品の正しい指標システムを構築し、それらを改善する方法を提案することを任務とする、個人の「製品スペシャリスト」さえ存在します。

それで全部です。

この記事が問題の本質をより深く理解するのに役立った場合、著者は「いいね」と再投稿に感謝します。

出所： habr.com