측정항목에 대한 통찰력: 측정항목이 무엇인지, 측정항목의 주요 매력은 무엇인지 이해한 방법

당신은 측정항목이 헛소리라고 말하고 당신의 말이 옳을 것입니다. 뭔가.

실제로 측정항목과 관련하여 가장 먼저 떠오르는 측정항목은 트래픽입니다.

많은 사람들은 웹사이트의 트래픽 그래프를 보면서 몇 시간 동안 명상하는 것을 좋아합니다.

앞뒤로, 앞뒤로 줄이 점프하는 것을 보는 것은 얼마나 멋진 일입니까... 그리고 사이트 트래픽이 지속적으로 증가할 때 더욱 멋집니다.

그러면 행복한 온기가 몸 전체에 퍼지고 마음은 하늘의 만나를 기대하며 하늘로 솟아오릅니다.

아, 얼마나 기쁘고 행복합니까!

그리고 사진이 슬프더라도...

아직도 차트에서 눈을 뗄 수가 없어요. 중독성이 너무 강해요.

그래픽 속에 숨겨진 의미가 있는 것 같습니다. 조금 더 말하면 사진은 그 비밀을 드러내고 엄청난 수의 고객을 유치할 수 있는 믿을 수 없을 정도로 간단하고 효과적인 방법을 알려줄 것입니다. 그러면 돈은 확실히 강처럼 흐를 것입니다.

그러나 실제로 출석률은 유용한 의미를 지니지 않는 전형적인 '달콤한(허영심) 척도'입니다.

그리고 이것이 대부분의 측정항목입니다. 기본적으로 표시되는 모든 측정항목은 유용합니다. 이것이 바로 지표가 무의미한 시간과 노력 낭비라는 나쁜 평판을 받는 이유입니다.

그러나 실제로는 전혀 그렇지 않습니다. 올바른 지표는 비즈니스와 프로젝트에 매우 중요하고 때로는 귀중한 정보를 제공합니다.

측정항목의 주요 보너스와 목적은 비즈니스나 프로젝트를 관리할 수 있게 한다는 것입니다.

측정항목이 잘못된지 어떻게 확인하나요?

아주 간단한 예, 즉 자동차의 속도를 살펴보겠습니다.

속도의 의미를 알려주세요...

시속 100km?

흠…

흠…

그렇다면 그것은 무엇을 의미합니까?

아마 당신도 짐작했을 거라 생각하는데... 아무 의미도 없습니다!

좋아요. 이제 두 번째 질문입니다.

100km/h는 좋은가요, 나쁜가요?

흠…

둘 중 하나도 아닌가요?

오른쪽

속도는 완전히 쓸모없고 어리석은 척도입니다. 물론, 단독으로 사용하지 않는 한. 물론 다른 지표와 결합하면 뭔가를 말할 수 있지만 그 자체로는 확실히 그렇지 않습니다.

사이트 트래픽은 정확히 같은 속도입니다.

그렇기 때문에 사이트 트래픽 차트 앞에서 노는 것은 전혀 의미가 없습니다. 그는 당신에게 삶의 비밀을 밝히지 않을 것입니다. 이제 이해가 되셨나요?

그렇다면 어떤 지표가 좋은가요?

예를 들어 이탈률입니다. 이 측정항목은 시간이 지남에 따라 얼마나 많은 고객이 회사/사이트를 영원히 떠났는지 알려줍니다.

이탈률 = 1%는 고객의 1%만 잃는다는 의미입니다. 저것들. 우리는 누구도 잃지 않습니다.

이탈률 = 90%이면 거의 모든 고객을 잃고 있음을 의미합니다. 끔찍해요!

이 측정항목과 속도의 차이가 보이시나요?

이탈률은 좋은지 나쁜지에 대한 질문에 답하는 의미 있는 지표입니다. 그리고 그것이 무엇을 의미하는지 추측할 필요도 없습니다.

이것은 그 자체로 말하는 지표입니다!

이제 우리는 고객 이탈을 줄이기 위해 긴급 조치를 취할 준비가 되었습니다.

이것이 바로 그러한 지표를 실행 가능하다고 부르는 이유입니다. 행동을 장려하기 때문입니다.

측정항목의 '단맛'에 대한 기준

측정 항목이 "허영"인지 확인하는 매우 간단한 방법이 있습니다.

가장 절대적인 지표, 트래픽, 다운로드 수, 리트윗 수, 이메일/구독자 수, 좋아요 수 등 치즈맛이 나다.

상대적이고 가중치가 부여된 지표는 실행 가능한 경우가 많습니다. 하지만 전부는 아닙니다!

품질 지표에 관해서는 여기에는 확실성이 없습니다. 정성적 평가 자체는 정확하고 모호하지 않을 수 있습니다.

그러나 반면에 프로그램의 유용성은 최종 사용자의 인식 수준에 따라 정확하게 평가될 수 있으며 평가되어야 합니다.

일반적으로 측정항목에 접근하는 방법은 무엇입니까?

가장 먼저 해야 할 일은 두뇌를 회전시키는 것입니다.

농담이 없습니다.

측정항목을 접한 모든 사람(!)은 우선 그 측정항목에 포함된 이유를 찾기 시작합니다. 그러나 불행하게도 그들은 그것을 보여주지 않을 것입니다.

측정항목은 우리가 원하는 모든 것을 측정하는 일반 눈금자와 같습니다.

평범한 나무자에서 존재의 이유를 찾는 건 아니겠죠?

삶의 의미를 선에서 찾는 것이 바로 '상향식 접근'이다.

메트릭을 올바르게 사용하려면 패러다임을 변경하고 위에서 아래로 반대 방향으로 작업을 시작해야 합니다.

저것들. 먼저 몇 가지 작업을 수행한 다음 측정항목을 사용하여 그 결과로 나타나는 효과를 측정합니다.

측정항목은 측정을 위한 일반적인 주제로 사용되어야 하며 그 이상은 아닙니다.

이 단어들을 생각해 보세요.

나무 눈금자의 판독값을 바탕으로 동작을 고안하기보다는 측정항목을 사용하여 동작의 효과를 측정하세요.

이 접근법을 "가설->측정"이라고도 합니다.

좋아, 이건 분명해.

질문 2: “정확히 무엇을 측정해야 할까요? 올바른 측정항목을 찾는 방법은 무엇입니까?

자신만의 측정항목 세트를 만드는 방법은 무엇입니까?

인터넷을 검색해 보면 동일한 주제에 대해 수십, 심지어 수백 가지의 다양한 지표를 찾을 수 있을 것입니다.

예를 들어 약 XNUMX개의 소프트웨어 품질 지표를 찾을 수 있습니다. 여기에는 GOSTR-ISO 표준, SonarQube에서 계산된 지표, 일부 자체 작성 옵션, 심지어 사용자 리뷰를 기반으로 한 "품질" 지표가 포함됩니다.

그렇다면 어떤 것은 사용할 가치가 있고 어떤 것은 그렇지 않습니까?

가장 좋은 접근 방식은 '핵심 가치'를 따르는 것입니다.

OMTM(중요한 하나의 측정항목)

예를 살펴 보겠습니다.

소프트웨어 제품의 품질을 향상시키려면 다양한 방법으로 이 품질을 측정할 수 있다는 것은 분명합니다.

품질은 단순히 오류 수에 관한 것이 아닙니다. 품질을 전체적으로 보면 다음과 같습니다.

업계 내 사고 수,
사용의 용이성과 인식의 용이성,
작업 속도,
계획된 기능 구현의 완전성과 적시성,
보안.

기준은 다양하며 이를 모두 동시에 적용하는 것은 불가능합니다. 그들은 매우 간단하게 작업을 수행합니다. 현재 가장 중요한 기준 중 하나를 선택하고 그 기준으로만 작업합니다.

이 접근 방식을 OMTM(One Metric That Matters) - 하나의(단일) 중요 측정항목이라고 합니다.

소프트웨어 품질 OMTM이 산업 환경에서 심각한(중요하고 중요한) 사고 수를 선택하는 것은 논리적입니다.

온라인 상점의 경우 OMTM에 대해 전혀 생각할 필요가 없습니다. 결정에 따라 판매량이나 이익이 됩니다.

이 하나의 중요한 지표는 일련의 지표에 대한 핵심 가치가 될 것입니다. 그리고 그들의 최종 세트는 그것에 달려 있습니다.

내부 가치

그들은 종종 인터넷을 샅샅이 뒤지고 다음 원칙에 따라 찾은 것 중에서 가장 좋은 옵션을 선택하여 "갑자기" 일련의 측정 항목을 수집하기 시작합니다. 이것은 우리에게 적합할 것입니다!”

아시다시피 이것은 최선의 방법은 아닙니다. 그렇죠?

하지만 어떤 측정 항목을 선택하고 어떤 측정 항목을 사용하지 않을지 어떻게 결정합니까?

예를 들어 다양한 유형의 사용자 전환이 측정되는 경우가 많습니다.

그런데 왜 다른 것이 아니라 사용자를 측정합니까? 이 질문에 대해 생각해 보셨나요?

당연히 답이 있습니다.

이해하기 가장 쉬운 예로 온라인 상점을 살펴보겠습니다.

매출을 늘리고 싶다고 가정해 보겠습니다. 이를 위해 어떤 측정항목이 필요합니까? 이에 접근하는 방법은 무엇입니까?

간단하고 논리적이며 효과적인 방법이 하나 있습니다. 질문에 답하면 모든 것이 제자리에 들어갑니다.

누가 가치를 생산하는가?

우리는 판매량을 기준으로 일을 하지요? 우리는 그것을 늘리고 싶습니다. 그렇죠?

매출을 늘리려면 누구와 무엇이 영향을 받아야 합니까?

물론,

원인에 영향을 미칠 필요가 있습니다 -
가치를 '생산'하는 사람.

온라인 상점에서 누가 돈을 버나요? 돈은 어디서 나오나요?

매우 간단합니다. 클라이언트로부터.

온라인 상점의 정확히 어디에서 고객에게 영향을 미칠 수 있나요?

응, 어디든!
오른쪽. 고객 라이프사이클의 모든 단계에서.

수명주기를 표현하기 위해 소위 말하는 것이 편리합니다. 프로세스를 통한 고객의 움직임의 "퍼널"입니다.

온라인 상점 퍼널의 예:

왜 그럴까요? 고객은 퍼널의 한 단계에서 다른 단계로 이동할 때 정확하게 길을 잃기 때문입니다.

퍼널의 모든 수준에서 클라이언트 수를 늘리면 결과적으로 판매량이 자동으로 늘어납니다.

간단한 예.

"장바구니 이탈률" 지표는 본질적으로 장바구니에서 완료된 주문으로의 전환율을 보여줍니다.

첫 번째 측정에서 바구니의 90%가 분실되었음을 발견했다고 가정해 보겠습니다. 10개의 바구니 중 1개의 바구니만 주문됩니다.

장바구니에 분명히 뭔가 문제가 있는 것 같죠?

단순화를 위해 한 주문 금액이 100루블이라고 가정하겠습니다. 저것. 최종 판매량은 100 루블에 불과합니다.

카트 개선 결과, 버려진 카트 비율이 10%에서 80%로 감소했습니다. 이것은 숫자로 어떻게 보일까요?

10개의 바구니 중 2개의 주문이 들어오기 시작했습니다. 100 루블 * 2 = 200 루블.

하지만 이는 판매량이 100% 증가한 것입니다! 빙고!

걸음 전환율을 10%만 높임으로써 판매량이 100% 증가했습니다.

환상적!

그러나 이것이 바로 작동하는 방식입니다.

이제 올바르게 구성된 측정항목의 장점이 무엇인지 이해하십니까?

이들의 도움으로 귀하는 귀하의 프로세스에 환상적인 영향을 미칠 수 있습니다.

온라인 상점을 사용하면 모든 것이 매우 간단하지만 이 모든 것이 예를 들어 소프트웨어 제품의 품질로 어떻게 전환될 수 있습니까? 네, 똑같습니다:

1. 우리는 우리가 실천하고 있는 핵심가치를 선택합니다. 예를 들어, 우리는 업계에서 사고 건수를 줄이고 있습니다.
2. 우리는 누가, 무엇이 이 가치를 생산하는지 이해합니다. 예를 들어, 소스 코드.
3. 우리는 소스 코드 라이프사이클 퍼널을 구축하고 퍼널의 각 단계에서 측정항목을 설정합니다. 모두.

예를 들어, 어떤 품질 지표를 얻을 수 있는지(내 머릿속에서)…

값 표시기:

• 코드 1000줄당 산업 결함 밀도

소스 코드 수명 주기를 기반으로 한 지표:

• 실패한 편집 비율,
• 자동 테스트 범위,
• 실패한 자동 테스트 비율,
• 배포 실패율.

결함 수명주기를 기반으로 한 측정항목:

• 결함 감지의 역학,
• 교정 역학,
• 재발견의 역학,
• 결함 편차의 역학,
• 수정을 위한 평균 대기 시간,
• 수정하는 데 걸리는 평균 시간.

결과

보시다시피 측정항목이라는 주제는 정말 매우 중요하고 필요하며 흥미롭습니다.

올바른 측정항목을 선택하는 방법:

OMTM을 선택하고, 핵심 가치에 대해 생각하고, 해당 가치의 생산자를 측정하세요.

제조업체의 수명주기 유입 경로를 기반으로 지표를 구축합니다.

절대 측정항목을 사용하지 마세요.

이 주제에 대해 더 읽을 내용

측정 항목에 대한 주제는 린 스타트업 운동의 여파로 인기를 얻었으므로 주요 소스인 "린 스타트업"(러시아어로 번역 - Ozon의 "Business from Scratch. The Lean Startup Method") 책에서 읽기 시작하는 것이 가장 좋습니다. 및 "Lean Analytics"(번역은 없지만 영어로 된 책은 Ozon에서 판매됨).

일부 정보는 러시아어로도 인터넷에서 찾을 수 있지만 안타깝게도 서양 부문에서도 아직 포괄적 인 교과서를 찾을 수 없습니다.

그건 그렇고, 이제는 제품에 대한 올바른 측정 시스템을 구축하고 개선 방법을 제안하는 임무를 맡은 개별 "제품 전문가"도 있습니다.

그게 다야.

기사가 문제의 본질을 더 잘 이해하는 데 도움이 되었다면 작성자는 "좋아요"를 누르고 다시 게시해 주시면 감사하겠습니다.

출처 : habr.com