[세션] 분석적 사고력 훈련 3회차 - 문제의 원인을 찾는 방법

[세션] 분석적 사고력 훈련 3회차 - 문제의 원인을 찾는 방법

  • Funnel
  • Cohort
  • Segmentation

오늘 목표

1. 문제 쪼개기

2. 범위 좁히기

3. 우연과 구분하기 -> A/B 테스트

 

🔍 데이터에서 "무언가"를 발견했습니다.

분석은 문제가 터졌을 때 뿐만 아니라 패턴이나 특이점을 발견하는 것이 모든 분석의 시작!

 

 

  • 문제 : 이번 달 매출 15% 감소
  • 기회 : VIP 그룹 재구매율이 일반 그룹보다 3배 높음
  • 현상 : A/B 테스트에서 A와 B안의 성과가 동일함
오. 왜 그럴까요? 원인 분석의 4단계 프레임워크를 이용해야지!!

 

원인 분석의 4단계

  • 1단계. [Metric Decomposition] : 결과를 과정 지표로 쪼갠다.
  • 2단계. [Localization] : "누가, 어디서, 언제" 렌즈로 현상을 관찰
  • 3단계. [Hypothesize & test] : 가설을 세우고 실제로 유의미한지 통계로 확인
  • 4단계. [Action] : next step을 제안

1단계 Metric Decomposition

  • 매출이 줄었다. -> 뭐가 줄었는데?
  • vip 재구매율이 높다 -> 그래서 뭐가 다른데?

: 매출은 결과/증상이다. 분석가는 과정/원인을 찾아야함

 

[ Revenue(매출) = *방문세션수(Sessions) x 구매전환율(CVR) x 객단가(AOV) ]

* 방문세션수 : 몇번 방문했는지에 대한 지표, 고객수보다 더 좁은 범위 (마케팅의 영역), 세션보다 더 작은 단위 -> impression(?)

* 구매전환율 : 온 사람 중 '몇%'가 샀는가? (서비스/UX 영역, 구매 장벽을 낮춰야함 -> 사용자 경험 개선)

* 객단가 : 산 사람이 '얼마'를 썼는가? ('함께 구매하면 좋은 상품' 추천 cross-selling, 묶음 상품 제안)

 

[실제] "뭐가" 문제인가? 지난 달과 이번 달 지표를 비교한다.

 

 

✔️ 인사이트

: 방문자와 객단가는 거의 그대로

: 구매 전환율이 14% 감소한 것이 매출 하락의 핵심 driver !!

 

 


2단계 Localization

1) Segmentation (WHO?) : 어떤 '사람'에 문제가 생겼나?

: ios/android 유저, 신규/재방문, 20대/40대?  등)

 

2) Funnel (WHERE?) : 구매 '과정' 중 어느 '단계'에서 이탈했나?

: 방문 -> 장바구니 -> 결제 -> 완료

 

3) *Cohort Analysis (WHEN? / WHO?- 집단쪼개기) : '언제' 가입/방문한 '누구'에게 문제가 생겼나?

: 10월 가입자 vs 11월 가입자

* Cohort : 공통된 경험을 한 집단

 

[실제] 현상 관찰하기 (3가지 렌즈)

1. Segmentation (WHO?)

: 안드로이드 유저의 전환율이 급감!

2. Funnel (WHERE?)

: 장바구니 > 결제 전환율에서 급락

3.Cohort / Time-Series (WHEN?)

: 수요일 오후 2시 기점으로 가입한 안드로이드 유저들의 구매전환율이 급락.

(개발팀 확인 : 수요일 오후 2시 안드로이드 앱 3.0.1 버전 배포)


3단계 Hypothesize & Test

가설

  • 배포된 안드로이드 버전에 버그 발생
  •  

4단계 Action

통계적 유의성까지 확인되었다.

Next Step을 제안하자!

💡 문제 처방:

  • 즉각 조치(1순위) : Android 3.0.1 버전 긴급 핫픽스(Hotfix) 배포
  • 재발 방지(2순위) : 배포 전, OS별 구매전환율(CVR) 모니터링 대시보드 구축

 

위 프레임워크 절차를 따르면서, 나만의 프레임워크 만들어가기!

 

 

[Next Session]

4회차 세션 : 결과 설명하는 방법 (스토리텔링)