직관이 아닌 데이터로: NOL PM의 실험 설계 이야기
기타
직관이 아닌 데이터로: NOL PM의 실험 설계 이야기
두줄요약
PM이 직관이 아닌 데이터로 가설을 검증하는 실험 설계 방법을 정리했습니다. NOL 사례를 통해 작은 UI 변화도 전환과 경험 개선으로 이어질 수 있음을 보여주었습니다.
핵심 내용
- PM이 직관 대신 데이터로 가설을 검증하는 실험 설계 과정 정리
- 문제 정의, 가설 수립, 실험군·대조군 설정, 지표 선정, 결과 해석의 기본 틀 제시
- NOL 사례로 최대혜택가 노출, 결제혜택 영역 신설, 상품 카드 정보 구조화, 로그인 유도 실험 소개
- 데이터 리터러시, 커뮤니케이션, 스코핑, 실패 학습을 통한 팀 문화 정착 강조
적용해볼 점
- 실험 전 문제를 사용자 행동 변화로 구체화
- 메인 지표와 가드레일 지표를 함께 설정
- 실패한 실험도 다음 가설의 근거로 문서화