데브옵스
올리브영 결제 이야기 Part - 2
두줄요약
Datadog으로 주문결제 모니터링 대시보드를 구축한 과정과 알람 체계를 소개했습니다. 로그 포맷 개선과 대시보드 구성으로 장애 인지와 대응 속도를 높인 사례입니다.
핵심 내용
- 올리브영 주문결제 시스템의 이상 여부를 실시간으로 파악하기 위해 Datadog 기반 모니터링 대시보드 구축 과정 공유
- 주문서 진입, 결제창 호출, 인증/승인, 주문 완료 등 단계별 실패 감지와 채널·운영체제·결제수단별 관측 항목 구성
- KEY=VALUE 형식 로그 추가로 검색성과 가시성 강화, Timeseries·Query Value 위젯과 슬랙 알람으로 빠른 대응 체계 마련
- 초기에는 로그 분석 중심으로 구현했지만 Grok Parser로 속성 추출을 개선하는 방향으로 발전 중
적용해볼 점
- 장애 탐지를 위해 실패 문자 의존 대신 관측 지표와 알람 채널을 체계화
- 로그 포맷을 검색 친화적으로 설계하고 대시보드 위젯과 알림 연계를 함께 구성