장애 대응의 성패를 가르는 First Action: 우아한형제들의 장애 관리 라이프사이클
아키텍처
장애 대응의 성패를 가르는 First Action: 우아한형제들의 장애 관리 라이프사이클
두줄요약
장애 대응에서 가장 중요한 초동 조치와 이를 관리하는 라이프사이클을 정리했습니다. 시간 기반 메트릭으로 병목을 찾고 운영 개선으로 연결하는 방식을 소개했습니다.
핵심 내용
- 장애 대응의 성패를 가르는 첫 조치(First Action)를 중심으로, 우아한형제들의 장애 관리 라이프사이클과 핵심 메트릭 정리
- 롤백·스케일 조정 같은 기계적 완화 조치를 초동 조치로 보고, 탐지·인지부터 복구·재발 방지까지를 하나의 흐름으로 관리
- MTTD, MTTR, MTTFA, MTTEA, MTTIR, MTTPM 등 시간 기반 지표로 병목을 찾고 운영 개선으로 연결
- 장애 대응을 개인 역량이 아닌 시스템과 프로세스로 개선하고, 향후 AI Observability와 AIOps로 확장하려는 방향 제시