백엔드
메시징 시스템 QA, 정합성을 지켜낸 올리브영의 이야기
두줄요약
실시간 메시지 기반 환경에서 데이터 정합성을 API 자동화 테스트로 검증한 사례를 소개했습니다. 정기 실행과 모니터링까지 연결해 리소스를 줄이고 운영 안정성을 높였습니다.
핵심 내용
- 실시간 메시지 기반 시스템 전환 이후 상품·프로모션 데이터의 정합성을 QA 관점에서 자동 검증한 사례
- UI 테스트의 한계를 보완하기 위해 구간별 조회 API를 활용해 A/B 테이블 값을 비교하는 정합성 테스트 플로우 구성
- Postman, Teamcity, Datadog, cronjob을 연계해 정기 실행·리포팅·대시보드·알림까지 자동화
- 20개 단위 분할, 시간 조건 필터링, 필드 매핑 비교로 타이밍 이슈와 과도한 알림을 줄이며 운영 적용
적용해볼 점
- 최종 테이블만 보지 말고 중간 구간 API를 기준으로 데이터 일치 여부를 자동 검증하는 방식 고려
- 비교 대상과 예외 조건을 명확히 정의해 수동 확인 범위를 줄이고 운영 중 이상 징후를 빠르게 탐지하는 구조 참고