Monstache로 DocumentDB와 OpenSearch 동기화하기

이 게시물은 올리브영의 상품 데이터를 통합하기 위한 Monstache의 사용 경험을 공유합니다. 여러 시스템에서 관리되는 상품 데이터를 하나로 통합하여 필요한 정보를 제공하기 위해 AWS DocumentDB에 역정규화된 상품 데이터를 저장하고 OpenSearch로 동기화하는 과정을 설명합니다. Monstache는 MongoDB 데이터를 OpenSearch로 실시간으로 동기화하는 오픈소스 프로그램으로, 데이터 필터링 및 변환, 웹서버 기능을 지원합니다. 이 게시물에서는 Monstache의 설치 및 실행 방법, 설정 파일 구성, AWS 연결 방법, 그리고 발생한 문제들과 해결책을 다룹니다. 특히 elasticsearch-healthcheck-timeout과 DocumentDB의 변경 스트림 활성화에 대한 시행착오를 공유하며, 이를 통해 안정적인 데이터 동기화 시스템을 구축한 경험을 나누고 있습니다.