데브옵스
Spark on Kubernetes로 가자!
두줄요약
EMR, YARN 기반 Spark를 Self-hosted Kubernetes로 전환하는 내용을 소개했습니다. 데이터 분석환경 컴퓨팅을 Kubernetes 중심으로 재구성하는 방향을 다뤘습니다.
핵심 내용
- 뱅크샐러드 데이터 분석환경 컴퓨팅을 EMR, YARN 기반 Spark에서 Self-hosted Kubernetes로 전환하는 내용
- Spark 실행 환경을 Kubernetes 중심으로 재구성하는 방향성 소개