Spark 10
- Spark OOM은 누가 프로세스를 죽였는지부터 읽는다
- 액션 하나가 Spark에서 task 수백 개가 되기까지
- Spark 조인 전략은 크기 추정과 조인 조건으로 정해진다
- YARN 컨테이너는 왜 Spark executor 힙보다 크게 잡힐까
- Spark AQE가 셔플 뒤 실제 크기로 다시 정하는 것들
- 연말 결산 화면을 Spark SQL 잡 18개와 HBase 한 행으로 만들었다
- 광고 리포트를 Spark 잡과 Spring Batch로 나눠 집계하기
- Kafka 로그를 Spark Streaming으로 HDFS에 쌓고 Hive 테이블로 다듬기까지
- 서비스 지표 배치 수십 개를 job, data, query builder로 나눠 관리했다
- Spark 3.4.0에 config(Map)이 들어가기까지