Spark UI 이해도 점검 | Spark 심화: Streaming & Delta Lake | FDE Academy

Q1. Spark에서 새로운 Stage가 생성되는 기준은?

A. 새로운 DataFrame이 생성될 때B. Shuffle이 필요한 연산을 만날 때C. Action이 호출될 때D. filter() 연산을 할 때

Q2. SQL 탭에서 "Exchange hashpartitioning"이 의미하는 것은?

A. 파일 읽기B. 필터링C. ShuffleD. Broadcast

Q3. Stage 상세 정보에서 Data Skew를 의심할 수 있는 신호는?

A. Shuffle Write가 큼B. Task Duration의 Max가 Median보다 훨씬 큼C. 모든 Task가 비슷한 시간D. Input Size가 큼

Q4. Executors 탭에서 Disk Used가 0이 아니면 무엇을 의미하나요?

A. 디스크에 결과 저장 중B. 메모리 부족으로 디스크로 Spill 발생C. 정상 동작D. 캐시 활성화

Q5. BroadcastHashJoin이 SortMergeJoin보다 빠른 이유는?

A. 더 좋은 압축B. 인덱스 사용C. Shuffle이 필요 없음D. 병렬 처리 증가