VIPSpark

Spark UI 里怎么看慢任务、数据倾斜和 Shuffle 瓶颈

先抓住题目的核心考点,再把答案拆成可复述的面试表达。

30 次浏览2026/7/9
先下定义一句话说清它是什么,面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验,说出什么时候用、怎么权衡。

题目描述

请回答:Spark UI 里怎么看慢任务、数据倾斜和 Shuffle 瓶颈

Spark UI 是面试里最容易被问出实战经验的地方。只背“看 Jobs、Stages、Executors”不够,面试官会继续问:你看到哪些指标才判断是倾斜?怎么区分 Shuffle 慢、GC 慢、扫描慢?SQL 计划和 Stage 指标怎么串起来?

参考答案

评论

登录 后参与评论

加载中...