VIPSpark
Spark Stage有哪些类型?划分依据是什么
先抓住题目的核心考点,再把答案拆成可复述的面试表达。
32 次浏览2026/7/9
先下定义一句话说清它是什么,面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验,说出什么时候用、怎么权衡。
题目描述
请回答:Spark Stage有哪些类型?划分依据是什么
这是 Spark 调度机制里很容易被追问的一题。很多人只会背“Stage 分为 ShuffleMapStage 和 ResultStage”,但面试官真正想听的是:为什么会有这两类 Stage、它们分别产出什么、DAGScheduler 按什么依据切 Stage,以及 FetchFailed 时为什么要重跑上游 ShuffleMapStage。
评论
加载中...