VIPSpark
Spark DAG、Stage、Task是什么关系?划分流程怎么理解
先抓住题目的核心考点,再把答案拆成可复述的面试表达。
47 次浏览2026/7/9
先下定义一句话说清它是什么,面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验,说出什么时候用、怎么权衡。
题目描述
请回答:Spark DAG、Stage、Task是什么关系?划分流程怎么理解
这是 Spark 调度体系里最基础、但也最容易答浅的一题。面试官不是想听你背“一个 Job 有多个 Stage,一个 Stage 有多个 Task”,而是想看你能不能说清楚:Action 如何触发 Job、DAGScheduler 如何按宽依赖切 Stage、Stage 如何按分区生成 Task,以及为什么一个 Shuffle 就会切开执行边界。
评论
加载中...