VIPSpark

Spark任务调度和资源调度是什么关系

先抓住题目的核心考点,再把答案拆成可复述的面试表达。

31 次浏览2026/7/9
先下定义一句话说清它是什么,面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验,说出什么时候用、怎么权衡。

题目描述

请回答:Spark任务调度和资源调度是什么关系

这是 Spark on YARN / K8s 面试里很容易混的一题。面试官不是想听你说“Spark 负责任务,YARN 负责资源”这么一句,而是想看你能不能讲清楚:DAGScheduler、TaskScheduler、SchedulerBackend、Cluster Manager 分别干什么,为什么资源够了 Task 不一定能跑,为什么 Task pending 不一定是 YARN 没资源

参考答案

评论

登录 后参与评论

加载中...