VIPSpark

Spark任务提交到YARN之后,资源调度过程是什么

先抓住题目的核心考点,再把答案拆成可复述的面试表达。

74 次浏览2026/7/9
先下定义一句话说清它是什么,面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验,说出什么时候用、怎么权衡。

题目描述

请回答:Spark任务提交到YARN之后,资源调度过程是什么

这是 Spark on YARN 面试里非常容易被问细的一题。面试官不是想听你说“Driver 向 YARN 申请资源,启动 Executor”,而是想看你能不能讲清楚:spark-submit 之后谁先启动、Client 和 Cluster 模式下 AM/Driver 关系有什么不同、AM 如何向 RM 申请 Container、NM 如何启动 Executor,以及 Task 最后怎么跑到 Executor 上

参考答案

评论

登录 后参与评论

加载中...