VIPSpark
Spark动态资源分配原理是什么？什么时候适合开启
先抓住题目的核心考点，再把答案拆成可复述的面试表达。
31 次浏览2026/7/9
先下定义一句话说清它是什么，面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验，说出什么时候用、怎么权衡。
题目描述
请回答：Spark动态资源分配原理是什么？什么时候适合开启
这是 Spark 资源调优里很容易被问到的一题。面试官不是想听你说“动态资源分配可以自动增减 Executor”，而是想看你能不能讲清楚：为什么固定 Executor 会浪费资源、ExecutorAllocationManager 根据什么扩容和缩容、Shuffle 数据为什么会影响 Executor 回收，以及动态资源分配适合哪些场景。
评论
加载中...