VIPSpark
Spark executor memory和memoryOverhead有什么关系?为什么只加executor-memory还会被YARN Kill
先抓住题目的核心考点,再把答案拆成可复述的面试表达。
32 次浏览2026/7/9
先下定义一句话说清它是什么,面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验,说出什么时候用、怎么权衡。
题目描述
请回答:Spark executor memory和memoryOverhead有什么关系?为什么只加executor-memory还会被YARN Kill
这是 Spark 内存面试里非常容易暴露实战经验的一题。很多人只会说“executor memory 是 Executor 内存,memoryOverhead 是额外内存”,但面试官真正想听的是:Executor 容器里到底有哪些内存、Java heap OOM 和 YARN Container Kill 有什么区别、为什么只加 executor-memory 有时反而解决不了问题。
评论
加载中...