VIPSpark
Spark内存调优参数怎么配置？executor memory、memoryOverhead、offHeap到底怎么选
先抓住题目的核心考点，再把答案拆成可复述的面试表达。
25 次浏览2026/7/9
先下定义一句话说清它是什么，面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验，说出什么时候用、怎么权衡。
题目描述
请回答：Spark内存调优参数怎么配置？executor memory、memoryOverhead、offHeap到底怎么选
Spark 内存调优是面试里最容易被问到实战经验的题。很多人只会说“加大 executor-memory”，但面试官真正想听的是：堆内、堆外、memoryOverhead 分别管什么？为什么 YARN 会直接 Kill Container？缓存和 Shuffle 为什么会互相挤？哪些参数该优先看，哪些参数不能乱调？
评论
加载中...