VIPSpark

Spark 任务频繁 Full GC 怎么排查

先抓住题目的核心考点,再把答案拆成可复述的面试表达。

53 次浏览2026/8/8
先下定义一句话说清它是什么,面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验,说出什么时候用、怎么权衡。

题目描述

请回答:Spark 任务频繁 Full GC 怎么排查

这是 Spark 调优里很常见的一道实战题。很多人看到 Full GC,第一反应就是“Executor 内存不够,调大 executor-memory”,或者直接背一串 JVM 参数。面试官真正想听的是:Full GC 发生在 Driver 还是 Executor?是所有任务都高,还是少数 Task 异常?老年代里到底是什么对象长期活着?你能不能从 Spark UI、GC 日志、Stage 指标和代码写法把根因定位出来?

参考答案

评论

登录 后参与评论

加载中...