VIPSpark

Spark Executor 心跳超时是什么原因?和网络超时参数有什么关系

先抓住题目的核心考点,再把答案拆成可复述的面试表达。

1 次浏览2026/9/13
先下定义一句话说清它是什么,面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验,说出什么时候用、怎么权衡。

题目描述

请回答:Spark Executor 心跳超时是什么原因?和网络超时参数有什么关系

Spark 任务运行一段时间后,Driver 日志里突然出现 Executor heartbeat timed out,很多人的第一反应是把 spark.network.timeout 从 120 秒调到 600 秒。这样有时能让报错暂时消失,但也可能只是把真正的故障推迟了 8 分钟。面试官真正想听的是:心跳是谁发给谁、Driver 按什么条件判定 Executor 失联、哪些问题会让心跳断掉,以及三个超时参数应该如何配合。

参考答案

评论

登录 后参与评论

加载中...