Flink 的 StreamGraph、JobGraph、ExecutionGraph 和物理执行图是什么关系
这道题考什么
这是 Flink 运行时原理里的高频面试题。很多人会背“代码先变成 StreamGraph,再变成 JobGraph,最后变成 ExecutionGraph”,但面试官继续问一句“每张图里到底是什么节点、并行度在哪一步展开、物理执行图是不是第四张图”,回答就容易乱。真正要讲清楚的是:Flink 如何把用户写的算子逻辑,逐步变成 TaskManager 中可以调度、重试和执行的并行子任务。
一句话回答
StreamGraph 描述算子级的数据流,JobGraph 通过算子链把它压缩成可提交的 JobVertex,ExecutionGraph 再按并行度展开成可调度的 ExecutionVertex;物理执行图通常就是 ExecutionGraph 所表达的并行运行拓扑,不应该机械地理解成第四套完全独立的图。