VIPSpark

Spark数据倾斜严重时广播Join有什么风险?为什么不是所有倾斜都能靠广播解决

先抓住题目的核心考点,再把答案拆成可复述的面试表达。

33 次浏览2026/7/9
先下定义一句话说清它是什么,面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验,说出什么时候用、怎么权衡。

题目描述

请回答:Spark数据倾斜严重时广播Join有什么风险?为什么不是所有倾斜都能靠广播解决

这是 Spark SQL 调优面试里很容易被追问的一题。很多人一听到 Join 倾斜,就直接说“小表广播,避免 Shuffle”。但面试官真正想听的是:广播 Join 解决的是哪一种倾斜、广播表太大会怎样、热点 key 输出爆炸怎么办、为什么强行 BROADCAST 可能把 Executor 和 Driver 打爆

参考答案

评论

登录 后参与评论

加载中...