VIPSpark

Spark Broadcast Join和Shuffle Join怎么选?广播Join底层到底发生了什么

先抓住题目的核心考点,再把答案拆成可复述的面试表达。

46 次浏览2026/7/9
先下定义一句话说清它是什么,面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验,说出什么时候用、怎么权衡。

题目描述

请回答:Spark Broadcast Join和Shuffle Join怎么选?广播Join底层到底发生了什么

这是 Spark SQL 面试里非常高频的 Join 优化题。面试官不只是想听你说“小表走广播,大表走 Shuffle”,他真正想确认的是:Broadcast Join 为什么能避免 Shuffle?小表多小才算小?什么时候广播反而会 OOM?AQE 又是怎么动态改 Join 策略的?

参考答案

评论

登录 后参与评论

加载中...