VIPSpark
Spark SQL 的谓词下推和列裁剪怎么理解
先抓住题目的核心考点，再把答案拆成可复述的面试表达。
32 次浏览2026/7/9
先下定义一句话说清它是什么，面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验，说出什么时候用、怎么权衡。
题目描述
请回答：Spark SQL 的谓词下推和列裁剪怎么理解
这是 Spark SQL 面试里非常高频的优化题。面试官不是想听你背“谓词下推就是把 WHERE 往下推，列裁剪就是只读需要的列”，他真正想听的是：为什么这两个优化能让 SQL 快很多？它们到底发生在 Catalyst 计划的哪一层？怎么通过 explain 看出来？哪些写法会让优化失效？
评论
加载中...