VIPSpark
Spark coalesce 和 repartition 有什么区别
先抓住题目的核心考点，再把答案拆成可复述的面试表达。
36 次浏览2026/7/9
先下定义一句话说清它是什么，面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验，说出什么时候用、怎么权衡。
题目描述
请回答：Spark coalesce 和 repartition 有什么区别
这是 Spark 面试里非常高频、也非常容易答浅的问题。面试官不是想听你背一句“coalesce 不走 Shuffle，repartition 走 Shuffle”，他真正想听的是：为什么一个快但可能不均匀，一个慢但能重新洗牌？什么时候该减少分区，什么时候必须重分区？为什么乱用会导致小文件、数据倾斜、资源空闲？
评论
加载中...