VIPSpark
Spark sortBy和sortByKey有什么区别?实际场景怎么选
先抓住题目的核心考点,再把答案拆成可复述的面试表达。
32 次浏览2026/7/9
先下定义一句话说清它是什么,面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验,说出什么时候用、怎么权衡。
题目描述
请回答:Spark sortBy和sortByKey有什么区别?实际场景怎么选
这是 Spark 排序类面试题里很常见的一道。很多人只会说“sortByKey 按 key 排序,sortBy 可以指定函数排序”,这句话没错,但不够。面试官真正想听的是:它们都可能触发 Shuffle、排序发生在分区内还是全局、什么时候要配合 repartitionAndSortWithinPartitions,以及大数据场景里为什么排序很贵。
评论
加载中...