VIPMapReduce

MapReduce分区策略怎么选?输入Reducer的文件数量是多少

先抓住题目的核心考点,再把答案拆成可复述的面试表达。

13 次浏览2026/7/9
先下定义一句话说清它是什么,面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验,说出什么时候用、怎么权衡。

题目描述

请回答:MapReduce分区策略怎么选?输入Reducer的文件数量是多少

这两个问题在面试中经常连环出现。面试官先问"Reduce收到几个文件?"来试探你对Shuffle流程的理解深度,然后追问"分区策略怎么选?"来考察你的实战经验。大部分人答第一个问题时会说"每个Map发一个文件给Reduce",这是对的但不够深入——面试官想听的是数据从M个Map到1个Reduce的完整路径,以及最终交给reduce()函数的是什么形态

参考答案

评论

登录 后参与评论

加载中...