Spark任务并行度怎么设置？Executor数量和并行度有什么关系

先抓住题目的核心考点，再把答案拆成可复述的面试表达。

42 次浏览2026/7/9

先下定义一句话说清它是什么，面试官先听到结论。

再讲机制拆出关键流程、边界条件和常见坑位。

最后落场景结合生产经验，说出什么时候用、怎么权衡。

题目描述

请回答：Spark任务并行度怎么设置？Executor数量和并行度有什么关系

这是 Spark 调优面试里非常高频的一题。面试官不是想听你背“并行度等于分区数”这一句，而是想看你能不能说清楚：Executor 数量、core 数、Task 数、分区数、Shuffle 分区数之间到底什么关系，为什么资源很多也可能跑不满，以及参数应该按什么思路配置。