VIPSpark

Spark Lineage容错原理是什么?RDD有哪些局限性

先抓住题目的核心考点,再把答案拆成可复述的面试表达。

42 次浏览2026/7/9
先下定义一句话说清它是什么,面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验,说出什么时候用、怎么权衡。

题目描述

请回答:Spark Lineage容错原理是什么?RDD有哪些局限性

这是 RDD 面试里最能拉开差距的一题。面试官不是想听你背“RDD 有血缘可以容错”,而是想看你能不能说清楚:Lineage 为什么能恢复丢失分区、窄依赖和宽依赖恢复代价为什么不同、什么时候 Lineage 会失效或代价太高,以及为什么后来 Spark 更推荐 DataFrame/Dataset

参考答案

评论

登录 后参与评论

加载中...