Iceberg、Hudi、Delta Lake 和 Paimon 有什么区别?湖表格式怎么选
这道题考什么
这是湖仓选型中的高频题。最常见的回答是“Iceberg 生态开放、Hudi 擅长更新、Delta 适合 Spark、Paimon 适合 Flink”,方向没错,但太像标签。面试官真正想听的是:四种格式的数据组织和更新模型为什么不同,以及业务场景如何映射到这些差异。
一句话回答
Iceberg 强调开放规范、快照元数据和多引擎分析;Hudi 围绕 Timeline、File Group 与索引优化增量写入和 Upsert;Delta Lake 通过 Transaction Log 提供事务并与 Spark 生态深度结合;Paimon 以主键表、LSM、Merge Engine 和 Changelog 为核心,适合 Flink 流式更新。选型应先看数据是追加还是主键更新,再看主要计算引擎、下游是否需要完整变更流、查询延迟和团队运维能力。