Hudi中Record Key、Partition Path和Ordering Field有什么作用?
这道题考什么
最容易失分的回答是:“Record Key 是主键,Partition Path 是分区,Ordering Field 是排序字段。”名词都对,却没有说明它们分别解决什么问题,更容易把 Ordering Field 说成“帮助定位文件”。正确思路是先拆成三问:谁是同一条逻辑记录、物理放在哪里、同一 Key 的多个版本谁胜出,再说明 Index 负责找旧位置、Record Merger 负责执行合并规则。
一句话回答
Record Key 定义记录身份,Partition Path 决定物理分区,Ordering Field 判定同一 Key 的版本新旧;Index 定位旧记录所在 Partition/File Group,Record Merger 按 Merge Mode 合并新旧版本。 对订单 CDC,通常用稳定的 order_id 做 Record Key、由 dt 生成 Partition Path、用可靠的 update_ts 做 Ordering Field。