VIPHive

Hive 动态分区写入有哪些坑?为什么容易产生小文件

先抓住题目的核心考点,再把答案拆成可复述的面试表达。

29 次浏览2026/7/9
先下定义一句话说清它是什么,面试官先听到结论。
再讲机制拆出关键流程、边界条件和常见坑位。
最后落场景结合生产经验,说出什么时候用、怎么权衡。

题目描述

请回答:Hive 动态分区写入有哪些坑?为什么容易产生小文件

动态分区是 Hive 开发里天天用、也天天出事故的点。面试官问这个,通常不是想听你说 partition(dt),而是想听你知道:动态分区字段为什么要放 SELECT 最后?strict 模式是什么?为什么一个 SQL 写出几万个小文件?如何控制分区数和文件数?

参考答案

评论

登录 后参与评论

加载中...