12 道Kafka面试题。
Kafka 的高可用依赖分区多副本机制:AR 表示一个 Partition 的全部副本,ISR 表示跟得上 Leader 的同步副本集合,HW 表示消费者最多能读到的已提交位置;Leader 负责读写,Follower 拉取同步,Leade…
Kafka 消息的 Offset 是 Partition 内的消息位置编号,Consumer Group 的已提交消费进度默认存储在 Kafka 内部 Topic consumeroffsets 中;消费者恢复时会根据 Group、Topi…
Kafka Partition 是 Topic 的物理分片、并行单位和有序边界;合理数量要根据峰值吞吐、消息大小、Broker 数量、Consumer 并行度、副本数和未来扩容空间综合估算,而不是随手配一个 3 或 12。…
Kafka Producer 发送消息流程是:构造消息后序列化,按 Key 或分区器选择 Partition,写入本地 RecordAccumulator 攒批,由 Sender 线程发送给目标 Partition 的 Leader,Bro…
Kafka Producer 通过 RecordAccumulator 缓冲消息,并按 Partition 攒 Batch 后发送;调优要围绕 buffer.memory、batch.size、linger.ms、compression.t…
Kafka Producer 幂等性通过 Producer ID、Producer Epoch 和每个 Partition 的 Sequence Number 让 Broker 识别重复请求;失败重试要受超时和异常类型约束;顺序保证的前提是…
Kafka Segment 是 Partition 日志的分段文件,它把无限增长的日志拆成多个可管理的小段,方便顺序追加、索引定位和过期清理;日志清理主要有 delete 按时间/大小删除旧 Segment 和 compact 按 Key …
Topic 是消息的逻辑分类,Partition 是 Topic 的物理分片和并行单位,Offset 是消息在某个 Partition 内的顺序编号;Kafka 底层把每个 Partition 存成追加日志,并按 Segment 拆成 .l…
Kafka 会在同一个 Consumer Group 内把 Topic 的 Partition 分配给各个 Consumer;同一分区同一时刻只能由组内一个 Consumer 消费,成员变化、订阅变化或分区变化会触发 Rebalance,重…
Kafka 本质上是一个分布式事件流平台,它用 Topic 和 Partition 把数据持久化存起来,用 Broker 集群承接高吞吐读写,用 Producer 和 Consumer 把业务系统、实时计算、离线数仓解耦起来。…
Kafka 吞吐量高,是因为它把消息写入设计成追加顺序写,读写大量依赖操作系统 Page Cache,消费时尽量走零拷贝,同时通过批量发送、压缩和 Partition 并行把单条消息的开销摊薄。…
Kafka Consumer Group 的本质是组内分摊 Partition、组间广播消费;重复消费通常来自“处理成功但 Offset 未提交”或“Rebalance 后重新消费”,只能通过手动提交、幂等写入和事务语义降低影响;顺序只能保…