Kafka 上生产才见真章：分区倾斜与消费滞后成大坑
goyalshaliniuk · x · 2026-09-27
一篇 Kafka 运维科普长帖：开发阶段 Kafka 表现良好，但进入生产、用户量增长后会遇到真正的挑战——数据量增大导致分区膨胀、消费者需扩容、数据组织方式变化、连接器增多。常见问题包括：数据在分区间分布不均造成倾斜，部分 broker 被过载；消费慢引发连锁问题；系统 rebalance 期间会出现消费暂停。这些问题会直接影响 Kafka 的可靠性，需要提前规划。
「Infra」频道最新
- 托管推理三大迷思:单价不是账单、端点不可互换、自建未必省 — TangeloOk9486 · 2026-09-27
- Salesforce 提出随机驱逐 KV Cache,不挑不拣反而不输精挑细选 — jiqizhixin · 2026-09-27
- 4GB 显存笔记本靠 SSD 流式跑 35B 模型，反超 GPT-OSS 20B — ImBadGuyInEveryStory · 2026-09-27
- 自研 CUDA kernel 拿下 B200 最快 QR 分解，作者复盘串行依赖破解思路 — A_K_Nain · 2026-09-27
- TensorSharp 开源框架支持单请求混合文档/图像/视频/音频证据 — fuzhongkai · 2026-09-27
- 智库学者反数据中心抗议者现场交锋，为算力建设辩护 — neil_chilson · 2026-09-27