ClickHouse WalShadow 曝光三项工程设计:毫秒级同步背后的硬功夫
mgill25 · x · 2026-09-22
ClickHouse 团队成员晒出 WalShadow 的三项关键工程设计:
- 影子 Postgres 回放目录变更:一个轻量 shadow Postgres 重放 catalog 变化,让 Postgres 自己追踪 schema 和类型,用户表数据则流入 ClickHouse。
- TOAST 列免二次回源:未变化的 TOAST 大列(JSON/text 字段)可从已持久化的 chunk 重建,即使 update 只携带指向旧值的指针,无需再回源库查询。
- 初始加载可断点续传:已完成的 COPY chunk 仅在 ClickHouse 确认收到后才写入 checkpoint,重启后能在表内恢复进度。
「Infra」频道最新
- Whittle 蒸馏模型走红 Reddit,27B-A3B 声称可在 8GB 显存笔记本跑 — depressedclassical · 2026-09-22
- Qdrant 实测:百万级向量搜索延迟抖动是后台优化器在干活 — qdrant_engine · 2026-09-22
- 免推理 SPLADE 检索:查询延迟降到 BM25 水平的做法 — qdrant_engine · 2026-09-22
- Cloudflare 全家桶的真实短板:D1 单线程、10GB 上限 — Paimaamu · 2026-09-22
- Rackspace 加入 NVIDIA 云伙伴计划,押注受监管行业全栈 AI 运维 — DavidLinthicum · 2026-09-22
- 逆向 Splash 包格式移植 Qwen3.8-27B,M5 Max 上 64k 上下文解码近 88 tok/s — SeveralViolins · 2026-09-22