SlateDB 妙用:把整个 DuckDB 数据库直接存进 S3,无需任何服务

josh_wills · x · 2026-10-13

开源社区扩展 duckdbobjectstorage 基于 SlateDB 和 Apache OpenDAL,用 ATTACH 'duckdbobjfs://analytics.db' 即可把原生 DuckDB 数据库(含索引、约束、WAL、checkpoint)直接放进 S3 等对象存储。
无需 catalog 服务、Postgres、coordinator 或 compactor,连写入 fencing 等元数据都存在对象存储里——只需一个 bucket。
DuckDB 全部功能不受影响;单写者多读者,读者只看到已提交状态,可作分布式引擎 Duckherder 的存储层。
性能接近本地原生:读速度约为本地 DuckDB 的 90%,冷读经 HTTPFS 约 1.2 倍;已通过 DuckDB 官方测试套件。

「Infra」频道最新