Corbenic AI 推出 Galahad:KV 缓存落盘持久化,跨请求与重启复用

MindPsychological140 · reddit · 2026-10-01

Corbenic AI 创始人 Sietse 在 Reddit 发布 Galahad 开源项目 beta:将模型的 KV cache 持久化到磁盘,在同一请求间甚至重启后复用,避免模型重复计算相同内容,降低 GPU 占用。

项目地址:github.com/corbenicai/galahad

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →