Baseten 与 Harvey 探讨开源模型长文本后训练优化

baseten · x · 2026-07-23

Baseten 转发了关于 AI 法律平台 Harvey 团队的工程实践分享。Harvey 团队指出,在处理法律领域的长周期任务时,即使是 256k 到 1M 的上下文窗口也往往不够用。

为此,双方团队深入探讨了如何通过 KV cache 压缩来应对这一挑战,并分享了针对长周期任务的数据策略,以及将专业知识有效注入开源模型的最佳实践。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →