OpenAI 改进 GPT-6 提示缓存:命中率更高、新增诊断与显式断点
OpenAI News · rss · 2026-09-23
OpenAI 官方宣布 GPT-6 的 prompt caching 升级:更高的缓存命中率、新的诊断工具、显式缓存断点(breakpoints)以及更多控制选项,帮助开发者降低延迟和成本。文章介绍了如何利用这些新特性优化长上下文与重复前缀场景的调用开销。
「Infra」频道最新
- 微软 SC26 将揭秘 Maia 加速器:日服务数万亿 token 的数据流设计 — thoefler · 2026-11-12
- ClickHouse 收购 Xata 并发布 Managed Postgres,客户超 5000 家 — CShorten30 · 2026-11-12
- 2026 中期选举 41 项数据中心公投 40 项倒向反 AI 建设方 — Acceptable-Offer-518 · 2026-11-12
- KubeCon 前夕 Azure Day:AKS 单集群 65 节点跑 2.2 万个 Agent — davemccollough · 2026-11-12
- CoRL 会场同址开天然气论坛,主题直指 AI 数据中心供电 — carlosdponx · 2026-11-12
- a16z 播客:Mike Volpi 从 Cisco 70+ 并购经验谈 AI 基建周期 — a16z · 2026-11-12