Comet 修复八处瓶颈,Opik 数据摄取提速 30 倍
dl_weekly · x · 2026-11-22
Comet 工程师 Thiago Hora 发文复盘如何把 Opik(开源 LLM/Agent 追踪与评测平台)的数据集与实验摄取速度提升 30 倍:3 万条数据的上传时间从 39 分钟降到 80 秒。
- 背景:Opik 记录应用每次调用的 prompt、工具调用、检索与输出,评测时需对数据集逐条写入实验项及 trace 和打分,再读回对比,数据落在 ClickHouse
- 修复的八个瓶颈包括:一个不必要的按数据集加锁、O(n²) 的参数绑定等
- 结论:评测速度既取决于应用产出,也取决于平台写入/读取 ClickHouse 的效率,工程细节优化收益巨大
「编程与Agent」频道最新
- 曝谷歌 Antigravity 测试 Inbox 模式:AI 产出改由用户审批 — testingcatalog · 2026-11-22
- Anthropic 发布企业级 AI Agent 零信任安全框架 — matthew_d_green · 2026-11-22
- HF 研究员 Lewis Tunstall 讲透从 LLM 到 Agent 集群的演进史 — _lewtun · 2026-11-22
- 一张表对比 Grok Build CLI、AFK Pilot 与 T3 Code 的功能差异 — PawelHuryn · 2026-11-22
- 本地 8B 模型生成量化知识卡片,16 个数字全部核对无误 — Impressive-Kick293 · 2026-11-22
- GPT-6.2 不好驾驭?OpenAI 提示最佳用法是直接放进 Codex — pvncher · 2026-11-22