开源 EvalCore 为 AI 应用做快照测试和离线回放
Manvos · reddit · 2026-07-21
这是一个面向 AI 应用和智能体的开源 snapshot testing 工具,重点解决 CI 里模型调用昂贵、慢、难复现的问题。
- EvalCore 会把 target 和 judge 的响应记录到本地 SQLite cassette。
- 后续测试可以直接 离线回放 这些响应,从而避免每次 commit 都重新打模型。
- 测试用例放在 JSONL,而 target、scorer、trial 和阈值配置放在 YAML。
- target 既可以是 HTTP endpoint,也可以是 shell 命令;运行结果用 0/1 退出码接入 CI。
- 项目采用 Apache-2.0 协议,并打包成一个 单体 Rust 二进制。
「编程与Agent」频道最新
- 智能体自治别急着放权,先跑波次找摩擦点 — JnBrymn · 2026-07-22
- Coding agents 正走向 AI 写、AI 审、人工批的流程 — aftahi_ai · 2026-07-22
- oMLX 0.5.2 增加菜单栏统计和低比特解码内核 — awnihannun · 2026-07-22
- GitHub 机器人审到上限,PR 还要等 39 分钟 — DanielLockyer · 2026-07-22
- Codex Remote 的 Max 推理强度疑似只在移动端开放 — GabGarrett · 2026-07-22
- 有人用 MCP 做了个 demo,主张商店应把价格和购物车开放给 AI — gelembjuk · 2026-07-22