AutoRubric 1.7.0 支持图片评分,提示词缓存降低约四分之一个 criterion 成本
deliprao · x · 2026-11-11
Delip Rao 发布 AutoRubric 1.7.0:开源 rubric 评分工具加入两大能力。
- 图片输入:提交物可包含图表、截图、扫描件,LLM judge 与 decision model 均可按 rubric 打分,例如检查「图表两轴是否带单位标注」这类只有看图才能评的标准
- 按 criterion 评分更便宜:重排 per-criterion 提示词,使各 provider 的 prompt cache 能在一次 item 的多次调用间复用提交内容,实测三个 judge 中两个的成本下降近 25%
- 其他改进:meta-judge 被告知自己在读 rubric;judge 配置错误(含账户欠费)从静默弃权改为抛错
安装:pip install -U autorubric
所属事件:AutoRubric 1.7.0 发布：支持图片评分并降低成本(2 条相关)→
「编程与Agent」频道最新
- 开发者用 Claude 跑通全自动 WoW 智能体,按熟练度降级换模型省成本 — max_paperclips · 2026-11-11
- 开发者:环境监听式 Agent 体验后,每轮 @ 提及像石器时代 — cramforce · 2026-11-11
- TensorSharp 本地跑 Pi 编码 Agent:Qwen3.8-27B 完整 CLI 与 SDK 教程 — fuzhongkai · 2026-11-11
- 软件设计范式转移：Agent时代核心是让人高效验收结果 — dotey · 2026-11-11
- 开源项目 rea-video 获 6.5k 星:逐镜头逆向复刻任意视频 — songguoxiansen · 2026-11-11
- 开发者用 Fable 5.2 搭建人工生命模拟:捕猎、避险与基因混合遗传 — CatAstro_Piyush · 2026-11-11