Raycast v2.2 支持多供应商路由,如何公平对比本地与托管模型?
daani_maas · reddit · 2026-09-10
Raycast v2.2 允许 Pro 用户把 AI 工作流路由到 OpenAI 兼容供应商、Ollama 或 OpenRouter,但作者指出换供应商会同时改变工具支持、重试、延迟和求助频率,带来评测难题。
作者的做法是:固定工具 schema、权限、输入 fixture 和验收标准,然后在同一组隐藏检查上对比任务成功率、总成本、工具调用次数、失败调用后的恢复能力及不支持的功能。
帖子最后向社区提问:是否有人围绕单一工作流构建过 provider 中立的 eval,哪个变量最难保持恒定。
「编程与Agent」频道最新
- YC 将办「Make Something Agents Want」黑客松，押注 Agent 成新用户 — ycombinator · 2026-09-10
- 微博 VibeLab 赛事收官:2500 件作品 2.4 亿阅读,普通人搓工具成趋势 — dotey · 2026-09-10
- 「下一次 AI 采用潮是 computer use」:Astra 已能接管大部分办公流程 — zephyr_z9 · 2026-09-10
- Stripe 推出 Agentic Treasury,让 AI 代理经用户授权直接动钱 — jeff_weinstein · 2026-09-10
- Meta 收购 Stilla 是押注分发渠道，而非 agent 能力本身 — arthaudm · 2026-09-10
- 独立开发者 3 天用 Fable 5.1 做出多语言儿童绘本应用并开始收费 — GCWebDesigner · 2026-09-10