开源 RunWeave:故意给 agent 注入限流、503 和坏工具调用,离线测其鲁棒性
MrinmayDas · reddit · 2026-11-21
开发者发布了开源(Apache-2.0)agent 测试工具 RunWeave,可在本地笔记本运行、无需 API key,专门解决「agent 演示容易、上线难信」的问题。
其 chaos 档位会按可复现的种子向 agent 注入各类故障:限流、502/超时、慢首 token、流中断、畸形 tool-call JSON、未知工具、上下文超长等,并生成报告说明哪些 run 失败及原因。
作者在一个天气 agent 上实测发现,openai 客户端内置重试在 flaky 档位下零失败,并好奇其他框架表现如何;项目欢迎社区贡献。
「编程与Agent」频道最新
- 用 Claude 驱动自家 LinkedIn MCP 找客户:触达 30 人转化 3 个付费用户 — IHAVENOSALT · 2026-11-21
- 为医学图标库做 MCP 服务器:让 Claude 直接搜到合规手绘 SVG — blogoodf · 2026-11-21
- 用 Agent 30 分钟搞定企业报税,成本仅为人工 1% — intellectronica · 2026-11-21
- Multica 发布人机协作工作台,统一管理 Claude Code 等 agent 团队 — jiayuan_jy · 2026-11-21
- Antigravity 被扒日志:报「地区不可用」实为安全验证,谷歌 12 月 2 日放开订阅 — lxfater · 2026-11-21
- Rubrik 发布 AI Agent 安全手册:15 个真实事故与防御方案 — TheTuringPost · 2026-11-21