Java LLM 测试工具 Beacon:支持注入异常输出与提示词 Mock
LazyTie3857 · reddit · 2026-07-30
开发者分享了名为 Beacon 的 Java 开源 Mock 服务器，专为 LLM 应用测试设计。
传统 HTTP Mock 不足以应对非确定性的 LLM 输出，因此该项目转向处理真实场景下的 LLM 故障。目前主要特性包括：
- 兼容 OpenAI、Anthropic、Gemini 官方 Java SDK
- 支持基于提示词而非 HTTP 路由返回 Mock 数据
- 提供故障注入，模拟空响应、无效/截断 JSON、Markdown 包裹的 JSON 等常见异常
该工具旨在零 Token 消耗下测试应用对不完美 LLM 输出的容错能力。
「编程与Agent」频道最新
- Karpathy:未来一切都将通过终端运行 — eptwts · 2026-07-30
- 深入解析 Agent 循环工程的核心真相 — _jaydeepkarale · 2026-07-30
- 本地AI读取4000页解密UFO文件：复杂文档RAG实战 — PrajwalTomar_ · 2026-07-30
- OpenMed 发布本地优先的临床 AI 智能体预览版 — MaziyarPanahi · 2026-07-30
- 用双 Agent 协作清洗 X 光片：自动定位并抹除隐私标识 — MaziyarPanahi · 2026-07-30
- AI Agent 落地生产环境的最大痛点是什么？ — sentushar · 2026-07-30