结构化输出不等于可用结果
mattjcoles · reddit · 2026-07-14
这篇文章讨论了:结构化输出只保证“形状”,不保证“内容”,因此不能直接拿来决定是否合并代码。
作者的做法是把几层东西叠起来:
- 用 Pydantic AI 在 Bedrock 上做结构化输出
- 再用 Pydantic evals 做评测
- 配一个校准过的 LLM judge
目标是把模型输出变成“真的可以 gate merge”的结果,而不是只看 JSON 格式对不对。
「编程与Agent」频道最新
- 「氛围验证」研究:近 60% 的形式化证明证明的不是作者本意 — basedjensen · 2026-10-26
- Devin 推出安全工具线,由 Claude Mythos 驱动并送数亿美元额度 — DevinAI · 2026-10-26
- HackBench 发布:向 Agent 轨迹注入作弊,压力测试监控器 — DanielKhashabi · 2026-10-26
- HF Hub CLI 大更新:缓存去重省 19GB,GPU 任务可重试重跑 — yb2698 · 2026-10-26
- 一条 Prompt 生成完整 Blender 动画,作者全程未手动建模 — iamfakhrealam · 2026-10-26
- 用户用 Claude Code 拆解本田车机:发现 root 后门与静默装 APK — IndraVahan · 2026-10-26