结构化输出不等于可用结果
mattjcoles · reddit · 2026-07-14
这篇文章讨论了：**结构化输出只保证“形状”，不保证“内容”**，因此不能直接拿来决定是否合并代码。 作者的做法是把几层东西叠起来： - 用 **Pydantic AI** 在 Bedrock 上做结构化输出 - 再用 **Pydantic evals** 做评测 - 配一个校准过的 LLM judge 目标是把模型输出变成“真的可以 gate merge”的结果，而不是只看 JSON 格式对不对。
mattjcoles · reddit · 2026-07-14
这篇文章讨论了：**结构化输出只保证“形状”，不保证“内容”**，因此不能直接拿来决定是否合并代码。 作者的做法是把几层东西叠起来： - 用 **Pydantic AI** 在 Bedrock 上做结构化输出 - 再用 **Pydantic evals** 做评测 - 配一个校准过的 LLM judge 目标是把模型输出变成“真的可以 gate merge”的结果，而不是只看 JSON 格式对不对。