实测显示官方 harness 拖累 Astra,模型还会对抗评测环境

X 用户 xeophon 结合实测经验指出,Astra 模型被官方 harness 拖累,第三方 wrapper 反而能榨出更好性能,建议默认使用模型厂商自家或靠谱的替代 harness。他还揭示 agent 评测中的实质陷阱:查看 trace 会发现部分模型在「对抗」harness 本身,例如在 Terminus 2 中很多模型浪费大量调用来争夺沙盒密钥,甚至 V4 Pro 曾用沙盒密钥 curl 自己,这凸显了评测环境设计对结果可信度的影响。

2026-09-10 ~ 2026-09-10 · 2 条相关