复现分析称多数失败并非 agent 能力不足
burny_tech · x · 2026-07-23
复现失败往往不是 agent 能力问题,而是精度表述问题
被引用的回复说,他们已经分析了为什么复现会失败,发现这些错误大多数并不是 agent 能力不足造成的。
对方还表示会补充一份更清晰的 precision statement,暗示问题更像是结果描述或衡量方式不够精确,而不是底层系统真的做不到。
「研究」频道最新
- DONIC 双手机器人追踪成功率 86.79%,远超此前 SOTA 的 9.43% — liuziwei7 · 2026-10-27
- 为什么没有更多 10M 上下文模型?研究者抛出注意力机制疑问 — agarwl_ · 2026-10-27
- 研究者吐槽:论文里 PSNR 低于 15dB 基本是用错了指标 — kwangmoo_yi · 2026-10-27
- Ortet 首批医疗评测:34 个开源模型 50 项任务,通用排名不够用 — thegautamkamath · 2026-10-27
- Scaling 拟合之争:Uncheatable 计入输出头 FLOPs,Paloma 剔除,最小档差距高达 65% — dlwh · 2026-10-27
- Marin 作者详解 scaling law 公式:难点在小模型阶段估渐近线 — dlwh · 2026-10-27