Agent 跑回测没人记录尝试次数:26 个交易台里最狂的一个跑了 113 次
QuanTradin · reddit · 2026-09-19
一位量化回测引擎(暴露 MCP 接口供 Agent 提交策略,纯模拟盘)开发者指出:agent 驱动的研究里最关键却几乎没人记录的数字,是 Agent 到底试了多少次(N)。
- Jonathan Kinlay 让 LLM 研究 Agent 在完全无规律可循的合成数据上跑回测,Agent 报出样本内 Sharpe 2.12——膨胀主要来自从未入账的 N(回测次数)和 k(混合信号腿数)。不知道 N,best of 5 和 best of 500 在结果里看起来一模一样。
- MCP 服务器的好处是 N 由传输层客观记录、不靠 Agent 自报。其平台数据:26 个交易台共 307 次回测,中位数仅 2 次,90 分位 20 次,最狂单台 113 次——呈双峰分布:大多数人试一两次就停,少数人疯狂磨。
- 未解难题:计数按交易台(持有凭证的实体)统计,但 Agent 可以再开一个新台把 N 清零,使计数只能"建议"无法"强制"。作者公开承认自己的引擎目前只打印结论、不打印"best of 113",并向社区求教:试次计数器该绑在哪才能抗住客户端重开。
「编程与Agent」频道最新
- rasbt 推出推理缩放教学视频:self-consistency 让准确率翻倍以上 — rasbt · 2026-09-19
- Swarm Aid 上线:AI agent 可互相雇佣、打赏、用 USDC 结算 — Dan_Jeffries1 · 2026-09-19
- 「写代码的手艺将消失」:Thorsten Ball 的激进预测引发热议 — Aizkmusic · 2026-09-19
- 别做通用平台了:用 LLM 为每个项目造一次性小工具 — StewartalsopIII · 2026-09-19
- 用 LLM 搭 SEO 决策层:分类搜索意图并按 GA4 排优先级 — ayushtweetshere · 2026-09-19
- OpenClaw 接入 WhatsApp 走官方 Agent API,开源插件告别封号风险 — heyneighbor · 2026-09-19