PretrainGym 开源:实测前沿模型挑选预训练数据的能力
xeophon · x · 2026-11-03
Hunter 在 PrimeIntellect RL Residency 期间构建的 PretrainGym 现已开源。项目动机:递归自我改进被大肆炒作,但前沿模型在一个较少被研究的环节——预训练数据策展(curating pretraining data)——上究竟表现如何,此前缺乏测量工具。
PretrainGym 完全构建在 PrimeIntellect 的 verifiers 库之上,该库处理了 agent 评测中的大量工程难题。项目可用于评估和训练模型在预训练数据挑选任务上的能力。
「编程与Agent」频道最新
- 博主提议做 oops-benchmark 量化 Agent 误操作搞坏东西的程度 — konstmish · 2026-11-03
- 报价 2 万欧元的露台,工程师用 Codex 亲手建成了 — paw_lean · 2026-11-03
- 浙大等提出 MACR 框架:置信度接力式多智能体协作,token 开销降 6 倍 — Xu Liu · 2026-11-03
- 每周训练一个微型专用模型:语音讽刺检测 50ms 内跑在 CPU 上 — iamrobotbear · 2026-11-03
- 开发者给 WhatsApp Agent 设计 STOP 规则，实现自动解除发送阻塞 — petrusenko_max · 2026-11-03
- 分析 2500 次使用后,工程师开源让 Agent 更快操控 Chrome 的 DevTools skill — simpsoka · 2026-11-03