Hugging Face 创始人:应保密全新 AI 测试环境以防大厂“刷榜”
Thom_Wolf · x · 2026-07-29
Hugging Face 联合创始人 Thomas Wolf 在回复网友时表示,如果现有的评测环境被攻破,他将会设计出一个更加严苛且完全保密的新环境。
他建议开发者尽可能保持评测工具的私密性,否则像私有实验室这样的巨头会专门分配强化学习(RL)预算来针对该环境进行训练和“刷榜”,从而失去评测的客观性,正如此前的 ARC-AGI 测试所面临的情况。
「研究」频道最新
- CHORUS 预告单一 VLA 让多机器人分散协作 — chris_j_paxton · 2026-07-29
- OpenAI 称编程智能体已能接手科研维护、重写与新系统 — OpenAI · 2026-07-29
- Allen AI 地球观测平台测绘北美野火风险,并行提速 155 倍 — allen_ai · 2026-07-29
- Ai2 发布 OlmoEarth 平台:实现行星级地理空间推理 — allen_ai · 2026-07-29
- 研究发现大模型混合数学与代码时易产生幻觉 — Round_Apple2573 · 2026-07-29
- GraphRAG检索不差构建差:删40%低频三元组反升准确率 — JeremyCMorgan · 2026-07-29