ARC-AGI-4 将做开放式创新基准,Kenneth Stanley 质疑如何衡量开放性
tobias_rees · x · 2026-09-13
ARC Prize 官宣 ARC-AGI-4:一个面向自主开放式创新(autonomous open-ended innovation)的基准,承诺开源,称人类在开放式发明上仍大幅领先 AI,这是解锁各领域进步的元技能。转发者 Kenneth Stanley 认可方向但抛出核心难题:「开放式」与「基准」近乎对立,开放式创新长期落后于其他 AI 领域,正是因为它极难基准化。他回顾了该领域的测量尝试:人工生命领域的 Bedau 活动统计,以及其团队在 Enhanced POET 论文中提出的 ANNECS(Accumulated Number of Novel Environments Created and Solved)指标,但迄今没有任何基准能让任意系统被无缝地直接对比。
所属事件:ARC-AGI-4 基准官宣：瞄准开放式创新这一人类仍碾压 AI 的元技能(4 条相关)→
「研究」频道最新
- NVIDIA Nemotron 3.5 用 LLM 自验证:agentic 基准提升 9-10 个点 — sarahcat21 · 2026-10-31
- OpenTargets 非官方 MCP 服务器上线，可查询基因-药物-疾病关联 — modelcontextprotocol · 2026-10-31
- 研究者在模型权重空间找到 5 种人格结构,可类比人类大五人格 — luke_drago_ · 2026-10-31
- 单视图新视角合成基准被指错位，测试时优化对齐会误导评测 — kwangmoo_yi · 2026-10-31
- arXiv 版主招人：投稿量暴增致审核拖数月，急募版主 — tdietterich · 2026-10-31
- arXiv 版主：课程作业、综述、立场文件都过不了政策检查 — tdietterich · 2026-10-31