ARC-AGI-3 官方基准测试代码库开源
GregKamradt · x · 2026-07-30
ARC Prize 官方在 GitHub 上开源了 ARC-AGI-3 基准测试工具库。该工具旨在帮助开发者和研究人员评估前沿大模型在复杂抽象推理任务上的表现。
仓库提供了完整的环境配置与运行指南,支持通过配置 API Key 快速接入主流模型提供商,并使用官方提供的基准测试智能体对模型在特定游戏(如 ls20)中的表现进行自动化评测。
所属事件:ARC-AGI-3评测规则澄清与官方代码库开源(5 条相关)→
「研究」频道最新
- 四足机器人实机实现变形+步行:各姿态单独强化学习、变形时切换策略 — _Stocko_ · 2026-10-16
- KinoGen 用运动学视频生成直接为人形机器人合成全身操作参考动作 — ChongZzZhang · 2026-10-16
- Science Robotics 论文提出 F³ 事件相机预测表征,超越光流 — CSProfKGD · 2026-10-16
- VideoGen-Agent:基于 Qwen3-VL 的 8B 多模态 Agent 用工具循环改写视频生成 — jiqizhixin · 2026-10-16
- 前沿实验室代码多由 AI 编写,论文提出「理解力审计」安全门槛 — ronbodkin · 2026-10-16
- Not Boring 周报:可解释性乐观论、飞行跑车与 tau 蛋白降 73% — Not Boring (Packy McCormick) · 2026-10-16