CMU测试:Opus 5.5+Claude Code自建AI Infra,性能碾压SGLang,奇点指数1.25
新智元 · wechat · 2026-11-16
卡内基梅隆大学发布Singularity-Bench基准,测试智能体端到端自主构建AI基础设施的能力,覆盖预训练、中期训练、后训练、推理引擎、智能体框架和集群编排六项任务——这类工作现实中通常需要十几位顶尖系统工程师数月完成。
- 11个智能体中,只有Opus 5.5+Claude Code在全部六项任务上达到或超过人类基线,奇点指数达1.25(人类基线=1.0);其余10个智能体平均仅0.58,GPT-6.1 Sol为0.969
- 它构建的推理引擎每GPU小时收益11.52美元,超SGLang的8.18美元;按10万卡集群计算,每天多赚约800万美元,相当于凭空多出近40%吞吐
- 在集群编排任务上超越NVIDIA Dynamo;仅后训练一项与人类基线几乎持平(低0.6%)
- 论文称这表明前沿模型可能已具备通往"递归自我改进"奇点所需的技能
「Infra」频道最新
- Google 工程师:Agent 循环更像作业调度器,瓶颈在快速供给和启动任务 — rakyll · 2026-11-16
- 4 天 66 条头条:WSJ 数据量化黄仁勋霸屏媒体的程度 — xiaosun86 · 2026-11-16
- Inkling 太小难吃满 Tensor Core,加速比随模型规模放大 — andrew_n_carr · 2026-11-16
- SemiAnalysis 算账:让中国租美国算力,美国每兆瓦净赚上千万美元 — xiaosun86 · 2026-11-16
- 路透:中国暂未批准进口,英伟达芯片堆积香港仓库 — _weiping · 2026-11-16
- 朱松纯发起通芯智能融资数亿元,为 AGI 设计新型推理芯片 — 量子位 · 2026-11-16