Apple 推出 RSI-Inference Bench:AI agent 能否自己优化推理系统
SumitGup · x · 2026-10-17
Apple ML Research 发布 RSI-Inference Bench,检验「AI agent 能否改进运行 AI 的系统本身」。
- 投入:10 万美元 API token、5 万 GPU 小时,构建基于真实 vLLM 与 SGLang 任务的环境与 benchmark
- 覆盖推理工程全生命周期:Day-0 模型支持、推理优化、bug 修复
- 结果未饱和:最佳 agent pass@1 仅 26.7%
- 奖励可验证:二值与连续两种
- 附网站与代码链接
「编程与Agent」频道最新
- Garry Tan 晒新玩法:agent 一并搞定写代码和 DevOps 配置 — garrytan · 2026-10-17
- Spring 实测 Embabel Worlds:在知识图谱上安全 vibe coding — springrod · 2026-10-17
- React 核心成员开源 pstack:把 Cursor 变成一支靠谱工程团队 — alexcovo_eth · 2026-10-17
- 让新 Claude 上 13 节带测验的入职课,解决跨机器项目交接难题 — ivan_bezdomny · 2026-10-17
- 用 Claude 写代码做出手绘风 MV:SVG 木偶加程序化铅笔噪点 — pizzaisprettyneato · 2026-10-17
- 8000 字 Codex 深度报道:用 AI 采写仍保住作者主导权的示范 — lmoroney · 2026-10-17