AgentGarten：用代码世界+神经渲染器让智能体实时探索进化
Scobleizer · x · 2026-10-09
清华系团队发布 AgentGarten 框架（论文 arXiv:2610.12374，代码与项目页已开源），为智能体构建可实时交互的虚拟学习环境。
- 核心思路：将模拟器/游戏引擎与共享的神经渲染器耦合——仿真后端维护持久世界状态并执行程序化交互规则，渲染器根据导出的结构化条件实时生成视觉观察。
- 渲染器：把预训练视频模型适配到几何条件上，用提出的 Adversarial Forcing 蒸馏——通过精确回放让 history prefilling 可微，后续预测的损失能回传更新渲染器对先前观察的编码，并加入真实数据对抗监督提升画质，推理经优化可实时运行。
- 智能体进化机制：智能体通过视觉观察感知世界、实时交互，并把每轮经验蒸馏成 playbook 供后续智能体继承与改进。
- 演示：在捉迷藏环境中，智能体约第 4 轮学会建掩体、第 10 轮学会搭坡道。
所属事件:MirroS 开源 AgentGarten：代码世界加神经渲染器训练智能体(5 条相关)→
「具身」频道最新
- Reflex 框架:人形机器人纯靠本体视觉,1 秒内接住抛来的箱子 — DJiafei · 2026-10-09
- 两块屏幕当眼睛的 Face P1 原型,让智能体用「脸」与人对话 — genmon · 2026-10-09
- GeneralistAI 发布 GEN-1.5,连续装箱任务从「太难」变日常 — E0M · 2026-10-09
- CES 2027 预览：可感知环境与「想法」的 AI 智能帽亮相 — ThePeterMick · 2026-10-09
- 机器人圈新博客「Robot Girl Gang」：顶级女机器人工程师犀利观点 — mattbeane · 2026-10-09
- 机器人实拍:酒店布草叠放已可全自动完成 — LexiLove · 2026-10-09