AgentGarten：代码引擎加共享神经渲染器，给进化智能体搭世界
Stefania_druga · x · 2026-10-09
arXiv 新论文 AgentGarten 提出一个为进化中的智能体构建实时交互环境框架：
- 架构：用代码引擎/模拟器维护持久世界状态并执行程序定义的交互规则，再由一个共享神经渲染器把导出的深度、法线等几何条件实时渲染成智能体「看到」的画面。换一个世界只需换一段程序，渲染器不变。
- 渲染器训练：将预训练视频模型改造为受几何条件约束，用提出的 Adversarial Forcing 蒸馏——通过精确回放让历史预填可微，使后续预测的损失能回传更新对先前观测的编码，并加入真实数据对抗监督提升画质；同时优化推理实现实时交互。
- 智能体侧：智能体通过视觉观测感知世界、实时交互，并把每轮经验蒸馏成 playbook 传给后续智能体继承与改进。
论文、代码与项目主页均已公开。
所属事件:AgentGarten 发布：神经渲染器搭建可交互世界训练智能体(3 条相关)→
「编程与Agent」频道最新
- Dimillian 用 AI 直播 vibe coding N64 开放世界 RPG — Dimillian · 2026-10-09
- Agent 不是万金油:流程可预测就写死,需要临场判断才上 Agent — sujingshen · 2026-10-09
- 用 Claude Code 写出 Mac 打字统计应用,开源离线还带隐私设计 — whitew0lf · 2026-10-09
- OhMyGame 开源：AI Agent 搭完游戏还自己试玩给你看 — sujingshen · 2026-10-09
- Codex 把模糊指令变成真实扣费:已绑卡时唯一刹车是确认弹窗 — CurieuxExplorer · 2026-10-09
- 用 LLM 在 Obsidian 造活百科：AI 策展人帮你建知识库 — dSebastien · 2026-10-09