港科大广州联合腾讯开源 VibeWorlding,对话式搭建交互 3D 世界
jiqizhixin · x · 2026-09-04
港科大广州与腾讯 AI 平台发布 VibeWorlding,一个端到端构建交互式 3D 世界的多模态 agent 框架,定位类似 3D 领域的 vibe coding。
- 动机:现有 3D 世界搭建仍需资产检索、物体摆放、碰撞规避、渲染等专业技能;现有 agent 框架要么是僵硬的固定流水线,要么闭源,且 benchmark 过于简单,无法反映真实用户模糊、矛盾的指令。
- 做法:用户用自然语言下指令(如「建一座阴森的沙漠神庙」「把那把椅子往前移两米」),agent 通过多轮对话、工具调用和视觉反馈完成资产搜索、物体摆放、碰撞检查与渲染验证。
- 开源:团队同步开源了 VWE-Bench,专为真实场景中杂乱的用户查询设计的 benchmark。这是首个完全开源的端到端 3D 世界构建框架与 benchmark。
所属事件:港科大广州联手腾讯开源VibeWorlding，对话搭建3D世界(2 条相关)→
「编程与Agent」频道最新
- Embodied First Exam 发布:一行代码在44台机器人上测1090个具身任务 — ManlingLi_ · 2026-10-21
- 研究者观察:coding agent 擅长可预规划任务,灵巧操控仍是短板 — ManlingLi_ · 2026-10-21
- Omarchy 4.5 RC1 发布:支持 50 种语言并加入 agent 控制台 — mark_k · 2026-10-21
- 用 Opus 5.5 把 30 分钟讲座浓缩成 7 分钟配音讲解视频 — solyarisoftware · 2026-10-21
- 开源 OpenSearch MCP Server：让 AI 查询分析 Wazuh 安全日志 — modelcontextprotocol · 2026-10-21
- chaos-index MCP 服务器发布：免密钥封装 StupidAPIs — modelcontextprotocol · 2026-10-21