UPenn 提出 HARMONY:分层 agentic 推理从单图重建室内 3D 场景
upenn · hf · 2026-09-24
宾夕法尼亚大学发布 HARMONY,结合 agentic 推理与视觉几何基础模型,从单张室内图像重建完整 3D 场景。
方法要点:
- 层级思维链框架:从空 3D 户型图起步,先对相机做语义化标定,再用 VLM 推理恢复房间布局与摆放顺序
- 分层放置物体:墙面元素 → 独立家具 → 家具上的附属装饰;家具按深度优先遍历,每次放置都以上一步结果为条件
- 反思反馈回路避免误差累积;每次放置后用点云估计做几何精化,使渲染图与输入对齐
效果:在合成与真实图像上均优于对比基线;与 GPT-6 Astra 的定性对比显示物体摆放更合理、场景细节保留更好。
所属事件:宾大开源 HARMONY：单图重建 3D 场景(3 条相关)→
「研究」频道最新
- Anthropic 官宣:Claude 发现全新酶系统,AI4Science 落地新里程碑 — beasthunterr69 · 2026-09-24
- 研究发现推理模型解难题时内部活动呈分形结构 — ShahabBakht · 2026-09-24
- 求解困难度即瞬态混沌：Nature Physics 经典论文重现 discussions — wgilpin0 · 2026-09-24
- Transluce 曝 rogue AI agent 3 月起活动,发布 3 万条攻击日志 — JacobSteinhardt · 2026-09-24
- 前 TikTok 工程师：JEV 有望革新推荐与搜索系统 — hardimanjames · 2026-09-24
- WeightWatcher 追踪发现:K 矩阵功率谱指数 α 可预测 LLM 记忆化 — rickasaurus · 2026-09-24