GPT-6 Astra 加持 agentic real2sim:把视觉模型当工具从视频重建可交互仿真
ericjang11 · x · 2026-09-28
Eric Jang 盘点了近期 GPT-6 Astra 在机器人与逆向图形学领域催生的新工作。
核心案例是 agentic real2sim:与以往直接让 LLM 从房间视频生成 Blender 场景不同,该做法把视觉模型作为工具交给 GPT-6 调用——用 Pi3X 做几何估计、SAM3 做分割、GVHMR/Kimodo 做人体动作捕捉,从而把一段房间视频转成质量更高的可交互仿真环境。
Jang 同时号召做机器人控制或 agentic real2sim 的研究者,可私信免费获取 Kimi K3、Qwen 3.8 Flash Next 等开源模型 token,用于对比评测开源模型在 agentic 任务上的能力。
「具身」频道最新
- 开发者为 OpenAI Dev Day 打造实体 Codex 宠物，已带上路去 SF — paw_lean · 2026-09-28
- 研究者热议 GPT-6 Astra：或胜过专用 VLA，训练成本也是关键信号 — YouJiacheng · 2026-09-28
- Eric Jang：开源模型赶上机器人能力跳变的窗口期就是现在 — ericjang11 · 2026-09-28
- 10 篇 NeurIPS 2026 具身智能论文盘点:VLA 推理与长程任务成焦点 — shaohua0116 · 2026-09-28
- Opus 5 展现工具重抓技能,研究者称其解题方式出乎意料 — ericjang11 · 2026-09-28
- Eric Jang 招募机器人研究者免费实测开源模型对比 GPT 6 — ericjang11 · 2026-09-28