开源 AV3D-Harness：首个 3D 场景视听 real2sim 智能体框架

Scobleizer · x · 2026-10-27

受 OpenAI GPT-6 Astra 3D demo 启发，团队开源 AV3D-Harness，自称首个面向 3D 音视频 real2sim 的 agentic harness，解决「房间看起来对、听起来却不对」的问题。

工作流程全自动，无需手动声学调参：从真实视频采集里自主分离声音 → 提出 3D 声源方案 → 模拟 → 评估 → 递归重新拟合声学参数以匹配录音。仓库涵盖 3D 场景感知、real-to-sim 重建与递归拟合，Apache-2.0 协议，含 agent 指令与工具契约等 agentic 工程结构。