北大 DragMesh 入选 IJCV:一次拖拽让静态 3D 资产变成可动关节体
jiqizhixin · x · 2026-10-31
北京大学团队提出 DragMesh,无需为每个新物体单独训练运动模型,一次拖拽即可将静态 3D 资产转化为带关节的可动物体,论文被 IJCV 接收。核心思路是把运动学推理与运动生成分离:
- 推断部件如何运动:结合语义意图与几何预测,推断关节类型、轴向与原点(抽屉应沿滑轨平移,门应绕铰链旋转),拖拽本身并不包含这些约束;
- 生成连贯轨迹:用 Dual Quaternion VAE 联合表示旋转与平移,FiLM 条件化反复向非自回归 Transformer 解码器注入关节信息,使生成运动遵循推断出的运动学;
- 流水线配合:可接 Hunyuan3D 2.5/TripoSG/Rodin 等文生 3D 模型与 MeshAnythingV2 网格化,再做部件分割与拖拽向量化,通过 KPP 网络预测关节轴与原点。
实验在精选资产上验证铰接推断效果,适用于 3D 资产交互与仿真场景。
「研究」频道最新
- 新论文量化「说不清的概念」：1270 个概念中 65 个永远无法用语言教会 LLM — sanmikoyejo · 2026-10-31
- 无监督测量LLM通信：用发射-接收重构评估信息传递 — sanmikoyejo · 2026-10-31
- 仅凭游戏画面流式输入,端侧小模型让无人机在 Acro 模式自主飞行 — yacineMTB · 2026-10-31
- Rust 版 MLIP 推理引擎 llmlip-rs：比 PyTorch MACE 快 17.7 倍 — CatAstro_Piyush · 2026-10-31
- AdaPRA 发布：自适应评分规则的过程奖励智能体审计数据科学 Agent — dan_fried · 2026-10-31
- AA-Omniscience v1.1 发布：Gemini 4 Carbon 居首，部分中国模型暴跌 20 分 — ArtificialAnlys · 2026-10-31