UniTac让机器人先想象触觉再接触
量子位 · wechat · 2026-07-16
量子位介绍了 **UniTac**：一套统一的跨传感器触觉理解与生成架构，并把触觉预测接入 VLA，帮助机器人在真正接触前先“想象”触觉状态。 ### 这项工作的核心点 - 机器人面对柔性、易损、密集接触物体时，光靠视觉往往不够，触觉是关键补充。 - UniTac 试图统一不同触觉传感器的数据，把触觉拆成两部分：**物体物理属性** 与 **传感器配置**。 - 在理解端，它同时做属性描述、传感器识别、属性比较、物体匹配等任务；在生成端，它先学重建触觉，再把视觉语义对齐到触觉 latent 空间并生成触觉信号。 - 论文强调，触觉不存在真正的“无条件生成”，因为任何触觉信号都来自具体传感器。 ### 实验结果 - 在 PHYSICLEAR-Test 上，UniTac-7B 的触觉理解得分达到 **66.51**。 - 在属性-物体匹配任务上拿到 **64.61**。 - 在 Digit、GelSight、GelSightMini、Duragel 四类传感器上，触觉生成的平均 **SSIM/PSNR** 为 **0.836/19.93**，均为最佳。 ### 意义 它把触觉从“接触后反馈”前移成“接触前先验”，让机器人在第一次下手前就能预判接触后果，从而更安全、更柔顺地执行抓取和操作任务。