Google 发布 AgentHands:XR 中用同步手势让 AI 助手做空间引导
CurieuxExplorer · x · 2026-10-13
Google Research 在 CHI 2026 发表 AgentHands,一个 LLM 驱动的 XR 原型,为对话智能体加上与语音同步的、有空间锚定的手势,弥合从 2D 屏幕标注到沉浸式 3D 对话的鸿沟。
- 手势库与左右手选择:可选单手/双手,支持"手掌"示意警示、"圆柱握持"模拟拿工具等形态
- 空间定位:利用 XR 深度信息,手势可悬空、锚定在物体特定部位、或作为用户相对的社交提示
- 时序动画与 VFX:手势含"倾倒""描画"等动画,并可叠加红色光晕等视觉效果表示热度警告
- 定位为 Project Astra、Gemini 3.1 Flash Live 等实时多模态助手的延伸,把抽象口头指令变成直觉的具身引导,提升实体任务学习中的用户参与
「具身」频道最新
- NVIDIA RTX Spark 10月16日开卖:128GB 统一内存+1 petaflop 本地 AI — nordicinst · 2026-10-13
- 前苹果工程师看上 Surface+RTX Spark：128GB 显存 CUDA 装进背包 — LinusEkenstam · 2026-10-13
- 百度 Apollo Go 萝卜快跑落地香港东涌，10 月 21 日起开放公众试乘 — Baidu_Inc · 2026-10-13
- 上海AI实验室等推Real2Gym：从视频构建仿真环境，机器人技能复用成功率达87.5% — 量子位 · 2026-10-13
- Nature Will 发布 Natura-1:百万小时自我中心视频训练的物理世界基座模型 — testingcatalog · 2026-10-13
- 波士顿动力砍掉人形手小指：三指 Atlas 手 13 自由度、年产能目标 10 万 — lukas_m_ziegler · 2026-10-13