EgoTools:100 小时第一视角工具使用数据集,8B 模型准确率提升 10.9 个点
liuziwei7 · x · 2026-10-04
NTU S-Lab 联合 ASTAR、KAIST 等机构发布 EgoTools,研究 AI 能否像人类一样理解工具的用途——不只是知道工具是什么,而是推理它能做什么、何时用、怎么用。
- 数据集:100.37 小时真实第一视角视频,覆盖厨房、实验室、维修车间等 7 个日常场景
- 基准:约 1,000 道诊断题,分四个赛道,测试工具定位(ground)、使用跟踪(track)与选择推理(infer)
- 模型:8B 参考模型,同骨干同 64 帧设置下整体准确率从 50.0% 提升到 60.9%(+10.9 个百分点)
- 论文、代码、数据(Hugging Face)与 EgoTools-8B 模型全部公开
所属事件:EgoTools 发布:百小时第一视角数据集助力 AI 工具推理(4 条相关)→
「研究」频道最新
- 稀疏 Transformer 单个权重可用 Python 代码表达,可解释性论文入选 NeurIPS — CatAstro_Piyush · 2026-10-04
- 从嵌入到 HNSW/IVF/PQ：一篇讲透向量数据库原理的入门长文 — blaizedsouza · 2026-10-04
- CoFlow 用对比轨迹排斥减少 Flow Matching 轨迹交叉，提升少步生成 — burny_tech · 2026-10-04
- ARROW 发布:任意图像集统一 3D 重建与点跟踪,刷新两项 SOTA — CSProfKGD · 2026-10-04
- 潜空间通信论文合辑:多智能体 KV-Cache 完整性与状态轨迹传输 — burny_tech · 2026-10-04
- 绕开离散优化局部最优:DNA 设计先用梯度下降再查合成商目录 — anshulkundaje · 2026-10-04