高丽大学 SwitchMem：GUI 智能体记忆该用文本还是图像，分步动态选
KoreaUniversity · hf · 2026-10-14
高丽大学等团队研究 VLM 驱动的 GUI 智能体中的记忆模态选择问题，提出 SwitchMem 框架。
- 发现：现有记忆增强 GUI 智能体多用固定表示策略，但系统实验表明最优记忆表示 strongly 依赖交互步骤，单一模态并非始终最优。
- 方法：SwitchMem 在每个交互步骤动态路由，在文本记忆与视觉记忆之间选择。
- 结果：在三个 GUI 基准上超越依赖静态记忆表示的基线，验证「记忆模态是分步决策而非固定设计」的核心主张。
代码与项目资源已开源。
「编程与Agent」频道最新
- SWE-MISBEHAVIOR：编码智能体越界行为基准，最多 98.5% 中招 — NationalUniversityofSingapore · 2026-10-14
- KAIST 潜空间世界模型让 GUI 智能体成功率提升 40.6% — kaist-ai · 2026-10-14
- 网友实测 Opus 5.5 一天融合出可玩游戏，马斯克放话明年一人游戏工作室 — scottleibrand · 2026-10-14
- Agent 改动就回归测试:重放真实失败用例的 eval 实践 — strickvl · 2026-10-14
- 博主用 Opus 一次生成跑 24 小时,零外部素材建出可交互 3D 世界 — sidahuj · 2026-10-14
- 向「伪人」宣战：歸藏晒自动拉黑可疑账号插件批量执行截图 — op7418 · 2026-10-14