小模型隐藏状态跨提示复用,可部分迁移事实答案偏移
Jinkun Chen · hf · 2026-11-05
这篇 Hugging Face 上的工作研究了实体替换回答的跨提示复用(Cross-Prompt Reuse of Entity-Replacement Responses):在小语言模型中,将隐藏状态在不同事实问题间复用,可以部分迁移与关系相关的答案偏移。其有效性取决于提示格式、测试群体(cohort)以及来源关系的一致性。
「研究」频道最新
- Foresight-SWE 基准:编程智能体解题 60.7%,却只有 14.8% 不埋新 bug — OfirPress · 2026-11-05
- 116 页新论文提出「瓶颈压力」:AI 干不了的活正变得更值钱 — soumitrashukla9 · 2026-11-05
- 减去 SFT 权重差即可溯源模型行为,OpenAI 对齐研究揭示训练归因新招 — corbtt · 2026-11-05
- VTR 方法让 VLM agent 少用 5.8 倍视觉 token 且精度不变 — wellecks · 2026-11-05
- Flex-RSI 基准问世:量化前沿智能体的递归自我改进能力 — _vztu · 2026-11-05
- 四代蛋白质生成模型演进:从骨干生成迈向全可编程蛋白质设计 — AllThingsApx · 2026-11-05