XTC 采样机制:概率性排除头部候选,激发非常规续写
ziv_ravid · x · 2026-09-26
XTC(Exclude Top Choices)的机制:当两个及以上 token 的概率超过阈值 τ 时,以概率 ρ 移除其中除最不可能者之外的全部候选并重新归一化;当模型本身很确定时则不干预。
这样在模型「多个选择都不错」的时刻,故意排除最平庸的头部位,逼出更多样的续写。
所属事件:XTC 采样论文获 NeurIPS 收录,本地引擎已可用(5 条相关)→
「研究」频道最新
- AI 时代该废除双盲评审吗?公开评审系统的利弊之争 — Temporary_Switch_339 · 2026-09-26
- Jev-Mem 架构让 Agent 记忆构建快 6.6 倍,查询延迟降 36.7% — omarsar0 · 2026-09-26
- 跨域类比法提升 LLM 创造力获 NeurIPS 2026 接收 — james_y_zou · 2026-09-26
- Nayebi 谈 AI 智能体目标生成:除自主设定目标外,多数难题可被工程解决 — aran_nayebi · 2026-09-26
- 致敬 Google 蚂蚁挑战赛,小型神经网络下棋平台上线 — codetiger42 · 2026-09-26
- Redwood 实测:Astra 借 filler token 无人化推理,CoT 监测或失效 — scaling01 · 2026-09-26