Meta 发布 DASO 方法,优化生成式推荐模型在树结构任务中的训练信号
_reachsumit · x · 2026-08-24
Meta 提出了一种名为 Difficulty-Aware Semantic-ID Optimization (DASO) 的训练方法,旨在解决生成式推荐模型在使用 GRPO(Group Relative Policy Optimization)进行后训练时面临的目标缺失问题。传统的 Semantic-ID 推荐将检索和排序视为分层标识符的自回归生成,但研究发现,在冻结的 SFT 检查点下,许多提示词在前 16 个候选中甚至没有命中目标分支,导致奖励信号微弱。DASO 通过分析前缀匹配深度来定位瓶颈层级,重新分配部分 rollout 组给前缀引导的补全,并引入前缀奖励和辅助 SFT 锚点。实验表明,该方法在公共基准测试中提升了模型性能。
「研究」频道最新
- Cohere Labs 世界模型公开课第 4 期:一文理清 DreamerV1-V4 架构演进 — Cohere_Labs · 2026-10-16
- GPT-6.1 审查 arXiv:6% 论文主定理有错,近两月降至 1.5% — nitarshan · 2026-10-16
- 研究:一个 just 之差就能改变 LLM 对话的走向 — StellaLisy · 2026-10-16
- SEAR 首次大规模对照研究:7 个前沿 LLM、330 项任务检验自进化机器人 — xiye_nlp · 2026-10-16
- Claude 助力连破椭圆曲线纪录后,EC Rank 挑战赛开放 156 个纪录位 — Jsevillamol · 2026-10-16
- 用超声替代胎儿 MRI,牛津团队做产前大脑 AI 建模 — AnnaCiaunica · 2026-10-16