Rachel Thomas 发帖串盘点 LLM 指令遵循失败研究
fast.ai 联合创始人 Rachel Thomas 发推帖串,梳理多篇关于 LLM 无法可靠遵循指令的论文与基准,并重点推介 Inverse IFEval。该基准考察模型遵循分布外指令的能力,评测维度包括刻意含缺陷的问题、要求不写注释的代码、中途修改指令、禁用项目符号等,用以检验模型能否真正“反着听”指令。
2026-10-19 ~ 2026-10-19 · 3 条相关
- Rachel Thomas 发帖串盘点 LLM 指令遵循失败的论文与基准 — math_rachel · 2026-10-19
- Rachel 推介 Inverse IFEval:测模型能否反着听指令的新基准 — math_rachel · 2026-10-19
- Inverse IFEval 考什么:缺陷题、无注释代码、中途改指令 — math_rachel · 2026-10-19