新论文把 LLM 决策失误拆解为信念损失与优化残差
JessicaHullman · x · 2026-10-23
Jessica Hullman 团队发布新论文,针对 LLM 被用作决策助手(如风险评估、治疗推荐)的场景,提出将模型在决策问题上的总遗憾(total regret)分解为两部分:
- 信念损失(belief loss):模型基于错误信念行动的成本,以真实后验为基准衡量;
- 优化残差(optimization residual):即便信念正确,模型未在给定效用函数下最优选择的成本。
作者认为,要让 LLM 与人类目标对齐,关键在于诊断坏决策的归因:模型是没形成正确信念,还是形成了信念却没据此优化行动。这一分解为评估和改进 LLM 决策能力提供了分析框架。
所属事件:西北大学新论文:LLM 决策失误可拆解为信念损失与优化残差(10 条相关)→
「研究」频道最新
- 漏洞检测方向新博士毕业,论文覆盖 ML 漏洞检测能力基准 — mboehme_ · 2026-10-23
- 新论文预警:最早 2027-2028 年或现重大 AI 赋能恐怖袭击事件 — StephenLCasper · 2026-10-23
- HumanoidPose:仅靠 RGB 视频还原人形机器人全身关节状态 — cholz · 2026-10-23
- Sophont 发布医学模型 Holon-S1:从病理切片预测基因与生物标志物 — iScienceLuvr · 2026-10-23
- 格拉斯哥大学研究:挑眉与慢眨眼最能传递「自信感」,CG 说话人实验证实 — Limor_Raviv · 2026-10-23
- IFM 团队开源 RL360:支撑 K2 Horizon 训练的大规模 Agent RL 基础设施 — rupspace · 2026-10-23