lwbench 揭示:Claude 系模型被指严重过采样 LessWrong 语料
williawa · x · 2026-10-14
有人注意到 Claude 总用理性主义社群的说话方式回答(「core crux」「P that this is load bearing」),怀疑 Anthropic 在训练中大量采样 LessWrong 语料,甚至调侃是 Anthropic 员工自己偏好 LW 施加了间接压力。
davidmanheim 补充:Claude 只在你资料/历史显示相关背景或你用相关方式提问时才切换成这种表达。附图是一张 lwbench(约千道冷门 LessWrong 事实题,n=128)与 SimpleQA Verified 事实召回的散点对比:两者相关系数 r=0.72,Anthropic 系模型(Claude Fable 5.1、Opus 5 等)在 lwbench 上普遍显著高于同水平其他厂商模型,佐证「LW 过采样」假说。