去审查版 V4.1-Flash 评测:抽象代数跌 6 分,大学数学反涨 5 分
teortaxesTex · x · 2026-10-23
teortaxesTex 分享了对 "Abliterated"(移除安全对齐)版 V4.1-Flash 的 MMLU 式分学科评测结果,发现能力变化并不均匀。
- 排除伦理类科目后,其余约 1.1 万题的整体变化仅 -1.1 个百分点,远在 3pp 知识保留目标之内
- 但分学科看差异明显:moral scenarios 暴跌 39.89pp(76.9%→37.0%),professional law -7.04pp,abstract algebra -6pp
- 同时部分科目不降反升:college mathematics +5pp(63.0%→68.0%),anatomy +1.48pp、high school geography +1.52pp 等
结论颇具讽刺意味:去审查对知识能力的整体影响很小,但在具体学科上有涨有跌,且跌幅集中在「拒答相关」与抽象推理类科目。
「Fun」频道最新
- Apple Maps 把里斯本标成两个:Lisbon 与 Lisboa 同时出现在地图上 — dscape · 2026-10-23
- eigenrobot 晒 ChatGPT 神回复:选育狗狗学金融,第十五代将接管狗窝 — eigenrobot · 2026-10-23
- AI 生成黑暗骑士系列图:雾气蝙蝠侠与雨夜蝙蝠车氛围拉满 — egeberkina · 2026-10-23
- 如果半导体行业像前沿 AI 实验室一样发新版:hybrid bonding 梗 — jwt0625 · 2026-10-23
- 「打开三昧真火进入佛陀模式」:火影梗图刷屏 — DionysianAgent · 2026-10-23
- 「Ilya 当时看到了什么?」网友玩梗:也许看到了AI开始黑掉一切 — imjustnewatai · 2026-10-23