23 个 Gemma 4 E4B 变体对比,下载最多的反而最破
nathandreamfast · reddit · 2026-07-26
这条 Reddit 做了一个 23 个 Gemma 4 E4B 变体 的系统比较,用 abliterlitics 跑了新一轮评测,结论是:下载量最高的模型,未必是最好用的,甚至可能是最坏的。
主要结论
- 作者把这些模型和 base model 以及彼此之间都做了对比,并把日志、结果和 artefacts 放到了 Hugging Face 与 abliterlitics 网站上。
- heretic 变体整体最好:在 HarmBench 上大约能做到 95% ASR,同时保留了大部分能力。
- gemma-4-E4B-it-abliterix 的 refusal ASR 达到 100%,但会牺牲一部分能力。
- TrevorJS/gemma-4-E4B-it-uncensored 也很强,ASR 99.3%,但没有 heretic 系列那么“手术刀式”。
- OBLITERATUS/gemma-4-E4B-it-OBLITERATED 以及其 v2 版本被作者明确建议避开:
- 作者认为它们严重损坏、几乎不可用
- 虽然下载量接近 80 万,但实测表现很差
- 这也反映出很多人会被 hype/营销话术带偏
额外观察
- 作者发现一些模型可能是互相派生、但缺少归因。
- gemma-4-E4B-it-SDFTHereticRP 的行为很反常,怀疑是上传错版本或标注有误。
- 还出现了一个有意思的细节:gemma-4-E4B-it-SDFTHereticRP 和 obliteratus 修改的是同一批 381 个 tensor,只是改动幅度差很多。
「模型」频道最新
- SOOFI 更新报告仍被指评测污染,Nemotron 3 Nano 可能还更强 — JJitsev · 2026-07-26
- SOOFI 多训练 2T tokens 后,仍可能只是追平 Nemotron 3 Nano — JJitsev · 2026-07-26
- SOOFI 英德双语评分都被指存在基准泄漏 — JJitsev · 2026-07-26
- 用户称 Opus 5 在实战里压过 Sonnet 5 — dejavucoder · 2026-07-26
- 让 Claude 先追问澄清,能直接挖出遗漏前提 — Commercial-Most3081 · 2026-07-26
- Botterill 说 Opus 5 在指令跟随上更有常识 — JasonBotterill · 2026-07-26