llama.cpp 分支实现推理时实时 abliteration,无需微调即可去除模型护栏

AccountAntique9327 · reddit · 2026-10-22

Reddit 用户分享 AbliteratedOutTheBox:一个 llama.cpp 的 fork,能在加载任意模型时于推理阶段「实时」执行 abliteration(移除模型拒绝行为),无需微调、不产生额外文件,也不增加 VRAM 占用。

传统 abliteration 通常需要离线处理权重、导出单独的「去审查版」模型文件;该项目把这一步搬进推理管线,省去了整个流程。项目已开源在 GitHub。

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →