llama.cpp 分支实现推理时消融,低显存即可跑消融模型
AccountAntique9327 · reddit · 2026-10-24
开发者发布 AbliteratedOutTheBox:一个基于 llama.cpp 分支的推理时消融(abliteration)引擎,并已将 hook 移植到 Strata。
- 核心价值:无需微调、不占大量显存即可使用消融(去除安全对齐)的模型
- 项目地址在 GitHub,开源可复用
「编程与Agent」频道最新
- 用开源模型开 4 台 VPS 全力扫描热门开源项目安全漏洞 — DanielLockyer · 2026-10-24
- 越狱旧 Kindle 变最强电子书:KOReader+微信读书,还能用 Claude Code 改界面 — vista8 · 2026-10-24
- 越狱旧 Kindle 装 KOReader+微信读书,还能让 Codex 随手改界面 — vista8 · 2026-10-24
- 固定模型换四个编码框架实测:框架对成绩影响超预期 — Individual-Quote-958 · 2026-10-24
- 开源 Clairic Studio:粘贴文本自动转成类型化数据并导出多语言代码 — dfinke · 2026-10-24
- 生产环境 LLM eval 实战讨论:哪些工具留、哪些弃 — LostLeek1304 · 2026-10-24