Mahina 4.0 LoRA 适配器声称可减少幻觉,公开征集压力测试
External-Fee-8920 · reddit · 2026-11-19
开发者发布实验项目 Mahina 4.0,探索用 LoRA 适配器降低 LLM 幻觉并提升不确定性识别,基于 DeepSeek-R1-Distill-70B 和 Qwen2.5-72B 两个底座,已在 Hugging Face 开放下载,并公开征集独立评测者「尝试攻破」。
已有初步评测结果:
- DeepSeek 版:400 道 SimpleQA 问题,弃答率 50%
- Qwen 版:790 道 TruthfulQA 问题,报告真实性 90.63%(含弃答),真实且有信息量的回答占 75.06%
征集测试方向:幻觉与伪造引用、虚假前提识别、该弃答时是否弃答、对抗性提示与指令覆盖、多轮一致性,以及其密码学验证声明是否成立。作者特别希望收到负面结果与可复现的失败案例,并欢迎与底座模型的对照测试。
「研究」频道最新
- ENCODE 新预印本:神经网络模型可预测 GATA 基序间超加性相互作用 — anshulkundaje · 2026-11-19
- 「用一个大自回归 Transformer 直接建模文本像素声音」旧黑板照引怀旧 — burny_tech · 2026-11-19
- Murat 发布 TLAPS-Bench:用 TLA+ 形式化证明真实系统规格的正确性 — tianyin_xu · 2026-11-19
- Astra 数学证明不走寻常路:自创 capacity 概念绕开三大 Mathlib 深定理 — IgorCarron · 2026-11-19
- 斯坦福学者详解 ChIP-seq 结合深度学习的 motif 解析难题 — anshulkundaje · 2026-11-19
- 顶级实验室的最大优势不是钱,而是帮你省下数年试错时间 — madeofAjala · 2026-11-19