Nanbeige 4.2 3B 在 llama.cpp 里输出乱码推理内容

LaurentPayot · reddit · 2026-07-28

Nanbeige 4.2 3B 在 llama.cpp 里输出严重乱码

作者反馈,最新的 llama.cpp 上跑 Nanbeige 4.2 3B 时,即便只是输入 “hi”,也会出现损坏的 reasoning 轨迹和胡乱输出。两个不同的 agent 配置都不正常:一个会反复吐出 </think> 和碎片化文本,另一个则像是无限循环。

帖子还给出了完整启动参数,包括 --reasoning on、--reasoning-preserve、65536 上下文和量化 KV cache 设置。本质上这是一个关于模型/推理运行时异常的 bug 报告,作者在询问是否有人遇到同样问题。

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →