十几行代码把任意 LLM 变成决策模型:纯推理免训练方案

helloiamleonie · x · 2026-11-06

作者给出核心实现:这是一个纯推理(inference-only)技术,只需任意 LLM(示例用 LiquidAI LFM3-1.7B)。要点:给每个选项附加单 token 选项码(A/B/C),一次前向传播不生成文本,直接读下一 token 的 logits,只保留选项码对应分数,softmax 后得到各选项概率。附 transformers + torch 的完整代码。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →