LLM logprobs 可当软分类器?一年半前的预言被验证
JnBrymn · x · 2026-09-19
作者回顾一年半前写过的一篇博客:可用 LLM 的单 token 预测(logprobs)作为「软分类器」,输出某选项的概率分布。
当时他发现一个关键问题:logprobs 与人类直觉的概率经常不匹配。例如让模型猜一枚正面概率 60% 的不公硬币的落点,模型会给出接近 100% 的正面概率,而非 60%。他当时认为需要收集各类统计事件、历史事件和博彩事件的数据集来训练模型修正这一偏差,但因未跟进而作罢。
如今相关思路似乎被验证(他贴出 proof 链接),作者自嘲这是「我早想到了」的贴,并感叹当时应该坚持做下去。
「模型」频道最新
- 两年后应验:研究者重申基础模型将如 RISC/CISC 走向分化 — lateinteraction · 2026-09-19
- 谷歌周报:Gemini 3.8 Live 音频模型发布,CC 转型家庭共享 Agent — GoogleAI · 2026-09-19
- 推测新模型 Jev 基于 Qwen MoE:经 RL 校准做决策 — ivan_bezdomny · 2026-09-19
- Meta Muse + Jev 十秒级筛出免疫学百大未解问题 — DeryaTR_ · 2026-09-19
- Braintrust 集成 Jev: typed 决策模型可替代 LLM-as-a-judge — multiply_matrix · 2026-09-19
- GPU 涨价殃及 1080ti,本地模型推理速度实测清单流出 — HankYeomans · 2026-09-19