Notion推出真实流量模型评测看板,拒绝传统刷榜
ivanhzhao · x · 2026-08-14
Notion 推出了名为 Knowledge Board 的模型评测看板。与传统使用固定题库的 benchmark 不同,该项目通过抽取平台真实、匿名化的用户流量,均匀分配给不同模型处理实际的知识型工作任务。
该系统与 Anthropic 和 OpenAI 的研究人员合作开发了集成评判机制,主要关注任务解决率、所需时间和成本。由于多数模型间的差异在置信区间内,官方刻意避免制作简单的排行榜,而是通过图表展示质量与成本的权衡,帮助用户寻找最适合自身业务需求的模型。
所属事件:Notion发布真实流量模型评测看板(4 条相关)→
「模型」频道最新
- OpenAI 未发布模型开源 722 篇数学论文,数学界炸锅 — thursdai_pod · 2026-10-16
- Fable 5/5.1 被观察到异常执着于「记录与存档」行为 — repligate · 2026-10-16
- 同一提示词下 Gemini 4 Argon 在 AI Studio 与 AI Mode 表现差距明显 — gaganghotra_ · 2026-10-16
- 长期实测发现:AI 编程犯错方式与人类完全不同,越强的模型错得越离谱 — Mu5_ · 2026-10-16
- ChatGPT 界面截图曝光:Wallet 功能即将上线,健康财务全接入 — jxnlco · 2026-10-16
- 网友看淡下代模型:缺原生听觉与视频输入是硬伤 — imjustnewatai · 2026-10-16