Notion 发布真实工作负载评测:开源模型质量达 94-98%,成本低至 0.02 美元
ivanhzhao · x · 2026-08-15
Notion 研究团队推出 Notion Knowledge Board,用真实生产流量评估 15 个模型在真实知识工作上的表现,并由 Anthropic、OpenAI 和 Google 的研究者构建集成裁判打分。
关键发现:
- 所有模型质量接近,得分 94-98%,包括开源模型。
- 每任务成本差异大,从 0.02 美元到 0.87 美元。
- 对大多数日常任务,更便宜的模型已足够,选择合适模型可大幅降低成本。
所属事件:Notion发布真实流量模型评测看板(4 条相关)→
「研究」频道最新
- 高中生用 AI 分析 NASA 数据,发现 150 万个潜在变星 — PeterDiamandis · 2026-08-15
- AI 重处理 8 万 PDB 结构,揭示 6 万+ 蛋白质动态构象 — anshulkundaje · 2026-08-15
- CMU 博士谈自适应智能体:从记忆技能到上下文适配,挑战何在? — Diyi_Yang · 2026-08-15
- xbow发布1600个Agent漏洞分析:基准已饱和,多步攻击成常态 — moyix · 2026-08-15
- 新论文:150M模型ARC-AGI得分29.5%,每任务成本仅0.0007美元 — burny_tech · 2026-08-15
- ProteinDPO登Nature Methods:蛋白质生成模型对齐实验适应性 — BrianHie · 2026-08-15