公开基准只该做初筛:Hamel Husain 谈企业评测的正确漏斗
HamelHusain · x · 2026-11-09
Hamel Husain 进一步展开他的评测漏斗主张:企业应始终建立自己的评测并以此为主要决策依据。
- 公开基准太通用,对大实验室和研究更有价值,对普通用户只是提示性的。
- 正确分工:公开基准只用于漏斗顶端——「要不要考虑这个新模型?」;私有评测回答剩下的问题——「这个模型对我的工作流或产品能否产生业务影响?」
- 他批评现状过于一边倒地依赖基准,并认为这是靠基准获利者的营销传播问题;同时承认评测耗时,有时不可行。
所属事件:Hamel Husain:企业选模型应靠私有评测而非第三方跑分(3 条相关)→
「编程与Agent」频道最新
- 无头浏览器被吐槽最惊悚 tech 词汇,agent 实测检查 120 张卡片 — yuwen_lu_ · 2026-11-09
- 开源工具 edge-arm-bridge:让 AI Agent 在 ARM Linux 上以原生速度用 Edge 登录态 — unixterminal · 2026-11-09
- 开发者给 AI 编码 agent 做了块 ESP32 小屏幕,一眼看出谁在干活 — DanWahlin · 2026-11-09
- 「平面插画秒变 3D 世界」视频有现成开源 Skill 可复刻 — FinanceYF5 · 2026-11-09
- levelsio 把 58 分钟 DJI 素材丢给 Claude Code,直接剪出 10 分钟 vlog — alvelda · 2026-11-09
- OpenAI LifeVal 详析:benchmark 成绩不等于真实需求验证 — krishnan · 2026-11-09