Hamel Husain:产品难 eval 是设计差,AI 让数据科学更值钱
hugobowne · x · 2026-09-05
Hugo Bowne-Anderson 发布与 Hamel Husain 的播客《The Rise of the AI Scientist》。
- 核心论点:AI 数据智能体给出答案却不展示指标定义、来源表、查询与假设,用户无法验证。Hamel 认为这本质是产品设计问题——「如果产品难 eval,说明产品本身不好」,补一个评分管线救不了,正确做法是暴露领域专家真正使用的证据和检查项。
- 数据科学的复兴:Agent 时代产生更多数据、更嘈杂的信号和看似可信却不可靠的输出,需要人提出假设、做实验、调试判断系统是否真的有效。「AI 没有杀死数据科学,反而让它前所未有地值钱」,做这类工作的人未来可能被称为「AI 科学家」。
- 播客长约 1 小时 10 分,附 Hugo 与 Hamel、Shreya Shankar 重构后的 AI Evals for Engineers & PMs 课程信息。
所属事件:Hamel Husain 谈 agent 时代 AI 产品 11 课：先查 traces，别信交付物(13 条相关)→
「漫话AGI」频道最新
- Nature 刊文称 AI 无意识,Jeff Sebo 撰文回应引激辩 — anilkseth · 2026-10-21
- Polymarket:OpenAI 年内全面暂停训练的概率仅 7% — Polymarket · 2026-10-21
- Luiza Jarovsky:AI Agent 正在击穿 Gmail 垃圾邮件过滤 — LuizaJarovsky · 2026-10-21
- Daniel Lemire：AI 量产论文正在戳穿学术界的「教授庞氏骗局」 — lemire · 2026-10-21
- 学者吐槽:大学封杀爬虫下载论文,终身阅读量不足答辩委员会人数 — generativist · 2026-10-21
- 伯克利获 Schmidt Sciences 资助：用 AI 破解抹香鲸与虎鲸语言 — begusgasper · 2026-10-21