30 亿 token 数据:任务越难完成率越高,简单任务反而最易弃坑
Hamza_StrategizeLabs · reddit · 2026-10-22
某平台分析了约 600 个实质性任务、约 300 亿 token 的使用数据,得出与直觉相反的结论:任务难度上升时完成率不降反升——简单任务完成率在 80% 高位,而最复杂、token 消耗最高的任务完成率达 98-100%。作者主动审视选择偏差:高难度任务可能吸引更认真的用户,但数据显示放弃案例集中在低风险、描述模糊、低 token 的琐碎请求,而非因模型能力不足被放弃——琐碎任务没有明确成功标准,自然没有成功。另一个惊人数字:约 1900 个可交付会话中,64.5% 的输出被用户零修改直接采用。启示:如果企业试点从小任务到大任务逐级测试,恰好是在自己流程最不完善的任务上评估模型,学得最少、结论却最大;更好的做法是直接交给它一个边界清晰、带人工签核的真实任务,用既有标准评判。
「漫话AGI」频道最新
- 3 Quarks Daily 发布细致的 AI 写作政策:按内容类型定 AI 角色 — lmoroney · 2026-10-23
- Dario 预言应验:Mythos 引发安全海啸预警,中国模型追平窗口仅剩数月 — rickasaurus · 2026-10-23
- php2shell 零日爆出,Anthropic 用 Claude 自动缩减 25 个开源项目攻击面 — connoraxiotes · 2026-10-23
- 投资人断言消费级 agent 是全新用电脑方式:第一波第一天,别怕太晚 — illscience · 2026-10-23
- 观点交锋:弱泛化若成好模型的渐近属性,前沿将被加速商品化 — fkasummer · 2026-10-23
- 网友批评 Claude 研究突破建立在未补偿的人类智力劳动之上 — AlexTensor · 2026-10-23