多智能体对比基线之争:应比 best-of-1@N*T 而非 best-of-N
generatorman_ai · x · 2026-09-22
@DimitrisPapail 展示 team-of-N 与单智能体 best-of-N 的对比图。@generatormanai 指出方法学问题:team-of-N@token 预算 T 的正确串行基线应是预算为 NT 的单个智能体(best-of-1@NT),而非 best-of-N@T。
所属事件:多智能体团队对单智能体需 10-100 倍算力,基线之争引热议(8 条相关)→
「研究」频道最新
- 新基准 Continual-ARC:主流 Agent 都学不会经验,9B 模型微调反而可以 — alifcoder · 2026-11-12
- 用血染钟楼测模型撒谎:Kimi K3.1 Pro 居开源模型之首,仅次于 GPT 5.5 — eliebakouch · 2026-11-12
- Gemini 几乎自主完成「血染钟楼」社交推理 benchmark 实验 — eliebakouch · 2026-11-12
- 开源个性化 mRNA 癌症疫苗设计:为胰腺癌患者 Yash 而做 — xennygrimmato_ · 2026-11-12
- Georgia Tech 教授 Molei Tao 招收扩散语言模型方向博士生与博后 — gautamcgoel · 2026-11-12
- HF 研究员主张用效率增益指标取代最终 benchmark 分数 — eliebakouch · 2026-11-12