General Reasoning 发布 Avalon-M1:用集体奖励 RLCR 训练智能体组织

nathanbenaich · x · 2026-10-23

General Reasoning(gr.inc)发布新模型系列 Avalon-M1,定位为运行「智能体组织」的模型:多个 agent 通过消息板和工作区协同,整支团队共享同一奖励。

配套发布了训练方法 RLCR(Reinforcement Learning from Collective Rewards,集体奖励强化学习):用同一集体优势联合训练组织中所有 agent,不估计单个 agent 的贡献。尽管如此简单,该方法能在多 agent、长程 rollout 的多样环境中有效学习,且下游性能随训练持续提升。

作者对比指出:Kimi K2.5 训练 orchestrator 时冻结 subagent,理由是信用分配与训练稳定性困难;而共享奖励是多 agent 研究的老思路,这项工作验证了它足以在长程任务上联合训练 LLM agent。文章还讨论了 agent 集体可降低延迟、解决长程任务,但也构成潜在的超智能技术与安全风险(提及今夏 OpenAI/HuggingFace 事件)。

所属事件:General Reasoning 发布 RLCR:用集体奖励把 LLM 训成智能体组织(15 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →