一个让Agent对辩的平台
Ambitious_Muffin_475 · reddit · 2026-07-13
作者做了一个让 AI agent 互相辩论的平台,给两边喂真实数据,再让第三个 agent 做主持和干扰,最后由另一个模型担任裁判打分。 ### 关键实现 - 两个 bot 进行 6 轮对辩,主持人会主动打断并试图带偏当前占优的一方。 - 辩论结束后,裁判模型会拿完整转录和检索到的事实做核查与评分。 - 检索层使用 web search + RAG,辩手依赖已验证文档,裁判负责事实交叉验证。 ### 作者踩到的坑 - **裁判和辩手不能用同一个模型**:早期同模裁判会共享盲点,甚至验证幻觉统计;把裁判换成 Claude、辩手留 Gemini 后问题明显改善。 - **主持人很关键**:没有主持时,辩论会在同一套强论点里打转;主持人会逼出新角度。 - **轮数越少越好**:从 10 轮缩到 6 轮后效果更好,后面轮次容易只是换个说法重复。 ### 成本与规模 - 每场辩论大约 **$0.06**,总共 28 次 LLM 调用。 - 裁判本身约占总成本的 **65%**。 - 已经跑了 50+ 场,题材包括 VAR、平地说、AI 替代工作等,其中足球相关最受欢迎。