19 个 LLM 打 376 局 Codenames 类游戏:猜词比出题更决定胜负

Hardicecream17 · reddit · 2026-10-31

Word Spies(类 Codenames 桌游)作者让 19 个 LLM 两两组队对打,共 376 局,得出几项反直觉结论:

出题质量评分用 embeddings 加两个不看答案的 LLM 评审(Llama 4 Maverick、Qwen3-VL),但评审模型弱于被评模型,作者因此更信任胜率而非评分。作者承认样本不均衡(每模型 18-152 局)且两组推理设置不同,只能组内比较,并提问如何改进评测、任务是否接近饱和。

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →