CMU 发布 IdeaTaste 基准：LLM 研究品味远逊人类

CMU 与 MBZUAI 等机构团队发布基准 IdeaTaste（arXiv:2611.03424），首次系统度量 LLM 的「研究品味」：用 2025 年冻结的文献快照让 6 个 LLM 撰写研究提案，再与同一社区 2026 年实际发表的论文比对。结果显示 LLM 的研究品味仅达到人类社区的约 18%–26%，且方向判断能力是主要瓶颈。

2026-11-04 ~ 2026-11-04 · 2 条相关

• CMU 发布 IdeaTaste：LLM 研究品味仅达人类社区约 26%–18% — CMU-SCS · 2026-11-04

另有 1 条近重复转述:XiongChenyan