浙大团队提出 PrimaCons 基准:揭示 Jev 跨原语决策不一致性
Xu Liu · hf · 2026-11-03
浙江大学等团队的论文研究 LLM 决策框架 Jev 中「同一语义状态以不同查询原语(二选一/多选等)表达时决策不一致」的问题。
- 提出 PrimaCons 四轴基准,在保留查询语义的前提下系统评估跨原语一致性。
- 在三个规模的 Jev 上评估,发现四个轴均存在一致性违规,且违规呈系统性模式。
- 提出残差校准器(residual calibrator)降低不一致性,同时提升决策准确率。
- 代码开源于 GitHub(67L1/PrimaCons-CRPR)。
「研究」频道最新
- 论文被拒双审稿报告:AI 报告出色,人类审稿人只为引用自己 — birchlse · 2026-11-03
- Skyfall AI 发布世界模型 SKY-001,CAD 精度追平 GPT-6 成本仅 1/150 — rohanpaul_ai · 2026-11-03
- 科罗拉多大学 Programmable Reality 实验室携五项成果亮相 UIST 2026 — ryosuzk · 2026-11-03
- 把文档页切成图像横条做检索:保留视觉上下文的 chunk 新玩法 — tomaarsen · 2026-11-03
- Solv3R 用循环 Transformer 重写多视图几何求解器 — CSProfKGD · 2026-11-03
- 开发者用 80 份健康 CT 实测自研肿瘤检出工具:误报 5 例、漏报率高 — MaziyarPanahi · 2026-11-03