COLM 2026 首届 AI 测量科学研讨会启动征稿，10 月旧金山举行
BerivanISIK · x · 2026-10-01
Stanford AIMS 联合多位研究者宣布将于 2026 年 10 月 9 日在旧金山 Hilton Union Square 举办首届 AI Measurement Science（AIMS）研讨会，与 COLM 2026 同址举行，为期一天。
- 核心主张：把前沿 AI 的评测当作一门「测量科学」来对待。现有 benchmark 通常假设 i.i.d. 样本、概念平稳、模型被动，而这些假设已被会与环境交互、适应反馈、针对已知评测信号优化的现代系统打破。
- 三大议题：交互式系统的测量、面对策略性优化（reward hacking）的测量、非平稳性下的测量。
- 征稿：设 Research Track，欢迎理论、方法与系统方向，尤其鼓励教育测量、心理测量学等相关领域投稿。
「研究」频道最新
- HCOMP 2026 末场聚焦:跨线上与物理环境的错误信息信念研究 — windx0303 · 2026-10-01
- Meta-Reasoning 论文:把执行策略纳入推理,ProgramBench 上超 Codex 13.5 分 — anirudhg9119 · 2026-10-01
- 推理时扩展新思路:关键不是算多少,而是怎么组织计算 — anirudhg9119 · 2026-10-01
- Meta 团队提出 Agentic Meta-Reasoning:让模型自建推理计算图 — anirudhg9119 · 2026-10-01
- FINGR 灵巧手用连续手指动作复原二阶魔方 — HaozhiQ · 2026-10-01
- 19和21维接触数下界刷新：τ₁₉≥12268、τ₂₁≥30761 — felpix_ · 2026-10-01