非神经网络 AI 开放排行榜上线,NNAI-Bench 首版含 1800 题
Silver_Employ2617 · reddit · 2026-10-19
开发者在 Hugging Face 上发布了一个专门评测「推理时不使用神经网络」的 AI 系统的开放排行榜,涵盖符号/规则系统、元胞自动机、决策树、核方法、计数模型、搜索和经典检索等,配套的 CAEL 是一个非神经助手(尚无成绩)。
NNAI-Bench v0.1:
- 1800 道原创合成题:600 训练 / 300 验证 / 900 公开测试;
- 覆盖算术、演绎逻辑、排序、状态追踪、字符串操作、表格推理六大任务族,等权平均计分;
- 评测器不依赖 ML 库,代码与数据 MIT 许可。
提交与公平性设计:提交需附预测结果、固定源码版本、复现步骤、资源占用、测试集接触情况及是否用了神经派生训练数据;离线检索有独立资源赛道;新条目经人工审核,自报与独立复现成绩分别标注。
作者坦承局限:模板和标签公开,手写专用求解器可以刷很高,这是受限技能套件而非通用智能测试,并征集更难任务族、泄漏检查与资源公平比较的反馈。
「研究」频道最新
- 模型里冒出的「中文精神神经元」疑似源自《红楼梦》英译本 — Sauers_ · 2026-10-19
- 作者反驳 Meta 原生多模态路线:NMM 难处理长上下文 — gabriberton · 2026-10-19
- MLLM 视觉组件四年进化史:从 LLaVA 裁块到原生多模态 — gabriberton · 2026-10-19
- Data World 论文:合成数据环境 RL 训练,DABstep-Hard 提升 20.9 分 — omarsar0 · 2026-10-19
- NVIDIA 开源结构化数据模型库:表格/时序基础模型统一 PyTorch 接口 — lmoroney · 2026-10-19
- Weaviate 播客谈 AutoIndex:AI 不只建 schema,还要重构数据库 — CShorten30 · 2026-10-19