ASCIITermDraw Bench 发布:专测 VLM 画架构图与拓扑图能力
East-Muffin-6472 · reddit · 2026-08-04
开发者推出了 ASCIITermDraw-Bench,这是一个专门评估视觉语言模型(VLM)使用纯文本(ASCII)绘制和编辑图表能力的新基准测试。
测试维度与评估:
- 包含 80 个任务,涵盖基础布局、网络拓扑、软件架构图以及基于图像条件的图表编辑。
- 评估结合了结构得分(验证标签、边和实体关系)和 LLM 裁判的语义得分(每任务评估 5 次以降低方差)。
当前榜单成绩:
- Gemma-4-31B-IT:73.8%
- Qwen3.7-Plus:70.2%
- Kimi-K2.6:61.8%
- MiniMax-M3:59.5%
「研究」频道最新
- NeurIPS 2026 竞赛:开发能议价与说服的 AI 智能体 — Old_Station_4584 · 2026-08-04
- 微软研究员探讨强化学习:为何业界只关注正向激励? — gerardsans · 2026-08-04
- 神经科学研究:AI 模型可指导脑部微刺激改变灵长类行为 — dyamins · 2026-08-04
- 开源蛋白质结合剂数据库发布,覆盖超8000种靶点 — jueseph · 2026-08-04
- ICML 2026论文MoRAM:用记忆原子破解大模型灾难性遗忘 — 量子位 · 2026-08-04
- Transformer 逆向工程新发现:存在可解释的“特权轴” — dyamins · 2026-08-04