PixelBench:用逐像素生成取代 QA,重新测多模态模型
bdsqlsz · x · 2026-11-04
Haoquan Zhang 团队发布 PixelBench,主张用 QA 评测多模态模型的时代已经结束:QA 只测高层文本推理,而 SVG/CAD 又依赖外部渲染引擎的符号形状,都测不出模型能否直接控制和理解原始像素。
PixelBench 是一个直接的 text-to-pixel 探针,让 LLM/VLM 逐像素生成和理解图像(如 16×16 的蘑菇、猫头鹰、樱桃、乌龟像素画)。项目页面:haoguanzhang.github.io/pixelbench
「多模态」频道最新
- 实测四大流模型采样器:8-16 步下差异肉眼可见 — YakovSava · 2026-11-04
- 实测推翻常见建议:INT8 几乎无害,采样器才是关键 — YakovSava · 2026-11-04
- Seedance 2.5 生成「离谱版 Malfoy」视频,效果惊人 — nikola_mr64990 · 2026-11-04
- 免费课程:生成式媒体 Agent 的四大生产难题与解法 — Al_Grigor · 2026-11-04
- 开源 Kitten-TTS 2 语音克隆:954MB 免 GPU 笔记本可跑 — solyarisoftware · 2026-11-04
- 「2030 年旧金山我们来收你的内存」:全本地硬件生成的赛博朋克短片 — Wonderful-Yak-3348 · 2026-11-04