400 万参数像素 Transformer 花 10 美元学会小型物理游戏
mathemagic1an · x · 2026-07-29
作者先搭了一个很简单的物理模拟环境:有碰撞、墙反弹,还有一个可得分的目标,然后训练一个像素 Transformer 去预测下一帧。
- 模型规模约 400 万参数。
- 训练成本大约 10 美元。
- 在这么小的预算下,效果却相当不错。
- 作者还展示了一些“幻觉样本”,用来说明模型学到的是某种结构化规律,而不是简单像素复制。
所属事件:仅400万参数视频模型涌现物理规律,可被提取为可控世界模型(10 条相关)→
「研究」频道最新
- 安全评测已饱和:业界呼吁告别 CyberGym Level 1 — andreamichi · 2026-07-30
- Nature:AI 模型 Raygun 可按需缩小或放大蛋白质 — Dr_Singularity · 2026-07-30
- 新研究提出 KSI 机制:外部化知识库提升智能体自我改进 — yisongyue · 2026-07-30
- LLM 提思路+写代码+跑实验,自动化 AI 研究新论文 — ChengleiSi · 2026-07-30
- arXiv 单日近 10% 论文披露使用 AI,学术写作正被重塑 — RexDouglass · 2026-07-30
- Datoric 推出安全数据采集工作区,月营收近七位数 — ycombinator · 2026-07-30