开发者探索通过张量扫描可视化模型能力
Glad_Contest_8014 · reddit · 2026-08-16
一位开发者正在研究通过扫描张量和评估权重来检查模型功能的方法,旨在生成模型能力的视觉表征。该项目基于 2024 年的 RMT 研究,计算每一层的 Alpha 值来绘制热力图。初步数据显示量化对 Alpha 值影响较小,作者计划开源该项目以优化低参数模型的性能。
「研究」频道最新
- AI 量产数学证明时代,理解力才是稀缺品:一位数学老师的反思 — Stefania_druga · 2026-10-16
- 自建「主观判断」基准:18 个模型一致性测试,GLM-5.3 登顶 — arkuto · 2026-10-16
- UCSD团队提出数据集水印法,仅凭API输出即可检测训练数据盗用 — yuxiangw_cs · 2026-10-16
- EmbodiedEvo 让 Agent 传承经验:登顶 RoboDojo 榜单 — Aiden_Tech_Ai · 2026-10-16
- 审稿人吐槽 CHI 论文 Discussion 普遍不引用文献 — IanArawjo · 2026-10-16
- 研究者驳「理解神经元即理解网络」:误差会复合放大 — StephenLCasper · 2026-10-16