开发者探索通过张量扫描可视化模型能力
Glad_Contest_8014 · reddit · 2026-08-16
一位开发者正在研究通过扫描张量和评估权重来检查模型功能的方法,旨在生成模型能力的视觉表征。该项目基于 2024 年的 RMT 研究,计算每一层的 Alpha 值来绘制热力图。初步数据显示量化对 Alpha 值影响较小,作者计划开源该项目以优化低参数模型的性能。
「研究」频道最新
- RLC 2026 笔记:流式 RL 可靠,AI 具备外部记忆能力 — sudoraohacker · 2026-08-16
- 模型评估应像看简历:侧重长周期复杂任务而非单次解题 — menhguin · 2026-08-16
- LLM后训练数据不应长期采用问答考试格式 — menhguin · 2026-08-16
- Apple发布HeadsUp:万人大规模数据集3D头部重建 — rsasaki0109 · 2026-08-16
- 机器学习基础:概率模型编程实战演示 — Negative_War_65 · 2026-08-16
- AI 助力证明森多夫猜想,陶哲轩验证代码 — 机器之心 · 2026-08-16