开发者实测:新嵌入方法效果不如 SAE 但 qualitatively 更有趣
mayfer · x · 2026-10-23
mayfer 在回复 nickcammarata 时分享:他尝试的一种嵌入表示方法在 benchmark 上落后于 SOTA 嵌入检索模型,实际效果却胜过他过去用过的基于稀疏自编码器(SAE)的方案;虽然性能不占优,但这种方法在质性上截然不同、居然能工作本身就很值得继续研究。
所属事件:开发者用抽象神经元激活组合嵌入向量,抗拼写干扰更稳(4 条相关)→
「研究」频道最新
- 漏洞检测方向新博士毕业,论文覆盖 ML 漏洞检测能力基准 — mboehme_ · 2026-10-23
- 新论文预警:最早 2027-2028 年或现重大 AI 赋能恐怖袭击事件 — StephenLCasper · 2026-10-23
- HumanoidPose:仅靠 RGB 视频还原人形机器人全身关节状态 — cholz · 2026-10-23
- Sophont 发布医学模型 Holon-S1:从病理切片预测基因与生物标志物 — iScienceLuvr · 2026-10-23
- 格拉斯哥大学研究:挑眉与慢眨眼最能传递「自信感」,CG 说话人实验证实 — Limor_Raviv · 2026-10-23
- IFM 团队开源 RL360:支撑 K2 Horizon 训练的大规模 Agent RL 基础设施 — rupspace · 2026-10-23