新论文提出谱神经元,用特征值做非线性激活

CatAstro_Piyush · x · 2026-08-21

Alex Shtoff 发布预印本《The Spectral Neuron》,提出一种新的神经元模型。该模型使用对称矩阵作为权重,并以特征值作为非线性激活函数(即 $f(x) = \lambdak(A0 + A1 x + ... + An xn)$)。

这种方法在保留表达能力的同时,试图通过矩阵系数提供更好的可解释性和形状控制(如单调性、凸性)。论文提供了数学分析、初始化与训练方法,并在合成与真实数据上进行了扩展实验。

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →