核技巧科普:升维把圆环分类变成一条直线可解
techNmak · x · 2026-10-31
作者用一个经典例子讲解核技巧:在内点与外包圆环的二分类中,线性分类器无论怎么画直线都无法分开;加入特征 z=x₁²+x₂²(到原点距离的平方)后,三维空间里一个平面即可线性分割。
关键要点:
- SVM 的训练只依赖特征向量之间的内积,核函数 K(a,b)=φ(a)ᵀφ(b) 让我们无需显式构造高维向量就能直接算出变换空间中的内积。
- 高斯 RBF 核对应无限维特征空间,但核值只需用原始向量距离的指数函数即可计算。
- 代价:大数据集上成对内积计算开销大,且选对核函数并不能保证问题变简单。
「研究」频道最新
- 实测:推理引擎的有损加速默认项,让 Q8 模型掉到 Q2 水平 — jesdga95 · 2026-10-31
- 25位学者联合论文:禁产训练芯片可实现前沿AI硬性暂停 — birchlse · 2026-10-31
- 64 人出声思考解 ARC-AGI-3:人类与 LLM 学习方式大不相同 — xuanalogue · 2026-10-31
- Dana Moshkovitz 报告独特游戏猜想的证明:全新纠错码构造 — aran_nayebi · 2026-10-31
- MIT 博士刘子鸣创办 MetaCircle:让 AI 自己发现 AI 的隐藏规律 — ZimingLiu11 · 2026-10-31
- 贝叶斯多臂老虎机研究:多次选择与探索激励能否解决推荐冷启动失衡 — burkov · 2026-10-31