脉冲语言模型NORD 5.5重建:面向CPU推理,简化架构

zemondza · reddit · 2026-08-12

开发者zemondza在Reddit上分享了其脉冲语言模型NORD 5.5的重建进展。新版本围绕CPU推理设计,采用严格因果处理、无标准二次注意力、因果卷积式token混合、token-time LIF/事件动态、top-1稀疏MoE等。主要变化是移除人工内部脉冲时间维度,以实际语言序列作为时间轴,简化架构。作者计划对比NORD 5.0与5.5在CPU速度、内存、困惑度等方面的表现。

所属事件:开发者重构脉冲语言模型NORD 5.5(3 条相关)→

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →