humans& 开源硬件原生 NVFP4 全 4-bit RL 训练配方

gharik · x · 2026-11-14

AI 公司 humans& 宣布开源一套硬件原生的 4-bit RL 训练配方,可显著加速训练。公司的研究路线是让模型从与人类互动的长期影响中学习,因此必须优先做长时程多智能体 RL。

作者补充了技术细节:做全 4-bit RL(基于 NVFP4)有许多有趣的挑战——需要复用整条技术栈的经验,同时借鉴 NVFP4 预训练和解码技术,并尽量缩小 trainer 与 sampler 之间的数值失配。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →