250 美元 FPGA 板实现 12000 tokens/s 生成

generativist · x · 2026-08-18

一个项目在 250 美元的 FPGA 板上实现了每秒 12000 tokens 的生成速度。虽然这是一个小模型,且无法对问题给出连贯的回答,不具备良好的对话体验,但展示了极高的推理速度极限。

所属事件:250 美元 FPGA 开发板实现每秒 12000 token 推理(3 条相关)→

原文链接 →

「Fun」频道最新

更多「Fun」频道 AI 资讯 →