Inco AI 推出 DFlash 2,推理提速最高 4.6 倍
igilitschenski · x · 2026-08-19
Inco AI 发布推理加速技术 DFlash 2,相比标准自回归解码,可实现最高 4.6 倍的加速。实测显示,Qwen3.8-27B 模型在 M5 Max MacBook Pro 上可达 70 tok/s。该技术由 Z Lab 孕育并在 Inco AI 升级,旨在提升前沿模型及个人 AI 设备上小模型的推理性能。
所属事件:Inco AI 发布 DFlash 2,MacBook 推理提速至 4.6 倍(4 条相关)→
「Infra」频道最新
- 黄仁勋:马斯克 AI 算力规模已从 K 级跃升至 M 级 — elonmusk · 2026-10-16
- EpochAI 估 GPT-6 训练算力 4.6e26 FLOP,引算力圈质疑参数高估 — scaling01 · 2026-10-16
- Meta Muse Spark Open 智能指数仅 39,比闭源 1.3 低 9 分 — EAccelerate_42 · 2026-10-16
- LLM 优化 ffmpeg 模糊滤镜:每帧 95GB 冗余拷贝,耗时从 2452ms 降到 49ms — IgorCarron · 2026-10-16
- DeepSeek-V4-Flash 跑上 4 张 R9700:被“拒启”的四卡配置实测可行 — brainchillzZ · 2026-10-16
- TRL 引入树形打包:Agentic RL 训练前反向计算提速超 26 倍 — joecole · 2026-10-16