Qwen3.6 27B在M5 Max上实现81 TPS本地推理
max_paperclips · x · 2026-07-03
用户转发测试数据显示，在苹果M5 Max芯片上运行Qwen 3.6 27B模型可达81 tokens/秒的推理速度，即使在生成11k token时仍能维持63 TPS。该测试来自MTPLX推理优化工具，其V2版本即将发布，进一步提升本地大模型推理性能。
「Infra」频道最新
- Tenstorrent 融资 15 亿美元，估值 62 亿较去年翻倍以上 — Beth_Kindig · 2026-10-27
- Anthropic 拟向 SpaceX 采购 1205 亿美元算力,满载后月付约 31 亿 — XFreeze · 2026-10-27
- 恶搞：用 JEV 决策模型替换 Raft 共识，写入吞吐暴跌 99.98% — irombie · 2026-10-27
- Cadence 进入领域专用 AI 模型赛道,芯片设计自动化再加码 — karlfreund · 2026-10-27
- Qdrant 自研 Universal I/O:向量库 mmap 无缝迁移到对象存储 — qdrant_engine · 2026-10-27
- Nebius 获 Citi 35 亿美元融资额度用于 GPU 采购与数据中心 — Beth_Kindig · 2026-10-26