Baseten 发布 joey-1 决策模型:20ms 延迟,每百万 token 仅 1 美分
baseten · x · 2026-10-30
推理平台 Baseten(Base Labs)在 8 天前发布 mammoth-1(27B)和 elephant-1(9B)之后,推出家族最小成员 joey-1(2B),定位「最快最便宜的决策模型」:- P50 端到端延迟 20ms,比 elephant-1(49ms)快约 2.5 倍,号称比同类快 5 倍;- 价格 $0.01/百万 token,是 mammoth-1 的十分之一;- 官方称其 3B 以下参数中最强,支持文本与图像。决策模型不生成文本,而是直接输出单 token 答案加校准概率分,用于工单分派、内容标记、审批判断等场景,大幅压缩链式调用中的成本与延迟。
所属事件:Baseten 开源 2B 决策模型 joey-1(6 条相关)→
「Infra」频道最新
- AI 科学发现算力账单曝光:Navier-Stokes 花掉上千万美元 — kimmonismus · 2026-10-30
- Morgan Stanley:谷歌 2027 新增算力最多,估值却最便宜 — inductionheads · 2026-10-30
- 换 5600G 后 Vulkan 推理骤降 4 倍,ROCm 却不受影响 — Jebbyk1 · 2026-10-30
- Situational Awareness 三个月前杠杆押注几近翻车,现又为 Fluidstack 募资 — nmasc_ · 2026-10-30
- 16GB 显卡每美元带宽天梯图:RX 6800 性价比登顶 — HankYeomans · 2026-10-30
- 首个全本地浏览器 Omni 模型:LFM3-Omni-2B 达 280 tok/s — victormustar · 2026-10-30