llama.cpp 已支持 /v1/realtime,可本地跑语音对话

ngxson · x · 2026-11-16

开发者 ngxson 提醒,llama.cpp 的 server 早已支持 OpenAI 风格的 /v1/realtime 接口,可以配合 LFM3-Omni 这类全模态模型实现完全本地的 speech-to-speech 实时语音对话。

从 README 截图看,该接口支持 realtime(对话)与 transcription(逐段转写)两种会话类型,音频输入为 PCM16 单声道,服务端会自动重采样,通过 session.update 可调整参数。这意味着不用调 OpenAI API,也能在本地搭一套实时语音助手。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →