皮影戏式虚拟主播 BaoCut 开源:Agent 三步搭出口播角色
dotey · x · 2026-11-11
博主用皮影戏类比讲清 AI 虚拟主播 BaoCut 的工作原理,并给出 Agent 集成教程。
原理(皮影三步)
- 拆:AI 先画正面像,再改 11 次,程序逐像素比对,拆出 27 层部件
- 动:整张画罩一层网格,推网转头;17 个旋钮让头发像弹簧般回弹
- 说:按每个字的读音(而非音量)挑口型,嘴比声音早 0.03 秒
骨架、变形和弹簧机制移植自开源项目 LivLiv Player(Apache-2.0),主播形象由字节 Seedream 5.5 生成。
三步给视频配虚拟主播
- 终端运行 baocut skill install,让 Claude Code/Codex 等 Agent 学会用 BaoCut;应用内置 AI 助手也可直接用
- 从自带 19 位卡通主播中挑,或让 Agent 画正面像(睁眼、闭嘴、纯色背景)后改图拆层打包,约 9 次图片生成
- 一句话给稿子,Agent 写稿、配音、算口型、上时间线,审片后导出;改配音只需重算口型,角色不用重画
限制:仅卡通角色,不做真人对口型/换脸;中英日韩口型最准;转头最多 30 度、无手、不支持光头。
被引用部分还介绍了字节 11 月 9 日发布的 Seedream 5.5:未要求改动区域像素级不变,官方演示同图连改 100 轮不走样,可直接生成透明底图;严重文字错误率从 2.8% 降至 0.4%,与 GPT Image 2.5 Sunburst、Nano Banana 2.1 对比文字错误率最低。已在即梦、豆包上线,2K 方图编辑单张约 0.28 元。
「多模态」频道最新
- Customuse 推出文生 3D 角色,一键导出 Roblox 与 Unreal — SimplyAnnisa · 2026-11-11
- Fable 7 生成骑自行车的鹈鹕,灯光与加速细节以假乱真 — nptacek · 2026-11-11
- Muse Ember 同场景成本仅 Haiku 5.5 的 1/8,同价 API 账单差 8 倍 — alexandr_wang · 2026-11-11
- Fable 5.2 生成 3D 影片讲解芝诺悖论:手指为何永远碰不到一起 — heypearlai · 2026-11-11
- Customuse 上线 3D 角色生成:提示词一键导出 Roblox 与虚幻引擎 — SimplyAnnisa · 2026-11-11
- 创作者实测 Fable 5.2:为视频模型构建分镜参考图利器 — tlakomy · 2026-11-11