用 AI 视频模型做剧集：语音错配难题与再校准管线实战

letandrewcook · x · 2026-10-10

作者 Andrew 发布了自己与 AI 合作的剧集新一集《The One With the Constrained Allocation Problem》，这是首集加上了片尾字幕，并宣布今后超过两分钟的集数都会带字幕。

他透露制作这集的主要难点在语音：把两个人物放进同一场景时，AI 视频模型经常搞混，把两人的声音互相交换；遇到模型不认识的声音，它就直接编一个。为此他搭建了一套「语音再校准」管线——难点在于原声和 AI 输出有细微差异，直接用另一个语音模型去做再校准总是失败。备选方案是用 video-to-video 以 480p 低分辨率、单角色对白的方式生成，但成本偏高。作者还表示自己故意保留了几处瑕疵没修。