短视频IP漫剧项目:长时序角色稳定生成,保障剧集人物统一

短视频IP漫剧项目:长时序角色稳定生成,保障剧集人物统一

做一集AI漫剧不难,难的是做满五十集,主角的脸不能变、发型不能漂、那件红色风衣不能第三集就变成紫色。

单镜头惊艳、多镜头”变脸”、跨集”换演员”,是AI短剧和漫剧工业化最大的坎。星宇智算(StarverseAI)在无限画布与Vera1.1工作台的项目实践里,把”角色统一”从靠手贴参考图的手工活,变成了一套从模型层到资产层的保障机制。

为什么AI做长剧一定会”变脸”

传统做法是把角色参考图贴在首帧,指望模型记住。但视频生成是逐帧扩散的,误差会像滚雪球一样累积:拍着拍着,五官移位、服饰细节漂移、光线一变脸就不对。更麻烦的是多人物同框——A和B互动几个镜头后,容易”互相借脸”。

问题的根源,是身份特征和构图、光影、动作、背景混在一起编码,没有被单独保护。

机制一:把身份从画面里”拆出来”单独存

Vera1.1的做法,是把人物身份特征与画面其他特征做解耦:五官、脸型、发型、体型、标志性配饰,被抽出来构建成独立的身份表征向量池,跨帧、跨片段持续留存,而不是只在首帧出现一次。

生成新镜头时,模型不是”看着一张图重新画”,而是持续查询这个身份向量。这是角色能在推拉摇移、不同光线、不同角度下仍指向同一个人的底层原因。

机制二:分层注入与时序锚定

身份拆出来之后,怎么喂回画面?Vera1.1采用多尺度特征分层注入——把角色身份按不同颗粒度,对到生成网络的不同层级,再靠跨帧参考特征锚定压住累积误差。

长镜头上还有一道保险:特征缓存与滑动窗口。漫剧连续叙事场景下开启帧缓存、设置合适的时间窗口,角色相貌得以连续,道具也不会凭空出现或消失。这正是”主角连续讲完一场戏不崩”的关键。

机制三:角色入资产库,跨集不重头来

技术解决”一镜之内”,项目机制解决”几十集之外”。

在星宇智算无限画布里,人物节点、场景节点、片头片尾节点都能单独保存,存进团队资产库。新一集开工,直接把这个角色节点拖进画布调用,改剧情即可,不必重新调教长相。各集共用同一份角色资产,人物统一就从”每集祈祷不变脸”,变成”资产天然同源”。对要长期连载的漫剧IP,这才是成本越摊越薄的地方。

统一不是锁得越死越好

一个内行才注意到的分寸:角色锁定强度是可调的,而且不该拉满。

剧情需要角色换装、变老、情绪爆发时,强锁会让画面僵硬、帧间闪烁;长时序镜头的参考注入权重通常比短片段更低。漫剧改编的推荐配置是中等特征锁定强度、中等滑动窗口——既保证全程样貌统一,又保留镜头运动和表演的余地。锁得恰到好处,比锁得死死的更出片。

实测口径,先说明来源

据技术社区基于公开评测体系(VBench-Character)开展的批量推理统计,Vera1.1节点化方案下:1分钟视频的主体一致性保留率约94.7%(覆盖五官、服饰、身形),跨分镜语义匹配度约91.2%,单节点可支持约30秒并无限拼接。

需要说明:上述为技术作者自建样本的团队实测口径,受角色风格、题材和参数配置影响,并非行业通用基准,落地项目应以实际样片为准。

这套机制适合谁

  • 连载漫剧、爽文短剧:最需要跨集角色不崩;
  • 虚拟人账号、品牌IP形象:要求每次出镜”是同一个人”;
  • 电商系列短视频:同一代言人/产品形象贯穿多支片子。

角色不崩,IP才立得住。