这是一款基于 SCAIL-2 + SAM3 单主体追踪 + 单人骨骼动作引导 + 长视频循环续写 的 AI 视频生成应用。
用户只需要上传一张单人、单角色、单生物或拟人角色参考图,再上传一个单人驱动视频,系统就会自动识别驱动视频里的主体动作,并让参考图中的角色跟随视频完成动作迁移。
和普通图生视频不同,这个流程不是只让图片简单动起来,而是通过驱动视频提供完整动作、节奏和镜头变化,再通过 SAM3 追踪单个主体区域,用 SCAIL-2 把参考角色和动作引导结合起来。
整个流程会自动完成:驱动视频读取、参考图尺寸统一、驱动视频尺寸统一、单主体识别、主体遮罩生成、SCAIL-2 骨骼动作引导、首段生成、循环续写、重叠帧处理、颜色匹配、帧序列合并、原视频音频接入和最终视频输出。
最终生成的是一段单主体动作视频,既能继承驱动视频的动作节奏和运动轨迹,又能尽量保持参考图中的角色外观、身份特征、身体结构和视觉风格稳定。
它适合用于单人舞蹈视频、单角色动作迁移、虚拟角色视频、动物或拟人生物动作引导、数字人展示、AI 舞蹈号素材、短剧角色动作复刻和 RunningHub 视频类应用封装。
如果包装成 RunningHub 应用,核心卖点可以直接表达为:
上传一张角色图和一个驱动视频,一键生成单角色长视频动作效果。