这是一款基于 SCAIL-2 + SAM3 单主体追踪 + 单人骨骼引导 + 人物替换 + 长视频循环续写 的 AI 视频生成应用。
用户只需要上传一张单人参考图,再上传一个单人驱动视频,系统就会自动识别驱动视频里的目标人物,并把参考图中的人物替换到视频中对应的位置上。
和普通图生视频不同,这个流程不是只让一张图片简单动起来,而是通过驱动视频提供完整动作、节奏和镜头变化,再通过 SAM3 追踪目标人物区域,并用 SCAIL-2 把参考人物和驱动视频动作结合起来。
整个流程会自动完成:驱动视频读取、参考图尺寸统一、驱动视频尺寸统一、单主体识别、目标人物遮罩生成、SCAIL-2 人物替换、首段生成、循环续写、重叠帧处理、颜色匹配、帧序列合并、原视频音频接入和最终视频输出。
最终生成的是一段单人参考替换长视频,既能继承驱动视频的动作节奏、镜头结构和场景基础,又能尽量保持参考图中人物的身份、外观、服装和视觉风格稳定。
它适合用于单人换人视频、单人舞蹈视频、角色替换视频、数字人动作视频、虚拟人物展示、AI 舞蹈号素材、短剧角色替换、人物参考编辑和 RunningHub 视频类应用封装。
如果包装成 RunningHub 应用,核心卖点可以直接表达为:
上传一张人物参考图和一个驱动视频,一键生成单人角色替换长视频。