精选国内外AI工具, 查看最新收录
ComfyUI · 视频

视频工作流:wan-scail动作迁移

基于 WanVideoWrapper 的 SCAIL(Wan 2.1 14B)动作迁移:一段参考视频提取人体姿态,套到提示词描述的新人物上。与 Animate 版的区别:SCAIL 走 参考嵌入 + 姿态嵌入 的注入方式(KJNodes 专门节点),而非遮罩替换。

ComfyUI全身动作迁移(驱动视频的动作搬到参考图角色上) 免费获取 难度:高级 Wan SCAIL动作迁移姿态迁移WanVideoWrapperAI视频
作者 ganai02 · v1 · 更新于 · 下载 3 次

效果预览

工作流说明

基于 WanVideoWrapper 的 SCAIL(Wan 2.1 14B)动作迁移:一段参考视频提取人体姿态,套到提示词描述的新人物上。与 Animate 版的区别:SCAIL 走 参考嵌入 + 姿态嵌入 的注入方式(KJNodes 专门节点),而非遮罩替换。

  • 模型加载:Wan视频模型加载器(SCAIL preview fp8_scaled_KJ)+ Torch 编译设置(inductor 后端,仅编译 Transformer 块)+ Wan视频设置LoRA(lightx2v I2V rank32,强度 1.0)+ Wan视频VAE加载器(Wan2_1_VAE_bf16)+ Wan视频Clip视觉编码(clip_vision_h)
  • SCAIL-Pose 姿态链:VHS 加载参考视频(16fps,81 帧上限,832×480)→ 渲染 NLF 姿态(加载NLF模型(KJ),NLF 模型来自 GitHub isarandi/nlf 的 releases,工作流里有此 URL)→ Wan视频添加SCAIL参考嵌入(KJ) + Wan视频添加SCAIL姿态嵌入(KJ)
  • 采样:Wan视频空嵌入 → Wan视频采样器v2(CFG 1.00,dpm++_sde,Shift 7.00)→ Wan视频解码(X/Y 分块 272,步长 144/128)
  • 输出:VHS 图像合并(多个) → 合并为视频(前缀 WanVideo_SCAIL)

Torch 编译参数:后端 inductor / 完整图 false / 仅编译Transformer块 true / Dynamo缓存大小限制 64 / Dynamo重编译限制 128 / 强制参数静态形状 false。

节点结构

节点结构截图待补充

运行环境与硬件要求

主模型SCAIL preview fp8_e4m3fn scaled (14B fp8 ,约 15GB 级权重,估算)
Torch 编译inductor 编译首次跑会先花时间编译,之后提速;显卡驱动 / triton 版本问题会导致编译失败(退回不编译)
显存策略WanVideoWrapper 的 offload_device + 块交换机制,消费级卡可用
最低显存16 GB
显存不够?查看 GPU 云主机 →

需要下载的模型

文件类型大小放置目录下载
SCAIL/Wan21-14B-SCAIL-preview_fp8_e4m3fn_scaled_KJ.safetensors主模型models/diffusion_models
lightx2v_I2V_14B_480p_cfg_step_distill_rank32_bf16.safetensors加速 LoRA (rank32 ,强度 1.0)models/loras
umt5-xxl-enc-fp8_e4m3fn.safetensorsT5 文本编码器(WanVideoWrapper 版)models/text_encoders
Wan2_1_VAE_bf16.safetensorsVAEmodels/vae
clip_vision_h.safetensorsCLIP 视觉models/clip_vision
NLF 姿态模型加载NLF模型(KJ) 节点按工作流中的 GitHub 地址(isarandi/nlf releases)下载
vitpose-l-wholebody.onnx / yolov10m.onnxONNX 检测 / 姿态模型(备用姿态链)

需要安装的自定义节点

节点包用途安装方式
ComfyUI-WanVideoWrapper(kijai)Wan 视频模型加载器、 Torch 编译设置、设置 LoRA 、设置块交换、 VAE 加载器、 T5 文本编码器、 Clip 视觉编码、空嵌入、 SCAIL 参考 / 姿态嵌入相关、采样器 v2 、解码、块交换ComfyUI-Manager 搜索安装
ComfyUI-KJNodesWan 视频添加 SCAIL 参考嵌入、 Wan 视频添加 SCAIL 姿态嵌入、 (下载) 加载 NLF 模型、自然语言预测姿势、图像缩放 V2ComfyUI-Manager 搜索安装
SCAIL-Pose渲染 NLF 姿态、 ONNX 检测 /Vit 姿态 /DW 姿态切换ComfyUI-Manager 搜索安装
ComfyUI-VideoHelperSuite加载视频、图像合并、合并为视频ComfyUI-Manager 搜索安装
essentials / comfyui-various / LayerStyle / Custom-Scripts缩放、数学表达式、按宽高比缩放等ComfyUI-Manager 搜索安装

使用步骤

  1. 上传动作参考视频(16fps、832×480、81 帧内)

  2. 写新人物的提示词 + 通用负面词

  3. 首跑会自动下载 NLF 模型

    GitHub releases 自动下载,或手动下载后放置。

  4. Queue

    姿态提取 → 嵌入注入 → 采样 → 分块解码 → 合并 mp4(前缀 WanVideo_SCAIL)。

关键参数说明

参数所在节点设置说明
分辨率 / 帧数 / 帧率832 × 480 / 81 / 16fps
CFG1.00
采样器 / 调度器dpm++_sde / Wan 视频调度器 v2
Shift7.00
步数lightx2v 蒸馏低步数
LoRAlightx2v rank32 强度 1.0000
X/Y 轴分块272 / 272 ,步长 144 / 128解码分块
attention_modesdpa(以工作流实际选项为准)
强制卸载true (多处)显存控制
Torch 编译inductor / 仅 Transformer 块提速开关

常见问题与报错

Torch 编译报错

inductor 依赖 triton,Windows 上失败常见——把「Torch编译设置」bypass 掉即可回退不编译,只损失速度。

NLF 模型下载失败

GitHub releases 直连不稳,手动下载后放节点指定目录(节点报错信息会给路径)。

姿态乱/手脚扭曲

参考视频里多人或遮挡严重时 NLF 提取质量下降;换单人、正面、动作幅度适中的视频。

块交换/卸载报错

强制卸载 true 与块交换参数冲突时先关块交换再逐项开。

更新记录

  • SCAIL preview 版WanVideoWrapper + NLF 姿态
推荐工具↑ ↓ 选择 Enter 打开