ComfyUI AnimateDiff Workflow

专为 ComfyUI 设计的 AnimateDiff 高效动画生成工作流。内置 Motion Module 与 ControlNet 联动机制，支持文本或视频驱动生成高连贯性短视频。集成 RIFE 帧插值与 ESRGAN 高清放大模块，一键提升输出流畅度与画质。适用于 AI 短片创作、动态海报及社交媒体内容生产，大幅降低 AI 动画制作门槛。

## 工作流概述 本工作流基于 ComfyUI 搭建，深度整合 AnimateDiff 核心算法，旨在解决传统 AI 视频生成中画面闪烁、动作不连贯及分辨率受限的痛点。流程涵盖从基础采样、运动模块注入、帧间插值到高清放大的完整管线，支持 Text-to-Video 与 Video-to-Video 双模式，适合快速产出高质量短视频素材。 ## 分步骤操作说明 1. **导入工作流与环境校验**：将下载的 `.json` 或 `.png` 工作流文件拖入 ComfyUI 界面。检查已安装自定义节点（如 `comfyui-animatediff-evolved`, `Impact Pack`, `WAS Node Suite`），缺失时通过 Manager 一键补全并重启服务。 2. **加载基础模型与运动模块**：在 `Checkpoint Loader` 中加载稳定扩散主模型（推荐 SDXL 或 SD 1.5 架构）。随后在 `AnimateDiff Loader` 节点挂载对应的 Motion Module（如 `mm_sd_v15_v2.ckpt`），确保模型版本与主网络匹配以激活时空注意力层。 3. **配置提示词与采样器**：在 `CLIP Text Encode` 输入正向提示词（描述主体、风格、光照）与反向提示词（去除模糊、变形元素）。调整 `KSampler` 的 `steps` 至 20-30，`cfg` 设为 7-9，种子值固定以保证批次一致性。若使用视频驱动，在此步接入 `Load Video` 并通过 ControlNet Preprocessor 提取边缘或深度图。 4. **执行生成与帧插值处理**：连接 `VAE Decode` 输出初始视频序列。接入 `RIFE VFI` 或 `FILM` 帧插值节点，将原始 8-12 FPS 提升至 24-30 FPS。建议开启 `interpolation_strength` 参数微调过渡平滑度，避免产生重影或形变。 5. **高清放大与最终导出**：通过 `Latent Upscale by Factor` 将分辨率提升 2x 或 4x，对接 `RealESRGAN` 或 `SwinIR` 节点进行像素级修复。最后使用 `Save Image Sequence` 或 `FFMPEG Video Combine` 输出 MP4/WebM 格式，完成全流程渲染。 ## 注意事项与最佳实践 - **显存优化**：AnimateDiff 对 VRAM 消耗较大，建议在 `KSampler Custom` 中启用混合精度计算或开启 `--lowvram` 启动参数；批量生成时采用分块推理（Chunking）。 - **动作连贯性控制**：适当调低 Motion Module 的 `motion_scale` 权重（默认 1.0），过强易导致结构崩塌；结合 ControlNet OpenPose 或 Depth 可精准约束角色姿态。 - **提示词工程**：优先使用明确的时间维度词汇（如 `slow motion`, `camera pan right`, `consistent lighting`），配合负面提示词过滤常见伪影。 - **工作流复用**：善用 ComfyUI 的 `Group Nodes` 功能将核心管线打包，便于在不同项目中快速调用与参数迭代。 ## 常见问题提示 - **Q: 生成过程中出现 OOM（显存溢出）错误？** A: 降低图像分辨率或缩短生成帧数；更新显卡驱动；尝试切换为 `fp16` 精度加载模型；使用 `batch_size=1` 逐帧渲染。 - **Q: 输出视频存在明显闪烁或画面跳变？** A: 检查 Motion Module 是否与当前 Checkpoint 版本兼容；增加插值节点的强度参数；在提示词中加入 `smooth transition, stable camera` 等稳定化关键词。 - **Q: 视频驱动模式下主体变形严重？** A: 提高 ControlNet 参考图的清晰度；调整 `control_weight` 至 0.8-1.2 区间；确保源视频帧率与目标生成帧率匹配，必要时先进行降采样预处理。