需安装AnimateDiff插件实现Stable Diffusion静态图转视频:一、确认WebUI≥v1.6.0、Python 3.10.x、torch 2.0.1+;二、克隆插件并启用;三、下载匹配motion module放入models/AnimateDiff;四、设Frame count=16、Overlap=5;五、启用xformers与medvram优化显存。
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

如果您希望在Stable Diffusion中为静态图像添加动态效果并生成短视频,需借助AnimateDiff插件实现帧序列驱动的动效合成。以下是完成AnimateDiff视频生成插件安装与基础动效设置的具体步骤:
一、确认WebUI版本及Python环境兼容性
AnimateDiff要求Stable Diffusion WebUI版本不低于v1.6.0,且Python环境为3.10.x(不支持3.11及以上)。插件运行依赖torch 2.0.1+与xformers 0.0.22+,版本错配将导致加载失败或推理中断。
1、打开命令行终端,进入WebUI根目录,执行 python --version 确认Python版本为3.10.x。
2、执行 git pull 更新WebUI至最新稳定分支。
3、运行 pip list | grep torch 检查torch是否为2.0.1或2.1.0;若非此范围,执行 pip install torch==2.0.1+cu118 --extra-index-url https://download.pytorch.org/whl/cu118(CUDA用户)或对应CPU版本。
二、安装AnimateDiff主插件
AnimateDiff以独立扩展形式集成于WebUI,需从GitHub官方仓库克隆并启用,其核心包含motion module权重加载逻辑与UI参数面板。
1、进入WebUI的 extensions 文件夹。
2、执行 git clone https://github.com/ArtVentureX/stable-diffusion-webui-animatediff.git。
3、重启WebUI,在“Extensions”→“Available”选项卡中勾选 animatediff 并点击“Apply and restart”。
4、重启后检查底部状态栏是否显示 AnimateDiff loaded successfully 提示。
三、下载并配置Motion Module模型文件
Motion Module是AnimateDiff的动态建模核心,负责建模帧间运动模式。不同版本(如mm_sd_v15_v2.ckpt、mm_sd_v15_v3.ckpt)适配不同基础模型,不可混用。
1、访问 https://huggingface.co/guoyww/animatediff/tree/main 下载 mm_sd_v15_v2.ckpt 或 mm_sd_v15_v3.ckpt。
2、将下载文件放入WebUI根目录下的 models/AnimateDiff 文件夹(需手动创建该路径)。
3、在WebUI界面切换至“AnimateDiff”标签页,下拉选择已放置的motion module文件名。
四、配置采样参数与帧率控制
动效质量直接受帧数(frame count)、步数(steps)与帧间重叠(overlap)影响。过低帧数导致动作生硬,过高则显存溢出;overlap值决定相邻帧融合程度,建议设为总帧数的1/3。
1、在txt2img或img2img界面右侧展开“AnimateDiff”区域。
2、设置 Frame count 为16(默认最小可用值),避免显存超限。
3、将 Overlap 设为5(16帧对应推荐值)。
4、勾选 Enable controlnet for motion(如使用ControlNet引导动作方向)。
五、启用优化选项降低显存占用
AnimateDiff默认加载完整UNet权重,对显存压力大。启用xformers与分块推理可显著缓解OOM问题,尤其适用于8GB以下显卡。
1、启动WebUI时添加启动参数 --xformers --medvram(Linux/macOS)或在webui-user.bat中修改COMMANDLINE_ARGS。
2、在“Settings”→“Stable Diffusion”中开启 Use xformers 和 Always use full precision for model(仅当motion module加载失败时关闭此项)。
3、在AnimateDiff设置中启用 Enable batch mode,将batch size设为1以保障单帧稳定性。










