AnimateDiff

AnimateDiff是一个开源的AI动画生成框架，专注于将静态的文本到图像（T2I）模型转化为文本到视频（T2V）模型。其核心思想是通过训练一个轻量级的运动模块，捕捉通用的运动先验知识，并将其插入到预训练的T2I模型中，从而无需针对每个基础模型进行微调，即可生成高质量、连贯的短视频序列。