依据文本+对图像部分区域进行涂抹生成动态视频的工作流,先看效果图:
输入图像
正向提示词:Maple leaves and hair swaying in the wind, a girl’s hair swaying and her skirt fluttering
反向提示词:(worst quality, low quality: 1.4),((Hands, fingers, arms, palms)),
输出视频
步骤很简单,一步到位:
应用模型:mjcmixRealistic_v7.safetensors,mm_sd_v15_v2.ckpt,vae-fs-mse-840000-ema-pruned.safetensors
加载checkpoints模型,加载vae模型,加载正向提示词/反向提示词,加载输入图像(在遮罩编辑器里手动涂抹要绘制的区域)。
在涂抹的区域(遮罩区域)进行动态扩散,从而生成动态视频。