利用AnimateDiff让你生成的小姐姐动起来
AI工具评测

今天和大家分享一款stable diffusion扩展AnimateDiff,利用AnimateDiff可以直接生成gif动图,让你生成的小姐姐动起来,这个功能有点类似与runway gen2的image to Video,但是更加具有可控性,话不多说,直接看效果图和对比图

原图

利用AnimateDiff让你生成的小姐姐动起来

AnimateDiff

利用AnimateDiff让你生成的小姐姐动起来

runway gen2

原图

利用AnimateDiff让你生成的小姐姐动起来

AnimateDiff

利用AnimateDiff让你生成的小姐姐动起来

runway gen2

插件安装方法:点击扩展插件-从网址安装,输入github地址 https://gitee.com/swordfishx/sd-webui-animatediff.git点击安装等待安装完毕之后重启webui即可

安装完成后还需要下载两个运动模块,我已经给大家准备好了,下载链接放在文章最后,大家下载完成之后放到extensions/sd-webui-animatediff/model/文件夹下即可

利用AnimateDiff让你生成的小姐姐动起来

大模型选择二次元的效果会比较好,采样器选择DPM++2M SDE Karras,提示词的书写需要比较精简,控制在75个tag内,且选择这类比较有动感的词汇如falling petals,wind,flying butterfly效果会比较好,图片会保存在stable-diffusion-webui/outputs/txt2img-images/AnimateDiff文件夹里。

利用AnimateDiff让你生成的小姐姐动起来

正面提示词:(masterpiece, best quality),1girl,solo,cheery blossoms,pink flower,white flower,spring season,wisteria,petals,plum blossoms,outdoor,falling petals,wind,flying butterfly,

“杰作,最佳质量”,1个女孩,独奏,樱花,粉色花朵,白色花朵,春季,藤蔓,花瓣,梅花,户外,飘落的花瓣,风,飞舞的蝴蝶。

负面提示词:EasyNegativeV2,badhandv4,lowres,watermark,monochrome,watermask,

参数说明

  1. Motion module运动模块:选择任一即可,我这里使用的是mm_sdv15.ckpt
  2. Number of frames帧数— 该模型使用 16 帧进行训练,因此当帧数设置为 16帧时效果最好
  3. Frames per second (FPS)每秒帧数— 每秒显示多少帧(图像)。如果以每秒 8 帧的速度生成 16 帧,则 GIF 的持续时间为 2 秒。
  4. Display loop number循环次数— GIF 播放的次数。值0表示 GIF 永远不会停止播放。
利用AnimateDiff让你生成的小姐姐动起来

注意事项:

1.tag不要超过75个,不然会默认生成两段gif

9.5更新 把采样器更换成DDIM就可以完美解决 PLMS Unipc采样器也不会出现生成两段gif的现象但是生成效果并不好所以就不给大家推荐了,TAG超过75个的采样器换成DDIM就行

利用AnimateDiff让你生成的小姐姐动起来

2.目前还并不支持在图生图界面使用,最初版本可以,这个版本反而不行了,作者表示将会修复

3.不要开ADetailer(可以打开面部修复),不然脸部会崩坏的很严重,就像这样

利用AnimateDiff让你生成的小姐姐动起来

4.不要开高清修复!不要开高清修复!不要开高清修复!及其容易爆显存

利用AnimateDiff让你生成的小姐姐动起来

总结:由于目前这个插件才刚开发出来不久,到现在也就才第二个版本,有一些已知bug,但是作为目前为数不多的文本转视频类工具,依旧拥有非常广阔的前景,相信在不久的将来,人人都可以通过文字来生成梦想的画面,期待作者的后续更新!

网盘链接:https://pan.baidu.com/s/1yjGEdErAtD_wmfBBpTQxMQ?pwd=cmjh
提取码:cmjh

分享到:
0
0

发表回复

猜你喜欢
近期文章
利用生成式AI推动创新 美国本田这样做
东方Project-个人AI绘画合集-8(更新至2024-2-14)
AI绘画(动物科普)—兔狲
12.28乾坤AI日报 — 2023年度十大科技名词发布
12.26乾坤AI日报 — OpenAI公布2024年计划
近期评论
ai-world发表在
AI赛博机车—借助SD技术赚取第一桶金
mulei77发表在
AI赛博机车—借助SD技术赚取第一桶金
An Vũ( CEO AGBIG GROUP)发表在
12.25乾坤AI日报 — 苹果正购买新闻采集权用于训练生成式 AI