如果放在几年前,你告诉我说只需一分钟就能做出一段这样的动画,我是万万不相信的,但是当AI时代来临之后,一切都有了可能。
今天给大家介绍一个可以快速在sd中生成动画的方法,就是一个叫做AnimateDiff的免费开源项目。现在已经整合到了webUI上面,使用起来非常方便。GITHUB下载地址为:https://github.com/continue-revolution/sd-webui-animatediff#motion-module-model-zoo。
接下来我们还要安装专属的动画模型,下载地址为:https://huggingface.co/guoyww/animatediff/tree/refs%2Fpr%2F3.目前最新的是mm_sd_v15_v2.safetensors,动画的活动范围更大,效果也最好,我们下载这个就行了。
模型要放在这个地址下“……sd-webui-aki-v4.2extensionssd-webui-animatediffmodel”。
安装完成插件之后,需要将 WebUI 更新到 v1.6.0.并且将 ControlNet 更新到 v1.1.410.是的,这个插件是可以支持controlnet的。
接下来就可以看到这个插件了,动画模型选择我们刚才下载的那个,同时启用这个就可以运行了。
帧率默认是8.如果我们想要一个4秒的动画,总帧数设置为32就可以了。
开启闭环可以得到一个无限循环的动画。
输出格式,通常我们会选择GIF,如果想要每一帧单独的输出,可以选择png。
接下来,我们选择模型,并输入提示词,我描述的是“一只在草原上奔跑的白马”。
参数可以按照正常出图的思路设置,尺寸512x512.根据电脑配置量力而行。
点击生成,就可以得到一幅白马奔跑的小动画了,不过这幅图的马腿脚看上去有点不太自然。
同时,这个动画插件还可以在图生图中使用。比如我们在文生图中生成了一张白**静态图片,然后将它发送到图生图中。
提示词中我们可以增加“流动的云、奔跑的马”等提示词。
重绘幅度设置为0.8.数值越大,动态越明显,如果数值太小,马就不会跑起来。
我们可以看到,白马就奔跑了起来,而且天空中有云层的流动。当然我们有一说一,这个马奔跑的效果还不是很完美。
我们还可以配合lora来做一些镜头控制,可以让动画的控制变得更强。lora的下载地址为:https://github.com/guoyww/AnimateDiff#features,包括有向左平移、向右平移、逆时针转动、顺时针转动、向下移动、向上移动、放大、缩小。
我们先使用文生图生成一个女孩在街头的动态图片,可以看到这时候的镜头是稳定不动的。
接下来我增加一个v2_lora_Zoomout的lora,来控制镜头的缩小。
我们就得到了一个希区柯克式的变焦效果,拍摄效果非常不错。
再做一些其他的动图吧。
以上,就是关于AnimateDiff的使用方法。它的出现为我们制作AI动画创造了可能性,期待它进一步的进化和完善。
需要这个插件和模型lora的话,可以关注我的公众号【白马与少年】,发送【sd】即可获取链接。
-END-
扫一扫,关注作者公众号
stable diffusion、Blender等学习心得分
上一篇:怎么lora炼丹_有哪些大模型网站_liblib大模型炼丹
下一篇:开源、本地、离线部署:腾讯出品的AI老照片修复工具:GFPGAN
【AI奇点网2024年11月11日早报】本站每日播报AI业界最新资讯,触摸时代脉搏,掌握未来科技动向。事不宜迟,点击查看今日AI资讯早餐。
【AI奇点网2024年11月12日早报】本站每日播报AI业界最新资讯,触摸时代脉搏,掌握未来科技动向。事不宜迟,点击查看今日AI资讯早餐。
【AI奇点网2024年11月13日早报】本站每日播报AI业界最新资讯,触摸时代脉搏,掌握未来科技动向。事不宜迟,点击查看今日AI资讯早餐。
这两天就有朋友来问我,有没有那种能修图的AI,就是扩图+消除啥的傻瓜好用的。大家大概的需求总结一下其实就两,AI消除+AI扩图。
据华尔街日报报道,苹果公司退出了对 OpenAI 的新一轮融资谈判,而微软则计划向 OpenAI 追加约 10 亿美元的投资。
Meta公司推出了Llama 3 2,也是它首款能够理解图像和文本的旗舰视觉模型。包含中型和小型两个版本,以及更轻量化可用于手机端侧的纯文本模型。
飞书智能伙伴
必剪
Hi Echo — 网易有道
堆友
360AI搜索
Wink Studio
通义效率
360AI助手
腾讯文档AI
网站地图
stable diffusion插件推荐_AnimateDiff插件怎么使用_开源插件推荐
如果放在几年前,你告诉我说只需一分钟就能做出一段这样的动画,我是万万不相信的,但是当AI时代来临之后,一切都有了可能。
今天给大家介绍一个可以快速在sd中生成动画的方法,就是一个叫做AnimateDiff的免费开源项目。现在已经整合到了webUI上面,使用起来非常方便。GITHUB下载地址为:https://github.com/continue-revolution/sd-webui-animatediff#motion-module-model-zoo。
接下来我们还要安装专属的动画模型,下载地址为:https://huggingface.co/guoyww/animatediff/tree/refs%2Fpr%2F3.目前最新的是mm_sd_v15_v2.safetensors,动画的活动范围更大,效果也最好,我们下载这个就行了。
模型要放在这个地址下“……sd-webui-aki-v4.2extensionssd-webui-animatediffmodel”。
安装完成插件之后,需要将 WebUI 更新到 v1.6.0.并且将 ControlNet 更新到 v1.1.410.是的,这个插件是可以支持controlnet的。
接下来就可以看到这个插件了,动画模型选择我们刚才下载的那个,同时启用这个就可以运行了。
帧率默认是8.如果我们想要一个4秒的动画,总帧数设置为32就可以了。
开启闭环可以得到一个无限循环的动画。
输出格式,通常我们会选择GIF,如果想要每一帧单独的输出,可以选择png。
接下来,我们选择模型,并输入提示词,我描述的是“一只在草原上奔跑的白马”。
参数可以按照正常出图的思路设置,尺寸512x512.根据电脑配置量力而行。
点击生成,就可以得到一幅白马奔跑的小动画了,不过这幅图的马腿脚看上去有点不太自然。
同时,这个动画插件还可以在图生图中使用。比如我们在文生图中生成了一张白**静态图片,然后将它发送到图生图中。
提示词中我们可以增加“流动的云、奔跑的马”等提示词。
重绘幅度设置为0.8.数值越大,动态越明显,如果数值太小,马就不会跑起来。
我们可以看到,白马就奔跑了起来,而且天空中有云层的流动。当然我们有一说一,这个马奔跑的效果还不是很完美。
我们还可以配合lora来做一些镜头控制,可以让动画的控制变得更强。lora的下载地址为:https://github.com/guoyww/AnimateDiff#features,包括有向左平移、向右平移、逆时针转动、顺时针转动、向下移动、向上移动、放大、缩小。
我们先使用文生图生成一个女孩在街头的动态图片,可以看到这时候的镜头是稳定不动的。
接下来我增加一个v2_lora_Zoomout的lora,来控制镜头的缩小。
我们就得到了一个希区柯克式的变焦效果,拍摄效果非常不错。
再做一些其他的动图吧。
以上,就是关于AnimateDiff的使用方法。它的出现为我们制作AI动画创造了可能性,期待它进一步的进化和完善。
需要这个插件和模型lora的话,可以关注我的公众号【白马与少年】,发送【sd】即可获取链接。
-END-
扫一扫,关注作者公众号
stable diffusion、Blender等学习心得分
上一篇:怎么lora炼丹_有哪些大模型网站_liblib大模型炼丹
下一篇:开源、本地、离线部署:腾讯出品的AI老照片修复工具:GFPGAN
小度全新AI硬件将于百度世界大会发布丨智谱AI、即梦AI上线新一代视频生成模型丨OpenAI安全系统团队负责人离职
【AI奇点网2024年11月11日早报】本站每日播报AI业界最新资讯,触摸时代脉搏,掌握未来科技动向。事不宜迟,点击查看今日AI资讯早餐。
字节跳动内测豆包通用图像编辑模型SeedEdit丨Grok聊天机器人免费版内测丨月之暗面Kimi创始人被提起仲裁
【AI奇点网2024年11月12日早报】本站每日播报AI业界最新资讯,触摸时代脉搏,掌握未来科技动向。事不宜迟,点击查看今日AI资讯早餐。
李彦宏:文心大模型日调用量超15亿丨百度发布文心「iRAG」文生图技术丨小度AI智能眼镜发布,搭载大模型边走边问
【AI奇点网2024年11月13日早报】本站每日播报AI业界最新资讯,触摸时代脉搏,掌握未来科技动向。事不宜迟,点击查看今日AI资讯早餐。
巧妙利用这两个AI产品,让你的国庆出行没有废片
这两天就有朋友来问我,有没有那种能修图的AI,就是扩图+消除啥的傻瓜好用的。大家大概的需求总结一下其实就两,AI消除+AI扩图。
OpenAI初步谈妥融资70亿美元:最大金主微软追加投资10亿,苹果退出
据华尔街日报报道,苹果公司退出了对 OpenAI 的新一轮融资谈判,而微软则计划向 OpenAI 追加约 10 亿美元的投资。
详解Meta全新大模型Llama 3.2系列:多模态视觉识别能力媲美OpenAI GPT-4o
Meta公司推出了Llama 3 2,也是它首款能够理解图像和文本的旗舰视觉模型。包含中型和小型两个版本,以及更轻量化可用于手机端侧的纯文本模型。
飞书智能伙伴
必剪
Hi Echo — 网易有道
堆友
360AI搜索
Wink Studio
通义效率
飞书智能伙伴
必剪
Hi Echo — 网易有道
堆友
360AI搜索
Wink Studio
通义效率
360AI助手
腾讯文档AI