AI绘画教程 » 免费AI动画工具Aimate diff使用教程

免费AI动画工具Aimate diff使用教程

发表于: AI绘画教程. 评论
Sponsor

本文旨在引导用户掌握Animate diff这一革新性免费AI动画工具,它借助文字描述赋予静态画面生动动态效果。相较于同类软件如Runway,Animate diff凭借其可控性强、开源免费及新近推出的stable diffusion插件,显著改善了动画流畅度和稳定性,尽管对显卡配置有一定要求,但通过灵活策略如调整参数或云端租用,也能让普通用户制作出高质量短片。接下来,我们将详解Animate diff的关键使用技巧与实战操作,助您轻松步入AI动画创作世界。

文章涉及的所有有关AI动图视频的软件和平台基本都需要稍微会写点描述词的能力,动图的制作和普通AI绘图极其相似,只是需要在关键词的内容上注意以下几个点:

①描述的角色的内容旁,增加动词动作,比如女孩微笑大笑

②描述风格的用词旁边,采用移动方向的描述,比如向左平移,向上向下

Runway

AI绘图里大致有midjourney还有stable diffusion两派,类比一下,AI动图和视频内容中,Runway和midjourney很类似,可以不用魔法,除了Runway应该还有很多不同的平台在,希望能有更多便宜大碗的网站推荐。

Runway官网可以直接生成视频:https://app.runwayml.com/

亮点:

①绿幕去背、模糊人脸、移除影片物件等等视频剪辑的便捷操作,尝试一下会有惊喜。

免费AI动画工具Aimate diff使用教程

视频剪辑的便捷操作

②不吃自己的显卡,如果电脑配置跟不上,类似Runway的平台,真滴香。

③笔刷涂抹控制部分画面移动情况,这个设计补足了单单文字提示词的短板,更适合生成稳定的图片。

缺点:

①目前没能找到以视频生成AI视频的操作,只有文字描述生成或者图片生成视频。

免费AI动画工具Aimate diff使用教程

文字描述生成或者图片生成视频

②免费生成的几张图会带有水印,不过尝鲜也够用

③每次生成的视频或者动图的时长只能4秒,但是由于可以在4秒的基础上,通过最后一帧生成再获得四秒钟,其实是可以拼成很长一段视频

免费AI动画工具Aimate diff使用教程

Runway效果

Aimate diff

很早的时候大多数AI视频的做法是运用stable diffusion中controlnet对已经变成图片的视频帧进行批量AI绘制,然后运用图片转视频的操作再形成AI视频,但是这种处理方式会出现跳帧以及不稳定现象。然而近期Animate diff终于出stable diffusion的插件了,效果比较丝滑、稳定、闪烁较小,是一大进步。

免费AI动画工具Aimate diff使用教程

早期做法抽搐感强

亮点:

①可控性比Runway高,不卡死4s钟,显卡有多大胆,时间有多大产。

②开源,免费之光!!

缺点:

①需要不错显卡,推荐显存12GB往上(个人是N卡3060,12GB,用的SD WebUI版本的Animate diff,不太能视频生成视频很容易爆显存),当然也有说8G显存也够用。

②操作稍微麻烦一些

显卡问题解决方案:

①单独安装ComfyUI版的Animate diff,占用显存比较少,但需要适应新的工作流节点

②云端租用,可以尝试百度的飞桨平台每天可以免费用8小时,或者使用青椒云可以按小时租用云端电脑搞搞(只带了笔记本电脑的时候会用)

③一键换新显卡(苦笑)

animate diff插件下载:

①SDwebUI扩展-可用-搜索animate diff安装插件即可

②animate diff模型和镜头运动lora下载:

https://huggingface.co/guoyww/animatediff/tree/main

模型放到SD源目录\extensions\sd-webui-animatediff\model

镜头控制lora放到SD源目录\models\Lora

重点参数调整:

免费AI动画工具Aimate diff使用教程

部分参数

①显卡配置不高,建议高度*宽度512*512分辨率生成,后期放大。

②启用animate diff

③动画模型:不同模型可能使用体验不同,目前尝试二次元模型要比三次出效果。

④总帧数不小于帧率,帧率默认填8比较好用,容易出效果。

⑤closed loop中N(不循环的视频动图)A(循环的)R-P、R+P(由算法按效果生成是否循环的动画)

⑥其余参数基本可以保持默认状态

使用贴士:

1.文生视频

①Prompt Travel的使用:

普通提示词后加上Prompt Travel触发词“帧数: 提示词”,注意半角冒号后面有空格。

例如:

1boy,short black hair,smile,Masterpiece

0: closed mouth

8: open mouth

说明刚开始是闭嘴,第8帧后张开嘴巴,从而使用提示词控制画面。

免费AI动画工具Aimate diff使用教程

Prompt Travel使用效果示意

②添加控制镜头lora:此处不如Runway的画笔控制部分画面移动的功能好用,是对整个画面的镜头移动控制。

2.图生视频

想要生成两张图间隔动画:可以controlnet上传初始图,animate diff上传末尾帧内容,中间由AI发挥,注意绘制中重回幅度尽量调整较大,不要太小,太小容易突变容易出怪东西,合适重绘幅度为0.75左右。

免费AI动画工具Aimate diff使用教程

两张图补间重绘幅度较小

掌握Animate diff,零基础也能创作动画效果,以上是简单的部分操作示意,有更多探索体验,欢迎交流!

作者:好大一只呆瓜(zcool.com.cn/u/27068761)
来源:站酷

赞助商链接
赞助商链接
设计达人微信交流社区:shejidaren888
喜欢这篇文章吗?欢迎分享到你的微博、QQ群,并关注我们的微博,谢谢支持。
版权:除非注明,本站文章均为原创文章,转载请联系我们授权,否则禁止转载。

{ 发表评论 }