2

免费AI动画工具Aimate diff使用教程

 7 months ago
source link: https://www.shejidaren.com/mian-fei-ai-dong-hua-gong-ju-aimate-diff-shi-yong-jiao-cheng.html
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
neoserver,ios ssh client

免费AI动画工具Aimate diff使用教程

2月 18, 2024 发表于: AI绘画教程. 评论

Sponsor
single-top-500x62-v6.jpg

本文旨在引导用户掌握Animate diff这一革新性免费AI动画工具,它借助文字描述赋予静态画面生动动态效果。相较于同类软件如Runway,Animate diff凭借其可控性强、开源免费及新近推出的stable diffusion插件,显著改善了动画流畅度和稳定性,尽管对显卡配置有一定要求,但通过灵活策略如调整参数或云端租用,也能让普通用户制作出高质量短片。接下来,我们将详解Animate diff的关键使用技巧与实战操作,助您轻松步入AI动画创作世界。

image-pending.gif

文章涉及的所有有关AI动图视频的软件和平台基本都需要稍微会写点描述词的能力,动图的制作和普通AI绘图极其相似,只是需要在关键词的内容上注意以下几个点:

①描述的角色的内容旁,增加动词动作,比如女孩微笑大笑

②描述风格的用词旁边,采用移动方向的描述,比如向左平移,向上向下

Runway

AI绘图里大致有midjourney还有stable diffusion两派,类比一下,AI动图和视频内容中,Runway和midjourney很类似,可以不用魔法,除了Runway应该还有很多不同的平台在,希望能有更多便宜大碗的网站推荐。

Runway官网可以直接生成视频:https://app.runwayml.com/

①绿幕去背、模糊人脸、移除影片物件等等视频剪辑的便捷操作,尝试一下会有惊喜。

免费AI动画工具Aimate diff使用教程

视频剪辑的便捷操作

②不吃自己的显卡,如果电脑配置跟不上,类似Runway的平台,真滴香。

③笔刷涂抹控制部分画面移动情况,这个设计补足了单单文字提示词的短板,更适合生成稳定的图片。

①目前没能找到以视频生成AI视频的操作,只有文字描述生成或者图片生成视频。

免费AI动画工具Aimate diff使用教程

文字描述生成或者图片生成视频

②免费生成的几张图会带有水印,不过尝鲜也够用

③每次生成的视频或者动图的时长只能4秒,但是由于可以在4秒的基础上,通过最后一帧生成再获得四秒钟,其实是可以拼成很长一段视频

免费AI动画工具Aimate diff使用教程

Runway效果

Aimate diff

很早的时候大多数AI视频的做法是运用stable diffusion中controlnet对已经变成图片的视频帧进行批量AI绘制,然后运用图片转视频的操作再形成AI视频,但是这种处理方式会出现跳帧以及不稳定现象。然而近期Animate diff终于出stable diffusion的插件了,效果比较丝滑、稳定、闪烁较小,是一大进步。

免费AI动画工具Aimate diff使用教程

早期做法抽搐感强

①可控性比Runway高,不卡死4s钟,显卡有多大胆,时间有多大产。

②开源,免费之光!!

①需要不错显卡,推荐显存12GB往上(个人是N卡3060,12GB,用的SD WebUI版本的Animate diff,不太能视频生成视频很容易爆显存),当然也有说8G显存也够用。

②操作稍微麻烦一些

显卡问题解决方案:

①单独安装ComfyUI版的Animate diff,占用显存比较少,但需要适应新的工作流节点

②云端租用,可以尝试百度的飞桨平台每天可以免费用8小时,或者使用青椒云可以按小时租用云端电脑搞搞(只带了笔记本电脑的时候会用)

③一键换新显卡(苦笑)

animate diff插件下载:

①SDwebUI扩展-可用-搜索animate diff安装插件即可

②animate diff模型和镜头运动lora下载:

https://huggingface.co/guoyww/animatediff/tree/main

模型放到SD源目录\extensions\sd-webui-animatediff\model

镜头控制lora放到SD源目录\models\Lora

重点参数调整:

免费AI动画工具Aimate diff使用教程

①显卡配置不高,建议高度*宽度512*512分辨率生成,后期放大。

②启用animate diff

③动画模型:不同模型可能使用体验不同,目前尝试二次元模型要比三次出效果。

④总帧数不小于帧率,帧率默认填8比较好用,容易出效果。

⑤closed loop中N(不循环的视频动图)A(循环的)R-P、R+P(由算法按效果生成是否循环的动画)

⑥其余参数基本可以保持默认状态

使用贴士:

1.文生视频

①Prompt Travel的使用:

普通提示词后加上Prompt Travel触发词“帧数: 提示词”,注意半角冒号后面有空格。

1boy,short black hair,smile,Masterpiece

0: closed mouth

8: open mouth

说明刚开始是闭嘴,第8帧后张开嘴巴,从而使用提示词控制画面。

免费AI动画工具Aimate diff使用教程

Prompt Travel使用效果示意

②添加控制镜头lora:此处不如Runway的画笔控制部分画面移动的功能好用,是对整个画面的镜头移动控制。

2.图生视频

想要生成两张图间隔动画:可以controlnet上传初始图,animate diff上传末尾帧内容,中间由AI发挥,注意绘制中重回幅度尽量调整较大,不要太小,太小容易突变容易出怪东西,合适重绘幅度为0.75左右。

免费AI动画工具Aimate diff使用教程

两张图补间重绘幅度较小

掌握Animate diff,零基础也能创作动画效果,以上是简单的部分操作示意,有更多探索体验,欢迎交流!

作者:好大一只呆瓜(zcool.com.cn/u/27068761)
来源:站酷

需要学习Midjourney的可以看这里
↓ ↓

81693-1.png
赞助商链接 500-62-douban-gaogen-sheji-shuji-tuijian.jpg

赞助商链接

jianli-muban.jpg
设计达人微信交流社区:shejidaren888
喜欢这篇文章吗?欢迎分享到你的微博、QQ群,并关注我们的微博,谢谢支持。
版权:除非注明,本站文章均为原创文章,转载请联系我们授权,否则禁止转载。

About Joyk


Aggregate valuable and interesting links.
Joyk means Joy of geeK