1

Stability AI发布动画生成AI工具,反遭用户吐槽:不如民间大神?

 1 year ago
source link: http://www.gamelook.com.cn/2023/05/517764
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
neoserver,ios ssh client

Stability AI发布动画生成AI工具,反遭用户吐槽:不如民间大神?

2023-05-15 • 游戏美术
GF-1.jpg

凭借文生图模型Stable Diffusion占山为王的Stability AI,近期又整了个新活。近日,Stability AI发布了AI视频生成SDK工具Stable Animation。官方的宣传口号喊得高调:”一款将你的想象力变为现实的终极工具!“但实际生成效果是否能担得起”终极“的名号?GameLook对此进行了一番深入探索。

Stable Animation依然采用Stable Diffusion作为基础模型,目前仅支持SDK与付费API两种方式访问。据官方介绍,目前共支持三类生成途径:文生动画,图生动画和视频生成动画。

以视频生成动画为例,用户可以输入一段视频作为生成参照,同时加入文字prompt作为辅助,实现从视频到动画的转变。

lazy.png

此外,Stable Animation提供了一系列的参数设置。如3D Warping功能允许用户在视频中模拟3D摄影机移动视角。用户还可通过颜色指令对画面的整体对比度、色调、亮度等进行细致的调节。

lazy.png

AI视频生成历来是AI拥趸们最热衷的领域之一,如Runway公司推出的GEN1、GEN2产品此前就获得追捧。从效果上来看,Stable Animation也的确可以完成一些动画生成的任务。但发布后,市场回应Stability AI的是一片寂静——连在Reddit最活跃的AI画图板块r/Stable Diffusion上发布的相关新闻,也仅仅获得了11个点赞。

lazy.png

原因无它,尽管出身名门正派,但生成效果实在有限。Stable Animation依然采用的是为文生图而训练的大模型,并未针对视频生成进行针对性的训练。对于画面连贯性、画面闪烁这些AI生成视频的痛点问题,Stable Animation也并未解决。

早在controlnet技术刚刚推出时,AI爱好者们就已经推出了手动逐帧绘制的AI动画方案。在民间也早有大神推出使用Stable Diffusion制作动画的插件——正如一名Reddit用户吐槽的:”为啥Stablility AI要推出一个Deforum的仿品?“

lazy.png

这名用户所提及的Deforum是由一群AI爱好者开发的AI视频生成工具,使用的是Stable Diffusion的图生图功能。不仅支持本地部署和免费开源使用,并且该工具早在去年10月就已经推出。与Stable Animation类似地,Deforum同样支持3D视角变换、2D移动等等功能,生成效果与Stable Animation相仿。目前在YouTube和B站上一些爱好者发布的AI生成视频,就是使用Deforum制作。

lazy.png

当然,Stable Animation并非没有优点,如简化了视频生成的参数设置难度,并为用户提供了详细的部署指南,降低了使用门槛,帮助那些不擅长于电脑操作的用户生成视频。但对视频质量有要求的用户来说,Stable Animation的存在实在有些聊胜于无。

Stable Animation的遇冷反映出了AI发展现状:实在太卷了。眼下,科技公司拿出四平八稳的AI生成产品已经不足以挑起消费者的兴趣。AI视频生成赛道竞争者并不算多。除Runway的Gen系列产品外,恐怕仅剩Adobe的Firefly。考虑到视频内容的复杂性,一键生成真正的影视级内容的未来,恐怕还离我们十分遥远。

如若转载,请注明出处:http://www.gamelook.com.cn/2023/05/517764


About Joyk


Aggregate valuable and interesting links.
Joyk means Joy of geeK