6

Pika 1.0彻底颠覆动画行业!梦工厂创始人预测3年内动画成本降至1/10

 6 months ago
source link: https://www.aixinzhijie.com/article/6842290
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
2023-12-29 03:01

Pika 1.0彻底颠覆动画行业!梦工厂创始人预测3年内动画成本降至1/10

原文来源:新智元

Fk06bCfP1iEcjZd0oWRgBgIPYn0E.png

图片来源:由无界 AI‌生成

梦工厂创始人断言:3年内动画行业将彻底变天,成本下降90%。而Pika1.0的发布,预示着这一天将很快来临。

最近,梦工厂创始人Jeffrey Katzenberg预测,生成式AI将使动画电影的成本在未来3年内降低90%,因为该技术将给媒体和娱乐行业带来彻底地颠覆。

「如果从历史的角度来看,钢笔、画笔、印刷机、静态相机、电影摄影机;这些东西以非凡的方式扩展了创造力和讲述故事的方式,人类已经见证过这种发展轨迹。」

FqVKUHDhYfGlcmmhCrwIg9qXaXNq

他表示,「我不知道还有哪个行业会比媒体、娱乐和创作受到生成式AI影响更大。」

「我认为,一方面,它将具有颠覆性,并将当今艺术家和讲故事的人难以接触到的东西商品化。」 

「在我制作动画电影的美好时光里,500 名艺术家花了五年时间才制作出一部世界级的动画电影。我认为未来3年,这个成本将缩减到10%」

「在我看来,未来个人的创造力将决定一切」。

而AI视频领域,也确实入他所说,技术在一日如十年地突飞猛进。

Pika 1.0 ,用户几分钟就能做出迪士尼级别的动画短片

前几天火爆全网的Pika Labs发布正式版1.0。

官方做的第一个视频展现出的动画效果,豪不夸张地说,已经能达到迪士尼等动画电影公司的质感了。

怪不得梦工厂的创始人会有如此预言,也许就是Pika这样面向未来的动画工具,让他看到了行业(bei)革命的曙光。

视频中我们可以看出,虽然每个镜头的时间还不长,但是动画人物的一致性,画面质感,已经和大型动画公司制作出来的动画没有太大的区别了。

而自从Pika 1.0开放了邀请体验以后,网上越来越多的案例被放了出来。看完这些用Pika 1.0做的动画之后,似乎都觉得这个3年90%的预测稍微保守了一些。
这个机器人过圣诞节的动画,除了镜头切换的稍显频繁之外,几乎很难挑出哪里有明显的毛病。

机器人来回的几个镜头一致性很高,完全没有了AI动画之前那种换一个镜头之后主角就会完全变样的硬伤。

机器人没有一句台词,但是依然向观众传达了一个简单的情节。在此基础之上发展出一个好故事,一个AI动画短片就完成了。

而这个动画,按照作者的说法是为了庆祝Pika1.0的上线。

虽然动画中只有一个简单的黑夜场景,但是礼花效果的一致性很好,城市中黑夜的光影也很多样,效果绚丽。
而且不同的镜头错落有致,氛围渲染的非常到位。

而这一个段的动画,看得出脸部效果畸变的问题也几乎被Pika解决了。

虽然人物脸部动作不明显,但是也保持了非常好的一致性,大大改善了之前AI动画最大的短板。

而这一段动画,已经可以说是一段「AI小电影」了。

站在夕阳中的泰坦尼克号上的Jack,身边的Rose换成了一只憨态可掬的大熊猫,效果还居然一点都不违和。

这后边大大的「To Be Continued」,也暗示了未来AI动画行业的故事才刚刚开始。

也许当动画制作的门槛不断降低,每个有优美故事的创作者,就能够完全地释放自己的创造力,制作出足够精良的视频来呈现精彩的故事。

Gen-2推出动态画笔,赋予用户更大的控制能力

Gen-2推出「动态画笔」,让用户能够自由地决定视频中的动态效果。一条推特短短几天时间阅读超过160万。

FsUL5pAm_IPreBaRgCx4GdOMgd1M

就像传说中的「神笔马良一样」,用户只要鼠标一拖,就能让静态的图片按照自己的意愿动起来。

lgBJn7lKe5jQSHGAtuj3Ghi5hV2v

不论是背景的运动,还是图片中的具体景物,人物,都能生成自然的运动效果。

FipstjTCkD8o9ICb56c_wkA-LDsY

无论是画面中的汽车,烟雾,瀑布,火焰,人物,都能自然运动。

Fm02ZM5-tW6eIC-yj2ieDo4gW3C_

湖面,船舶,人像,鱼缸中的金鱼,都能地开始运动。

Fs9Jb1TnILu15xCsqvv12FDpZ68-

可以想象,在赋予用户如此之强的动态效果控制能力之后,制作动画和视频的成本将会大大降低。
也许未来,每个普通人就能像写字一样,用几张图片,几个小时,就能动态生成一段自己创作的视频。

5秒就能生成3D素材
动画内容制作另一个领域——3D建模,也在AI技术的推动下不断推陈出新。
最近由Adobe和澳大利亚国立大学研究员发表的一篇论文,提出了一个用2D图像直接生成3D素材的技术,彻底震撼了业界。

Fnvm1P7711W8Y4GNDFeNv9TmbQCJ

项目地址:https://yiconghong.me/LRM/
作者称,只需要5秒钟,他们的模型就能将给定的一幅2D图像转化为3D素材。

FkmamMFmnUvUuqtDP6rxgaf3OLre

除了普通的3D素材之外,可互动的3D素材也可以用模型生成。

lior9J1KM41YXOicAR9OIJdQVlH5

这个基于Transformer构架的3D模型,具有5亿个参数,在短短5秒内就能从一个输入的图像预测出他的3D模型,而且可以直接从数据集预测神经辐射场(NeRF)。

研究人员在包含大约 100 万个对象的海量多视图数据上以端到端的方式训练模型,其中包括来自Objaverse的合成渲染和来自MVImgNet的真实捕获。

高容量模型和大规模训练数据的结合使模型具有高度通用性。

FrOQ0WFvHNV0mD6feqi_w8zxBzEC

相信,伴随着3D建模技术的不断发展,也许他们的Pika 1.0时刻也不远了。

到时候,就像社交媒体出现之后,自媒体和信息传播的方式会产生很大变化一样,当AI动画将动画制作的门槛大大降低之后,我们将会进入一个视频媒体大爆炸的时代。


参考资料:
https://twitter.com/pika_labs/status/1722817227664306636
https://twitter.com/runwayml/status/1723033256067489937
https://arxiv.org/abs/2311.04400
https://yiconghong.me/LRM/


About Joyk


Aggregate valuable and interesting links.
Joyk means Joy of geeK