4

优酷宠爱剧场:用AIGC做了1万份爱意

 1 year ago
source link: https://www.digitaling.com/projects/257459.html
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
neoserver,ios ssh client

在面临标准化任务时,AI总能以24小时待命的敬业姿态给出海量解答,但是AI如何理解更感性的、难以被标化的命题,比如:爱。又或者说,当我们围绕“爱”去进行创造时,AI如何能基于自己对人类数据的海量收集,给出最贴近我们内心的回应。 

我们这次服务的是优酷推出的宠爱剧场。在过往优酷的剧集宣推里,不管是宠爱剧场片单还是宠爱剧内容混剪,可以说都是屡试不爽的爆款,但做创意的小伙伴总是喜欢“跟自己较劲”,还是按照以前的创意方式打安全牌,不是不行,但能否围绕“爱”这一核心,走得更深一点,更让用户眼前一亮?我们想到了通过AIGC的方式来扩展爱的可能性。先来看成片: 

让生活更有“AI”意:宠爱剧场推荐视频

最初接到的brief要求是:优酷宠爱剧场需要在暑期做一个宠爱主题相关的视频推广,包含《安乐传》、《偷偷藏不住》、《当我飞奔向你》、《护心》、《长月烬明》等五部热播大剧组成。

对此我们的思考是:如果能用AIGC给用户带来这些剧集二创和新奇的名场面,增加新体验,是不是能让用户更沉浸地感受到“优酷真的是懂宠爱的”?

关于“爱”,宠爱剧场的每部好剧都有各自的演绎,而每一种演绎集合起来,就形成了一个包罗万象的宠爱宇宙。所以这一次的尝试,我们从每部剧里提炼宠爱的要义,引入AIGC进行理解和制作,创造了AIGC视角下的宠爱宇宙。

优酷宠爱剧场

以上为AI生成的剧推海报

从平面到视频,与AIGC磨合的“坎坷之路”

相信过去一段时间各种AIGC应用案例的涌现,已经让大家对图片类的AIGC内容并不陌生了,而从图像到视频的转化,对于AIGC的挑战是什么?大家或许以为是技术,其实并不然。

我们从2016年开始参与到国内最早期的人工智能内容训练和生成,AI SaaS相关产品开发和部署。项目组里的成员角色也非常多元和跨学科,有技术、产品、创意和商业等背景成员,大家非常清楚,把技术落地到商业应用再落地到创意视觉表达,这个链路里,最具挑战的并不是AI技术和产品功能的限制,而是应用人员对底层技术和应用层功能交叉调用的认知桎梏。

技术本身是平等且客观的,但如何使用技术进行创造却是主观和参差的,具体到这次的视频制作,团队的目标就变成了:尽可能地利用AIGC技术,制作一个不太一样、且充满“爱意”的剧推短片。

loadimg.gif

在实际创作的时候,受限于版权、人物肖像权等客观因素,我们能调用的物料是非常有限的,再加上90%的物料都需要由AI来产出,包括一些转场和运镜,制作的挑战程度突然就翻倍了。在AI开始行动前,最费人的环节,就是通过对剧推内容和核心价值的理解,输出让计算机可以“听懂”的“咒语”,从而让AI进行创作。

通过MJ5.2的Zoominout功能,将画面的内围和外围进行指引式填充;Denosing进行视频的音频节奏自动适配;DeforumTransfermation对不同画面的串场和链接,针对不同剧的特点进行CKPT和LoRA模型的独立训练等等......

团队交替使用了不少于10个AIGC相关的功能应用,并尝试使用或部署训练了自己都不想去数的各样模型;甚至有些过场的效果元素也会用AIGC来做ImagetoImage或者Midjourney的生图功能来处理。

1690983400339492.jpg

同时也使用了Imageredrawing算法对现有海报进行2次创作,因为网络上目前有的素材大多都是文字生成图片texttoimage,很少在人创作的物料上做二次演绎;再加上为了避免明星肖像权问题,团队必须克制、再克制地进行创作……

1691120242466822.gif

本次制作整体的时间非常紧张,所以无论客户还是我们,都希望能尽可能发挥当下AIGC更广泛的功能,去验证其生产力。短短6天的制作时间,大家深感自己如吃豆人,在一个貌似有“地图”,但是又没有“地图”的关卡里穿梭,失分,得分,升级,最终到达Milestone......

1691041333834860.gif

或许做过创意的伙伴更能感同身受的是,如果是纯粹由“人”来完成,那我们还可以偶尔对人“发发火生生气”,但当我们要“仰仗”AI来完成的时候,如果AI做不好,大概只能从自己身上找原因,这也是创作过程里“痛并快乐”螺旋交替上升的一个过程”。

复盘整个制作的过程里,团队也看到了技术上有一些工作是可以精进或者尝试的,有的处理也是为了让用户对AIGC的图像更有识别性(当然有时候是为了让视频更有AIGC识别度),例如:

1、调慢SDdeforum中生成动画时虚拟摄像机移动速度(cameramotion);

2、调高生成每一帧时引用上一帧权重(调高Cadence);

3、使用最新的静帧变动画工具,例如runwaygen2,用Ebsynth风格迁移到原视频。

1691121905121536.gif

最终的视频还有很多瑕疵和需要改进的地方,但是对于品牌和我们来说,是一次积极且有“一定”美感的尝试。至少我们打开了更多的“算力”,验证了部分生产力,在持续不断推进AIGC的工业化生产的道路上,往前又迈进了一小步。

1691051247456060.jpeg
1691121842425917.jpeg

以上为创作过程中的一些测试过程1/100

在内容创作上,AIGC技术依旧是平等和敞开的,但我们如何能用好它,仍然离不开最初对用户“嗨点”或核心诉求的洞察,用户想要什么,用户如何参与进来,依然是创意人无法转手给AIGC的命题。除了呈现AIGC带来的或奇幻或华丽的内容,未来也可以引入更多的互动,让用户也能进入“宠爱宇宙”,成为其中的一部分,无论是用户上传自己的照片进行场景合成,还是用户参与定义“宠爱”或“训练AIGC(以喂养咒语或是提供素材的方式)”,都是创意人未来可以思考的方向。

真实世界里,爱永不落幕

回应最初关于爱的命题,技术是冰冷的,但如何将技术运用在有温度的场景里,是我们从感性的视角出发可以去做出无限探索的。

从给出具有创造力的“咒语”,到“喂养”足够丰富的训练素材,在与AIGC的一次次磨合和相互学习,我们也在拓展更多对“爱”的可能性的解释,拓展自我认知的边界。

就像米兰昆德拉曾说过的,画家的责任并不在于再现事物的线条,而在于用自己的线条在纸上构筑一个新世界 。利用AIGC,我们也不仅是再现和复刻,而是去构筑提供更丰富视角的美丽新世界。

在影像的世界里,剧情总会⾛到最后一集,但在真实的世界中,爱永不落幕。

1691119148309578.jpeg

最后由衷感谢优酷品牌团队的无比信任,与我们在短短的6天时间里,一起共创了此次的项目,给出了海量爱意表达的开放性答案。

创作人员名单

品牌方:优酷
总策划:Hubery Cheng
监制:希皓,Lily Yan
创意美术和技术:磊哥、Joliber、Liuyu、亮亮
动画制作:Piux


About Joyk


Aggregate valuable and interesting links.
Joyk means Joy of geeK