优酷×侯明昊:AI与真人实拍,看进去就出不来

举报 2023-09

AI无疑2023的重要关键词,而这一次我们在视频层面,实践了Ai风格重置与艺人实拍的无缝融合,感谢优酷客户给予的创意空间,与我们一同进行的AI探索。闲话少说,先看片。

优酷2023Brand Film “看进去就出不来”的优酷

原初的Brief是,如何表达优酷有着精彩内容,横跨热血漫改剧、风雅国学、新国风动漫、潮酷综艺。我们很快锁定“看进去就出不来”的想法,主角被“吸入”优酷世界后,以AI分身横穿《异人之下》、《万卷风雅集》、《暗河传》、《这就是街舞》,各个有着精彩内容的AI世界。几个场景中尤以热播漫改剧《异人之下》为主推,凭一句“武当王也拜见老天师”炸裂社交圈的“王也”本也——侯明昊,当仁不让成为了我们推荐的“穿越者”。


第一道难关:艺人在场景,怎么和素材互动

如何让想法落地,确实有太多未知X因素。最先遇到的难题是,怎么表现艺人与场景素材的互动?

各种剧各种综艺都已成片,不可能跟着你的脚本转。那,穿越到场景内,利用某个媒介介质看AI重置素材?这也太逊了,在内部这个easy solution第一秒也被推翻了。只能和自己死磕了:无论如何,都要实现ai重置与真人实拍的无缝融合,这是“死命令”。接下来,就是一番翻找素材,找寻合适角度机位的苦功夫。

在大段的素材找寻那几帧的潜力镜头,所有为数不多的空景和大wide景,就成了我们眼中的香饽饽。要“神还原”既有的影视剧/综艺素材的拍摄角度与摄影机焦距,拍摄硬件黑科技少不了:在实拍中Motion Control与Q-Take双管齐下,配合艺人绿幕前无实物表演,才达成了后期AI合成神同步的基础。

shooting board中,人物与素材须融合的镜头节选

1695717207193799.png


第二道难关:AI风格化,如何平衡艺人和其他素材

攻克了第一道难关,接下来才是最难过的关——AI解决素材和真人的融合度。艺人的AI化形象需要有辨识度,又需要平衡全篇其余镜头的AI风格化。AI小组和后期团队紧密配合,在Stable Diffusion中尝试了不同的预处理模型,并反复实验不同的seed值。多次反复试验后,采用油画风格SDXL大模型插件,基于v1.5模型的官方升级版,语言模型引入了OpenAI的CLIP使得提示词更容易被理解。

为更好保证艺人的可辨识度,依然借助于传统online的后期方式,为牵涉到艺人的画面垫了一层底,再融合ai风格化重置,完成了虚与实的平衡融合。这样,也算一定程度上完成了从传统后期到AI后期的小跨越。

AI艺人与AI场景的融合demo

1695718558749647.gif


第三道难关:如何防抖

在AI重置中,还有一个需要对抗的问题就是抖动,在许多AI探索的作品中抖动感还是非常强烈的。为了解决这个问题,我们使用了kaiber,一个基于SD的底层模型,通过添加视频高级融合算法,以降噪、去模糊、增强、放大、缩小、超分辨率等,使风格化加强同时,减少抖动与前后帧不连贯的问题,保证了视频稳定度。


第四道难关?关关都是难关

在AI的探索过程中,其实会随机得到许多意想不到的效果,这些过程稿或遗珠未必能出现在成片中,我们也挑选了其中一部分分享出来。

异人之下土河车片段早期尝试稿

1695720191393320.gif


街舞赛博朋克AI方向寻找稿

1695720510590160.gif


街舞赛博朋克尝试稿

1695720579195810.gif


暗河传不同程度重置对比

1695720908905877.gif


过场AI自动演算过程稿

1695721165244059.gif

本片落地于电影院和户外大屏,取得了不错的反响。

重庆观音桥

1695726354369834.png


影院

1695726167584913.png


长沙五一广场国金通道

1695726714389810.png


写在最后的思考

此番优酷2023Brand Film由好旺角创意厂牌H2O操刀,与优酷一同攻坚克难了素材与实拍融合的AI制作。算作为2023的AI大潮中,贡献了一朵别样的浪花。在过程中,团队深深地被以天为计量单位的迭代速度震惊了,一切都在几何级数野蛮生长。短短一两月之间,不断有新预处理器及新的“丹药”Lora产生,真正应验了“学无止境”。

AI在疯狂生长,而我们的观点始终是:AI不能代替人类的思考,尤其是创意人的思考。如何善用巧用AI工具,才是我们的学无止境。


创作人员名单

创意合伙人:Thomas.Li
业务总监:Serena.Liu
创意总监:David.Li
客户服务:Lydia Xu、琳子

优酷

好旺角 GMKOK 上海

Thomas Li

 

参与评论

文明发言,无意义评论将很快被删除,异常行为可能被禁言
DIGITALING
登录后参与评论

参与评论

文明发言,无意义评论将很快被删除,异常行为可能被禁言
800

推荐评论

全部评论(5条)