《清明上河图密码》里,藏着阿里大文娱三年战略的科技野望

500

©️深响原创 · 作者|祖杨

11月的苏州昆山周庄古镇,满目金黄、秋意正浓。而新建成的周庄数字梦工厂室内摄影棚里,《清明上河图密码》剧组正在拍摄一场冬日荒原雪景的戏份。

一座高10米、弧长52米的巨型LED屏幕竖立在影棚中央,屏幕上辽阔雪景和现场搭建的雪地连成一片,数字场景中的雪花飘落和鼓风机造雪的节奏和密度神奇一致,完全以假乱真。随着带有跟踪系统的摄像机推拉移位,屏幕场景也相应变化。

屏幕不远处,搭建了两个白色帐篷作为临时工作间。一个便于导演实时查看监视器返送画面;另一个是虚拟制作技术人员用来控制雪花飘落的幅度、场景灯光的大小。不到两个小时,这场雪景戏就拍摄完成。

500

《清明上河图密码》虚拟拍摄现场

虚拟拍摄这项新技术如何改变影视生产的效率,通过这场雪景戏拍摄有了具体实感。

阿里大文娱数字化制作业务负责人许佳告诉「深响」:如果找一个荒原实景拍摄,对时间、人力要求很高,成本大幅拉升,严寒天气也增加了风险性;雪景也不适合传统的绿幕拍摄,会造成画面溢色或反光,后期再调整时木已成舟很难再补救。使用虚拟拍摄之后,不仅节省布景和视觉特效的成本支出,制作效率也大大提升,还更方便演员尽快入戏,让演员表演创作更自然。

包括《清明上河图密码》在内,优酷的多部剧集给出了虚拟拍摄时间表,这也意味着剧集数字化制作进入规模时代。

500

《清明上河图密码》虚拟拍摄现场

用技术加成艺术,已是阿里大文娱深耕影视行业的关键一步。近期其最新动态也佐证了这一点,阿里巴巴集团CEO吴泳铭参加二季度财报分析师电话会时针对大文娱提出了“三年战略”第一点便是:借助AI等科技创新,三年内基本实现影视制作端的标准化、流程化、数智化。

这是视频行业发展进入新阶段的信号——从单纯的关注内容和宣发层面,到进入到产业链上下游层面,利用科技手段提升生产效率,帮助整个内容生产行业全面升级。

硬件+软件升级,虚拟拍摄如何提升影视生产效率解放想象力

放眼全球市场,虚拟拍摄在海外已经不是新事物。

2019年前后,虚拟拍摄成了海外流媒体平台大手笔投入的重点,搭建团队、升级硬件和软件,开始应用到剧集制作。比如Disney+的重点剧集《曼达洛人》围绕着其拍摄所诞生的整套虚拟拍摄流程,被看作虚拟拍摄的一大跨越;去年Netflix的年度科幻巨制《1899》,其豪掷6000万欧元搭建了欧洲最大的虚拟拍摄基地,逼真地呈现了丹麦的农田、法国的战场、波兰的乡下,被称为德国史上“最贵”的电视剧。

500

Netflix《1899》虚拟拍摄现场

这股浪潮席卷到国内,视频平台方也在围绕着虚拟拍摄积极布局、探索迭代。

阿里大文娱是较早跟进的平台之一,也是目前为止投入最坚决的平台之一。2019年阿里大文娱提出帧享数字化制作整体解决方案,主攻远景拍摄,解决窗外与车戏的场景拍摄问题,推出以来已服务100多个剧组,技术愈发成熟。去年帧享迭代升级到2.0时代,这一阶段主攻中近景拍摄,以及采用3D实时渲染以及人物背景的实时追踪技术,重点解决天空、海洋、沙漠等极端场景拍摄的问题。

500

《清明上河图密码》虚拟拍摄现场

在许佳看来,此次在周庄数字梦工厂拍摄的《清明上河图密码》,是帧享数字化2.0“走出的重要一步”。

这一方面在于,此次虚拟拍摄在硬件与软件上都实现了升级。比如硬件上,LED屏幕是跟厂家深度定制和研发的一款适合影视拍摄的产品;软件上主要是在自研算法上的大量投入。据许佳介绍,目前虚拟拍摄的算法主要聚焦在“校准”上,以往校准一个镜头需要两个小时,一般拍摄需要15个镜头,仅校准就要浪费几十个小时,而阿里大文娱利用AI自研了一套专门用于校准的算法,算法升级后,校准15个镜头仅用20分钟,不仅提升了拍摄效率,精度上也有更好的呈现。

另一方面则是,《清明上河图密码》是目前国内虚拟拍摄场景最多的剧集。之前剧集使用虚拟拍摄最多是剧本中比较关键的一场、两场特殊场景,而此次在这部剧里,包括树下雪景、日落湖边、地下雅园等共有八个场景应用了虚拟拍摄,周期长达20多天。

虚拟拍摄的应用场景越多,对技术落地、筹备时间的要求也就更高。“虚拟拍摄的核心是虚实结合,观众分不清哪个是实景哪个是虚景,才算是真正的成功。”许佳表示,而每个场景都做到虚实融合,这就需要从前期筛选到后期搭建每一步都要标准化、流程化。

500

《清明上河图密码》虚拟拍摄现场

虚拟拍摄帮助创作者实现了不必要成本的缩减,也降低了不确定性。《清明上河图密码》执行制片人白若溪就深有感触:过去剧组要提前搭景、置景,再从一个景转到另一个景,耗费人力和成本,此次应用虚拟拍摄后,直接屏幕切换,节省了转场成本和置景成本,而且相对来说棚内场景可控,剧集生产也变得更有确定性。

而对于创作者来说,虚拟拍摄打通了虚拟世界和真实世界的边界,在“虚拟”的舞台上让想法真正落地,解放了创作者们的想象力。

整合链条、统一标准、产业协同,阿里大文娱的科技野望

虚拟拍摄对影视生产带来的便利、对影视行业产生的价值显而易见。但不可否认,目前国内的虚拟拍摄仍然处于早期阶段,市场对于“虚拟拍摄怎么用”的行业共识难形成,而在此前上下游的产业链也比较分散,距离大规模应用还有一定的距离。阿里大文娱自2019年以来在虚拟拍摄领域不断投入,逐渐聚合起了分散的产业链,为创作者提供一站式解决方案,也为下一步规模化应用奠定了基础。

从创作者角度,传统影视行业经验主义至上,创作者的观望情绪其实情有可原。这一部分在于技术本身的不成熟,另一部分则是上下游产业链现在还比较分散,之前很少有公司能够提供整体的解决方案。

“之前虚拟拍摄出了问题,可能有五家来自不同行业的不同公司去解决,甚至说这五家公司是不是能遵循一个统一的标准,我觉得这最终都会影响到剧组去应用。”许佳坦言。

500

《清明上河图密码》虚拟拍摄现场

对应着以上行业中存在的共识性问题,阿里大文娱这几年一直在联动产业链上下游,为创作者提供一站式、整体性的解决方案。“我们的目标是傻瓜式做法,提供整体性的解决方案,无论是方案的前期创意还是整体硬件方案的设计,还是数字搭建、现场技术服务,全都是我们负责完成,有问题就找我们,我们来想办法帮他解决。”

技术沉淀出的能力和工具,不仅使平台自己受益,也为全行业服务,助推影视工业化的进阶。“一家公司做,它不叫数字工业化。只有多方高效的协同、按照统一的标准来,才是真正的工业化,所以我们想的是和产业上下游一起,我们来统一这个标准、大家一起来协作。”许佳表示。

500

将视角再拉长,阿里大文娱的技术布局愈发多元,从产业链上游的虚拟拍摄到下游的生活应用,其技术脉络也逐渐清晰——以AI为圆心,以影视制作为主线,长期投入、纵深发展。

阿里大文娱研发的数字人厘里,在承接广告代言商务之外,前不久还在优酷真人漫改剧《异人之下》首次出演,扮演“二壮”角色,这意味着数字人打破了过去单一、二维的场景,进入到更复杂的影视生产流程中,并在训练下呈现出与真人演员无异的演技。而且数字人的加入也对未来影视生产带来更多的可能性。

再往前,今年七月,AI写真软件妙鸭相机正式上线,多次登上IOS应用排行榜第一,并凭借用户口碑和出色的体验感迅速刷屏朋友圈,成为国内AICG领域首个爆款产品。从诞生到现在,妙鸭相机也在不断迭代,并相继与外部平台合作推出新模板,加速其场景应用的多元化,让软件更具有实用性。

500

数字人厘里参演《异人之下》

技术讲究“慢工出细活”,需要有坚持有定力,才可能会看到进步,也是这点点滴滴的进步,可能会对影视生产有极大的改变。从连续五年深耕虚拟拍摄,到数字人的研发应用,再到“三年战略”,阿里大文娱内部也在践行技术的长期主义。

过去十年,长视频行业烧钱换增长、换用户,经历了长久的亏损期,而当下随着长视频平台走向盈利,行业也进入了“觉醒时代”,平台之间除了竞争优质的内容,技术也成了新的赛点——用好的技术进行更有效率的创作。

阿里大文娱在技术生产上已经率先走出一步,用技术去还原创作者脑海的星辰大海、为观众呈现波澜壮阔的景象、为行业、产业带来影视创作升级。这也是阿里大文娱的野望。

站务

全部专栏