「虚拟制作」在中国走了多远?

不仅要让影片制造的每一步都能被及时考验、修改,做到并行开辟,还要让实拍的后果最大年夜程度接近最终成片,总而言之,就是要让影视创作者的创作过程变得更“爽”。

作者 | 任彤瑶

几位年青人坐在大年夜堂内交谈,逝世后是热烈的人群,通亮的阳光从右侧的窗框照进来,为人物的轮廓镀上一层柔和的光晕。

这个及时拍摄的场景中,除了主角以及身前的桌椅,全部建筑、光源甚至群演们,满是背后LED屏虚构的。镜头扫过这个24米长的巨大年夜环屏,肉眼无法从监督器平分辨出虚实的界线。

这段画面来自博采传媒,一个位于杭州的老牌影视公司,以告白与CG动画制造见长。2016年开端,公司投入上亿研发属于本身的虚拟制造对象,环绕“及时”与“并行”两个关键词,团队从底层代码开端,开辟了从Previz、Techviz到实拍的影视虚拟制造全流程。

四年研发成果初显,这个意在让影视创作“所见即所得”的公司,正试图从另一条门路上与好莱坞同台竞争,甚至走到前面去。

此前《三声》存眷过不少院线大年夜片的创作幕后,一部大年夜型作品,往往能推动行业高低游获得有效的技巧与协作经验。

但制造技巧和流程的慢慢改革,往往不是只靠大年夜片/大年夜导演,也靠业内公司自下而上的测验测验推动。相对于其他行业,家当链条长、分工复杂的影视变更更慢,当我们把影视技巧放在新贸易、新制造的家当链里看,存眷重建临盆流程的实验就有了意义。博采传媒恰是案例之一。

01 | 所见即所得

长久以来,片子临盆遵守一套线性的流程,环环紧扣,每一个的修改都邑带来巨大年夜成本。

“大年夜家常说片子是遗憾的艺术。没有人说小说是遗憾的小说,写不好就撕掉落从新写一遍,但片子不可。”博采传媒开创人李炼告诉《三声》。

比如特效镜头的拍摄,演员须要在绿幕前完成表演,再交由后期完成特效制造,假如在剪辑过程中发明有漏掉或欠妥,就须要靠后期或从新返回绿幕棚内补拍,再进入特效制造-剪辑的轮回。比来的例子来自《公理联盟》,华纳为导剪版投入了7000万补拍预算。

对已具备成熟体系的好莱坞而言,这种重型的线性临盆不是难题,甚至是好莱坞之所认为好莱坞的优势地点。经由近百年的成长,以大年夜娱乐巨擘、大年夜制片公司为中间,好莱坞形成了一套分工精细、成熟的临盆流程。

毫无疑问,这是一套优良的工业体系,但照搬到国内并不完全适配。“好莱坞的开辟流程依然是线性的,每个环节都有异常成熟的人才,但中国人才基本是不一样的,每一局部的人才不足都可能导致重工业流程卡壳,在中国粹习好莱坞的重工业照样蛮苦楚的。”李炼说。

李炼算是位斜杠中年,卒业后干过摄影、剪辑,策划创意,做过电视剧导演,告白导演,动画片子导演,还做过片子特效。1993年成立博采传媒后,开端深刻接触动画制造与告白创意营业。在影视行业摸爬打滚了二十多年,做过流程线上的不合工种,他感到到,中国的影视市场与人才贮备状况,没办法在短时光内让全部家当变得更好。

有没有其他缩短制造周期的路径?改变流程本身或许是一种解法。

“2016年我给本身定了个目标,换个思路想将来模式,我们想将来要成长一种迭代开辟的影视流程,而不是像本来如许必须完成一步才能走下一步,一步一步线性地做下去,要变成并行的。”李炼说。

并行开辟的底层逻辑是“及时”。这意味着迭代开辟,快速试错。

举个例子或许更好懂得。在胶片年代,拍完照冲刷出来才能看到影像,很难返回修改,但数字化技巧让拍摄成果的考验变得及时,摄影过程也就变得更轻巧灵活。这是产生在拍摄环节的一项“及时”改革。

李炼认为,类似的技巧改进假如能产生在影视制造的每个环节,如在实拍过程中,能经由过程虚拟制造体系及时看到特效场景的成片,并且可以反复快速修改,片子就可能不再是“遗憾的艺术”了。

“图像技巧、衬着技巧包含人工智能都日新月异,片子临盆模式也到了该变更的时刻。”李炼说。

事实上,好莱坞也在产生类似的变革。特效技巧的进步,让及时Previz(预制片)获得了越来越多应用,虚拟制造的概念也因《曼达洛人》等作品获得了广泛存眷。

“但好莱坞还在本来的重工业的体系中,某一个环节上如许做。我们是一全部别系都用虚拟逻辑方法做,这个是最大年夜的差别。”李炼说,“从最底层开端及时Previz,到Techviz,再到实拍,我们想把全部流程全部用及时的逻辑去做。”

他戏称,这是“赤脚的不怕穿鞋的”,某种程度上,中国影视工业的不定型,在面对技巧变革时反而显得更灵活朝长进步。

2016年,博采传媒正式投入研发虚拟制片体系,团队摸索的偏向被总结为一句话:所见即所得,“make every production step real time”。

不仅要让影片制造的每一步都能被及时考验、修改,做到并行开辟,还要让实拍的后果最大年夜程度接近最终成片,总而言之,就是要让影视创作者的创作过程变得更“爽”。

02 | 改变Previz环节

肯定偏向后,公司开端为研发团队招兵买马,开辟全流程软件。

李炼解释,这是须要的步调。假如用别人的软件,就要跟随别人的流程,想开辟新的制造流程,就必须从底层开端写本身的代码。这不是一件轻易的事,技巧团队能真正用起来,已经是是两年之后的事。

“编程说话和艺术创作说话,不夸大地讲是两种人的说话。”李炼告诉三声,如今博采传媒的研发团队大年夜概三十几人,大年夜部分是计算机、图像辨认相干背景,但他们起先并不懂影视制造。“描述同一件事,可能说的都是中国话,大年夜家也互相听不懂。”

他们的办法是让法度榜样员下片场,让写代码的人到一线去跟拍摄,随时解决剧组的问题。有点像用做互联网产品的方法去做影视支撑体系:导演是产品经理,他须要什么,法度榜样员就供给什么。

起首被改革的是Previz(预演)环节,这是流程改革最初步的泉源。

Previz并不是新概念。它全称为Previsualization,指的是复杂场景在拍摄之前的预可视化。Previz能帮助制造组模仿、调剂大年夜范围复杂特效场景的拍摄,猜测实拍中将要出现的内容与机位,相当于一次低成本的精确演习。

这早已是当今片子拍摄的重要环节,如《星球大年夜战》《霍比特人》剧组就为木桶漂流等鏖战情节预先做了3D动画,以肯定拍摄筹划。

但一般而言,Previz都是作为“参照物”存在的,它与实拍等环节相对割裂。博采传媒欲望做到,Previz的数字资产能被后续环节持续应用,可以办事于更便捷、过细的开辟。

“及时Previz的方法有人在影片的局部做,形成一两个镜头,但全片都如许做的今朝还未有看见。”李炼说,全流程及时Preiz是公司正在推动的,这须要一整套新的底层设计。

诸如机位活动轨迹、灯光后果等数据将被保存下来,Techviz环节提至实拍之前,对Previz的资产进一步细化、精确,而后直接应用在实拍过程中,且可以快速修改。届时在实拍现场监督器上看到的画面,就无穷趋同于银幕上的最终输出画面。

Previz的个中一个流程是动捕。客岁博采传媒设备了一大年夜一小两个动捕棚,基于瑞典的一套动捕设备进行开辟。

这套设备本来办事于活动医学与生物解剖研究,可以拍摄每秒1000帧的高格影像,例如射箭、甩鞭等高速活动轨迹也能捕获。应用它来开辟是为了让Previz达到更高精度。为让这套技巧适配影视,研发团队自行设计了配套的功课流程,支撑虚拟与真实摄像机之间的无缝对接。

一般动捕的临盆模式,全身动捕数据是分别录制,弗成及时预览,后期须要大年夜量从新匹配甚至返工,但博采的临盆模式支撑高效及时输出表演动画,让影片内容的修改变得及时简略单纯,产能也获得了晋升。

据懂得,一部同品德200分钟的动画项目最快30天就可以完成,一部120分钟S级番剧制造周期约为4个月。

在博采传媒的大年夜动捕棚里,动捕师向我们展示了工作过程:

在拿到脚本和分镜后,动捕演员会穿上设备,在中心动捕区域开端表演。环绕四周的36个红外感应摄像头,将完全记录下演员的所有动作。动捕棚里没有威亚,一些类似扭转、腾空的动作,演员会在原地或者吊臂上完成。

交付一次完美的表演后,演员的义务就停止了。至于具体的运镜与拍摄角度,都可以交由后续的镜头调试处理。这是一种镜头姑息表演者的“分层制造”概念。

动捕师坦言,刚开端时,要接收这种违背直觉的制造方法有难度。“我们一开端认为,为什么不克不及直接一条拍掉落,人跟着走,镜头跟着走。”

但李炼认为,假如要进入量化临盆,迭代开辟,就必须分层制造。同时场地的应用率也获得进步,一个动捕场地会瓜分给几个剧组同时应用。假如要人姑息镜头,动辄做类似吊威亚飞荡的大年夜动作,工程量就会变得很浩大年夜,场地占用时光就会大年夜幅度增长。

今朝Previz环节只须要3到5小我,一个部分人数大年夜概有十多个。“动画与实拍本来是两个完全割裂的部分,我们欲望能让实拍范畴的人才与动画范畴的人才完全打通。改变功课模式,也是在创作表演上给两个范畴带来新的刺激。”李炼说。

03 | LED环屏

在Previz环节活泼的是动捕演员,假如是动画制造,表演到这一步就停止了。但真人片子还需进入实拍阶段,将Previz中的人物调换为最终涌如今银幕上的真人演员。

这须要真人演员站到Previz做好的场景中再演一遍。“屏”的感化就在这个阶段浮现。

这里所指的“屏”,不是一块简单的显示器,或者一个投影屏。它像那种在海洋公园最受迎接的巨大年夜环形鱼缸。

直径24米,高6.4米,曲折成270度的环形竖屏与顶屏相接,它们由2800多块LED屏幕构成,像素间距2.0mm,亮度达到1000nit。切入一段大年夜海的场景,波浪从身材两侧与上方涌起,将人包抄。

沉浸与逼真,这是LED环屏在虚拟拍摄中屡被说起的关键词。

与通俗的绿幕拍摄比拟,LED屏具有几个明显长处:环屏能供给足够逼真的场景光,避免了绿幕拍摄中绿色反射到物体上的“溢色”问题,对演员投入表演也更有赞助;其次它无需抠像做后期处理,实拍的情况画面可以直接应用。

与实景拍摄比拟,LED屏的可控性更强,不受气象影响,节约了外景的时光和场务等大年夜量人力,演员临场感优于绿幕拍摄。

比如要拍傍晚,实景一天之中只有5分钟的光效,但在LED棚里,剧组可以在同样光效下拍一成天。“说严重点可能节约200%的时光。本来100小我的剧组,如今只要30个。”李炼说。

LED屏应用最有名的例子莫过于2019岁终迪士尼推出的剧集《曼达洛人》。博采传媒建立环屏,比《曼达洛人》晚了大年夜半年,并且要着手解决那些没有被曼达洛人剧组解决的技巧问题。

“LED屏拍摄之前有不少限制,不克不及太近,不克不及斜着拍,不克不及拍全景,不克不及从户外转换镜头拍到室内,但我们认为祛除这些限制才是我们的技巧的标准。”李炼说。

LED屏拍摄一个最大年夜的疑问可能是:背景真的能足够高清楚逼真,不经后期就被放到银幕上供人核阅吗?这涉及一系列硬软件合营的复杂问题。

对博采传媒来说,优势在于世界上大年夜部分LED都是中国制造的,在中国做定制,设立课题研发的基本很好,博采是以申请了一批技巧专利。

他们在硬件上晋升了屏幕精度。曼达洛人剧组的屏幕精度是P2.5,博采传媒的是其4倍;曼达洛人剧组在拍摄义务高速移动的镜头时,须要在背景里零丁抠出一个绿幕,为人物的背景做后期,但博采传媒的屏幕已经可以拍摄每秒120帧的高速镜头,背景细节保持8K。

别的,他们还经由过程算法解决了诸如扩大年夜屏幕拍摄角度(曼达洛人剧组请求屏幕与摄像机尽量呈90度)、缩减什物与屏的距离、主动去除画面中的机械臂以及屏幕摄像头追踪等一系列问题。

团队还为LED屏自研了一套控制体系,可以根据拍摄须要供给不合类型、地位的特定光源。比如演员身处阴郁的场景,须要一个顶光,软件可以控制主角头顶的某块LED屏变成光源,其他LED屏保持不变。现场合需的灯光人员可以削减至一个。

聚焦“人”本身的概念贯穿了全流程。比如拍摄一个太空漂浮的镜头,镜头活动和表扬变更在Previz中转化为机位轨迹,以及跟着机位变更的LED屏背景。实拍演员时,不须要飞来飞去只须要控制神情就可以了。

“理论上我们的虚拟制片流程可以让所有步调可以变得很肯定。”李炼说,“甚至实拍阶段,摄影可以完全交由机械来做。”大年夜量工作交由前置预备完成,实拍和后期工作就变得更肯定更可控,幻想状况下不存在“补拍”环节。

04 | 将来筹划

2019年,李炼拿一个虚拟拍摄的初步demo飞去了美国,和六大年夜制片公司的高层会晤,介绍并行及时开辟的设法主意。制片公司们对此表示出兴趣,但似乎并没有在这方面有技巧预备。

当博采把demo发到fecebook上,收到了很多业内人士的积极反馈。“一天之内有差不多900小我来接洽,都是业内对虚拟制片很有研究的人,解释在全球范围傍边,制片流程都是大年夜家想要解决,没解决的问题。”李炼说。

在国内关于虚拟制片,大年夜家谈论更多是LED屏的问题,但李炼认为那不是虚拟制片的核心。真正的核心是看不见的,对底层制片逻辑的更新。

“以前想追赶或者想超出,都是在本来那条重工业、线性开辟的路上,超出根本不太可能,追若干年才能追上都不知道。如今是换了一条赛道,不是用本来好莱坞那套工业体系,而是走了新的流程。”

李炼认为,在虚拟制造的研发上,国表里是同一路跑线的,甚至国内有些环节更领先。走得早一些的博采传媒,在技巧端口上已经有了一些优势。

屏并不是虚拟制片的全部,真正的大年夜空间是在前端,优化软硬件合营。接下来博采传媒欲望解决体系易用性的问题,把开辟软件的UI界面做得更适配艺术家,更快速高效、便于应用。

其次须要解决人才问题。最稀缺的工种是技巧研发,别的虚拟拍摄现场的支撑工种,如屏幕保护、灯光调控、摄影监控等被统称为LED支撑团队,都是要同时有导演与技巧经验才能做好。

“在整套技巧中根本找不到一个现成的人,所有的人员都是本身培养,”李炼说,这就是为什么今朝为止,想复刻这个技巧不轻易,因为没有办法短时光同时构建几个完全的团队。他们接下来的工作之一就是构建培养更多人才。

可以预感,跟着虚拟制片的普及,影视行业的分工也将产生改变。“将来的片子行业可能就是导演加上很多做技巧工作的人,本来剧组干体力活的人数量会大年夜幅削减,换成比本来数量少得多的技巧人才。”

到今后,导演可能只须要带主创出场,人在履行中的制约身分越来越少,可能会有很多编剧可以本身做导演。

另一个新技巧是深度进修,它的目标是让虚拟制片变得更智能,创作者更随心所欲。“因为我们的目标是后期前置,尽量让这个片子无穷接近最后的成果。像抠像这种简单的事,就让机械干。”

短视频平台如快手、百度等都已经推出了智能剪辑对象,但与它们比拟,影视智能剪辑的深度进修资本是影视剧,捕获更精确的剪辑手段与镜头说话,进修时光更长,资本量更少。

据团队接触发明,如今国内对虚拟制造感兴趣的创作者不在少数,但真正敢去试的不多,“原因是大年夜家都不知道会在这个技巧面前碰着什么,感到忽然一下变得蒙昧,所以很多人抗拒这件工作,不肯去测验测验。”

但李炼信赖这种状况很快就会改变。这套并行开辟的体系给了导演更多试错机会,能更有效地实现导演的设法主意,让创作变成一件更具小我特点的工作。

今朝博采传媒已经合作了几部院线片子和综艺,也在制造本身的科幻题材的片子。加上公司之前在动画片子和告白方面的丰富经验,这套虚拟制片体系让公司大年夜面积扩大了营业视野,真人影视和动画融为一体,拓宽内容产出的风格,甚至有机会与游戏家当、与当下火热的Metaverse做结合??虚拟制造体系天然合适临盆沉浸感官的内容。

公司一方面会加紧复制团队,另一方面会在浙江建立虚拟拍摄基地,个中一个8米高的新屏幕已经在安吉建成,预备投入应用了。接下来就是在新体系下高效产出内容。

李炼对博采的技巧优势有信念,但也保持着危机感,他认为一个新的家当模型可能被复制,但影视行业假如掉去本来应当有的积淀,只做简单的模型复制,有可能伤害的是全部影视家当的将来成长前景。