XR电影—虚拟与现实的交互革命者来了

说起“特效拍摄”，你脑海中反映的第一个词会不会是“绿幕”？首先闪现的是不是这样一幅画面？

2020年伊始，迪士尼出品的《曼达洛人》中的【Volume】虚拟拍摄创意流程，给全球电影工业带来了新的认知；这套创意体系在奥斯卡最佳视觉影片《登月第一人》以及 HBO 的重磅作品《西部世界》都有核心的运用，为影片的制作成本，生产效率，以及视觉效果都带来了革命性的改变；这套体系为电影和剧集的创意及工业流程打通了一条“自由”和“无限想象”的通道。

《曼达洛人》

这条“通道” 将电影工业中的 Production Design 美术，Cinematography 摄影，Performance 表演，Visual Effects 特效，以及影片制作的 Pre-production 前期，Production 中期，Post-production 后期，以一种非线性并且非物理存在的新模式呈现于电影工业流程之中。

《登月第一人》

《西部世界》

如果说， “表演再也不用靠想象； 美术再也无需一味靠搭建；特效再也无需单纯靠绿布”这可能是导演和制片人一直想实现的工作方式，所追求的也正是“电影工业的流程化，模块化，实时化”。最终达到成本的有效控制化。

而这种实现手段的推进，无疑是一场虚拟与现实的交互革命。而今这场革命，不仅发生在好莱坞，它也真真切切的在中国电影工业中实现了。

干货来了【知识点小课堂】

美剧的制作里所讲到的 “Volume” 和 “StageCraft” 如何理解和体会呢？

其创意流程简答说来就是：

1：场景上，角度转换自由

2：摄影上，现实与虚拟的自由

3：表演上，体验与感知的自由

是不是觉得有些空？那么，结合中国的电影工业现状，做个简要说明，干货如下：

第一：美术上，场景转换的自由。

美术的场景，也就是表演的空间。这套体系的核心在于：在有限的摄影棚空间中，叙事空间和表演空间任意转换，拍摄角度的任意调整。也就是说，导演可以任意选择正打以及反打， 高低左右，上下前后。改变换景以及换光的效率。

实验短片《只为梦中与你相遇》中的岸边的场景转换

disguise 中的场景转换

LED中的转换

实拍中的转换

第二：摄影上，现实与虚拟的自由

摄影机在现实世界与虚拟环境中的自由游走。

虚拟引擎可以创造无限的空间和摄影机自由的运动，这套体系可以将物理空间里的摄影机运动与虚拟引擎的摄影机运动，通过编程控制达到交互和统一控制。

现实世界摄影机运动坐标系与虚拟世界中的摄影机坐标系，原本是两个完全独立不相关的主体，彼此之间无法互动，但是我们通过英国 disguise 公司的XR科技 将虚拟引擎所建造的虚拟空间与现实世界摄影机的运动，实现了实时的互动与控制。

追踪摇臂

机械臂

Mosys 摄像机追踪

第三，表演上，体验与感知的自由

虚拟空间对于演员的表演和导演的控制是最大的挑战。

现场 LED 的仿真影像呈现，将摄影棚中的演员，直接带入到真实的场景中，沉浸的表演，让演员有的放矢，相信自己与空间的存在关系。

真实存在的“虚拟世界”让演员的表演可以建立一种信念，做到“我相信”“我就在”这样体验式的表演呈现。

“虚拟与现实”的交互革命，真的来到了你我身边

电影科技是一门综合复杂的生产线， 需要主干技术的研发以及周边产技术模块的绑定；北京电影学院副教授李金辉联手英国 disguise 公司与北京秀加科技（SHOWPLUS）共同研发的【XR-V-Stage】工业级影视剧拍摄创意体系，通过一部完整的实验短片《只为梦中与你相遇》（简称《遇》）进一步验证了这种创意体系的可实施性。

“只为梦中与你相遇“灵感来自于仓央嘉措的诗句“那一世，转山转水转佛塔，不为修来世，只为途中与你相遇”，这次创作，旨在探究在影片中为真实的角色创造一个奇幻的虚拟世界。“奇幻与虚拟”是一直以来都是电影视觉创作中要面对的最具挑战的问题。

在《遇》的创作及研发中， XR-V-STAGE 创意系统贯穿了机械臂与摄影机的实时运动，通过实时光学捕捉控制，实现了虚拟环境与物理空间的无缝链接。虚拟引擎对于戏剧环境的营造，让演员可以在“存在”的环境下，相信自己的表演。

实验短片《只为梦中与你相遇》分镜手稿及概念图例

戏剧灯光用于虚拟拍摄

《曼达洛人》《西部世界》的幕后花絮中，未曾被我们察觉到的，恰恰是被称为电影视觉创作中灵魂的“灯光”，或许这一点，也恰恰是美国人不愿意告诉我们的。

很多人认为，只要有了 LED 屏幕，打光的问题就解决了，这是个错误的判断。现场 LED 的亮度和显色指数都达不到灯光的标准。LED 屏幕对于人物的最大的影响是“反光补偿”，比如反光体，或是画面的高光部分，例如额头，发梢，玻璃杯等。在 LED 屏幕环境下可以呈现出真实的色彩和反光状态。比起绿幕拍摄，这给后期带来了巨大的便利。

这次试验中的另外一个突破性的成果是将戏剧灯光用于影视剧的表演塑造。

灯光控台

现场灯光调试中

在这里我们不赘述胶片的感光属性，以及数字摄影机对于感光的具体技术参数。但随着 LED 灯具的研发以及电影摄影机对于色彩和照度的宽容度增强，戏剧灯光与电影灯光技术的壁垒已经开始逐渐消减。

在 “ XR-V-STAGE” 的创意体系中， 对虚拟空间的灯光设计与物理空间的灯光照明给出了一种解决问题的方案：虚拟引擎中的灯光数据可以通过 Brand MA 灯光控台，将灯光的色温，照度，白平衡，等数据数字化虚拟化，呈现在 Virtual Stage（虚拟舞台） 中。而最为重要的是，虚拟灯光的物理化，可以将演员与场景的变化，做到景与人随，人随景至。

实拍时，场景的灯光测试

实验短片《遇》片中，在水边望月的一组镜头，随着演员的空间调度，虚拟灯光在 Grand MA 控台的调试下，完成了与虚拟引擎的气氛转化，以及人物面部氛围的营造。

虚拟世界的空间与现实世界的摄影机运动

虚拟场景中的摄影机运动数据如何与真实物理空间的数据实时交互，是一个不敢企及的问题。

这次将 disguise 的 XR系统与 YASKAWA (安川)机械臂和轨道系统，编写在一套数据系统里， 现实世界的摄影机数据可以随心所欲的驱动虚拟空间里的奇幻环境。

disguise + 实时渲染引擎

机械臂拍摄

旖旎奇幻环境中的实时转换：

虚拟引擎为我们带来的最为便捷的革命，则是“指哪打哪”“瞬间即得”

因为拍摄演员表演的物理摄影机的数据可以驱动虚拟引擎里的虚拟摄影机，因此，我们可以将演员的表演随意地带入任何一个空间。

实验短片《遇》片中，男女主人公，从桥上到水边，再到庙堂的屋顶远眺明月，都是在摄影棚的 V-Stage（虚拟舞台）中，将场景的大空间布局设置好之后，随即将演员置入其中，接下来的工作就是演员为导演所呈现的体验式的沉浸式表演了。那的确是一种相对自由的表演创作。

结语：

XR-V-STAGE（虚拟拓展空间），这种虚拟影像的影视创作流程,为未来影视剧所带来的核心改观综述来谈：虚实空间的自由化，摄影运动的可控化，灯光的虚拟交互化，前生产阶段的非线性化，视觉特效的现场化和实时化；

当我们站在电影工业发展流程的视角上去审视虚拟空间延展的技术与艺术的互动，没有理由不相信，XR-V-STAGE 将会非常迅捷的普及到世界电影工业的主流创意体系和生产线中去。

感受到了吗，这场虚拟与现实的交互革命已经来了，或许它就在你身边。