我最近有机会来到了位于加利福尼亚州卡尔弗城的Technicolor体验中心，参观了Genesis虚拟制作平台，这是Technicolor与其视觉特效子公司Moving Picture Company(MPC)多年合作的成果。Genesis有着很高的终极目标，但目前还是被用于通过虚拟现实使传统制作团队成员有能力动手参与动画的视觉化过程。这个不断发展的工具生态系统已经被用于制作视觉特效丰富的电影，包括迪士尼的真人版《奇幻森林》(The Jungle Book)。
Genesis的核心是其实时性能，是通过利用Unity 3D游戏引擎和NVIDIA GTX 1080和RTX 2080高性能GPU实现的。通过将实时图像与Vicon动作捕捉相机、用于摄像机的实时运动控制编码器以及HTC Vive虚拟现实头显相结合，Genesis可以让工作人员预览动画和图像，指导、制作设计和虚拟地演出场景。Genesis还可以跟踪每个摄像机的移动、道具/角色/灯光的位置、场景，并存储到安全的云数据库。该系统通过Technicolor自己的Technicolor Connectivity网络运行，允许不同位置的工作人员在同一场景中虚拟地并且同步地进行交互和协作。
根据MPC工作室负责人Kerry Shea的说法，“我们希望为导演、电影摄影师和他们的工作人员提供他们习以为常的传统制作工具，并让他们更具创造性和更直接地参与前期制作过程。Genesis将主要的创意决策更多地转移到制作过程中。“
Genesis演示的第一部分展示了预制作的流程，其中包含一个虚拟的技术监视工具。MPC的艺术家创建了一个内部序列，来演示Genesis在CG工作量大的项目中的使用过程。这个名为Speakeasy的项目包含了一个时髦的CG形象，这个形象在禁酒时代的酒吧里做了几次被拒绝的尝试。整个场景中含那个时期的道具和角色，并且可以使用Vive VR头显实时导航。
根据MPC的虚拟艺术部门主管Ryan Magid的说法，“我的团队有大约一个星期的时间来为场景和角色创建所有需要的3D资产，然后只需几个小时来拍摄场景本身。在那段时间里，我们能够通过导演、电影摄影师、动作捕捉演员和整个组的工作人员的全部投入来进行数十次拍摄。
Genesis不仅能捕获原始的动作捕捉数据和相机支持的编码器数据，还能捕获每个道具、灯光、虚拟角色和相机的逐帧位置。然后，在实时捕捉期间生成的CG镜头能在回放过程中持续调整。该过程赋予创意团队在预览过程中更高的自由度和互动性，这通常是CG动画师的权限范围。
随着预制作演示的完成，我们接下来转移到一个更大的动作捕捉舞台，环绕着Arri SkyPanel S30s LED灯; 配备了巨大的LED显示屏，一台索尼F55相机连接到Genesis系统，现场渲染在前面创建的Speakeasy项目。旁边一名演员穿着由Vicon动作捕捉传感器跟踪的动捕服。工作人员为我们提供了操作三脚架的机会，通过三脚架，可以在虚拟场景中移动摄像机，或者将摄像机连接到场景内轨道上的虚拟推车上。
当演员表演他的对话线并与酒吧中的其他虚拟顾客进行交互时，我们能够操作推车并移动摄像机。当我们操作摄像机时，我们可以看到我们的动作与现场的动作捕捉演员的动作结合的效果。不一会儿，我们就创造出了一个完整的场景，可以作为预演动画进行下一步制作。根据Shea的说法，“我们的员工可以同步且安全地与世界各地的场景互动。即使是高级管理人员也可以从他们的办公室虚拟地参与其中，他们所需要的只是Genesis机架单元(配备了功能强大的PC和GPU硬件来驱动VR头显。)“
作为舞台演示的一部分，我们还目睹了Genesis的一个正在开发中的用途。MPC的虚拟制作主管Joseph Henderson解释说：“我们经常遇到的一个挑战是如何让一个CG角色与真人演员进行令人信服的互动。”在这个场景中，一个演员被F55摄像机拍下来，身后的LED屏幕上有森林的动画图像。当相机操作员在移动相机时，LED屏幕上的图像也相应地移动了视角。
当团队在改变道具、天气和灯光时，动画可以实时编辑，全部都是动态的。 “现场的图像质量还不够真实，” Henderson补充说：“随着GPU变得越来越强大，这种鸿沟正在缩小。我们已经在和NVIDIA合作，利用他们的RTX 2080下一代实时光线跟踪图形卡，看看我们能在多大程度上进一步改进工作流程。“
随着实时动作捕捉的完成，我们被邀请回来观看Vive VR头显中已完成的拍摄内容。VR头显的图像具有非常高的分辨率，具备3D图像和声音，创造出了一种高水平的沉浸感。我能够重新体验之前在舞台上演出并拍摄的内容。使用Vive手持式控制器，我可以重置道具和灯光，并从任何摄像机角度检查它。你会觉得在创造性地探索场景方面任何事都是可能的，并且会知道在调配大群工作人员花费大量时间和成本之前如何最好地拍摄它。
“Genesis有很多潜在的用途，”Genesis的开发人员的Markus Ristich说道。“我们最近在伦敦证券交易所做了一个主要序列的展示。导演知道他不能长时间关闭交易所，甚至不能进行监视。因此，我们与市政府合作，用激光雷达扫描该区域，同时使用了该区域的蓝图以及许多参考照片。然后，我们在Unity中重新创建了整个交易所，并为在Genesis中进行VR预览做好了准备。导演能够舒适地制作他的镜头，并且高效地确定他需要哪些摄像机和物品才能在真实的地方进行拍摄。我们能够将一个非常具有挑战性的任务变成更具互动性的东西。“
随着虚拟现实，混合现实和增强现实等沉浸式技术的不断成熟，我们将看到将它们融入传统电影制作的新方法和新创意。Genesis证明了VR和实时游戏引擎是导演、摄影导演、制作设计师以及习惯于更加传统的电影制作工具的其他主要创作团队可以尝试的更强大的工具。而且在虚拟现实中体验电影场景也十分有趣。
最初发布于2019年3月11日
原文链接：https://ascmag.com/articles/technicolor-genesis-virtual-production-platform