Technicolor打造Genesis虚拟制作平台 将VR用于电影制作

我最近有机会来到了位于加利福尼亚州卡尔弗城的Technicolor体验中心,参观了Genesis虚拟制作平台,这是Technicolor与其视觉特效子公司Moving Picture Company(MPC)多年合作的成果。Genesis有着很高的终极目标,但目前还是被用于通过虚拟现实使传统制作团队成员有能力动手参与动画的视觉化过程。这个不断发展的工具生态系统已经被用于制作视觉特效丰富的电影,包括迪士尼的真人版《奇幻森林》(The Jungle Book)。

Genesis的核心是其实时性能,是通过利用Unity 3D游戏引擎和NVIDIA GTX 1080和RTX 2080高性能GPU实现的。通过将实时图像与Vicon动作捕捉相机、用于摄像机的实时运动控制编码器以及HTC Vive虚拟现实头显相结合,Genesis可以让工作人员预览动画和图像,指导、制作设计和虚拟地演出场景。Genesis还可以跟踪每个摄像机的移动、道具/角色/灯光的位置、场景,并存储到安全的云数据库。该系统通过Technicolor自己的Technicolor Connectivity网络运行,允许不同位置的工作人员在同一场景中虚拟地并且同步地进行交互和协作。

根据MPC工作室负责人Kerry Shea的说法,“我们希望为导演、电影摄影师和他们的工作人员提供他们习以为常的传统制作工具,并让他们更具创造性和更直接地参与前期制作过程。Genesis将主要的创意决策更多地转移到制作过程中。“

Genesis演示的第一部分展示了预制作的流程,其中包含一个虚拟的技术监视工具。MPC的艺术家创建了一个内部序列,来演示Genesis在CG工作量大的项目中的使用过程。这个名为Speakeasy的项目包含了一个时髦的CG形象,这个形象在禁酒时代的酒吧里做了几次被拒绝的尝试。整个场景中含那个时期的道具和角色,并且可以使用Vive VR头显实时导航。

根据MPC的虚拟艺术部门主管Ryan Magid的说法,“我的团队有大约一个星期的时间来为场景和角色创建所有需要的3D资产,然后只需几个小时来拍摄场景本身。在那段时间里,我们能够通过导演、电影摄影师、动作捕捉演员和整个组的工作人员的全部投入来进行数十次拍摄。

Genesis不仅能捕获原始的动作捕捉数据和相机支持的编码器数据,还能捕获每个道具、灯光、虚拟角色和相机的逐帧位置。然后,在实时捕捉期间生成的CG镜头能在回放过程中持续调整。该过程赋予创意团队在预览过程中更高的自由度和互动性,这通常是CG动画师的权限范围。

随着预制作演示的完成,我们接下来转移到一个更大的动作捕捉舞台,环绕着Arri SkyPanel S30s LED灯; 配备了巨大的LED显示屏,一台索尼F55相机连接到Genesis系统,现场渲染在前面创建的Speakeasy项目。旁边一名演员穿着由Vicon动作捕捉传感器跟踪的动捕服。工作人员为我们提供了操作三脚架的机会,通过三脚架,可以在虚拟场景中移动摄像机,或者将摄像机连接到场景内轨道上的虚拟推车上。

当演员表演他的对话线并与酒吧中的其他虚拟顾客进行交互时,我们能够操作推车并移动摄像机。当我们操作摄像机时,我们可以看到我们的动作与现场的动作捕捉演员的动作结合的效果。不一会儿,我们就创造出了一个完整的场景,可以作为预演动画进行下一步制作。根据Shea的说法,“我们的员工可以同步且安全地与世界各地的场景互动。即使是高级管理人员也可以从他们的办公室虚拟地参与其中,他们所需要的只是Genesis机架单元(配备了功能强大的PC和GPU硬件来驱动VR头显。)“

作为舞台演示的一部分,我们还目睹了Genesis的一个正在开发中的用途。MPC的虚拟制作主管Joseph Henderson解释说:“我们经常遇到的一个挑战是如何让一个CG角色与真人演员进行令人信服的互动。”在这个场景中,一个演员被F55摄像机拍下来,身后的LED屏幕上有森林的动画图像。当相机操作员在移动相机时,LED屏幕上的图像也相应地移动了视角。

当团队在改变道具、天气和灯光时,动画可以实时编辑,全部都是动态的。 “现场的图像质量还不够真实,” Henderson补充说:“随着GPU变得越来越强大,这种鸿沟正在缩小。我们已经在和NVIDIA合作,利用他们的RTX 2080下一代实时光线跟踪图形卡,看看我们能在多大程度上进一步改进工作流程。“

随着实时动作捕捉的完成,我们被邀请回来观看Vive VR头显中已完成的拍摄内容。VR头显的图像具有非常高的分辨率,具备3D图像和声音,创造出了一种高水平的沉浸感。我能够重新体验之前在舞台上演出并拍摄的内容。使用Vive手持式控制器,我可以重置道具和灯光,并从任何摄像机角度检查它。你会觉得在创造性地探索场景方面任何事都是可能的,并且会知道在调配大群工作人员花费大量时间和成本之前如何最好地拍摄它。

“Genesis有很多潜在的用途,”Genesis的开发人员的Markus Ristich说道。“我们最近在伦敦证券交易所做了一个主要序列的展示。导演知道他不能长时间关闭交易所,甚至不能进行监视。因此,我们与市政府合作,用激光雷达扫描该区域,同时使用了该区域的蓝图以及许多参考照片。然后,我们在Unity中重新创建了整个交易所,并为在Genesis中进行VR预览做好了准备。导演能够舒适地制作他的镜头,并且高效地确定他需要哪些摄像机和物品才能在真实的地方进行拍摄。我们能够将一个非常具有挑战性的任务变成更具互动性的东西。“

随着虚拟现实,混合现实和增强现实等沉浸式技术的不断成熟,我们将看到将它们融入传统电影制作的新方法和新创意。Genesis证明了VR和实时游戏引擎是导演、摄影导演、制作设计师以及习惯于更加传统的电影制作工具的其他主要创作团队可以尝试的更强大的工具。而且在虚拟现实中体验电影场景也十分有趣。

最初发布于2019年3月11日

原文链接:https://ascmag.com/articles/technicolor-genesis-virtual-production-platform

Jaunt VR电影拍摄指南中文版 第一章

Jaunt在2016年9月发布了《The Cinematic VR Field Guide: A Guide to Best Practices for Shooting in 360°》,为VR电影制作人们提供了VR电影拍摄的指导说明。笔者为大家提供翻译稿。首先为大家带来的是该指南的第一章,主要讲述了虚拟现实的两大类型、VR电影的基础知识等等。

1、虚拟现实基础知识

据维基百科,虚拟现实是一种计算机技术,可以复制真实的或想象中的环境,并且可以模拟用户的临场感,用户可以与其环境互动。在电脑或者手机上,这通常意味着屏幕上呈现的视觉内容和扬声器或耳机呈现的听觉内容。可供触摸或可提供反馈的设备也正在涌现,提供嗅觉和味觉的设备还需要一段时间。

对于任何形式的虚拟现实来说,其关键都是临场感和沉浸感。正是这些使其区别于以前的其他媒体,并且能够把素材创作出一种强烈的情感联系。Chris Milk是早期的VR电影导演之一,他经常引用一个观点,称虚拟现实为“共情机器”。

1.1虚拟现实的种类

虚拟现实有两个基本的阵营-电影级虚拟现实和基于游戏引擎的虚拟现实。区别在于生产手段、回放方法、真实度以及互动内容的多少。

1.1.1 什么是基于游戏引擎的虚拟现实

很长时间以来,当人们想到虚拟现实时就会想到这一种。这是由3D CG游戏引擎实时生成的电脑图形,比如Unity或Unreal。这些内容被生成之后,可以使用特制的头戴显示器(头显)比如Oculus Rift或HTC Vive,这些头显包含运动跟踪功能,用户可以在虚拟现实中走动,感觉就像是真的一样。

这种虚拟现实同样适用于高互动性的内容,可以使用提供手部跟踪控制的Rift和Vive,可以让你拿起并移动物体,比如挥舞一把剑,开枪射击,或者和整个环境进行互动。感觉很像是自己进入了一场游戏。

并不能说第一批VR头显主要针对重度游戏玩家,就意味着这种技术仅仅是为了游戏而开发。游戏引擎也可以用来创作互动电影或音乐视频,就像是创作游戏那样。因为它们尤其擅长创作出完全不像现实生活的世界。

1.1.2 什么是电影级虚拟现实?

Jaunt专注于电影级虚拟现实。下面就是一段360度电影,使用一台全景摄像机系统,可以作为一个圆柱投影那样进行回放,并且允许观众随着剧情的展开而四处观看。圆柱投影是一个非常好地展示场景的方法。根据摄像系统和拼接步骤的不同,其中的场景可以是单视场的(扁平)或者立体的(3D)。

现在你已经了解到,在电影级虚拟现实中你可以看到非常真实的场景,而在由游戏引擎在电脑上生成的虚拟现实中则不会这样。同时,这些场景在拍摄过程中还会使用空间音频麦克风,来让声音听起来就像真的一样。如果你听到你的右边有条狗在叫,并且转头看左边,你会看到有一条狗就在声音传来的地方。感觉就像是进入了电影场景中一样。

但并不像基于游戏引擎的虚拟现实,在电影级虚拟现实中你无法自由地在场景中移动,除非在你移动的同时,摄像机也随着移动并进行拍摄。随着新的摄像系统的采用和新技术的逐步开发,今后你也将可以在拍摄的场景中进行四处走动。在下文中的“VR摄像机的种类”章节中可以了解更多信息。

虽然电影级虚拟现实并不像完全基于游戏引擎的虚拟现实环境那样充满互动性,你仍然可以为其添加互动元素。以《Choose Your Own Adventure》为例,其中就包含凝视检测、可互动的叠加和界面、声音或图片的触发、手势、甚至加入完整的CG内容也是可以的。

所有这些将会构成一种全新的媒体,这是一个我们刚刚开始意识到其潜力的空白的画布。VR领域的杀手级应用将会融合了电影、游戏和互动影院。现在,我们还在带妆彩排阶段,一切皆有可能。即使是区区五年之后,VR内容也会与今天的截然不同。

1.2、立体vs单视场VR

VR影片素材既可以是单视场3D,也可以是立体3D。单视场的素材是扁平的,并没有景深数据,在360°的可视范围内都是以同样的景深被投射的。当然,你同样可以转动头部,四处观看这个场景,但没有任何的东西会变得离你近一些,只会变得大一些而已。这就像是普通的2D电影中的特写镜头,和3D电影中那些东西会逼真地离你越来越近,并且从屏幕中跳出来所形成的对比一样。

而在360°立体3D影片中,你将获得完整的每个方向的3D观看体验,其中的物体也会真正地离观众越来越近。这会产生更加逼真地、更具沉浸感的感觉,就像是我们在现实生活中所经历的一样。想象一下在VR中拍摄一只水下的鲨鱼的情景。为了达到最大的视觉冲击效果,你会希望观众感受到鲨鱼正在离自己越来越近,并且每个观众都能有此感受。使用立体3D技术,你可以达到此种效果,而是用单视场的话,虽然鲨鱼仍然来势汹汹,但它不会离你越来越近,你将会丢失临场感和沉浸感–当然还有恐惧感。

无论在哪儿,你都应该尽力去尝试拍摄完整的360° 3D内容。但是,为什么并不是所有人都在这样做呢?你可能会想到,这种拍摄需要的设备更加昂贵,而且拼接过程更加复杂,如果没有大量的后期工作和资金投入的话,也不会获得好的回报。Jaunt推出的Jaunt ONE摄像机和Jaunt云服务(JCS)就是为了简化这些程序,最大限度地自动化整个过程。

你可以在Jaunt云服务文档中获取更多信息。

还需要说明的是,并不是每个场景或镜头都缺失需要在3D中拍摄,当然了,也不一定都能做到在3D中拍摄。目前,只有极少数几款360°拍摄设备可以用于水下拍摄。而且由于防水设备的限制,更难以把3D拍摄设备装在其中,所以通常会使用较小的单视场设备。在下文的“水下拍摄”部分可以获得更多信息。

同样,在汽车内进行拍摄时,会受到车内空间的限制,其中的物体会距离很近,这时通常使用一个较小的GoPro式的拍摄设备,并且采用单视场来拼接素材,会获得比较好的拍摄效果。大部分的相机都有最小物距的要求,你必须遵守,这样才能拼接出质量较高的作品,而且在3D拼接时,这一物距的要求会更大。如果你想要离拍摄的物体很近的话,尽量选择单视场的拍摄方法。在下文的“物距”部分可以获得更多信息。

类似的,如果使用无人机的话,重量也是一个问题。所以,在很多情况下,我们还是要使用一个更小的,更轻便的GoPro类设备,并且拼接单视场的素材。在很多情况下,拍摄地会离地面非常远,你也无法获得足够的立体视察,而且观众们也几乎察觉不到。

无论是哪个已经推出的作品,其中的大部分内容都是完整的360° 3D手法拍摄的,其中也有些许画面,比如上面这些情景是使用更小的、更轻便的GoPro设备进行拍摄,并且在单视场中拼接的。如果处理正确并且使用的时机很得当,你的观众们或许不会察觉。

1.3、360°视频

当我们谈论360°视频时,我们必须要澄清一件事。那就是它和VR有什么区别?为了让人们了解VR,并且充分利用现有的重度使用的平台,许多公司,尤其是Facebook和谷歌旗下的YouTube都已经在推广360°视频。这是你可以用浏览器在网页中观看的视频,并且 可以使用鼠标拖动画面,或者在手机APP中,通过把手机移动或旋转来达到同样的效果。

同样,我们的Jaunt手机端和web端应用也可以做到这一点,对于那些暂时无法使用或手上没有VR设备的用户来说,也可以在3D中体验到这些内容。像是Facebook这样的品牌和公司之所以喜欢360°视频,是因为这可以帮助他们撬动所有人都在使用的平台上巨大的用户群体。

然而,要称其为虚拟现实,我们必须要谨慎。如果太多的用户都认为这就是虚拟现实的话,他们或许会认为,他们已经真正地体验过了虚拟现实–并且包含3D中的临场感和沉浸感,以及空间音效–但却并没有多深的印象。我们必须要明确区分360°视频和真正的VR,并且使用前者来激活观众们,让他们体验后者。或者像是3D电视那样,让VR也经历快速的死亡。

而这,也就让我们来继续思考真正地虚拟现实内容的需求到底是什么。

1.4、VR的最低需求

你可以和100个人去谈论虚拟现实的必要条件,但会获得非常多的答案。既然我们在寻找最大限度的沉浸感和临场感–也就是真正身临其境的感觉–Jaunt提出四点最低需求:

360°圆柱投影图像–这是一个你可以上下左右360°观看的场景。有些摄像设备则是采用了180°的特制的相机来进行在线直播,这样可以减少带宽需求,降低拼接的复杂程度。但是,当你看向身体后方时,你会直接离开这个场景。通常为了减少这种身后只有黑色背景的情况,会插入一张图片,比如节目的宣传海报,比赛的比分情况等等。

立体3D–这是比较有争议的需求之一,因为今天很多人都在拍摄单视场的内容,毕竟这种内容在捕捉和拼接时都会更便宜且更简单。然而,想要真正获得临场感–身临其境–也就是VR真正特别的地方,你真的需要尽量拍摄立体3D内容。立体3D就是我们在现实生活中所看到的那样,并且在VR中也同样重要。

空间3D音效–声音是任何电影类产品中极为重要的一部分。它不仅能够提升沉浸感,同时也是像运动和光线那样的仅有几个线索之一,可以用来获得观众对重要事件的注意力,因为观众们可能在看任何地方。捕捉空间音频可以增强你的临场感。

在头显中观看–最后,如果你没有真正的观看方式的话,上面这些都是没用的。虽然经常会有给没有设备的观众创作的360°视频,并且允许你拖动画面。但这种视频并不能看到3D效果,也不能提供空间音效回放。为了达成完整的体验,你真的必须要用合适的头显设备。好消息是,你不一定要购买Oculus Rift或HTC Vive这样的昂贵的设备。市场上还有很多非常便宜甚至是免费的产品可供选择,这些产品会让你目不暇接。

1.5、头显的种类

市面上有很多不同类型的头显设备,它们在价格和性能上的差异也非常大。从非常简单的谷歌Cardboard,到三星Gear VR,再到Oculus Rift和HTC Vive。就像手机和那一套集成电路组件那样–其中包含陀螺仪、加速度计、小型高清屏幕–正是这些复活了曾经的虚拟现实,让Palmer Luckey创作出了首个Oculus头显。手机是这些产品的基础,甚至是高端的Rift和Vive的基础。

较高端的头显可以提供全身的追踪,其中还有些包含了手部控制器,可以提供“房间规模”VR系统,让用户四处走动,并且和环境进行互动。但仅仅使用你的手机加上简单的透镜,也就是Cardboard或塑料外壳的产品也可以让你获得惊人的体验。随着手机生厂商在头显中集成更好的VR子系统,这种体验会变得越来越好。

头显设备的清单还在急速扩充,你可以在网上查询到此类设备的信息。

最初发布于2017年1月23日

为VR体验店量身打造 这是全球首款角力型竞技VR游戏

4月13日下午,笔者前往中关村三大不六咖啡,参加了奥嘉科技新游戏《牧场星球》的媒体体验会。在此之前,根据奥嘉科技透露的消息,这款游戏会以“撸”为主,难道这家开发了密室逃脱VR游戏《18层》的公司要转型开发成人游戏了?

当然不是,这可是一款正经的、新颖的、联机对战的、以“撸”为主要玩法的VR游戏。并且尤为重要的是,这款游戏对于女性用户很友好,应该说,是以女性为主导的一款典型的VR游戏。

在之前的一次线下分享会上,奥嘉科技CEO谈书宏就曾分享了他对于目前VR体验店所面临的问题的一些看法。在他看来,VR体验店的游戏产品首先要让孩子和女性喜欢,但是也不能让男性反感。简单的说,就是女性为主导,男性不排斥,小孩可接受。另外,游戏内容还可以植入轻竞技概念,加入轻度的博弈过程。

《牧场星球》就是符合这一理念的一款游戏。经过谈总的介绍和笔者现场体验可以发现,这款游戏与目前VR体验店的爆款游戏相比,具有如下特点:

全新品类 玩法新颖

根据谈总的介绍,这款游戏的题材属于WRG(The Wrestling Game),即角力型竞技游戏。并且是国内首款WRG VR游戏。从目前来看这还是一个全新的题材,简单的说,你需要和对手来角力,获取尽量高的积分来争取胜利。

在游戏画面中,玩家右手的手柄是一把枪,可以发射出捕捉网,捉到在两个玩家中间的路上大摇大摆走过的各种动物。捉到之后,需要左手手柄不停的摇动,把网收回来。玩法很简单,并且在游戏启动之后会有教程,告诉玩家基本的操作方法。

联机对战 乐趣倍增

在活动现场,奥嘉科技共准备了四台HTC Vive,举办了一场小型的比赛。目前的《牧场星球》支持双人对战模式。两位玩家在捕捉自己的猎物的同时,还可以抢夺对手正在努力收网的猎物。这时,拼手速的时间到了,谁的手速更快,就能抢到猎物,为了防止对手和你争抢,还可以使用道具给对手添乱。在笔者还没有明白道具的使用方法时,已经被对手施放了数次道具。

这种竞技元素的加入,让游戏的乐趣成倍提升。轻度的博弈过程,能够照顾到大多数玩家,尤其对于女性玩家来说,这种与闺蜜或男票的对决能够产生的乐趣是不言而喻的。目前VR体验店的爆款游戏中很少有为女性打造的作品,大多以FPS或是恐怖游戏为主,而对女性友好的作品,相信能够给VR体验店带来更多的营收,游戏复玩率自然也能够提升。

技术提升 画质升级

《牧场星球》是国内首款使用英伟达VR WORKS发布的Unity作品,有了英伟达的技术支持,虽然是使用Unity引擎开发的,但VR WORKS技术的融入、稳定的120以上帧率,以及单眼渲染技术的使用,可以说已经能够与一些使用虚幻引擎开发的作品相媲美。

笔者亲自体验发现,游戏画质方面的提升是很明显的,高帧率对于减少眩晕来说也有很大帮助,尤其是在比赛过程中节奏比较快的情况下更是如此。但对于目前的VR体验店来说,画质只是一个小的影响因素,并不是关键。玩法上的创新,在提高复玩率上的努力,才是目前VR体验店店主们最需要的。

正如谈总所说,《牧场星球》主打上手简单、双人对战、回合赛制、围观效应四个关键点,对于帮助VR体验店吸引人气,提高游戏复玩率,进而提高收入会有很大的促进作用。我们期待着《牧场星球》能够尽快进入VR体验店,让更多的玩家获得全新的游戏体验。

最初发布于2017年4月13日

探秘Zero Latency:什么样的游戏适合VR主题乐园?

在过去的三年间,位于澳大利亚墨尔本的初创公司Zero Latency一直在致力于改善其VR游乐平台,该平台目前有三款游戏,最多支持六名玩家同时体验。该公司计划在今年年底之前提升到可供八人同时体验的水平。

这一想法来自于该公司的联合创始人Tim Ruse(现任CEO)和Scott Vandonkelaar(现任CTO),当他们同时在网络代理公司Roadhouse Digital工作时,首次见到了Oculus Rift,便产生了这种想法。

“Oculus Rift刚刚推出,同时还出现了来自IRLShooter的电影《Patient Zero》,其中包含了真实的演员和僵尸主题的故事线,其创意在于,将二者融合,在恐怖之外,创造出一种全新的娱乐体验,”Ruse解释道。

之后这二人离开了稳定的工作,转而发起了众筹项目来支持其创意,他们在Pozible的众筹项目于2014年7月获得了30000美元的资金。Ruze说,虽然这笔钱很难筹集,但众筹的确可以让初创团队了解到VR狂热者们的想法,他们非常渴望进入虚拟世界,和伙伴们一起战斗。并且众筹也为传统的VR行业投资开启了大门。

到2014年8月,这家公司有了一片2200平方英尺的场地,其中允许两位玩家获得完全无线的多人自由体验,并且使用手枪。一年之后,该团队对这一系统进行了升级,六名玩家可以在其中用突击步枪对抗VR版的僵尸。游戏内容是使用Unity引擎开发的《Outbreak》。

到今天为止,该公司的开发团队又创作了三款新游戏,分别是:《Survival》,一款要塞防御式的僵尸射击游戏,其中包含成小队的重装战士;《Singularity》,玩家会扮演一组星际战士,在巨大的太空船上与机器人战斗;《Engineerium》,是一款基于解谜的探索游戏,玩家需要探索反重力的远古外星世界。

Zero Lantency团队中有十来人研发游戏,另外还有一些承包商在开发新的游戏,以及为现有的游戏开发DLC。Vandonkelaar说,开发一款游戏大约需要七到九个月的时间。还有一款新的游戏将会在今年8月登陆该平台,这款游戏会让僵尸概念的游戏变得更具探索性。

“我们现在已经成为一个一站式的开发商,”Vandonkelaar说道。“虽然我们自己并不是游戏设计者,我们也已经进入了当地的游戏开发者社区。并且我们已经花费了大量的时间来开发和探索自由漫游的VR体验。我们的目标是创作出15到30分钟的体验内容,让所有不同水平的玩家都能够享受乐趣,并且能够让人们及时了解这个系统。”

到今年6月,Zero Latency将在全球范围内开设10家主题乐园,到年底这一数字将达到24家。其中包括位于美国奥兰多、波士顿、费城、威斯康星和波科诺斯。这家公司有几处自营的乐园,包括位于墨尔本的场地,并且还通过与Main Event Entertainment这样的公司达成合作,来对外授权其平台。该公司在其Pointe Orlando游乐场和娱乐中心中开设了一家Zero Latency VR主题乐园。

亲自体验ZeroLatency

我有幸在奥兰多体验到Zero Latency的三款现有游戏,这一乐园名为VPlay Reality。在体验开始前,我见到了游戏管理员,他向我讲解了所有的设备信息,之后在这个面积达4000平方英尺的场地内做我的向导。游戏管理员介绍背心和背包(其中包含一台Alienware外星人游戏电脑)大概花了八分钟时间,另外还有OSVR HDK2头显和雷蛇的耳麦,之后又开始介绍双手握持的突击步枪(又花了7分钟时间)。

虽然在重量上离真实的步枪还很远,这款步枪还是很坚固的,在其底部有一个按钮,用来重新装填弹药。在侧面有一个按钮,可以用来在游戏中切换四种不同的枪支。其中有两种枪是自动步枪,而另外两种则需要在每次射击之后进行装填操作。后面这两种游戏中的枪支(每个游戏中的枪是不一样的)会让你在第二天感觉胳膊酸麻,因为在游戏中,当僵尸蜂拥而至,或者机器人和无人机围着你飞的时候,确实会有很大的运动量。不过,相比自动步枪,在游戏中使用这种类似霰弹枪的武器能够获得更多的积分。

Vandonkelaar说,这些定制的枪械混合使用了光学和传感器跟踪,可以在场地中对每把枪进行单独控制。这项正在申请专利的技术使用了超过100个摄像头和动捕设备,来对每个玩家的动作进行实时跟踪。

“你可以在不同玩家之间交换枪械,甚至还可以在游戏中使用两把枪,”Vandonkelaar补充道。“在此之前,作为我们众筹项目的一部分,我们还使用过两把手枪的方案。但是考虑到安全因素,我们开始专注于使用步枪的方案。如果你让玩家用手枪的话,他们可能会挥动手枪,伤及其他玩家。”

在游戏前的简介中也提到,当游戏中任意两位(或更多)玩家离得太近时,雷达系统会发出警告。雷达系统会提供视频信号,展示其他玩家的位置,所以对于玩家来说,要从其他玩家身边走开,防止在激战正酣时撞到其他玩家是很容易的。

当你所在的六人团队全部穿戴完毕,就可以进入这个超大的体验区了。体验区基本上就是一个空房子,游戏管理员会通过手电筒来引导你进入其中或离开游戏。在体验区里,你可以把枪放在你面前的地上,然后就可以佩戴好VR头显和耳麦。游戏管理员启动游戏,这时你可以看到并拿起步枪。接下来,通过在屏幕上选择你的名字,就可以让游戏开始载入了。

在玩过大量的Oculus Touch和HTC Vive游戏之后,在VR游戏中看不到自己的手就会变得有些奇怪了。这一平台专注于射击体验,并且允许你四处走动和甚至跑步,但是你并没有任何形式的手套,来把自己的手带进体验过程中(至少目前还没有)。并且对于那些在家玩过很多Oculus和Vive平台的游戏的玩家来说,Unity引擎制作的VR内容只能说差强人意。这些第一代游戏的画面当然是很一致的,但却没有什么提升。

Vandonkelaar也说道,他们的平台将会支持Unreal Engine 4虚幻引擎,以及其他非Unity的开发技术。并且Zero Latency还在开发SDK,允许开发者们为该平台创作原创的游戏。

真正让这个多人的主题乐园体验区别于其他类型VR体验(无论是家庭中的VR体验还是其他VR主题乐园中的体验)的地方在于,游戏场景中存在游戏管理员这个角色。Ruse说道,该公司在招聘这一职位时,会选择那些充满激情的,技术纯属的重度游戏玩家,同时还要足够友好,并且熟悉客户服务。

“在以前,我们发现这些人对于体验内容来说是必要的,因为玩家会与他们有一对一的联系,并且游戏管理员会把玩家带进游戏中,”Ruse说道。“我们想给予他们更多的控制权,比如说让他们可以真正控制你的命运,就像很古老的《龙与地下城》游戏那样。这些游戏管理员很熟悉玩家,知道玩家的水平,并且可以通过做出不同的选择来调整游戏,以迎合特定的玩家。”

Zero Latency已经在墨尔本针对其常客测试这一概念,所以,这种方法推向世界其他地区的店面也仅仅是时间问题了。我亲眼见到了这种定制化会给游戏带来的变化。当我在奥兰多的VR主题乐园中体验长达30分钟的《Singularity》时,在15分钟的时间里,有五个玩家和我一起对战僵尸,只有一个玩家才对机器人感兴趣。

在我们进入游戏之前,我们的游戏管理员警告说,游戏中的场景会是相当疯狂的,这个游戏是为六位玩家设计的。如果她调整过一些东西,游戏体验会更加有趣。虽然我在对战僵尸时,由于团队合作和完整的六人队伍,我一次都没死,但是在之后我和Enrique在体验这个为六人设计的游戏时,我死了19次,他死了15次。

所有这三款游戏都是不同的,并且适合复玩。我个人更喜欢玩打僵尸的游戏,因为你不会出错。在夜晚,这些僵尸会从破坏殆尽的城市中向你袭来。在这些怪物从各个方向突破防御工事来袭击你时,你有一些时间来修复防御工事。游戏中僵尸的动作是很快的,并且都被限制在围绕你的防御工事的固定区域。另外还有两组电梯,狙击手可以获得更高的视角,来狙杀敌人。但是我在整个体验过程中一直站在地上(到最后,所有玩家都乘坐军方的直升机逃离了这群僵尸)。

《Singularity》是三款游戏中时间最长的游戏(长达30分钟),并且是价格最贵的游戏(40美元)。在六位玩家同时体验时,能获得更多的乐趣,大家可以一起与机器人、无人机和AI疯狂地战斗。这款科幻射击游戏有趣的地方在于,在VR世界中走动是非常简单的,因为同时也在真实世界中走动。通过使用电梯,狭窄的走廊和可移动的平台,你的确会觉得自己就在这艘大型飞船中活动,直到干掉BOSS为止。游戏中还有一个离奇古怪的零重力墙面行走体验,以及会引起眩晕的悬崖边的战斗。这款游戏还会在过程中把玩家分成两个小队,在最后决战时,再重新组合到一起。

一款并不适合恐高玩家的解谜游戏

谈到眩晕,最新的游戏《Engineerium》,并不适合惧怕高处的玩家。游戏场景位于外星世界上方,你需要探索的路线和平台会转向任何方向。甚至有时你会头朝下,你需要习惯,你在真实世界中是头朝上走动的。这的确是一款非常不一样的,会让你思想有些混乱的体验。

该平台最让人印象深刻的,当属在游戏体验过程中无论是射击还是探索时的无缝体验。你的思想可以完全专注于在游戏世界中享受乐趣,而无需担心会碰到其他玩家。Zero Latency不断在这些第一代游戏上下功夫(比如会在背心上增加某种触觉反馈),我能够看到这种游戏体验的进化,以前你只能在科幻小说中看到这样的场景。

该团队正在扩展支持玩家的数量,未来将增加到八人。Ruse表示,目前在墨尔本的主题乐园里可供16人同时互动,但是考虑到安全因素,为了保证游戏中有足够的空间来活动,他们也在控制人数,以保证让每位玩家都享受到游戏的乐趣。

最初发布于2017年4月28日

原文链接:https://uploadvr.com/zero-latency-shoots-multiplayer-vr-arcade-network/

Unite 2018 | 小米VR/AR产品总监马杰思访谈录

在近日举行的Unite Beijing 2018开发者大会期间,小米VR/AR产品总监马杰思接受了媒体群访。

据笔者了解,马杰思在小米VR/AR任产品总监,负责小米VR/AR软硬件的产品及技术管理、产品运营、内容生态。曾先后在虚拟现实、计算机视觉、人工智能、内容分发等领域从事产品工作。对VR/AR行业格局和趋势、产品设计与管理、技术原理和边界等问题均有深入了解与经验。曾在美国George Mason University攻读博士,并拥有北大硕士和北航本科学位。

在本次Unite开发者大会的技术专场环节,马杰思做了题为《小米VR一体机与Oculus Go应用深度开发指南》的主题演讲。

小米VR一体机与Oculus Go是小米和Oculus联合推出的全新VR一体机产品。这次演讲为VR开发者介绍了在该硬件平台上打造应用和游戏的最佳实践与技术解析,包括全新的性能优化Features,如固定注视点渲染(Fixed Foveated Rendering),动态节流(Dynamic Throttling) 和72Hz模式等。此外本演讲还介绍了小米Unity SDK和Oculus Mobile Unity SDK、小米VR平台SDK全新的社交功能、VR内支付功能、内容数据管理和推广方式等,帮助VR开发者更好获取用户和用户价值。

记者:根据您的演讲内容可以了解到,小米VR一体机是一款定位C端市场的产品。在您看来,小米为什么在这样的阶段,推出这样一款想打入C端的产品?

马杰思:小米是一家聚焦在消费电子产品的公司,不会去做to B的事情。其实VR这块跟公司大的目标宗旨是一致的。所以,我们做VR,也是用做C端消费电子产品的思路来做的。

记者:我们都知道,Oculus一直在力推VR社交,小米是否会延续他们的理念,在中国推广VR社交?

马杰思:从移动VR应用场景来看,尤其是2C端的VR应用场景来看,社交一定是非常重要的环节。比如说VR游戏,VR游戏大家都能想到接下来的发展有几个趋势;视频相对来说来说也是比较成熟,在VR领域能够做的相对比较创新的事情,就是怎么把游戏、视频与社交融合起来。所以,在to C的打法上,我们认为VR社交是比较显而易见的一个方向。

记者:您怎样看VRChat这款产品近期的表现?其实这款VR社交应用的主要用户是在PC和移动端,VR端的用户可能不到十分之一。

马杰思:在这款VR社交应用中,VR端的用户小于其他终端的用户。但是VR里面的用户,相当于大V。很多玩法只有用VR才能呈现出来,比如说手部6DOF的交互,用键盘鼠标是玩不到的。所以你会看很多海外热门的直播主,包括YouTube上受欢迎的作品,主要都是VR端的人在玩。这会起到一个反作用,让没有VR的人看到主播,或者说是大V都是在用VR来玩,可能会想着购买VR设备。这种反向带动的作用,我觉得是对的。

记者:在内容方面,小米VR会如何吸引国内的内容,会给开发者提供怎样的帮助?

马杰思:我们会为开发者提供以下几个层面的帮助。

第一个层面,我们与国内开发者一直以来合作都非常紧密,基本上我们都是有技术支持人员贴身与国内开发人员一起工作,包括他们提出的开发当中的问题,平台中的存在的问题,都是有人以非常close的方式帮助他们解决。我觉得这是我们给国内提供非常好的一点帮助。而海外开发者,由于他们不用微信,很多时候不能这么直接地给他们提供服务。所以,我们会持续在这一点做好,让开发者在接入平台时,从我们这边获得足够多的技术以及接入方面的支持。

第二个层面,就像我刚才说的,我们会非常专注于to C,我们会帮助优秀的第三方应用在小米的渠道上进行推广。大家知道小米的这些渠道,都是比较有影响力的。所以,能够让开发者通过我们的宣传渠道进行推广,对开发者引入新的流量,获得新的用户,增加日活,都是非常有帮助。比如我们在2017年双旦时与一起来VR有一个联合的推广活动,效果非常明显的。他们在推广期间用户数量是成10倍地增长的,用户的使用时长也翻倍提升,每天用户活跃程度,也比之前增加了很多。

还有,我们这款产品会有一些优化方案,比如说固定注视点渲染、动态频率等,我们在可以帮助国内开发者来充分利用这些性能优化。可能过去他们去上海外的平台,从那边得到支持难度的比较大,比较间接。但我们有本地化的优势,可以更方便地帮助开发者。

记者:是否可以详细介绍下小米VR一体机的VR内支付功能?

马杰思:在2017年年中,我们与支付宝一起联合推出了VR支付的功能。当时还是基于手机VR设备,只要用户安装了当时最新版本的支付宝,在VR里面绑定,当用户绑定支付宝之后,无需摘下头盔,就可以使用应用内支付。比如说第三方VR应用可以设置一些宝箱、抽卡等传统游戏中的营收方式,在VR中点一下,会跳到支付宝VR版界面,一键付款。之前已经绑定支付宝账号,并且免密与安全措施都已经做好,但是检测到有风险时是不会让你一键支付的。在正常情况下会一键支付,回到游戏时会提示支付成功。以前这种支付在VR里面没法做,因为取下头盔之后,再回到游戏就中断了。所以,我们现在跟支付宝一起做,可以无缝的在第三方应用内实现VR支付。

记者:关于VR内容付费怎么样设计,您有什么建议吗?

马杰思:当前来说,来做VR应用内支付,会有很多挑战。一般而言,做应用内支付,首先要有比较广的用户量,在此基础上再做应用内支付,往往才会起到效果。在VR当前用户没有那么大的量的情况下,做应用内支付确实有挑战。之前有一些国内和海外的CP做过这些方面的尝试。我认为大家目前还是在尝试,没有特别明确的结论,什么样的应用内支付方式最好,或者应用内支付和付费下载该选哪个。可能有VR社交等多人的应用,来做应用内支付,会比其他形态好很多。

记者:小米VR一体机与Gear VR类的设备想不,除了不需要插入手机,整体性能提升之外,在游戏体验与交互上,有什么改变?在我看来,现在比较低端的VR一体机不太吸引人,也是因为其中一些游戏没有比较好的交互,不足以吸引用户。

马杰思:我觉得不止是交互的问题,不好玩有很多方面的原因。比如说画面的完成度,在VR当中非常重要。如果是玩手游的话,一些画面简单的游戏,也让人感觉很有趣。但VR是把人沉浸在其中,一旦VR中的画面做的很low,你会觉得整个体验特别不好。这就要求开发者把握好整个VR画面与设备性能方面的平衡。当前在Oculus Go平台上有很多比较高质量的内容,后续我们会引入到国内,能够提升国内在移动端VR内容的整体质量。还有画面、创意、游戏性能、游玩时长等等方面都是很重要的。我觉得可以期待一下。

记者:现在一些VR一体机品牌在做6DOF的产品,小米是否会推出此类产品?

马杰思:我觉得6DOF肯定是VR头显的一个发展方向,这是毋庸置疑的。但主要的问题是在于什么时候,当前市面上已经推出的6DOF的VR一体机,价格普遍较高,而推出此类设备的公司,很大一部分是用来打B端市场,不是主打C端市场。在当前6DOF的VR一体机,硬件品质尤其是内容方面,很难让普通消费者愿意购买这么高价的产品。所以,我觉得6DOF肯定是一个大方向,只要做VR的公司肯定都会认同。但是当前6DOF的VR一体机,我个人感觉对C端用户还是为时尚早,还需要一些时间。

记者:大家对小米VR一体机都抱着很大的希望,希望通过小米的渠道能力,能够把真正面向C端的产品,把整个VR市场带起来。小米内部对于外界的期待,会有怎样的想法?

马杰思:很简单,玩命的干!

在今年年初的CES展会期间,小米与Oculus联合宣布双方将联合推出VR一体机产品:小米VR一体机和Oculus Go。

其中,小米VR一体机是在中国发售的产品版本,2017年10月首次发布的Oculus Go是在中国以外国家发售的产品版本。这两款VR一体机均与高通公司合作,搭载骁龙821芯片。

小米VR一体机和Oculus Go的核心硬件配置完全相同。两款一体机均使用了Fast-Switch屏幕(分辨率为2560*1440)、新一代的光学透镜和全景声近场耳机,屏幕刷新率为72Hz,搭配3DOF手柄(头显也是3DOF)。小米VR一体机采用了Oculus研发的全景声音频技术,一体机直接集成了一对近场耳机,同时配有3.5毫米的耳机插孔。

基于Oculus的底层软件技术,小米VR一体机同时支持小米VR SDK和Oculus Mobile SDK,同时兼容小米VR内容及Oculus平台的VR内容,易于国内和海外开发者将内容带到小米VR一体机上。小米会将Oculus应用商店的热门游戏、视频和应用引入中国,让中国消费者体验到高水准的移动VR精品内容。

5月11日至13日,Unite Beijing 2018在北京国家会议中心举行。在本次Unite Beijing 2018大会期间,Unity邀请了来自全球的Unity技术达人和行业精英,为大家带来了超过80场主题多元的技术课程,包括让开发者上手实操的Training Day,聚焦Unity次世代技术发展的重磅Keynote,以及干货十足的五大技术分会场。

最初发布于2018年5月15日