Jaunt VR电影拍摄指南中文版 第一章

Jaunt在2016年9月发布了《The Cinematic VR Field Guide: A Guide to Best Practices for Shooting in 360°》,为VR电影制作人们提供了VR电影拍摄的指导说明。笔者为大家提供翻译稿。首先为大家带来的是该指南的第一章,主要讲述了虚拟现实的两大类型、VR电影的基础知识等等。

1、虚拟现实基础知识

据维基百科,虚拟现实是一种计算机技术,可以复制真实的或想象中的环境,并且可以模拟用户的临场感,用户可以与其环境互动。在电脑或者手机上,这通常意味着屏幕上呈现的视觉内容和扬声器或耳机呈现的听觉内容。可供触摸或可提供反馈的设备也正在涌现,提供嗅觉和味觉的设备还需要一段时间。

对于任何形式的虚拟现实来说,其关键都是临场感和沉浸感。正是这些使其区别于以前的其他媒体,并且能够把素材创作出一种强烈的情感联系。Chris Milk是早期的VR电影导演之一,他经常引用一个观点,称虚拟现实为“共情机器”。

1.1虚拟现实的种类

虚拟现实有两个基本的阵营-电影级虚拟现实和基于游戏引擎的虚拟现实。区别在于生产手段、回放方法、真实度以及互动内容的多少。

1.1.1 什么是基于游戏引擎的虚拟现实

很长时间以来,当人们想到虚拟现实时就会想到这一种。这是由3D CG游戏引擎实时生成的电脑图形,比如Unity或Unreal。这些内容被生成之后,可以使用特制的头戴显示器(头显)比如Oculus Rift或HTC Vive,这些头显包含运动跟踪功能,用户可以在虚拟现实中走动,感觉就像是真的一样。

这种虚拟现实同样适用于高互动性的内容,可以使用提供手部跟踪控制的Rift和Vive,可以让你拿起并移动物体,比如挥舞一把剑,开枪射击,或者和整个环境进行互动。感觉很像是自己进入了一场游戏。

并不能说第一批VR头显主要针对重度游戏玩家,就意味着这种技术仅仅是为了游戏而开发。游戏引擎也可以用来创作互动电影或音乐视频,就像是创作游戏那样。因为它们尤其擅长创作出完全不像现实生活的世界。

1.1.2 什么是电影级虚拟现实?

Jaunt专注于电影级虚拟现实。下面就是一段360度电影,使用一台全景摄像机系统,可以作为一个圆柱投影那样进行回放,并且允许观众随着剧情的展开而四处观看。圆柱投影是一个非常好地展示场景的方法。根据摄像系统和拼接步骤的不同,其中的场景可以是单视场的(扁平)或者立体的(3D)。

现在你已经了解到,在电影级虚拟现实中你可以看到非常真实的场景,而在由游戏引擎在电脑上生成的虚拟现实中则不会这样。同时,这些场景在拍摄过程中还会使用空间音频麦克风,来让声音听起来就像真的一样。如果你听到你的右边有条狗在叫,并且转头看左边,你会看到有一条狗就在声音传来的地方。感觉就像是进入了电影场景中一样。

但并不像基于游戏引擎的虚拟现实,在电影级虚拟现实中你无法自由地在场景中移动,除非在你移动的同时,摄像机也随着移动并进行拍摄。随着新的摄像系统的采用和新技术的逐步开发,今后你也将可以在拍摄的场景中进行四处走动。在下文中的“VR摄像机的种类”章节中可以了解更多信息。

虽然电影级虚拟现实并不像完全基于游戏引擎的虚拟现实环境那样充满互动性,你仍然可以为其添加互动元素。以《Choose Your Own Adventure》为例,其中就包含凝视检测、可互动的叠加和界面、声音或图片的触发、手势、甚至加入完整的CG内容也是可以的。

所有这些将会构成一种全新的媒体,这是一个我们刚刚开始意识到其潜力的空白的画布。VR领域的杀手级应用将会融合了电影、游戏和互动影院。现在,我们还在带妆彩排阶段,一切皆有可能。即使是区区五年之后,VR内容也会与今天的截然不同。

1.2、立体vs单视场VR

VR影片素材既可以是单视场3D,也可以是立体3D。单视场的素材是扁平的,并没有景深数据,在360°的可视范围内都是以同样的景深被投射的。当然,你同样可以转动头部,四处观看这个场景,但没有任何的东西会变得离你近一些,只会变得大一些而已。这就像是普通的2D电影中的特写镜头,和3D电影中那些东西会逼真地离你越来越近,并且从屏幕中跳出来所形成的对比一样。

而在360°立体3D影片中,你将获得完整的每个方向的3D观看体验,其中的物体也会真正地离观众越来越近。这会产生更加逼真地、更具沉浸感的感觉,就像是我们在现实生活中所经历的一样。想象一下在VR中拍摄一只水下的鲨鱼的情景。为了达到最大的视觉冲击效果,你会希望观众感受到鲨鱼正在离自己越来越近,并且每个观众都能有此感受。使用立体3D技术,你可以达到此种效果,而是用单视场的话,虽然鲨鱼仍然来势汹汹,但它不会离你越来越近,你将会丢失临场感和沉浸感–当然还有恐惧感。

无论在哪儿,你都应该尽力去尝试拍摄完整的360° 3D内容。但是,为什么并不是所有人都在这样做呢?你可能会想到,这种拍摄需要的设备更加昂贵,而且拼接过程更加复杂,如果没有大量的后期工作和资金投入的话,也不会获得好的回报。Jaunt推出的Jaunt ONE摄像机和Jaunt云服务(JCS)就是为了简化这些程序,最大限度地自动化整个过程。

你可以在Jaunt云服务文档中获取更多信息。

还需要说明的是,并不是每个场景或镜头都缺失需要在3D中拍摄,当然了,也不一定都能做到在3D中拍摄。目前,只有极少数几款360°拍摄设备可以用于水下拍摄。而且由于防水设备的限制,更难以把3D拍摄设备装在其中,所以通常会使用较小的单视场设备。在下文的“水下拍摄”部分可以获得更多信息。

同样,在汽车内进行拍摄时,会受到车内空间的限制,其中的物体会距离很近,这时通常使用一个较小的GoPro式的拍摄设备,并且采用单视场来拼接素材,会获得比较好的拍摄效果。大部分的相机都有最小物距的要求,你必须遵守,这样才能拼接出质量较高的作品,而且在3D拼接时,这一物距的要求会更大。如果你想要离拍摄的物体很近的话,尽量选择单视场的拍摄方法。在下文的“物距”部分可以获得更多信息。

类似的,如果使用无人机的话,重量也是一个问题。所以,在很多情况下,我们还是要使用一个更小的,更轻便的GoPro类设备,并且拼接单视场的素材。在很多情况下,拍摄地会离地面非常远,你也无法获得足够的立体视察,而且观众们也几乎察觉不到。

无论是哪个已经推出的作品,其中的大部分内容都是完整的360° 3D手法拍摄的,其中也有些许画面,比如上面这些情景是使用更小的、更轻便的GoPro设备进行拍摄,并且在单视场中拼接的。如果处理正确并且使用的时机很得当,你的观众们或许不会察觉。

1.3、360°视频

当我们谈论360°视频时,我们必须要澄清一件事。那就是它和VR有什么区别?为了让人们了解VR,并且充分利用现有的重度使用的平台,许多公司,尤其是Facebook和谷歌旗下的YouTube都已经在推广360°视频。这是你可以用浏览器在网页中观看的视频,并且 可以使用鼠标拖动画面,或者在手机APP中,通过把手机移动或旋转来达到同样的效果。

同样,我们的Jaunt手机端和web端应用也可以做到这一点,对于那些暂时无法使用或手上没有VR设备的用户来说,也可以在3D中体验到这些内容。像是Facebook这样的品牌和公司之所以喜欢360°视频,是因为这可以帮助他们撬动所有人都在使用的平台上巨大的用户群体。

然而,要称其为虚拟现实,我们必须要谨慎。如果太多的用户都认为这就是虚拟现实的话,他们或许会认为,他们已经真正地体验过了虚拟现实–并且包含3D中的临场感和沉浸感,以及空间音效–但却并没有多深的印象。我们必须要明确区分360°视频和真正的VR,并且使用前者来激活观众们,让他们体验后者。或者像是3D电视那样,让VR也经历快速的死亡。

而这,也就让我们来继续思考真正地虚拟现实内容的需求到底是什么。

1.4、VR的最低需求

你可以和100个人去谈论虚拟现实的必要条件,但会获得非常多的答案。既然我们在寻找最大限度的沉浸感和临场感–也就是真正身临其境的感觉–Jaunt提出四点最低需求:

360°圆柱投影图像–这是一个你可以上下左右360°观看的场景。有些摄像设备则是采用了180°的特制的相机来进行在线直播,这样可以减少带宽需求,降低拼接的复杂程度。但是,当你看向身体后方时,你会直接离开这个场景。通常为了减少这种身后只有黑色背景的情况,会插入一张图片,比如节目的宣传海报,比赛的比分情况等等。

立体3D–这是比较有争议的需求之一,因为今天很多人都在拍摄单视场的内容,毕竟这种内容在捕捉和拼接时都会更便宜且更简单。然而,想要真正获得临场感–身临其境–也就是VR真正特别的地方,你真的需要尽量拍摄立体3D内容。立体3D就是我们在现实生活中所看到的那样,并且在VR中也同样重要。

空间3D音效–声音是任何电影类产品中极为重要的一部分。它不仅能够提升沉浸感,同时也是像运动和光线那样的仅有几个线索之一,可以用来获得观众对重要事件的注意力,因为观众们可能在看任何地方。捕捉空间音频可以增强你的临场感。

在头显中观看–最后,如果你没有真正的观看方式的话,上面这些都是没用的。虽然经常会有给没有设备的观众创作的360°视频,并且允许你拖动画面。但这种视频并不能看到3D效果,也不能提供空间音效回放。为了达成完整的体验,你真的必须要用合适的头显设备。好消息是,你不一定要购买Oculus Rift或HTC Vive这样的昂贵的设备。市场上还有很多非常便宜甚至是免费的产品可供选择,这些产品会让你目不暇接。

1.5、头显的种类

市面上有很多不同类型的头显设备,它们在价格和性能上的差异也非常大。从非常简单的谷歌Cardboard,到三星Gear VR,再到Oculus Rift和HTC Vive。就像手机和那一套集成电路组件那样–其中包含陀螺仪、加速度计、小型高清屏幕–正是这些复活了曾经的虚拟现实,让Palmer Luckey创作出了首个Oculus头显。手机是这些产品的基础,甚至是高端的Rift和Vive的基础。

较高端的头显可以提供全身的追踪,其中还有些包含了手部控制器,可以提供“房间规模”VR系统,让用户四处走动,并且和环境进行互动。但仅仅使用你的手机加上简单的透镜,也就是Cardboard或塑料外壳的产品也可以让你获得惊人的体验。随着手机生厂商在头显中集成更好的VR子系统,这种体验会变得越来越好。

头显设备的清单还在急速扩充,你可以在网上查询到此类设备的信息。

最初发布于2017年1月23日

[体验+点评]微软MR头显潜力巨大 但明显火候未到

混合现实当然有着巨大的潜力,但同时,我们也要面对现实。

微软在10月3日举办的发布会也以混合现实为重点。在这次发布会期间,他们发布了一款全新的售价500美元的三星Windows混合现实头显,以及宣布收购Altspace,这是一家正在垂死挣扎的社交网络,而其中的人物形象只是目光呆滞的,长着与肉体脱离的手的化身。

而这,在很大程度上正式微软正在加倍下注的一个市场,即混合现实。他们的想法是,唯有微软,以及其顶级的HoloLens技术,才能在同样卓越的设备(由微软的合作伙伴打造的多种不同设备)上同时提供虚拟现实和增强现实体验。

虽然这在长久来看可能是能实现的,但却没有提供给参加这次发布会的人们。这里并没有类似HoloLens的AR设备,相反,在我们所能上手的仅有的Demo中,可以让体验者在一个虚拟的房子中走动,在每个房间中有不同类型的内容,其中大部分都显示在了2D屏幕上。

简而言之,这给人感觉就像是在重温过去三年间每款VR设备提供的Demo。将其称之为“混合现实”就像是把一份菠菜沙拉称之为“生菜沙拉”一样。

即使是体验者最多的《Halo Recruit》–一款全新的应用,用来展示《Halo》在混合现实中的潜力–也很让人失望。你确实处在这款著名游戏的场景之中,其分辨率也令人令人难忘的锐利,但你仍然是站在一个点上,对着大屏幕上那些2D的外星人的轮廓开枪射击。

在《Halo Recruit》的结尾,《Halo》中的士官长走进场景中,邀请你成为他的炮手。你肯定会想,好啊,出发!但体验到此就结束了。这就好像现在大多数的“混合现实”体验那样,虽然告诉我们什么是能够实现的,但现在我们能体验到的版本还处在一个糟糕的阶段。

我体验了售价400美元的Windows混合现实头显(10月17日开始发货)和售价500美元的三星Odyssey(11月初发售)。三星的头显是值得这个价格差的,它有着OLED屏幕(而不是普通的LCD),更高的分辨率(单眼的分辨率要高于宏碁的头显),并且有内建的耳机。看起来要在它和售价同样为500美元的Oculus Rift之间做出选择还有些难度。

虽然微软的头显都在吹嘘使用的便利性–你只需要把USB线缆和网线链接到任何运行最新版本Windows 10的PC上,但这并不代表在让一个主流用户体验VR时,在便利性上有了多大的进步,在用户看来,它并不仅仅是一个新奇的事物。

对于初次接触的人来说,这些设备的重量超过了一磅,仍然十分笨重。我仍然无法在保持舒适的情况下佩戴一款头显超过15分钟。这是这个行业面临的共同问题,但这也值得我们注意,普通的消费者并不会让你满头大汗的笨重的黑色眼罩感兴趣,尤其是目前的分辨率还没有达到视网膜级别,只有到达这一级别时,我们才会难以分辨头显的画面和真实生活。

同时,你在佩戴头显时对周围的真实世界仍然一无所知, 这些外观类似的混合现实头显(包括惠普和戴尔的设备)都是全封闭的,并且也没有可以让你看到周围环境的AR特性。理论上,有一个设置过程可以让你设置自己房间的一些限制,但在实际使用中,这就意味着微软的Demo操作员必须保证我在体验过程中不会碰到其他东西。

至于我所体验的Demo中的环境,还有一个值得注意的点在于,虚拟现实一直在非常努力地复制现实世界。HoloLens的发明人Alex Kipman在虚拟的画面中兴奋地向我们展示了日程安排、LinkedIn资料和他的Pandora radio应用。

但这是为了什么呢?戴上笨重的头显,在一个大房子中巨大的屏幕上仅仅查看一下日程安排,有什么额外的好处吗?Kipman还说道,你可以和其中的一些化身互动,它将这一功能称之为虚拟现实中的“杀手级应用”。

我对混合现实的潜力感到非常兴奋,但我还是要说,如果我想要和身在远方的亲密朋友聊天的话,毫无疑问,我更希望在真实的住宅里进行视频聊天,而不是在一个虚构的房间里,面对着朋友们死板的化身。

当然了,在教育和终身学习领域,混合现实的潜力是巨大的。我们处在这样一个时代,人们喜欢通过YouTube视频来自学新技能。HoloLens给我们带来的最激动人心之处在于,这种学习过程可以变成三维的,我们可以使用头显来学习如何修水龙头,如何弹吉他,或者提高我们的网球水平。

这些潜力依然存在,但目前的Windows混合现实头显没有一款能够让我们离这些目标更近。如果我们想要一些真正尖端的技术产品,可能需要等到其2.0版本问世了。

最初发布于2017年10月10日

原文链接:http://mashable.com/2017/10/03/microsoft-mixed-reality-hands-on/#JTXM82JU2kqo