Strategy Analytics最新报告:2021年起XR市场将强劲增长

近日,分析机构Strategy Analytics发布了名为《COVID-19对AR和VR市场的影响》专题研究报告,该报告指出,虽然在短期内,COVID-19会对AR/VR硬件出货和市场收入有负面影响,但Strategy Analytics仍然认为XR将会在这种“新常态”下找到自己的一席之地。

该报告的主要内容如下:

尽管2020年将是充满挑战的一年,但Strategy Analytics预测,从2021年起XR市场将强劲增长。

尽管市场将在2020年萎缩,但Strategy Analytics预计未来几年市场将强劲增长。从2020年到2025年,出货量将增长六倍,收入达到270亿美元。

COVID-19将在2020年对XR市场产生重大负面影响。Strategy Analytics预计出货量和收入将同比下降20%以上。Strategy Analytics预计,与智能手机绑定的AR头显的发布至少要推迟到2020年底,甚至会推迟到2021年,这将使Strategy Analytics早先预期的专用AR设备的消费市场增长推迟一年。

2020年本可以是专用AR头显市场真正腾飞的一年,但其他大事件很快使这种趋势停止了。

Strategy Analytics预计,一旦这些与智能手机捆绑的设备进入市场,中低端的AR头显将出现强劲增长。 形似隐形眼镜的AR头显也于2020年投放市场,这一新产品类别已添加到预测中。

Strategy Analytics预计VR市场将在2020年有所收缩,但由于“新常态”下的新工作和生活模式,Strategy Analytics提高了对VR头显的长期预测。

随着企业越来越多地使用VR工具进行远程协作,并且教育机构也越来越多地远程提供课程,最终的结果可能是VR硬件的前景有所改善。

尽管Strategy Analytics提高了对VR头显的总体预测,但由于微软决定下一代Xbox不支持VR,Strategy Analytics已稍微降低了主机VR头显的预期出货量。

在低端市场,Strategy Analytics预计2021-2022年将看到由于移动运营商推出5G而导致智能手机捆绑的VR头显出现小幅回升。

报告来自Strategy Analytics。

最初发布于2020年7月10日

Oculus正在开发Quest头显的新版本 最快今年年底见

Facebook旗下的Oculus部门正在开发Quest虚拟现实头显的新版本,但是由于Covid-19对产品开发和全球供应链的影响,该设备面临潜在的延迟风险。

这家社交网络巨头正在研究Quest头显的多个潜在继任者。知情人士透露,一些处于高级测试中的模型更小,更轻,并且具有更快的图像刷新率,可以提供更逼真的内容。并且,这些头显还重新设计了控制器。

该公司尚未最终确定将发布哪个新版本的Quest头显,最终产品可能具有不同的特性。知情人士透露,Facebook最初计划在2020年底的年度Oculus Connect会议前后推出新型号,但新型冠状病毒的大流行可能会将这款头盔的发货推迟到2021年。

测试中的某些版本比当前的Quest头显小10%至15%。不仅重量更轻,而且佩戴起来更舒适。现有型号的重量约为1.25磅,对于某些长时间使用该设备的用户来说仍然太重。这位知情人士说,测试中的模型重量接近一磅。

该公司可能会将新的头显与目前的Quest头显一起出售,或选择完全替代目前的型号。Facebook发言人拒绝对未来产品发表评论。

Facebook在2014年以20亿美元的价格收购了Oculus,押注VR作为数字通信的未来。Facebook首席执行官Mark Zuckerberg预测人们将使用该技术通过共享体验(例如身临其境的游戏和其他3D娱乐内容)在网上彼此联系。

该愿景尚未完全实现,部分原因是缺乏广泛的用户群体,并且可供体验的内容也有限。但是,由于新冠病毒大流行期间有数百万人呆在家里,因此虚拟现实的体验量有所增加。

与该领域的其他公司相比,Oculus作为Facebook的子公司,发展还算顺利。初创公司Magic Leap一直在努力完善其增强现实技术,但在最近削减了员工规模,并考虑出售自己。另一家AR公司North也在于今年早些时候寻找买家。

据知情人士说,对于新的Quest设备,Facebook正在测试去除侧面的织物,并像现在的Oculus Rift S那样用更多的塑料来代替织物。它还在考虑改变表带中使用的材料,使其相比目前的橡胶和尼龙搭扣更具弹性。

Oculus Quest产品线是Facebook的中端VR头显,不需要连接至智能手机或PC。其399美元的价位也比Facebook最强大的头显,即需要连接到电脑的Rift S更便宜。

Facebook仍在销售Oculus Go,这是一款基于智能手机芯片的入门级头显。Quest系列头显使用了高通公司制造的更高端的部件。

Facebook当前的Quest头显缺货已经持续几个月了,部分是由于新冠病毒大流行造成的供应链问题。但是,最近几天的库存正在缓慢增加。Zuckerberg在4月份的财报电话会议上表示,该产品“超出了我们的预期”,并且该公司希望它“可以赚更多”。该公司还表示,“其他收入”部门上个季度增长了80%,“主要由Oculus产品的销售所推动。”

根据Statista汇编的数据,Facebook去年是VR头戴设备的第二大销售商,约占出货量的28%,仅次于索尼公司。虚拟现实几乎涵盖了观看电影,运动和玩游戏的用户。

增强现实将虚拟图像与现实世界结合在一起。据知情人士说,Oculus还正在制造AR头显。该产品的软件和应用程序开发仍在继续,但新冠病毒拖慢了硬件开发速度,一些员工无法使用实验室设施。目前尚不清楚这是否推迟了计划的产品时间表,包括2023年的上市时间。

另据熟悉情况的人表示,苹果公司或许会在2021年货2022年推出一款VR头显,在2023年推出AR头显。

新Quest VR头显的刷新率至少为90Hz,高于当前型号的播放电影时60Hz刷新率或运行大多数VR任务时的72Hz刷新率,从而使视频和游戏显得更加流畅。知情人士说,该公司正在测试刷新率高达120Hz的原型设备,但可以将此频率限制在90Hz,以保证电池续航时间。

测试中的新头显的某些型号还会继续配备用于调节IPD的物理开关,IPD是头显内部显示屏之间的距离。该机制很重要,因为它可以帮助用户调整头显,以适合自己的眼睛,从而避免头痛。

Facebook还在研究重新设计的控制器,该控制器使用起来更舒适,并解决了现有控制器的一个问题:控制器的电池盖有时会滑落。知情人士说,新的控制器将会兼容当前的Quest头显。

测试中的头显具有四个外部摄像头,而Rift S上有五个摄像头,并且具备六自由度,这使用户可以沿任何方向环顾四周,并像在现实中一样在虚拟空间中走动。新型号还将继续支持Oculus Link,即通过线缆可以将头显连接到PC以提高性能。

最初发布于2020年5月9日

原文链接:https://www.bloomberg.com/news/articles/2020-05-05/facebook-s-oculus-developing-smaller-lighter-quest-vr-headset

用于训练、作战与维护 美军正寻求更先进的VR/AR头显设备

有专家表示,商业领域推动的技术提升有望带来更先进的虚拟和增强现实头显,以解决当今与美军使用的头显相关的许多问题。

虚拟现实(VR)使用户沉浸在一个由计算机生成的环境中,例如VR游戏。增强现实(AR)可以将数据或其他用数字化手段创建的图像叠加到现实世界的视场上,例如电视观众在观看足球或棒球比赛时看到的黄色或橙色的区框。

美军的官员们指出,通过提供使用数字化手段创建的敌军或其他在实际战斗中可能遇到的环境因素,VR和AR头显可以改善军队为对抗先进的对手进行的高科技战争的训练方式。

市场分析公司Frost&Sullivan的航空、国防和安全分析部门副总裁Michael Blades说:“商业领域也是所有游戏玩家都将使用这些设备的地方。他们将进行修改、更新和升级,以跟上该市场中的竞争对手的步伐,这将提升国防领域用户的能力。因此,国防领域将最终从商业市场的竞争中获胜,因为他们将获得更好的训练能力。”

美国空军的飞行员培训计划(Pilot Training Next)就是一个例子,该计划旨在提高飞行员培训的效率,并加快学员们的学习进度。虚拟现实头显的使用为学生们提供了更多磨练技能的机会。

美国空军教育与训练司令部(Air Force Education and Training Command,简称AETC)第24分部的运营官Robert Knapp中校说,在传统的飞行员训练结构中,学生都是从一些纸质出版物或带有培训文件的iPad开始。

“他们从那些培训手段起步,之后会使用一个极其昂贵的传统的模拟器,在那里他们可以进行全方位的飞行训练,”他说道。“那些昂贵的模拟器的问题在于,它们的数量太少了,而且学生进入模拟器的次数也很有限。”

现在,参加Pilot Training Next培训计划的学生可以坐在椅子上,戴上HTC Vive Pro等商业设备进行练习。

VR头显为美国空军的飞行员提供了更多接触模拟技术的机会。

“我们可以填补阅读书本或iPad上的内容与使用一些较便宜的市售设备进行高保真模拟训练之间的差距,”Knapp说。

但他指出,如今的头显有一些缺点。

“当你使用超高分辨率的头显时,视野会变窄,”他解释说。“要获得更大的视野,你需要使用较低分辨率的头显。”

“但是理想情况下,技术研发将会继续,我们将拥有超宽的视野、超高分辨率和非常高的帧率,因此不会出现抖动,”他补充说。“我们现在还没到这一步。”

但是,参考游戏行业技术的发展速度,美国空军可能会在不久的将来拥有它们所需的VR头显。

“我们对这些设备在接下来的几年中的发展趋势感到非常兴奋,因为我确实认为我们离极高保真度的头显并不遥远,到时候,任何人戴上头显都会沉浸在更像真实世界的虚拟环境中,”AETC的助理运营总监Maj.Eric Jones说。

CAE的防御和安全业务技术负责人Phil Perey说,新上市的头显比以前的系统具有更好的保真度。CAE将虚拟和增强现实头显整合到了它为军方客户(包括后勤机组人员)提供的培训解决方案中。

新的Varjo XR-1具有足够清晰的分辨率,用户可以清楚地读取仪表面板的信息,这是以前的头显所不具备的功能。他指出。

Perey预计VR和AR头显技术将继续发展。

“以后将有必要给这些头显做减重处理,”他说到。但是,这不是唯一的需求。

“他们可能会因为现有的视野而减小应用范围,但是当他们试图将视野扩展到更大时,他们的应用范围也将扩大,”他说道。“我们将看到设备重量的下降,可能会看到设备外形逐渐变大,以涵盖更大的水平视野。”

Perey说,他已经尝试了一些将于2020年上市的下一代头显,并且对它们的大体积和较轻的重量都印象深刻。他说,其中之一“几乎是羽毛般的轻盈”。

减轻系统重量可以减轻用户所承受的压力和不适感。

“有一些有前景的制造技术将使这些设备的重量减轻很多,”Perey说。“这将成为人们戴上这些设备,并持续佩戴数小时的重要因素。”

新的电池和更小的计算机也可以帮助减小头显的体积和重量。

微软公司服务美国陆军部门的主管Mark Valentine表示,重点是提升与头显相关的电池技术。他指出,材料科学的进步带来了更小的外形尺寸和更长的电池寿命。

“对电池电量的研究,以及提高电池效率是目前的关键技术之一,”他说道。

微软正在向美国陆军提供其HoloLens2增强现实头显的修改版,以用于集成视觉增强系统(Integrated Visual Augmentation System,简称IVAS)项目,该项目包括抬头显示器。美国陆军希望将这些设备用于训练目的,并向战场上的部队提供更好的态势感知和数据访问能力。

HoloLens系统具备透明的镜片,Valentine指出。

“我可以看到现实世界,同时还可以获取数据和信息,并以固定在环境中的3D全息图的形式显示出来,”他说道。“HoloLens本质上是戴在头上的Windows 10计算机,但并不是通过屏幕来显示的。现在,它是通往现实世界的混合现实传送门。”

Valentine拒绝具体讨论IVAS项目的细节,但他指出,微软认为HoloLens技术有多种潜在用途,包括用于战斗准备。

“现在,如果我是一名陆军士兵,并且要训练夺取一座建筑物,我会遇到一些敌方部队,会遇到一些突然出现的目标,诸如此类。然后我便冲入建筑物并用真正的武器射击,“他说。但是在混合现实世界中,可以用全息图来模拟敌军。

头显也可用于帮助设备维护人员。

“比如,我们可以看到工具箱,设备本身可以在智能边缘进行人工智能识别,打开工具箱,确定下一步维修所需的工具,然后就会为我突出显示这个工具,”他解释说。“我拿起工具,看着飞机,然后,维修清单中的下一步就会以全息图的形式显示出来。”

Valentine指出,与上一代HoloLens相比相比,HoloLens 2具有更小的外形尺寸和更大的视野。该公司还将计算部分从设备的正面移至后面的垫子上,以使佩戴者感到更舒适。

困扰VR和AR头显的另一个问题是用户的操作与模拟环境中相应的变化之间的延迟。美国国家训练与模拟协会(National Training and Simulation Association,简称NTSA)会长James Robb指出,这不仅降低了模拟训练的效率,而且还可能导致晕动症。NTSA是美国国防工业协会(National Defense Industrial Association)的附属机构。

然而,新兴的5G无线技术可能会改变这方面的游戏规则,Robb说。预计5G网络的速度将是4G的20倍。

“5G的延迟应该很小,”他说道。“每当你需要将模拟训练内容从服务器传输到头显时,传输过程中都会有所延迟。因此,只要你提高架构的效率,将无线架构合理地直接用于高速计算机上,就可以减少该问题。”

Blades说,这种技术是未来的潮流。

他说:“这项技术将朝着使一切无线化,并且眼镜本身具有大量计算能力的方向发展,”他说道。“我们已经有了5G。因此,我确定在任何头显与它们所连接的设备(无论是PC还是其他头显或其他设备)之间的延迟几乎可以忽略不计。”

五角大楼即将启动一项5G计划,其中包括将该技术整合到军事任务计划中,以及在训练领域的虚拟和真实环境中进行训练。

Robb还期望下一代头显在训练场景中能够具有更强的数据收集能力和更强的利用AI的能力。

“在这种情况下,机器将在确定你的工作方式并帮助提升表现方面进行很多工作。从帮助你提供决策选项,到提供信息,或者帮助你获得正确的可视化效果,它将无所不包,”他说道。“支持人员越聪明,用户从中获得的好处就越多。”

美国陆军作战能力发展司令部(Combat Capabilities Development Command)模拟和培训技术中心主任Matthew Clarke表示,他不太担心VR技术的改进。

他在最近一次与记者会面时说:“VR行业会采取行动,因为这与游戏行业有关,而游戏业务正在增长。”

他指出,增强现实是一个更大的问题。

“这是因为你正在尝试将真实世界与虚拟世界融合在一起,并且面临着巨大的挑战,”他解释说。“例如,如果你没有将这两个世界进行绝对的对齐,那么,当你在使用时会产生偏离,但我们不能有这种偏差。”

“因此,我在AR中要面临的具体挑战是对齐、跟踪、动态遮挡,”他补充道。

美国陆军希望有一个可以从AR过渡到VR的套件,因此军方可以“从中获得双重收益”,他指出。

同时,美国陆军还想要具备功能更强的被动型传感器的头显。

“美国陆军讨厌主动型传感器,因为敌人可以检测到它们,”他说道。“我们需要被动型传感器。如今,被动型传感器存在的问题是无法获得距离信息,无法获得范围能力,这是我们进行单元训练所需要的。”

Clarke还设想了一个AR技术看起来与今天完全不同的世界。

“我们将不用佩戴头显,而是佩戴增强现实隐形眼镜,”他说道。“对我来说,这就是未来,摆脱处理过程,将人体产生的能量转换为电源,你无需携带额外的电池。”

Blades表示,在未来,AR技术的进步可能不需要用户佩戴任何的头显设备。

“这些设备很多都是显示了某物的3D外观,”他指出。“如果这只是由某种视频产生的,你不需要眼镜就可以在面前显示一个3D物体呢?增强现实的有趣之处在于,其中一些应用程序,甚至可能不需要眼镜就能体验。”

最初发布于2020年1月8日

原文链接:https://www.nationaldefensemagazine.org/articles/2019/11/27/pentagon-eyeing-more-advanced-virtual-augmented-reality-headwear

Adobe Max大会见闻:增强现实将成为创作者的新机遇

Adobe的年度Max会议是一年一度的最大规模的创意专业人士聚会,这些人的艺术、摄影和图形设计技能可以改善我们每天看到的图像和阅读的材料。在本周的活动中,Adobe正在采取一系列的措施,将增强现实作为创作者的新机遇。尽管该技术只正在洛杉矶会议中心展览区的一个安静角落里,努力寻求人们的关注。

在活动开始之前,Adobe表示其最大的AR新闻将与Aero有关,这是一个iPad应用程序,旨在简化新手创作者开发AR体验的过程。活动中的展台引导游客使用该应用程序识别真实空间的表面,并以正确的尺寸和正确的位置放置3D模型,将其与环境无缝融合,以便可以在iPad上从多个角度查看它,就像它是真实的一样。

在Aero的主要演示中,用户看到了最基本的AR体验类型,多年来,我们已经以手持形式看到了AR体验,这在很大程度上要归功于Pokemon Go之类的游戏。尽管Adobe的目的是向创作者展示他们如何将自己开发的3D资产带到混合现实空间中,并用于营销目的。有人认为,Aero将帮助品牌创建更多应用程序,比如今年早些时候测试的Jack Daniel的AR Experience,它使用动画3D资产和画外音将这家公司的任何威士忌酒瓶变成了弹出式故事书。

幸运的是,Adobe并没有坚持完全枯燥的演示。尽管您必须在洛杉矶会议中心展览区的最深处寻找它,但该公司还利用Aero进行了一次名为Terminator Max Experience的演示,它利用了刚发行的电影Terminator:Dark Fate的资产。与会者将获得包含一系列提示的列表,然后跟随它们来体验AR场景,在这个场景中,虚拟终结者会从满是瓦砾的场景中的能量泡泡中出现。

作为驱动该体验的相机和3D合成引擎,安装了Aero的iPad将数字资产与场景中的实际人物和物体融合在一起,从而实现了这样的场景。尽管展位上没有任何内容说明最终用户将如何以这种方式使用Aero或Aero创建的应用程序,但这意味着创作者们可以为用户创建电影级的3D体验,然后将其部署到特定位置,或提供可下载的应用程序,以用于营销目的。

Adobe将一台计算机连接到运行Aero的iPad上,以录制Terminator Max Experience视频,并承诺将其通过电子邮件发送给与会者。

在展区中专门展示AR的区域实际上是3D和AR体验的共享空间,大多数演示都专注于各种早已亮相且普遍应用的3D内容,而优质的AR只是轻描淡写。例如,英伟达(Nvidia)展示了在笔记本电脑上运行的RTX Studio图形技术,说明现在即使是便携式计算机也可以在3D场景中光线追踪逼真的反射和阴影。

RTX-caliber光线追踪何时才会进入移动设备?由于渲染技术的高速处理要求,Nvidia表示,当前唯一可行的解决方案是使用GeForce Now将完全由服务器渲染的场景流式传输到移动设备的屏幕,或使用移动设备来渲染场景,同时服务器将渲染的反射流进行合成。但由于存在延迟,可能难以实时同步。

HP在展区里炫耀着Project Captis,该项目搭建于Z by HP阵列,是为创意专业人士设计的使用测光法将真实的纹理和对象转换成数字内容的预生产3D材料扫描工具。这套硬件和软件的组合目前尚未公布定价,通过将多个4K摄像机放置在一个大盒子中,可以从多个角度捕获物体的高精度细节。目前仍是创作者进行测试的试点。

Project Captis产生的扫描结果可用于将一种材料的纹理应用于另一种材料,例如制作一双具有皮革外观的3D打印太阳镜,或一双具有编织的复杂网眼纹理的运动鞋。像3D和AR展区中的许多其他演示一样,这种扫描技术具有明显的潜力,可以为未来的AR应用创建超级逼真的资产。

Max大会上发布的最有趣的产品之一(但不属于3D和AR领域)是Adobe Photoshop Camera,现已以Beta形式提供给少数用户。Adobe表示,该摄影应用程序将完全免费提供给iOS和Android用户,而无需Creative Cloud订阅或应用程序内购买。用户将能够从大量艺术家开发的Photoshop滤镜中进行选择,这些滤镜可实时应用于相机输入,并在拍摄时添加静态或动画图像。

Photoshop Camera令人印象深刻的是滤镜是如何工作的。Adobe使用基于云的Sensei AI实时扫描相机输入的某些类型的内容(例如天空,脸部或食物),然后选择性地将静止或动画滤镜应用于AI识别的对象。比如在上面的图像中,AI可以识别风景图像,将其从白天转换为夜晚(带有移动的月亮)或添加日式的朝阳覆盖层。另一个示例显示了该应用程序通过适当的调整色温和对比度,自动调整食物照片。

我并不认为我们需要另一个照片滤镜应用程序,或者Photoshop Camera将以某种方式取代Android或iOS设备内建的相机应用程序。但是,正如您看到的技术一样,使用人工智能和机器学习来实时增强摄影技术显然具有一定的吸引力。其中包含的识别技术是强大的,在正确的艺术家手中,结果可能是强大的。

Max大会明显缺少任何可穿戴的AR硬件,至少当我环顾四周时,我找不到它。尽管展厅中散布了一些VR头显,但几乎所有显示的东西都在计算机或平板电脑的屏幕上进行了展示,这表明Adobe和相关供应商仍在等待可用的AR头显。因此,3D和AR展区严格来说只是一个是2D展区。

Adobe Max是一个相当大型的展览,毫无疑问,AR既不是活动的主要的重点,也不是次要的焦点,Aero和相关内容在主题演讲和展区中只占很小的一部分。也就是说,很明显,创意人员已开始为不远的未来做准备,很快,混合现实将成为日常生活的重要组成部分,包括消费级应用程序和专业应用程序。这个阶段的挑战是要让AR从小型演示和营销过程中的小把戏变成消费者实际想要使用的实用的应用程序。我推测这将在2020年开始发生,这可能是由于价格合理的硬件和更多的开发者对其感兴趣共同推动的。

最初发布于2019年11月8日

原文链接:https://venturebeat.com/2019/11/05/at-adobe-max-augmented-reality-is-fighting-its-way-out-of-the-corner/

美国海军用HoloLens进行实弹射击训练 让模拟训练更逼真

模拟训练可以帮助士兵和水手学习如何安全地使用他们的武器,但模拟器有时可能无法营造出真正的战斗中的充满压力的环境。

这就是美国海军开发出一种在HoloLens上运行的更逼真的增强现实模拟器的原因。

该系统被称为武器增强现实评分系统(Weapons Augmented Reality Scoring System,简称WARSS),通过用HoloLens在用户的视野中显示敌方部队的3D图像来模拟实弹演习。该系统还会显示一个记分牌,该记分牌可以根据射击次数与未命中次数的百分比来计算已开枪数,击中次数以及得分。

这样一来,士兵们可以向虚拟目标发射实弹,而不是向真实目标发射空包弹,以获得更真实的战场感觉。

“当你专注于模拟训练时,你对风险的评估是不同的。它可以帮助你学习如何使用武器,它可以帮助你思考环境,”美国海军的Steve Murray上校说,他是美国海军海上系统司令部水面舰艇部队的项目经理。“当你将所有的压力都加入时,你需要建立一个更逼真的环境,以确保你在实际战斗中获得你想要的结果。”

此外,WARSS还可以将士兵的视频流显示在传统显示器或笔记本电脑上,也可以通过远程网络连接来传输,让指挥人员可以远程观察训练过程。

近年来,HoloLens已经成为全球军事行动中备受欢迎的AR可穿戴设备,英国皇家海军和澳大利亚皇家空军都采用了这款来自微软的头显。

去年,微软甚至击败了Magic Leap,获得了一项4.8亿美元的合同,将向美国陆军提供AR头显。

但是,这种优势并不能永远保证,因为目前的部署仅限于指挥中心或训练演习,二者都远离战场。最终,军队的客户将寻求能够进入战场的AR硬件,在这种情况下,我们期望微软能够提供体积较小的HoloLens。

最初发布于2019年2月13日

原文链接:https://hololens.reality.news/news/us-navy-taps-microsofts-hololens-for-augmented-reality-war-games-system-0193389/

Meta 2 AR头显上手体验 视场角和分辨率哪个更重要?

上次我体验Meta的AR头显还是在一次非公开的活动中,并且不允许拍照。在SVVR期间,当我再次体验时才允许拍照。这是与上次体验的产品不同的新产品,Meta的技术在这段时间取得了大幅进步。

根据展位工作人员的介绍,这次我体验的产品是Meta 2的最终版,并且将会以945美元的价格对外销售。

这次展示的版本与原型机最大的区别在于其跟踪技术。这款头显使用了inside-out位置跟踪方案,而非依赖外置的第三方摄像头。跟踪方案曾是Meta 2最大的弱点,所以在本次体验中我也特别关心这一问题是否得到了解决,简而言之,Meta解决了这个问题。

不过,Meta 2并不能完美地进行跟踪。当你在移动面前渲染出的虚拟物体时,偶尔会有间断、抖动或者失灵的情况发生。而当你尝试进行手部的互动时,这些问题会更加明显。在我体验期间,我有机会用手与一系列的物体进行互动,包括具有可塑性的方块、汽车模型、地球和大脑。在上次体验这款设备时,我已经见到了这些内容,因而可以明显看到交互效果的改善。但这个经过改进的设备的位置跟踪和近感探测仍然不够完美。

AR应用领域虽然还很年轻,但微软HoloLens已经在其中占据一席之地。任何一款想要进入这一领域的头显都会面临这样的问题“它与微软HoloLens相比有哪些优势/劣势/不同之处”。Meta 2也不例外,我们来看一下。

Meta 2拥有比HoloLens更大的视场角。这在很大程度上归功于显示技术的不同。而更大视场角的代价,则是相比HoloLens要更低一些的图像分辨率。分辨率上的差异还是很明显的,但就目前的AR体验而言,我个人更倾向于选择更大的视场角,而非分辨率的提升。

HoloLens的inside-out跟踪技术被视为是行业的标准。Meta 2虽然也使用了这一技术,但与HoloLens相比却缺乏稳定性。

最后,或许最重要的是,Meta 2是一款仍然需要通过线缆连接的头显,与之相比,微软HoloLens是完全无线的。而Meta 2的用户则需要连接一台高端PC。这条线缆或许可以帮助Meta 2达成更大的视场角,但却为符合人们需求的AR应用场景增加了障碍。

虽然目前Meta 2已经面向消费者开放预订,但Meta仍然表示这款AR头显主要面向开发者,就像当年的Oculus DK1一样。目前Meta 2已经开始出货,Meta希望能在年底前能够满足所有的订单。

最初发布于2017年4月11日

原文链接:https://uploadvr.com/meta-2-hands-ar-svvr/

要让增强现实进入日常生活 可以从这三点入手

数据表明,约有40%的护士会在第一次给病人取血时选错血管,由于增强现实技术,这种状况正在改变。

还记得2016年《Pokémon Go》刚刚推出的时候吗?几乎每个人都在谈论它,这并不让人感到意外,这是大多数人第一次见到我们期待已久的未来的样子,在此之前,我们只能在科幻小说或好莱坞大片中见到这些场面。

《Pokémon Go》就应用了增强现实AR技术,增强现实是将虚拟体验与我们的日常生活和环境相结合的技术,与100%由电脑生成的虚拟现实和结合了VR与AR的混合现实是不同的。

虽然过去的几年间,VR一直是人们关注的焦点,但AR正在进入人们的视野,并且很快就能成为企业家们手中的绩优股,无论是在营销还是在医疗等领域。

很快,增强现实就能以比你期望中还快的速度进入人们的日常生活,以下是最有前景的三个方式:

打造日常生活中不可或缺的AR眼镜

AR在过去几年遇到的问题在于,强大的AR眼镜通常是非常笨重和昂贵的,而消费者需要的是较为简单和轻便的产品,比如Google Glass,但它的处理能力要低很多,也就是说你无法用它做太多的事情。

或许目前最好的AR头显就是微软HoloLens了。其3000美元的价格相当感人,并且其外观仍然太大,太笨重。当然了,微软也会在将HoloLens推向消费级市场之前,对其进行大量的完善和改进工作。但对于开发者来说,HoloLens仍然是目前功能最全面的AR头显,即使存在种种不足,HoloLens带来的体验仍然是非常惊艳的。

我们也看到了一些雄心勃勃的新公司正在这一领域奋战,Magic Leap在最近更新了网站,展示了其首款MR头显,名叫Magic Leap One。但有些问题需要说明:目前并没有演示视频,并且这款头显还是一个没有完工的产品,产品图也仅仅是渲染图。

同时,在中国,包括Rokid、亮风台、0glass、枭龙等等厂家也在不断推出新的AR眼镜产品。即将在拉斯维加斯举办的CES展会期间,多款新AR眼镜产品也将首次亮相。除了工业等领域之外,一些厂家也在推动AR眼镜进入普通消费者手中。AR眼镜正在变得越来越方便,价格低廉,并且使用场景也会更广泛。

更具沉浸感且更个性化的营销方式

回想一下你在过去十年间看过的科幻电影,你或许能够记起至少1个全息广告场景,比如在《攻壳机动队》中那些如高楼一般的全息广告。

我们距离看到巨大的全息可口可乐罐广告还有多远?或许比你想想的还要来的快。还记得用ARKit构建的传送门吗,很快就会有更多脑洞大开的新创意出现了。

虽然目前绝大多数的AR和VR体验都是想要打造更具沉浸感的游戏,但这仅仅是目前的开发者社区中的现象。一旦更多的数字营销从业者开始应用AR技术的无限潜力,我们将会在任何地方看到这些内容。

想象一下,你进入一家杂货店,就能在视野中看到你想要的东西已经被高亮显示,或者可以在家中预览最新款的宜家家具,你可以不去逛商场也能试穿新款的鞋,或者在家中沐浴时看一看在加勒比海岸的度假目的地,等等等等。

减少医疗过程中的不透明现象

虽然市场营销和广告从业者可能是最早开始使用AR技术的群体,但医院和诊所也会紧随其后,很多专家已经预测,AR将会给医疗行业带来彻底的变革。

今天的医疗行业最大的问题就是反应迟钝和不透明。医疗行业有太多的行业术语和纸质文件,还有大量的病人在候诊。AR将会带给医疗行业的首个改变,在于它能够提供给从业者和医院更加快捷的方法和实时的帮助,无论是在诊断环节,还是在紧急的手术中。

比如,很多初为人母的女性都认为哺乳是很困难的,无数的书籍和教学视频都在讲述如何哺乳,但并没能够解决问题。为了解决这一问题,Google Glass和澳洲母乳喂养协会在2014年共同启动了一个项目,为哺乳期的母亲们提供实时的视频指导和辅助信息。

还有那些在社区诊所中负责取血和管理疫苗的人。40%的护士会在第一次取血时搞错病人的血管,尤其是面对孩子或老人时,这一几率会更高。现在,由了名叫AccuVein的AR扫描仪,开发商称该产品能将错误概率降至0。

甚至还有更加雄心勃勃的计划,Medsights Tech正在开发一款正在申请专利的软件,可以与AR眼镜协同,让医生能够在手术过程中实时的直接看透病患的皮肤。

是的,未来是被增强的。

到处都是全息广告和由AR辅助的医疗会比你想象的还要来的快。实际上,2018年将会有2400万台数字头显进入市场。而到2025年时,这一数字将可能达到5亿台。正如Facebook的工程师所预测的那样,AR设备将会在五年内取代智能手机。

在2018年,从业者们需要去更多地考虑AR能够用来做什么。AR将会改变任何事物,现在已经意识到这一趋势的人们,正是那些将会塑造我们未来生活的人。

最初发布于2018年1月5日

原文链接:https://www.entrepreneur.com/article/306879

医疗领域新探索 增强现实让手术过程更安全

最近这几十年间,医疗行业取得了巨大的进步,其中就包括影像诊断学的新进展,比如超声造影、乳房X线照相术、计算机化断层显象(CT),磁共振成象(MRI)等等。这些技术不仅得益于其他领域的技术进步,同样也推动了微型摄像头、微处理器,以及实时数据串流等技术的进步,这些都革新了医生们在手术过程中使用影像的方式。

现在,基本上每个手术之前,都会使用上面一种或几种医学影像。即使是在急诊室,医生们也在使用超声波或CT来帮助引导治疗过程。无论是大型手术还是小型手术,这些影像现都可以在手术过程中实时呈现。

虽然医学影像技术已经取得了极大的进步,但直到现在,影像内容的显示方式基本上与上世纪50年代没有什么区别。无论是影像还是数据,都会呈现在一个2D的平面屏幕上,这就迫使医护人员必须把目光从患者身上移开,甚至从医生们正在进行手术的手上移开。更重要的是,这些影像并不是从观看者的视角来呈现的,而是取决于显示用的设备。在手术过程中,医生们必须使用自己的技能和想象力来理解这些数据,并且通过自己的想象,把这些影像投射在患者身上。此外,不同的视觉数据还会分别显示,所以医生们还不得不分配额外的注意力,把不同的影像和数据内容进行整合,比如将血管造影和CT的影像整合到某个患者的患处,而要掌握这种技能,需要数年时间的训练。

增强现实(AR),是一种可以把数字信息叠加到真实世界中的技术,在我们看来,这种技术有改变医学影像领域的潜力。根据我们在马里兰州混合现实中心(Maryland Blended Reality Center)的Augmentarium项目所做的研究,在我们预期的应用场景中,一个医生使用AR头显,比如微软的HoloLens,能够看到数字图像和其他数据直接叠加在他的视野中,在这样的场景中,头显可能会显示患者的浮动的超声心动图,以及有关患者动脉瘤的极为重要的数据,所有这些都直接呈现在手术区域内。医生无需看病人以外的区域中那些不同的显示设备。

AR能够同时呈现图像数据和患者的其他重要信息,这种潜力能够拯救生命,并且减少医疗事故。这对于那些在手术室以外进行的治疗过程尤为重要。手术室或许是医院中最安全的地方了,在这里,患者周围会有4到8名专职的医护人员。由于每个人都在手术前看过了医学影像内容,手术过程通常都是被妥善计划好的。麻醉师会监控患者的生理机能,并且负责疼痛管理和救命的药物。外科护士需要确保所有必要的设备立刻可用,而医生则需要完全沉浸到手术任务中。

但是,手术室中的时间是极为昂贵的,并且手术室也是严格按照选定的病例来预定的。这些选定的手术是所有医院收益的基本来源之一,所以确保手术室被完全占用并且正常运转是非常重要的。那些小型的,或者突发的手术很难安排到手术室。结果就导致,很多这些手术都是在手术室外面进行的,比如在特护病房或者急诊区。而正是这些没有在手术室接受手术的患者,会冒最大的风险。这时,我们就能看到AR给医疗领域带来的最大的好处。

与在手术室中进行的手术不同,在外面进行的手术得到的来自医护人员的支持会比较少,通常只有一个医生和一个护士,他们同时还有着其他的责任。通常患者的生命体征都不稳定,如果是在深夜,进行手术的医生可能刚刚接受培训不久,他可能同时要担负麻醉师和医生的角色。这个房间也不是专为手术而设计的,尤其是没有那些复杂的呈现影像的设备,更别提那些混乱的对患者生命体征进行监控的设备了。在跟踪患者的多种影像和数据信息的过程中,很容易错过极为重要的线索。而这时,只需一个AR显示功能,将所有的影像和患者的数据进行整合,并且让医生能够把注意力集中在患者身上,很明显能够提升手术的质量和安全性,并且减少与手术过程相关的并发症,进而节约成本。

除了因为更安全的手术过程而带来的成本的降低之外,还可能会因为减少对多余的屏幕的需求量而降低成本。目前,超声波、内窥镜和支气管镜检等设备都需要医院购买整套系统,每套系统都有其各自的显示屏。这些系统每套都可能会花费数十万甚至上百万美元。并不是因为不同的影像功能需要特殊的显示器,而是目前的经济模式所限,这些整套售卖的系统都包含互不兼容的显示器。电子病历有自己的显示屏,血流动力学监控器和呼吸机也有各自的屏幕,并且其数据也无法进行融合。而AR能够提供一个共享的屏幕,能够逐渐减少对患者每项数据进行监控所需的特定的显示器的需求,同时提供一个来自多个来源的生命体征数据能够实时整合的显示器。

要实现这些功能,目前的AR技术还需要进化,而医生们也需要了解这一概念。医生在佩戴这些硬件时,需要舒适且安全。在有些场景中,这些影像还需要尽量不透明,而其他的可能需要更加透明才可以。如果投射的影像是要用来进行手术过程指导的,还需要以极高的准确度来呈现。虽然还有各种各样的技术挑战,但我们相信,没有一个挑战是不能克服的。

在马里兰州混合现实中心,我们致力于研究将AR作为一个主要工具,来帮助医疗行业从业人员拯救生命,同时降低医疗成本。来自斯坦福大学、杜克大学和约翰·霍普金斯大学的团队正在研究融合和投射视觉数据,同时研发适合医疗行业使用的AR显示设备。

这会需要有才华的计算机科学家和有远见的医生们共同努力,让增强现实在医疗领域成为现实。我们对未来充满激情,到那时,我们在医疗领域使用AR技术,会像现在使用听诊器那样普遍。

最初发布于2018年3月21日

原文链接:https://hbr.org/2018/03/how-augmented-reality-will-make-surgery-safer