HTC终于升级了Vive头显 这对于Oculus意味着什么

Vive Pro是一款很有吸引力且实现无线化的VR头显,这对于Oculus的Santa Cruz原型机的未来意味着什么呢?

HTC在刚刚过去的CES期间发布了Vive Pro,这是一款相比原版Vive分辨率更高的VR头显,并且包含了内建的耳机和一个无线适配器,以提供无线VR体验。HTC以此在高端VR市场树立了新的旗帜。这是HTC和其合作伙伴Valve共同走出的很自然的一步,Vive Pro的新特性也使产品的生命周期得以延长。

当然了,这些新特性中的任何一个都无法单独革新目前的VR市场。但叠加在一起,它们将会显著地影响HTC主要的竞争对手,Facebook旗下的Oculus。

HTC和Valve自从新一轮的VR热开始以来,就一直在和Oculus及其产品Rift竞争。在最近这几年,这两个平台都在奋力争夺高端市场的份额,而这一市场,则是为了迎合那些高端游戏PC玩家们。

但在经过这几年后,Oculus多样化了自己的产品线。Oculus和三星合作,发布了价格低廉的、配合手机使用的Gear VR,并且这一产品的发布甚至早于Oculus Rift消费者版。在去年的Connect大会期间,这家公司又公布了一款类似Gear VR但却更独立的产品,名为Oculus Go,以及一款代号为Santa Cruz的原型机,这是一款功能齐全的头显,并且不需要额外的定位系统。

Vive Pro的出现则带来了一个重要的问题,如果HTC压倒性地专注于高端VR市场,Oculus更加丰富的产品策略是否会分散其市场占有率?如果Santa Cruz上市了,Oculus将会有四款消费级头显,这种市场策略有些难以理解。Oculus Go和Gear VR是比较相似的,但从我们了解到的信息来看,Santa Cruz更像是处于较为低端的移动VR和高端的有线VR头显,如Rift和Vive之间的产品。

Oculus并没有把Santa Cruz当做是Rift的继承者,而是将其作为一个居中的设备,位于具备精确的手部和头部跟踪的Rift和可以自由移动的Oculus Go一体机之间。

Oculus的主管Hugo Barra称,用户将会获得“与Rift非常相似的使用体验”,但无需所有那些复杂的安装过程,在身体的移动方面也少了很多限制。另外,Santa Cruz还使用了类似Oculus Touch的运动控制器,但无需使用外部摄像头对其进行定位,所以你不需要Rift配套的摄像头或Vive配套的光塔这类设备。

在Connect大会期间,Hugo Barra对媒体表示,Oculus并不会提高某一个平台的优先级,并且他也不是多担心碎片化问题。他说,就目前而言,那些想要最高端游戏体验的玩家可以继续使用电脑来驱动Rift头显,而想要更低价格设备的用户可以选择三星Gear VR或Oculus Go。Santa Cruz则位于二者之间。

“当然了,最终,我们希望每款产品都具有完整的位置跟踪,以及手部定位,这很明显是我们未来的目标,”Barra说道。“但是,在移动VR内容领域,还有太多惊艳的创意可以实现,所以我们也会在这一领域加倍下注。”

这可能是一个明智的长线战略打法,但Vive Pro带来的威胁则使其变得更复杂了。

Vive Pro仍然需要一台PC来驱动,也需要那些并不方便的定位跟踪系统,但是无需线缆且在质量上没有损耗的房间规模VR体验也正是Santa Cruz的核心特性之一。如果Oculus发布一款新的Rift来直接对抗Vive Pro,开发者们或许就没有任何理由为Santa Cruz这样的设备来开发游戏或应用。

Vive Pro并不会必然地威胁到Oculus的整体地位。“是否会有硬件参数上的竞赛?当然会一直有,那么HTC在这次是否领先了?是的,”行业分析和研究机构Gartner的分析师Brian Blau说。“但我并不认为这意味着竞争的局面发生了实际的大幅变化。虽然HTC目前暂时领先了,但你必须知道Oculus是会回应的。到今年年底,我们或许就会看到相反的局面。”

但Santa Cruz的未来并没有多么明晰。到目前为止,HTC还在专注于推动大型高质量VR游戏和行业应用,也就是高端PC用户所占据的市场份额。这家公司暂停了基于谷歌Daydream的VR一体机的开发,并且虽然HTC发布了一款名为Vive Focus的VR一体机,但这款设备目前仅面向中国市场。

而在发布Vive Pro之后,HTC又令人信服地增强了Vive作为VR游戏默认平台的地位。Oculus在Rift独占游戏上花费了Facebook大量的资金,但如果HTC让Vive对高端游戏足够具有吸引力的话,开发者们或许会认为,Facebook给的这些钱并不值得他们去限制潜在的玩家。

Oculus当然也知道无线VR头显的重要性,毕竟这可以提升游戏、影视或社交的体验质量,但Oculus并未向人们展示出其在VR无线化方面的计划。而与此同时,HTC则更加专注于由PC驱动的VR头显,这将会让Oculus面临艰难的抉择:我们该往哪儿投钱?是不是该补充一些新的开发者了?

“与其分散注意力,我认为对Oculus来说很重要的一点是,对不同的产品采取差异化的策略。对于所有的VR头显来说,共同的目标当然是无线化,但除此之外,我认为Oculus面临的挑战是要展示出其不同的高端产品间的差异,”行业分析和研究机构NPD Group的分析师Ben Arnold说。“谁能成功,很大一部分取决于内容的质量,我认为硬件也会有影响,但随着这些平台逐渐成熟,平台会变成牵制因素。消费者们会决定哪款硬件对他们来说是最好的。”

Facebook当然不缺钱,Oculus也会在某个平台成功进入主流市场之前持续开发不同的VR头显。目前并没有一款头显赢得了VR平台之间的战争,并且我们也不知道这是否会吸引那些会花费大量的钱来购买硬件产品主要的游戏玩家,或者是那些只需要低端VR头显,来观看视频和使用其他应用的用户。

我们也不知道消费者版的Santa Cruz会长什么样。Oculus或许不会再将其有线和无线的VR头显产品线混在一起,比如说推出另一个版本的Santa Cruz,可以选择是否连接PC,或者说一款具备无线适配器和inside-out定位的Rift,这会让Vive Pro新增的便利性更具优势。

VR是一个具备强大潜力的媒介,并且没有比每年的CES展会更能看出未来趋势的了,在展会期间我们可以看到这项技术是如何进入到新的、激动人心的领域。但是从现在来看,VR还仍然是一个很小的市场。随着HTC推出Vive Pro,Oculus或许需要选择,是继续探索未来的广阔市场,还是先抓住目前最大的用户群体。

最初发布于2018年1月15日

原文链接:https://www.theverge.com/2018/1/10/16874096/htc-vive-pro-oculus-vr-rift-santa-cruz-virtual-reality-market-ces-2018

斯坦福大学教授谈VR新闻:有VR视频也未必有真相

水面正在上升,狂风在耳边呼啸,你能感受到脚底的屋顶正在晃动,放眼望去,洪水正在逐渐上涨。透过这倾盆大雨,你能看到你的邻居们,他们正在痛苦地哀嚎,就像你一样站在自家的屋顶,绝望地寻求帮助。水面漂过一具尸体,这是一个没能爬到屋顶的可怜的灵魂。你听到,后来也看到了有直升机在头顶盘旋,你拼命地招手,但直升机还是飞走了,什么时候洪水才能退去,如果没有人来帮你,会发生什么?

这段让人感到惊恐的体验是与NPR的记者Barbara Allen合作设计的,他在2012年时找到我,想了解VR能够如何强化新闻报道行业的故事讲述力量。我们在斯坦福大学虚拟人类交互实验室(Virtual Human Interaction Lab)研究了数年沉浸式新闻报道的潜力,但在Barbara来上门拜访之前,我们一直都没有时间,没有动机,也没有新闻报道的专业知识,以打造一段模拟体验。我们花费了一些时间来为该项目设计情节,并且我们还讨论了几种不同的可能性。

渐渐地,Barbara有了一个新奇的想法,他想要模拟卡特里娜飓风的后果,以让用户们更好地了解由这场飓风引发的恐怖场景和灾难,体验到传统媒体仅能通过远处的摄像头拍摄或者纸面报道的场景。Barbara曾经报道过这场飓风,并且做了大量的记录工作,所以她熟悉其中的一些细节,可以把这场恐怖的灾难进行还原。更不用提斯坦福大学实验室中可以提供物理跟踪的空间,这块空间刚好是一个房顶的实际大小,因此这段体验正好利用了这块区域。

在这之后是一段重复的过程,我们仔细研究了Barbara的笔记和视频,对其中的视觉场景和互动内容进行了编排和组合,接下来重复这一过程,在让其他的记者来体验,并收集他们的反馈之后,我们又在绘图板上进行编排。该项目结束时,我们举办了一次大活动,让一些比较著名的参观者来体验卡特里娜飓风。

在我们开发卡特里娜飓风体验时,我们没有想到在几年之后,这种VR新闻报道将会被创作出来,并且被大范围传播。但几乎是在消费级VR头显上市之后的同一时间,记者们、新闻媒体和独立出品人抓住了这一机遇,开始生产原创的VR新闻报道内容。没有一家新闻媒体像纽约时报这样看好VR,他们向纸质杂志的订阅者们寄送了超过100万台Cardboard,并且开发了高端的、专门的智能手机应用,来分发由其自己创作的VR体验。其他的新闻媒体,像是VICE、华尔街日报、PBS前线和英国的卫报也在测试这种新的媒介。

让读者们尽可能地接近真实的故事,向来是新闻报道的首要目标,而VR,貌似提供了一种理想的多媒体体验。传统的新闻媒体都试图了解该如何重新获得读者们的关注,在目前日益日渐碎片化的媒体世界中,他们该怎样夺回他们已经失去的地位。当我们可以在浏览器或Facebook的订阅中免费获得新闻时,为什么还要付费呢?鉴于此,纽约时报这类媒体的服务增加新的VR特性,或许是解决困扰日渐衰落的新闻行业的营销困境的一种方法。

毕竟,新的媒体技术都是要和新闻报道一起进步的,新闻报道的定义也一直在随着新技术的应用而不断进化。从十七世纪开始,早期的报纸只有手写的文字内容,但随着不断打印技术不断改进,雕版插图和图表开始加入其中。到19世纪下半叶,照片或者基于照片的精细的雕版图开始与新故事一起出现在报纸中。

当然,这些图像实际上有多么“真实”是值得怀疑的。照片只能拍摄到某个固定角度的事件,而且我们知道早期的摄影记者们需要经常去策划照片角度。比如内战时期的摄影师Matthew Brady,就因为重新安排战场上战死的士兵们的尸体来调整照片的构图而闻名。无疑,这种手法在Brady看来是合乎情理的,因为通过增强成堆的尸体的照片的视觉冲击力,他认为能够更好地传达这场血腥战争的残酷。但是很明显,这样的处理是严重违背如今的摄影记者的职业伦理观念的。现在,即使是给图像叠加滤镜以调整其亮度都被认为是错误的行为。

在20世纪,收音机、新闻影片、电视、以及后来的互联网,都在继续使用新的多媒体手段和互动特性来塑造新的新闻报道,每种创新都引发了新的问题,如何支撑20世纪中期新闻记者的客观、独立和讲实话的理念?今天,报纸的消费者们正在越来越多地转向新的新闻来源,以确认他们对事件的看法。随着坚持这种已经建立的专业理念的新闻媒体日益减少,媒体深度报道的内容或许会被一些视角偏激的报道,甚至是为了吸引关注或引发愤怒的假新闻所淹没。在这个快速变革的新闻行业,我们有两大理由要当心像虚拟现实这样的媒介。

理由一:虚拟现实对于我们的情绪会产生强大的影响,甚至在很多情况下不会鼓励理性的决策。比如,一个在观看犯罪暴行的VR体验的观众,会觉得自己就像是一个目睹全过程,并且体验了这种愤怒的人。这种愤怒会去哪儿呢?助长这种情绪并且利用人们的本能,来猛烈抨击他感知到的威胁。这是一种对付暴君、恐怖分子和政客的惯用的策略。我对于虚拟现实能够成为极好的宣传工具基本没有任何怀疑。

理由二:与VR相关的担忧在于,由于它本身是数字化的,它会很容易就被修改和处理。这并没有使它与其他媒介区分开。我们都知道,照片和视频经常会被处理,甚至是手写的内容也能被曲解,改变成带有某种意识形态的内容。事实上,其他的媒介形式也能因一些虚伪的目的被战略性地更改,给我们带来不适。在VR中,实际上我们会“感觉更真实”,关于信息错误和情绪操纵的潜在危险会指数级增长。当错误的事件出现时,你很难去和相信这些事件的观众争论。毕竟,他们会亲眼看到这些事件。

有道德的记者在VR新闻报道中会尊从保证真实性和客观性的标准。比如使用电脑生成的VR体验来进行新闻报道的先驱,Nonny de la Peña,曾经是一名经过正式培训的记者,他创作了一系列的沉浸式体验,让观众可以目击真实世界的事件,比如有争议的黑人少年雷沃恩·马丁被枪杀事件,以及一个发生在南加利福尼亚州的令人悲痛的家庭凶杀案。

有些承包商会滥用VR的可变性,来达成在意识形态上的目的,或让新闻耸人听闻,这也是可能会出现的。最初,这些对VR技术的滥用会发生在由电脑生成的沉浸式的VR体验中,这种内容是要从头开始制作的,并且完全处在制作人的控制之中。由于它们是由电脑生成的,它们仍然缺乏细节信息和照片那种真实感,而正是这两者才能很容易地让人们相信看到的是真实的。不过,这可能会在应用光场技术之后很快就发生改变。光场技术可以让数码相机与电脑配合,从获取到的光照中推断出足够的信息,来创作出照片级虚拟内容,并且将其放置在三维的空间中。

我们可以畅想一下未来,照片级的VR视频能够快速地录制并编辑,就如同现在照片编辑工具能够把模特的身材修的更好,来用作杂志封面一样。当这一时刻到来时,我们并不难想象,有些不讲道德的VR新闻作者会出于自己的目的,修改其中的内容。就像苏联的领导人可以把一些名誉扫地的官员从旧照片中抹去。或者像在美国的政治运动期间,会出现一些被修改过的竞选集会图片,让支持的人群显得很庞大。

在2016年,斯坦福大学传播系开始在专门的沉浸式新闻报道课程中研究这些问题。为什么要在你的报道中使用虚拟现实?在什么样的情况下虚拟现实会为你的报道增加新闻叙事效果?而他们研究之后确定的答案是,并不会有你想象的那么效果好。这一课程的结论是,VR只会再某些特定的案例中增加报道的价值,除此之外,VR仅仅是传统新闻报道形式的一个补充。

大多数的VR新闻故事都是通过沉浸式视频来呈现的,而在新闻纪录过程中拍摄这种视频也是很复杂的。比如,由于相机是以360°的形式录制的,如果相机的操作员不想被误以为是新闻中的某个角色,她必须在安置好设备之后离开拍摄范围。这也就是说,相机所拍摄到的事件将会脱离拍摄者的控制,甚至会在她不知情的情况下拍摄。这时可能拍摄不到最吸引人的画面。如果相机的镜头只是被动地停在某个地方,对于故事讲述来说也是很困难的,毕竟好的故事需要控制拍摄的方向和内容。

从某种意义上说,早期的VR新闻记者们就像是19世纪的摄影记者们一样,需要把相机带到新闻发生地。扛着沉重的又脆弱的设备,并且需要很长的时间来进行架设。而在实际拍摄时,为了保证拍摄效果,还要布设拍摄场景。这也就是为什么那些最早期的实验性的VR新闻纪录内容大多是舞台演出,描述人们的生活场景,或者固定的场景或有组织的活动,比如游行、监控和示威活动等等。要将VR新闻纪录应用到突发新闻事件的报道,或者将其放置在一场冲突的中央进行拍摄,或许还需要一些时间。

而在那些周边环境对故事的构成非常重要的情况下,如何拍摄出好的VR新闻报道?早期的实践者们已经开始意识到这一问题。这里有一个很好的例子,是由英国卫报制作的VR体验《6×9》,这段体验将观众们带到了一个单独拘禁的牢房中。幽闭恐惧症是在VR中经常使用且有效的小把戏。之所以这个小把戏对于VR如此有效,是因为环绕在观众周围的环境对于故事来说是非常重要的,并且还需要观众来转头或转身,来探索周围的环境。如果全部的事件都处在正前方或者中央,比如说一场政治辩论,那你就不需要使用VR了。如果整个故事只需要读者朝向一个方向的话,再用VR来呈现就没有什么意义了。

所有这些有关VR新闻报道的早期实验都让我们看到了一个紧急的问题:如果媒体都开始制作VR新闻报道,读者们会买账吗?VR的命运会不会像3D电视那样?毕竟这二者存在一些共同的问题,比如价格昂贵,外形愚蠢,使用不够舒适,还需要佩戴专用的眼镜等等。但是VR这个领域一直有很多大规模的投资事件,看起来这个行业的趋势已经是板上钉钉的事了。我们已经有了一些激动人心的VR内容,为接下来高质量VR内容的出现奠定了基础。而当你在体验到了让你惊喜的VR内容时,你会迫不及待地寻找下一段。

最初发布于2018年1月17日

原文链接:https://www.pbs.org/newshour/economy/making-sense/how-virtual-reality-could-change-the-journalism-industry

军事训练领域寻求一场变革 VR等技术显然还面临挑战

要让军队跟上新科技发展的步伐,一直都是充满挑战且价格昂贵的过程。当然,各国军事部门在寻求改变。根据研究机构的预测,到2022年,会有多达110亿美元的资金投入到虚拟现实、增强现实和混合现实培训系统中,而这些新技术正在成为军事培训领域创新的一个主要关注点。

在全球范围内,VR行业的规模一直在快速增长。预计到2021年,全球的VR市场规模将会达到750亿美元。单单是设备方面,到2021年,中国市场对VR设备的需求可能会超过8500万台,超过美国的6800万台的市场规模。随着消费者们驱动新的创意,并且在这一领域持续投入,像是英国、韩国和澳大利亚这样的国家,也开发了一些平台,来将VR战略融入到政府事务中,比如在军事领域。

在此之前,美国国防部一直依赖着现场式的培训,在一个所谓的“合成环境”中模拟真实的战场环境,用电脑控制的模拟器或者化身进行互动。单单是这个合成的数字培训系统,每年就要花费140亿美元。但是随着技术的进步,用于步兵的培训方式也在发生变化。

由于现在有了可以在移动设备上工作,并且还可以配合VR头显的培训课程和模拟器,以及基于云端的共享内容,士兵们现在可以在世界上的任何地方进行培训。这些模拟器可以模拟新的武器,新的军事策略,甚至可以让士兵们练习从飞机上进行高风险的高空跳伞。此外,老兵们还能够沉浸在治疗环境中,帮助他们处理战后的焦虑,或者创伤后应激障碍等心理创伤。

“美国国防部正在研发沉浸式技术,”三星的联邦政府销售事务副总裁Chris Balcik说道。这家电子技术公司也开发用于军事用途的技术和设备。“我们认为,虚拟现实、增强现实和混合现实在军事领域有着广阔的用武之地,目前已经用作一种补充手段,出现在了在军事训练中。”

毫无疑问,新技术是一场全球性的军事竞赛。根据2017年的一份关于人工智能在军事领域应用的报告,如果美国想要跟上其竞争对手,比如中国和俄罗斯,那么美国需要快速推进技术方面的创新。

“美国军队要么引领这场革命,要么屈服于已经落后的现状,” 位于弗吉尼亚州的数据科学和分析机构Govini在报告中说道。

该报告指出,美国是否能够成功地变身为军事新技术领域的领导者,将取决于美国国防部认识到AI和其他自动化系统的潜力的速度,以及需要多长时间才能全力投入这些相关的技术,比如VR/AR、人工神经网络、计算机视觉、自然语言处理、大数据、机器学习、无人系统和机器人,并且为这些技术在战场上找到对应的应用场景。

根据来自IDC的数据,美国仍然是在AI领域投入最高的国家,在2017年这一数字达到了差不多100亿美元的水平。报告人为,中国正在不断地投入这一领域,并且从军事领域的创新中获益。并且一个有趣的现象是,当美国政府还在犹豫时,中国已经开始向美国的创业团队投入资金了。

专家表示,虽然美国已经在将人工智能引入到国防战略中做了一些工作,但美国国防部并没有引领虚拟现实/增强现实/混合现实等技术在军事领域的发展。

“对于虚拟现实来说,基于消费者的业务是其发展的动力,”Booz Allen Hamilton的执行副总裁Young Bang说道,这是一家位于弗吉尼亚的管理和信息技术咨询机构。根据IDC提供的数据,2018年美国在VR领域的投入将会达到64亿美元,作为对比,亚太地区,包括日本在内,将会投入51亿美元,而欧洲、中东和非洲一共会有30亿美元。

虽然政府部门在虚拟现实领域的投入正在逐渐增加,专家表示在军队大规模采用VR之前,仍然有几个挑战需要克服。其中一个障碍是需要确保VR设备足够安全,以保证军事训练内容受到全程保护。政府和技术提供商一直在研究,需要具备多高的安全程度才能将其用在军事部门中。这就拖慢了VR等技术在军事培训领域的应用进度。

“比如你使用自己的声音来进行认证,并且已经输入了自己的PIN码,使用了你的生物识别手段如虹膜识别等等,这样你就使用了三四种认证手段,但这样足够了吗?”Balcik说道。

另一项挑战则是目前的VR设备存在的问题,比如会引发晕动症,会让用户感觉恶心等等。

“由于屏幕刷新率、分辨率等方面的问题,这些设备还有很大的优化空间,”Bang说道。“并且无线设备的电池寿命也是一个限制因素,不过很快就会被克服。”在刷新率方面,会随着新的图形处理芯片的推出得到改善,Bang说道。

开发可用的内容也是一个问题。目前已经可以采用的VR培训内容包括一些简单的任务,比如学习如何穿戴装备。而更复杂的用来模拟军事任务的VR内容开发起来就更难了,尤其是当这内容需要体现多人协同作战,或者模拟复杂的城镇作战环境时。

“现在每个人都在进入这一领域,无论是学术界、终端用户,还是军事部门,”Balcik说道。“这需要很多领域共同发力来驱动内容的进步。”

最初发布于2018年3月28日

原文链接:https://www.usnews.com/news/best-countries/articles/2018-03-20/the-us-military-wants-to-lead-the-innovation-game-in-vr

革新用户界面 增强现实正在提升用户体验

当苹果的CEO Tim Cook在一次季度财报电话会议上,向分析师说出“增强现实将会改变一切”这句话时,人们都感到了一丝震惊。

而现在看来,库克对增强现实(AR)的评价似乎并没有过分夸大。事实上,增强现实技术正在为各种应用创造出一个全新的范例。毕竟,我们已经很快地从在电脑键盘上打字,“进化”到了用智能手机打字或滑动屏幕,又或者是用语音来告诉Alexa或Siri来帮我们做什么事。现在AR把我们带到了全息计算时代。Animoji、Pokémon和面部滤镜等等AR内容,正逐渐给我们呈现出一个新鲜又充满未来感的用户界面。

现在,通过我们的手机屏幕,而非激光投影,我们就能接触到全息计算。结果是,我们正在见证全息图像使用率的激增,就像3D技术改变了我们与世界的交互方式一样。

新的AR应用正在不断涌现

苹果iOS 11的发布,将AR交到了超过4亿消费者的手中。最新的iPhone X通过使用其3D摄像头和仿生处理器,可以提供增强的AR体验。

在库克的演讲中,他指出,在App Store中目前已有超过1000款App具备强大的AR特性,开发者们也一直在几乎为每个分类开发新的AR体验。目前的AR应用主要面对消费者、学生和商业用户,改变了很多人工作、娱乐、联系和学习的方式。

库克说,用户可以和虚拟但却逼真的模型进行互动,从人体到太阳系,随着所有东西都在3D中被赋予生命,教育就变成了一个更加容易激发兴趣的体验。以体育赛事直播为例,通过使用AR技术,解说元能够看到选手的比分被叠加在画面中,比如当他们在赛场上奔跑时,这就以一个全新的方式增强了观赛体验。而AR与其他技术的结合,比如机器学习,也能带来一个全新的而且更具沉浸感的体验,他补充道。

你可能会认为,这位苹果公司的领导者当然会看好其公司正在使用或探索的技术,但是其他巨头也在这一领域进行探索。比如谷歌发布了Poly平台,来寻找和分发虚拟和AR的内容。亚马逊则发布了Sumerian,在云端创建逼真的虚拟环境,并且可以用于动画角色和其他3D物体。此外,原生AR内容也在创建中,稳定的AR特性也逐渐被Facebook、Snapchat、Instagram以及大量的其他技术公司开发出来。

迷人的3D用户体验对于游戏和娱乐行业来说当然具有吸引力,并且由于技术巨头们游戏和滤镜带来全新的AR体验,其传播会变得更广泛,这样就会有更多人熟悉这项技术。

培训和客户体验是巨大的开发领域

AR已经开始进入培训和客户体验领域。在培训中,比如虚拟的上手指导,用全息图像来解释一个过程,或者对用户进行导航,是很实用的。它还能模拟真实的场景,比如销售过程。使用了AR的界面会为传统的指导过程增加新的维度。AR内容可以叠加更详细和更多种类的信息,比如浮动的文本提示,来提供某个特定物品的细节信息,或者为执行某个任务提供分步的指导,或者是在控制面板上指向正确按钮的一个虚拟箭头。

通过智能手机的摄像头,我们有数不清的机会来为几乎任何东西增加数字化信息。比如,如果你能够在任何一个桌子、墙面、或者地面上放置可互动的、沉浸式的3D内容,并且能够通过你手中的屏幕与其进行互动的话,那你就没有多大的必要去教室了。还有,你不仅可以被动的观看培训视频,还可以通过AR为培训过程增加一层额外的体验元素。这样一来,用户能够更容易地进入学习场景中。

关注消费者体验的AR应用正在让消费者们使用AR来进行自助选择和自助服务。并且我们认为,让用户更多地使用这些功能仅仅是时间问题。比如,宜家的AR应用可以让消费者在家中的餐厅通过点击手机屏幕来查看全新的餐桌的放置效果。为何不把你的手机指向包装箱,用AR功能来查看其装配过程呢?

当然还有一些其他的吸引人的应用场景,并且随着AR应用更广泛的采用和传播,会有很多适合这种全新的用户界面的应用场景。

大量的资金投入,告诉我们这个急速发展的新领域仍然需要探索。全球性的风投机构The Venture Reality Fund在去年11月发布报告称,2017年投入到AR和VR中的资金共有23亿美元。其中娱乐行业应用占据了绝大部分,而且企业的投资增长了69%。

除了苹果、谷歌和Facebook这样的巨头之外,还有大量的初创公司进入了AR领域。以后这项技术仍然会是基于手机,或者需要使用眼镜吗?它是否会转变成一个桌面应用,或者基于现有的硬件,并且叠加眼部投影技术?或许上面这些都有可能,但现在谁能有明确的答案呢?

最初发布于2018年3月27日

原文链接:https://www.itproportal.com/features/how-is-augmented-reality-improving-customer-experience/

这个空军基地每年培训60000名学员 VR能够带来哪些改变?

在传统的空军培训方式使用了几十年之后,创新的技术,比如虚拟现实,正在被应用到培训过程中,或许将会完全改变传统的培训过程。美国空军第82训练连队的运营人员Lynn List博士称,使用虚拟现实作为空军培训的一部分将会在接下来的几年成为常态。

虚拟现实能够被飞行员们用来安全地与工具和复杂的系统进行互动,在真正上手之前学会掌控整个系统。

每年有超过60000名飞行员通过谢帕德空军基地的培训,使其成为第二战术空军的最大的技术培训基地。本周,该基地举办了一次研讨会,邀请了多家VR行业企业,请他们来分享怎样尽可能地将增强现实和虚拟现实技术融入到培训过程中。

基地负责人表示,在谢帕德空军基地,有超过600项培训课程,这些技术团队正在研究VR能够如何提升这些课程的效果,以及其中哪些课程是更应当优先结合VR技术的。

毫无疑问,美国空军希望使用VR技术来节省时间和成本,同时能够训练出可执行多样化任务的飞行员或地勤维护人员。而在VR培训项目中,多种多样的学员能够使用VR头显进行操作。有的项目中,多个学员可以一起操作同一个项目,或者每个人独立地操作各自的项目。在VR培训项目结束之后,飞行员能够回顾刚才的操作是否有问题,并且还可以再次开始,以避免之前出现的问题。

提供可供学员和讲师进行评估的技术数据,只是VR培训的诸多优势之一。在有些课程中,学员们仍然需要与真实的设备互动,比如飞行员培训,如果没有足够的飞行时间,是很难完成的。“任何能够完全在虚拟环境中完成的培训都能减少对飞机和其他设备的损耗,”List博士说道。“上手操作真正的设备花费是很高的,而VR培训内容可以反复使用,并且十分安全,不会损坏昂贵的设备。”

最近,该基地开始使用一段VR课程来培训如何在直升机上部署武器。List博士表示,学员们以前都是将武器安装到金属方块上,来模拟安装到直升机的过程。而VR是非常适合这种情景的。因为在虚拟世界中,他们可以更简单直接地与直升机进行互动,并描述这个过程。同时,VR技术所需的花费也会少很多,因为你几乎可以一直使用它,并且相比传统的培训过程,它能够节省资金。

比节省资金更重要的是,空军还希望让学员更快地完成培训过程。早期的测试效果很不错,可以看出,有些学生学的非常快,并且在使用VR时能够掌握更多的信息。

“我们必须要创新,因为我们敌人也在创新,”List博士说道。

第二战术空军的指挥官Tim Leahy少将表示,他对于这一技术的未来,以及这项技术能够给空军带来的改变感到非常激动。他用一句老话来形容VR:一张图片胜过千言万语。“虚拟现实就是这张图片。这种可以让你看到你所做的事的能力能够让地勤维护人员或其他学员用与过去完全不同的方式进行训练,”Leahy少将说。“这些VR模拟训练可以让学员们用不同的方式进行训练,用纸质材料或二维图形所无法提供的方式来理解新事物。”

Leahy少将表示,将VR用于培训过程仍然是一个新鲜事物,他们目前还不清楚这项技术能够帮助节省多少时间或成本,其长期目标是节省三分之一甚至是一半的时间。

“如果一般需要一年的时间才能培养一个飞行员,而我们仅用了11个月,这就已经节省了时间,虽然这看起来成效并不大,但已经是很大的进步了。”Leahy少将说。

现在的飞行学员们生活在一个玩游戏,上网搜索信息以及观看YouTube视频是常事的时代。Leahy少将认为,将这种游戏般的感受加入到培训过程中能够吸引这些年轻的学员们,甚至还可以帮助招募新的学员。

“如果VR培训能够让地勤维护人员的培训更快,在实际操作时更快速更高效,那么对于空军来说将会是非常大的益处,”Leahy少将认为。

谢帕德空军基地有一个新的目标,那就是可以使用VR来培训全部的地勤维护人员,并且能够快速获取维护经验。Leahy少将说,在未来,他们或许会在几个月的时间内,让学员掌握20年来积累的维护经验。

最初发布于2018年1月19日

原文链接:https://www.timesrecordnews.com/story/news/local/2018/01/18/sheppard-eyes-virtual-reality-training/1045850001/

虚拟现实对抗成瘾等心理疾病的潜力有多大?

在这段VR体验中,你会在一间酒吧里,面前明亮的架子上摆放着各种酒,酒保问你是否想要来一杯。

对于那些想要摆脱酒精成瘾的人来说,这会是一个很危险的场景,不过上面的场景是虚拟的,想要奋力摆脱酒精成瘾的人可以与认知行为治疗师一起,学会如何处理这些潜在的触发事件。

杜兰大学社会工作学员的院长Patrick Bordnick研究将虚拟现实用于成瘾治疗已经有十多年的时间了。

在十二年前,当这项技术还处在早期阶段时,他就已经开始探索将虚拟现实用作一种工具,认知行为治疗师们可以使用它,来帮助成瘾患者处理引起复发的触发事件。同时他还在研究如何将这项技术用于帮助孤独症患者,更好地应对虚拟世界中的社交场景。

“我们关注在虚拟环境中患者的渴望被线索触发的程度,”他解释道。线索或者触发事件可能会是任何事物,比如成瘾患者嗑药的地方,一个人,甚至是一天中的某个时间。

Bordnick院长看到了在VR中重新创造不同的环境的潜力,这能够帮助发现成瘾患者对不同的触发事件的反应,并且当在虚拟世界中遇到触发事件时帮助他们开发应对的手段,而这一应对手段可以用在真实生活中。

这一技术正由一家名为Limbix的公司进行开发,它能够帮助研究人员为那些心理疾病患者开发出治疗所需的VR应用。这家公司致力于开发沉浸式的环境,患者可以在其中学会应对多种多样的情境,并且帮助他们来面对恐惧。

同时,这些应用还是为移动设备开发的,便于携带和使用且成本较低。患者们可以通过自己的移动VR设备来使用这些应用,比如谷歌Daydream View或三星Gear VR。

Bordnick院长说,这个名为Project Delta的VR工具就是为了理解成瘾患者,并且为他们的恢复而设计的,将会在未来的6到12个月内发布。

在最近的十几年间,越来越多的人开始研究用虚拟现实来治疗焦虑症、成瘾和其他心理健康问题的潜力。

牛津大学精神医学系和实验心理学系对虚拟现实及其在心理健康方面的应用进行了285项研究,并在2017年10月发布了调查报告,结论是“心理健康问题与环境是不可分割的,通过使用虚拟现实技术,即用电脑生成的可互动的环境,个体可以重复体验可导致问题的情境,并且通过基于证据的心理治疗,学会如何克服问题。”

Project Delta探索了不同的可能会引起复发的设定。比如,其中有一个设定是,设计者创作了一个虚拟的酒吧,在其中,患者可以像其他的顾客一样,让酒保给倒一杯酒。这种暴露疗法的设定是可以让专业的医师看到的,他将会在患者体验不同的触发事件时引导患者,帮助他们分辨那些触发事件,并且帮助他们开发应对机制,来避免在真实世界中复发。另一个设定则展示了一家射击场的外观,患者可能会进入射击场并举枪射击。

这项技术也已经取得了大幅进步,每个场景都使用了真正的演员,而非虚拟化身。

“在15年前,场景中使用的化身很不真实。而现在,场景中所有的动作都使用真实的演员进行动作捕捉,以保证患者和医师可以在一个逼真的环境中共同进行研究,并且这一环境也能够模拟诊所之外的真实生活,”Bordnick院长说道。

除了Project Delta之外,Bordnick院长还在研究与暴露疗法相似的概念,将其用于帮助孤独症患者在虚拟现实中应对社交场景,他将其称之为Quality of Life Project。

“想象一下,你可以在一个聚会式的场景中练习,可以走到人群中,与人们互动。或者如果你对在公众面前讲话感到恐惧,你可以站在一群虚拟的观众面前,练习讲话,”他说道。他的团队还在开发一个对应地理位置的工具,在这个工具中,患者通常嗑药或酗酒的地方能够在地图上进行标注。当患者距这种地方有一定的距离时,患者的手机会提醒他们使用缓解压力的工具,或者也可以选择寻求支持者或家人的帮助,来应对触发事件。

Bordnick院长最近凭借其在虚拟现实领域的研究成果获得了CES展会期间的Not Impossible Award大奖,该奖项主要颁发给那些为社会带来积极变化的人、公司和发明。

最初发布于2018年1月29日

原文链接:http://www.nola.com/science/index.ssf/2018/01/tulane_dean_investigates_use_o.html

VR/AR广告营销正在普及 你准备好了吗

数字化营销在过去的十年间有了大幅的增长,每一天的每一分钟,搜索引擎和社交平台都会提供成百上千万的来自广告主的赞助信息。然而,广告的天性导致了一个新的问题,广告主们正在看着广告投入所带来的产出的减少,导致他们的投资回报率显著下降。这就给增强现实和虚拟现实这样的新技术打开了大门,它们可以以全新的形式进入这个竞技场。

数字营销人员都很了解目前的数字显示广告正在面临的问题。这些问题包括广告屏蔽工具的大规模采用,以及用户对数字广告的宽容度越来越低。

由PageFair在2017年提供的一份报告表明,2015到2016年间,广告屏蔽率上升了30%。截至2016年12月,有几乎6亿1500万台设备在屏蔽广告。而且这一趋势估计还会继续增长。再来看Adobe Digital Insights的2017版报告,该报告表明,每过三年时间,互联网广告的花费会提升12%。这一数据是通货膨胀率的五倍以上,这就意味着广告主们正在为广告投入更多的金钱,同时这些广告却只能接触到更少的人。

增强现实用于广告和营销

全球重量级企业可口可乐已经在使用增强现实,并且最近还和支付宝合作了一个全新的AR项目,来庆祝中国农历新年。其他在尝试AR的巨头包括妮维雅,星巴克和大众汽车。虽然这些项目的效果还存在争议,但随着越来越多的消费者开始接触到这些体验,他们不会将这种手段看做是一个正常的广告工具,而是一个小花招或者新奇的玩法。

全球的增强现实广告投入数据也很惊人,从2016年的66亿美元到2017年的128亿美元,我们看到了几乎是成倍的增长。

而当我们来看AR和VR技术从2016年到2020年的发展趋势时,这一数据还出现了飙升,预计2021年将会达到2150亿美元的规模,当然,如果采用率足够高的话。目前最好的例子是2016年年中移动AR游戏《Pokémon Go》大获成功。该游戏超大的用户体量也促成了游戏开发商与Sprint、麦当劳、星巴克的合作。

AR技术目前还处在发展初期,像是微软、苹果和谷歌这样的科技巨头还只是在开发其首个版本的硬件和软件。制造商们正在努力研发可穿戴AR技术,像是微软的HoloLens和英特尔的Vaunt都在尽力把人们的数字生活变得前所未有的轻松。谷歌基于Web的AR研发项目去除了现有的AR框架的局限性,甚至苹果,据传言,也在开发类似的可穿戴技术。

虚拟现实用于广告和营销

虚拟现实VR是一种沉浸式的数字娱乐形式。借助传感器,用户的头部运动可以改变头显中的内容,让用户获得视角的改变和运动的感觉,最终的体验结果是奇异但真实的。

由于VR的逐渐推进,另一个副产品也开始大行其道,那就是360°视频,而这或许是未来大多数的VR广告会专注的领域。一些汽车制造商,包括奥迪和保时捷,已经开始向客户提供VR体验内容,可以让顾客看到不同配置和色调的汽车内饰。

VR设备制造商们需要搞清楚,他们目前面临的最大障碍就是设备的价格,这最终会决定这项技术在未来的消费者群体中普及的水平。目前的VR硬件对于大多数消费者来说还是过于昂贵了,比如PC VR头显的售价大概在300-600美元之间,这还不包括额外的游戏主机或高端PC。

高昂的价格会让普通消费者远离这些设备,但在不久的将来这一状况会发生改变,就像在上世纪90年代的PC一样。

VR和AR广告营销的未来

对于广告主来说,VR/AR这个全新的领域对他们最重大的挑战,是广告的位置。VR/AR中不会有播放广告的地方,不会有视频贴片广告,也不会有头部竞价。所以,如果这些都不能使用了,广告该放在哪儿呢?发布者该如何挣钱,广告主们又怎么提升关注度呢?

随着技术逐渐可以满足广告主在VR和AR游戏环境中加入广告的需求,我们很快就能看到更加吸引人和更具互动性的广告被推送给消费者。传统的广告牌会给包含AR的体验让路,让3D内容能够直接传达给消费者,而特别开发的VR内容也会开始出现在网络游戏中,以游戏内广告的形式。

为了理解VR中的广告和广告的位置会发生多大的变化,你可以想象一下这种场景:你正在你最喜欢的虚拟爵士酒吧里,从这张桌子看过去,你能看到你的朋友正在享受冰爽的啤酒。就在这时,AI系统会认出这瓶啤酒,并且给你提供一个购买建议。接下来你会收到一个一小时送达的选项,可以从亚马逊上直接购买同品牌的啤酒,要完成或者取消交易,只需简单地点击Yes或No按钮。而在另一个场景中,你可能正在玩最喜欢的VR游戏,或者在看电影,在你的VR设备中安装的AI软件会决定,在游戏或电影中最可能出现广告的地方是在可口可乐或百事可乐的瓶子(取决于你所归属的消费调查数据组)。

关于VR和AR广告营销的未来,还有很多问题需要我们探讨。但可以确定的是,是在这条道路的下一个拐角处,会有”The Next Big Thing”等待着数字营销人员,以及消费者。你准备好了吗?

最初发布于2018年3月23日

原文链接:https://www.forbes.com/sites/forbescommunicationscouncil/2018/03/21/digital-marketing-in-the-age-of-virtual-and-augmented-reality/

战争游戏:美国陆军欲用VR/AR替换训练模拟器

在经历了数年对新技术的测试之后,现在,美国陆军正在加速替换上世纪80年代和90年代沿用至今的训练模拟器,这些古老和笨拙的设备,将被虚拟现实、大规模多人在线网络和其他创新手段所替代,而这些手段都是直接从商业化的游戏行业企业中获得的。

近日,七家承包商向美国陆军的专家们展示了全新的飞机和地面车辆模拟器。二星少将Maria Gervais告诉记者,在今年7月或8月,会策划一次有作战部队参与的场地测试。到2019财年或2020财年的早些时候,她说,美国陆军将会完成足够的测试,来决定是否大量采购新的模拟器。

这对于任何的政府IT采购来说都是相当激进的一步,以美国陆军为例,大量替换训练模拟器是颇具争议的面向政府的服务项目。但这并不是全部,Synthetic Training Environment的首个阶段将会替换现有的车辆模拟器。第二个阶段将会在仅仅两年时间内开发出美国陆军之前从未接触过的东西:一个为步兵设计的“沉浸式”的虚拟训练环境。

与随车作战人员不同的是,步兵们不能通过坐在一个盒子里,并且与面前的屏幕互动来进行训练。近战需要极为真实的训练环境。步兵们需要匍匐、奔跑、攀爬、卧倒以及寻找掩护,与真实世界和同伴互动。所以这里不会用虚拟现实,步兵班的教练会使用增强现实:一些类似Google Glass的抬头显示器,可以让士兵既能看到周围的环境,同时还能看到叠加的数字信息,如障碍物、平民,甚至还会有在真实地形上出现的敌人。(一位国防部门的官员将其比作军队版的《Pokémon Go》)。

用这种方式将虚拟世界和真实世界联系在一起,可以让步兵在多样化的场景中进行训练,这是纯真实的训练场景无法比拟的。“如果你在班宁堡有一个城镇作战训练基地,在这次进去时,就好像在阿富汗一样,”Gervais说。“而下次进去时,你就像在伊拉克一样。”

跨学科+跨部门协同

在去年10月,美国陆军的参谋长Mark Milley将军组建了8个跨部门小组,以求打破被长时间搁置的现代化进程。它将长期以来积累的专业知识进行了整合。与此并行的是,在今年2月,美国国防部长Jim Mattis启动了一个Close Combat Lethality Task Force项目,来改善整个美军的步兵的现状,其中尤其关注培训所使用的模拟器。

在Gervais少将管理着美国陆军的Synthetic Training Environment跨部门小组的同时,她还在密切关注着Soldier Lethality跨部门小组、美国国防部长的Close Combat特遣部队、海军陆战队和特种作战指挥部。她还负责每一辆坦克、每一架飞机和其他七个跨部门小组所使用的训练模拟器。她通过每周的视频电话会议密切关注着这些项目。

Gervais的团队也逐渐增加了一些美国陆军特种部队和海军陆战队的老兵,同时还有常规部队的陆军步兵、收购方面的专家、软件工程师、美国军方智库的代表和一些律师。他们有着跨越多个组织和区域的多样化的专业知识,在一起合作,花费数月甚至数年的时间进行交流探讨。

“我的团队中有了这些人,”Gervais说道。“就有了跨部门和跨学科的讨论,并且能够解决一些实际问题。”

混乱的模拟器采用情况

Gervais少将和她的团队有一个艰巨的问题需要解决,那就是,美国陆军目前的模拟器采用情况相当混乱。在上世纪80年代的“培训大革命”期间,美国陆军满腔热情地采用了当时最先进的技术,直到现在,很多那时的模拟器仍然在使用中,目前已经使用了超过30年的时间,已经经过了20个摩尔定律周期。

这些模拟器的尺寸和复杂性令人震惊,当洛克希德·马丁在近日宣布他们获得了一个长达七年的,总价值35.3亿美元的合同,来更新美国陆军现役的培训设备时,洛克希德·马丁的负责人Amy Gowder估计,他们将会负责100种不同的主要培训系统,每个培训系统都有其独特的,且互相不兼容的软件和备件。从完整的模拟器到射击场的保护装置,共有超过30万个独立的库存项目,共约2100万个零件。

为什么会有这么多?在大多数情况下,每个美国陆军的采购项目,比如每辆汽车、每架飞机和每件武器,都会开发其对应的模拟器,来训练士兵们使用其产品,但不会太多地考虑模拟器间的互动性。而在实际的战场上,坦克的乘员或飞行员如果还是这样操作,那可能就是去送死了。逼真的训练不仅需要与其他车辆的协同,并且其他的车辆也不一定是同样型号的,而是会有多种型号。

目前的模拟器并不是为此而设计的。让这些模拟器协同工作需要繁琐的调试过程,比如故意调慢飞行模拟器,使其能够与坦克模拟器和步兵战车模拟器协同。战场上的一些因素是根本无法模拟的,比如,美国陆军所使用的指挥和控制软件都是用来指挥真正的战斗,通常在模拟器的虚拟世界中是无法运行的。

多种模拟器如何协同?

接下来是不同的地形带来的噩梦。由于来自俄罗斯空军的日益增长的威胁,美国陆军正在尝试训练其直升机部队和防空部队协同作战,但二者所使用的模拟器并不能整合到一起。比如在直升机飞行员的屏幕上,飞行员们正在进行超低空飞行,并且在山后进行隐蔽,这是标准的战术之一。而在防空部队的屏幕上,这些山并不存在,其中的直升机也是极易被击中的目标。

如上文所说,“目前共有57种地形,我们一直在尝试在其中训练,”Gervais说。最新展示的新的模拟器将会使用单一的通用标准,名为One World Terrain。“通过使用One World Terrain标准,我们相信我们能很快将其减少至28种地形。”那么需要多长时间来减少地形的数量呢?“给我大概一年半的时间,”她说道。

当然,并不仅仅是虚拟的地形需要改进,整个全新的虚拟世界中还需要有人参与。当使用目前大多数模拟器进行训练时,“其中不会有狗,也不会有马车,也不会有人,这是一个非常枯燥乏味的环境,”Gervais说道。“这并不是战场,比如阿富汗,实际上的样子。实际上,阿富汗是非常拥堵的,甚至在路上你会遇到很多四处跑的驴。”

随着美国陆军越来越多地聚焦于城镇作战,模拟训练这个问题变得越来越复杂。“比如一个大城市,我们能够创作出其中的建筑物,但我们必须要进入到建筑物里面,或者要到建筑物下面去执行任务,并且我们需要的是一个鲜活的城市,”她说道,其中充满生活在这里的市民和来往的车辆。“我们正在基于这种生活节奏进行开发,并且我们已经开始取得成果了。”

那么,这会花费多少钱呢?“由于我们刚刚开始,我们目前还没有一个准确的预估,但是,我认为这不会达到十亿美元级别,”Gervais说道。“由于我们正在和商业化的VR和游戏行业一起进行开发,所需的费用会有所下降。”

“在接下来的一到两年间,我们会有一个更好的费用预估,”她说道,“需要在我做完这些技术演示和实验之后。”

最初发布于2018年3月23日

原文链接:https://breakingdefense.com/2018/03/war-games-army-replacing-1980s-simulators-with-gaming-tech/

美国陆军测试一体化夜视镜 整合AR/夜视/瞄准等功能

纵观现代军事史,需要跟踪战场态势或者只是需要导航到某地的士兵,通常都会花费大量的时间来低头看纸质地图,或者看GPS设备的屏幕。就像在商场里盯着手机屏幕的人容易被撞到一样,士兵们这样做也容易面临危险,毕竟战场是一个致命的环境。

现在,美国陆军正在测试一个全新的设备,名为ENVG-III。该设备包含了先进的夜视镜,并且将昼视/夜视功能、热成像、枪械瞄准镜和增强现实功能整合到一台设备中,可以让士兵在机动过程中更好地了解战场态势。

简单地说,你可以将其理解为与枪械配套的谷歌眼镜。

美国陆军专注于提升士兵杀伤力的团队认为,这款设能以指数方式提升步兵们的战场感知能力。

“这会给我们的步兵们带来真实的,基础的能力提升,”Christopher Donahue准将在最近的一次媒体圆桌电话访谈中说道。

这个增强型夜视镜与增强现实软件和Family of WeaponsSights-Individual(简称FWS-I)解决方案进行了整合,可以在士兵的视野中呈现多种类型的信息。

比如在辅助枪械瞄准方面,该夜视镜可以通过在枪械瞄准镜位置的摄像头,将枪械瞄准镜的图像呈现在夜视镜中。这可以让士兵在不暴露自己的前提下在拐角处进行射击。它还能够切换到画中画视图,在这种视图中,正常的视野会和枪械瞄准镜中的画面一同呈现。

“这两个系统能够协同,得益于夜视镜和枪械瞄准镜之间的无线通信,”BAE系统公司的生存、目标和感知解决方案的商业开发总监Dave Smialek说,正是他在负责夜视镜的生产。“武器瞄准镜的瞄准点会被传送到夜视镜中,呈现为ENVG-III夜视镜中的叠加层。”

根据BAE系统公司最近公布的消息,该公司最近获得了两个总额达9700万美元的订单,来生产夜视镜和带有热成像功能的枪械瞄准镜。

BAE系统公司开发了一个快速目标捕获模块(Rapid Target Acquisition Module),可以减少捕获目标的时间,这也是新的夜视镜的一部分。而其增强现实部件则会创建一个几乎是个性化的跟踪器,可以让士兵在巡逻时标记目标,选择路线,并且向作战小队内的其他成员分享这些数字标记。

Smialek说,过去的夜视镜并没有播放视频的能力,而在无线技术方面的进步则促成了这样的改变。

在今年2月,弗吉尼亚州贝尔沃堡的一次演示中,士兵们和研究人员展示了该系统的性能。

Clint Nelson中士佩戴了一个单眼的显示设备,展示了增强现实方面的功能,虽然目前还只是单目的,但以后会集成到双目的夜视镜中。双目设计可以带来更好的深度知觉和更真实的视野。

他向记者描述了标准的地面导航场景,在该场景中,一个士兵会使用他的罗盘和地图来测定方位,并且沿着路线到达目标,一旦偏离路线,就需要进行调整,并且重新校正方位。

“这可以让我在巡逻的基地中就计划好路线,并且上传路线数据,”Nelson说道。“然后导航提供的路线会引导我进入真实世界中的路线。我能够很容易地四处走动,即使是完全偏离方位也没有问题,并且我也不再需要去看手机或者地图。”他解释了这些设备会如何帮助士兵处理海量数据,尤其是在城镇作战时。

“在主要的城镇中心,会有大量的建筑,因而也会有大量隐藏的威胁,”Nelson说道。“这款设备还可以进行跟踪和报告工作。任何使用该系统的人员都能确定敌人的位置,将信息传送给我,这些信息就会呈现在我的屏幕上。”

很明显,这会帮助一个处在让人困惑的环境中的士兵了解他看到的东西,以及他的同伴看到的东西,并且分辨哪些是威胁,哪些是友军,哪些是目标。

Donahue准将说,海军陆战队和特种作战部队都在关注着这款设备的研发进展。

最初发布于2018年3月22日

原文链接:https://www.armytimes.com/news/your-army/2018/03/21/armys-all-in-one-nvg-will-merge-sighting-shooting-battlefield-awareness/

医疗领域新探索 增强现实让手术过程更安全

最近这几十年间,医疗行业取得了巨大的进步,其中就包括影像诊断学的新进展,比如超声造影、乳房X线照相术、计算机化断层显象(CT),磁共振成象(MRI)等等。这些技术不仅得益于其他领域的技术进步,同样也推动了微型摄像头、微处理器,以及实时数据串流等技术的进步,这些都革新了医生们在手术过程中使用影像的方式。

现在,基本上每个手术之前,都会使用上面一种或几种医学影像。即使是在急诊室,医生们也在使用超声波或CT来帮助引导治疗过程。无论是大型手术还是小型手术,这些影像现都可以在手术过程中实时呈现。

虽然医学影像技术已经取得了极大的进步,但直到现在,影像内容的显示方式基本上与上世纪50年代没有什么区别。无论是影像还是数据,都会呈现在一个2D的平面屏幕上,这就迫使医护人员必须把目光从患者身上移开,甚至从医生们正在进行手术的手上移开。更重要的是,这些影像并不是从观看者的视角来呈现的,而是取决于显示用的设备。在手术过程中,医生们必须使用自己的技能和想象力来理解这些数据,并且通过自己的想象,把这些影像投射在患者身上。此外,不同的视觉数据还会分别显示,所以医生们还不得不分配额外的注意力,把不同的影像和数据内容进行整合,比如将血管造影和CT的影像整合到某个患者的患处,而要掌握这种技能,需要数年时间的训练。

增强现实(AR),是一种可以把数字信息叠加到真实世界中的技术,在我们看来,这种技术有改变医学影像领域的潜力。根据我们在马里兰州混合现实中心(Maryland Blended Reality Center)的Augmentarium项目所做的研究,在我们预期的应用场景中,一个医生使用AR头显,比如微软的HoloLens,能够看到数字图像和其他数据直接叠加在他的视野中,在这样的场景中,头显可能会显示患者的浮动的超声心动图,以及有关患者动脉瘤的极为重要的数据,所有这些都直接呈现在手术区域内。医生无需看病人以外的区域中那些不同的显示设备。

AR能够同时呈现图像数据和患者的其他重要信息,这种潜力能够拯救生命,并且减少医疗事故。这对于那些在手术室以外进行的治疗过程尤为重要。手术室或许是医院中最安全的地方了,在这里,患者周围会有4到8名专职的医护人员。由于每个人都在手术前看过了医学影像内容,手术过程通常都是被妥善计划好的。麻醉师会监控患者的生理机能,并且负责疼痛管理和救命的药物。外科护士需要确保所有必要的设备立刻可用,而医生则需要完全沉浸到手术任务中。

但是,手术室中的时间是极为昂贵的,并且手术室也是严格按照选定的病例来预定的。这些选定的手术是所有医院收益的基本来源之一,所以确保手术室被完全占用并且正常运转是非常重要的。那些小型的,或者突发的手术很难安排到手术室。结果就导致,很多这些手术都是在手术室外面进行的,比如在特护病房或者急诊区。而正是这些没有在手术室接受手术的患者,会冒最大的风险。这时,我们就能看到AR给医疗领域带来的最大的好处。

与在手术室中进行的手术不同,在外面进行的手术得到的来自医护人员的支持会比较少,通常只有一个医生和一个护士,他们同时还有着其他的责任。通常患者的生命体征都不稳定,如果是在深夜,进行手术的医生可能刚刚接受培训不久,他可能同时要担负麻醉师和医生的角色。这个房间也不是专为手术而设计的,尤其是没有那些复杂的呈现影像的设备,更别提那些混乱的对患者生命体征进行监控的设备了。在跟踪患者的多种影像和数据信息的过程中,很容易错过极为重要的线索。而这时,只需一个AR显示功能,将所有的影像和患者的数据进行整合,并且让医生能够把注意力集中在患者身上,很明显能够提升手术的质量和安全性,并且减少与手术过程相关的并发症,进而节约成本。

除了因为更安全的手术过程而带来的成本的降低之外,还可能会因为减少对多余的屏幕的需求量而降低成本。目前,超声波、内窥镜和支气管镜检等设备都需要医院购买整套系统,每套系统都有其各自的显示屏。这些系统每套都可能会花费数十万甚至上百万美元。并不是因为不同的影像功能需要特殊的显示器,而是目前的经济模式所限,这些整套售卖的系统都包含互不兼容的显示器。电子病历有自己的显示屏,血流动力学监控器和呼吸机也有各自的屏幕,并且其数据也无法进行融合。而AR能够提供一个共享的屏幕,能够逐渐减少对患者每项数据进行监控所需的特定的显示器的需求,同时提供一个来自多个来源的生命体征数据能够实时整合的显示器。

要实现这些功能,目前的AR技术还需要进化,而医生们也需要了解这一概念。医生在佩戴这些硬件时,需要舒适且安全。在有些场景中,这些影像还需要尽量不透明,而其他的可能需要更加透明才可以。如果投射的影像是要用来进行手术过程指导的,还需要以极高的准确度来呈现。虽然还有各种各样的技术挑战,但我们相信,没有一个挑战是不能克服的。

在马里兰州混合现实中心,我们致力于研究将AR作为一个主要工具,来帮助医疗行业从业人员拯救生命,同时降低医疗成本。来自斯坦福大学、杜克大学和约翰·霍普金斯大学的团队正在研究融合和投射视觉数据,同时研发适合医疗行业使用的AR显示设备。

这会需要有才华的计算机科学家和有远见的医生们共同努力,让增强现实在医疗领域成为现实。我们对未来充满激情,到那时,我们在医疗领域使用AR技术,会像现在使用听诊器那样普遍。

最初发布于2018年3月21日

原文链接:https://hbr.org/2018/03/how-augmented-reality-will-make-surgery-safer