美国陆军和政府机构这样应用增强现实和虚拟现实

士兵们在被送往战场之前需要训练数月甚至数年,并且在他们返回后还要继续训练。美国陆军希望确保他们的专业知识保持敏锐,无论他们位于何处。而虚拟现实可能会有所帮助。

“在你被部署后,训练还没有结束,”美国陆军联合兵种训练中心副总指挥Maria Gervais少将说。“我们希望能够一次又一次地进行训练,同时改变一些变量,当士兵们进入第一场战斗时就非常有自信。”

美国陆军正在利用已经在商业游戏领域应用的技术来更新其沉浸式培训能力,并于去年11月向微软授予了一份价值4.8亿美元的合同,用于开发可用于培训的增强现实系统原型。“可用的技术已经出现了,”Gervais说道。

联邦机构如何使用AR和VR

增强现实和虚拟现实正在消费市场中崛起,VR头显变得越来越便宜,越来越多的公司开始寻找在平板电脑和智能手机上应用AR的新方法,只要看看《Pokémon GO》和同类游戏的受欢迎程度就知道了。

IDC Government Insights的研究主管Shawn McCarthy表示,一些联邦机构也开始利用这些技术,尤其是增强现实技术,并且领先于这一趋势。

“这真的是出于高度专业化的目的,”McCarthy说。“ 最大的用途是培训,维护是次要的。例如可以让工人在飞机腹部时访问维修记录和部件照片的AR眼镜。“

美国陆军一直在将既有的旧系统结合起来创建虚拟培训环境,但他们意识到,需要具有可重新配置选项的虚拟培训体验,这些选项可以在任何地方使用,负责美国陆军综合训练环境(Synthetic Training Environment)的 Gervais说。

她曾与科技公司会面,评估经过改装可以用于军事用途的现成产品。去年11月与微软的合同要求该公司为美国陆军的集成视觉增强系统(Integrated Visual Augmentation System,简称IVAS)提供2550个AR/VR原型设备,基于微软的HoloLens。如果原型设备满足需求,美国陆军可以购买多达10万台。

起初,由于对技术发展速度的担忧,美国陆军将最后期限设定在2025年到2030年之间。但由于游戏视觉技术的快速提升,Gervais现在希望很快就能获得满足需求的AR/VR体验。

“我们需要一个基于通用数据和架构的环境,”她说。“正如我们今天所看到的那样,我们必须能够为更加复杂和更具挑战性的环境做好准备。”

VR让用户体验历史遗迹

其他机构正在转向更具创造性的方法,以及外界的帮助,来开发增强客户体验的AR/VR内容。

美国战争纪念碑委员会(American Battle Monuments Commission,简称ABMC)开发了一个智能手机App,可以让人们虚拟地参观法国北部奥马哈海滩附近的诺曼底美军公墓,这是埋葬9387名在诺曼底登陆时阵亡的美国士兵的地点。该App还在网站上为游客提供了有关他们所看到的内容的更多信息。

ABMC的对外事务主管Tim Nosal说,这家小型机构在全球范围内维护着26个墓地和30个纪念馆,外包了该App的制作工作。

当虚拟现实内容平台TimeLooper向国家公园管理局(National Park Service,简称NPS)询问有关华盛顿纪念碑VR体验的信息时,NPS开始与这家公司合作。

在林肯纪念堂的电梯被关闭,行动不便的游客无法进入主室时,TimeLooper制作了这段VR体验,可以使用Cardboard头显帮助游客在不使用楼梯的情况下观看包含林肯塑像的房间。

NPS的发言人Paul Ollig说,该公司还在2018年在Petersen House周围创建了一个VR体验,这里是林肯总统去世的地方,当时它必须关闭,以安装灭火系统并进行其他修理工作。

“当你看着那个房间时,你会感受到当晚事件的重要性,”他说。“我们发现,在这种情况下体验虚拟现实的人会非常感谢我们能提供这种替代品。”

NPS礼品店现在销售(或偶尔免费提供)Cardboard头显,当与智能手机配合使用时,可体验各种地标(包括越战纪念碑)的3D内容。TimeLooper处理这些业务,并管理应用程序更新。Ollig说,这就是与外部供应商合作的优势。

“该技术的复杂程度可能超出了大多数政府机构的能力,”Ollig说。“当我们找到一个愿意以符合我们要求的方式与我们合作的伙伴时,我们可以向公众展示他们以前从未见过的东西。

政府机构对AR和VR的应用有望增长

McCarthy表示,尽管一些机构可能认为AR/VR技术无用,但价格较低的新解决方案可能会改变他们的想法。

“它为你提供了更多的灵活性,以便在任何地方访问信息,”他说。“我不认为这是无聊的。”

他说,联邦、州和地方政府去年在AR/VR解决方案上花费了大约3.26亿美元。IDC预计到2021年该金额将达到92亿美元,这标志着政府对AR/VR使用量的显着增长。

增强现实和虚拟现实能够向人们展示他们无法看到的东西,其面临的最大挑战可能是几乎无限数量的潜在应用场景。

“它永远不会取代公园护林员或其他的我们讲故事的传统方式,”Ollig说。“但它是我们参观这些历史遗迹的的另一种工具,并且可以帮助人们理解为什么保护它们很重要。“

哪些政府机构在使用AR/VR?

根据McCarthy的说法,美国国防部是目前在增强现实和虚拟现实领域投入最大的政府机构,其次是美国航空航天局和国土安全部。

“美国宇航局通常不是资金投入排前三的机构之一,”他说。“但由于他们所做的所有训练和尖端研究,他们长期以来一直是这个领域的重要成员。”在接下来的几年间,他预计会有更多的机构利用这项技术。

“在农业部处理单据的人现在可能不需要虚拟现实,”McCarthy说。“但如果事实证明美国农业部希望每个人都沉浸在工作中,那么它可能会变得很有必要。

最初发布于2019年5月24日

原文链接:https://fedtechmagazine.com/article/2019/05/army-nps-embrace-virtual-and-augmented-reality

增强现实变革人机交互 这就是建筑行业的未来

“简而言之,我们相信增强现实将永远改变我们使用技术的方式。” – Apple公司首席执行官Tim Cook

到2023年,增强现实市场预计将达到605.5亿美元,该技术正在迅速改变建筑师和工程师的工作方式。

增强现实(AR),也称为空间计算,正在迅速发展并扩展到无数的商业和工业应用中。

空间计算被用作广义术语来描述人类与同一环境中的计算机交互的方式。换句话说,在空间计算中,机器与人类处于相同的空间,而不是被包含在一个单独的位置。

因此,增强现实系统使数字媒体通过交互式设计和手势操作,让人感觉就像真实存在一样。

根据Markets and Markets的预测,到2023年,全球增强现实市场预计将达到605.50亿美元的规模,在2018年至2023年的预测期内以40.29%的复合年增长率增长。顶级技术巨头的兴趣和投资增加会直接推动增强现实市场的增长。

总体而言,由于人们在消费、商业和企业用途中越来越多地使用智能手机、平板电脑和其他设备来应用AR技术,AR软件市场将在此期间引领增长。

在越来越多的AR应用需求出现在医疗保健,零售和电子商务领域的同时,建筑和企业应用对AR的需求仍在不断提升,这其中还有很多新兴的机会。

参与AR投资和收购的大公司包括谷歌,苹果,英特尔,三星和Facebook。

增强现实:不仅用于游戏

AR技术可以让人类和机器进行交互和协同创作,反过来,也会改变企业实现其愿景的方式。

虚拟现实和增强现实不仅仅适用于游戏。它们是一种改变游戏规则的工具,可以在几乎所有行业中展示它们的能力。

虚拟、增强和混合现实技术在过去几年中发展很快,从最常见的游戏和娱乐领域,发展到成功的商业用例,包括智慧城市规划。

智慧城市规划和建设:增加可能性

例如,在建筑行业,沉浸式技术可以帮助智能城市的发展,比如增强现实正在成为建设过程中不可或缺的一部分。

城市收集了大量的数据,而增强现实可以使数据可视化。通过使用AR,建筑师可以找到一种更具创造性和直接的方式,通过创建引人入胜的可视化体验,向城市规划者展示他们的项目在现实生活中的样子,从而触发更快的决策。

它可以用来“建造”一个新的交通中心或一个城市的下一座摩天大楼。在所有情况下,使用增强现实技术都可以使工作更轻松。

建筑项目中的增强现实模型

现在,在业务中使用增强现实平台,可以轻松设计智能城市项目。WakingApp是一个专业的增强现实工作室,使工程师和建筑师等专业人士能够利用最新技术。项目在构建之前就能实现可视化,避免了很多错误。

WakingApp技术的有趣之处在于,开发人员和设计人员无需拥有任何编码经验即可利用该工具集。他们可以快速创建高质量的AR体验,以有限的编码经验来展示建筑项目。

建筑项目中的增强现实模型

MLM集团是一家工程、环境和楼宇控制设计顾问公司,他们能够用WakingApp的AR技术,使用AR Studio转化其项目,并展示给客户。

“增强现实体验为建筑项目节约了成本,增加了价值,并使整个建筑过程更加高效。因为从一开始,工程师和建筑师就能够创建最终项目的详细交互式示例,” WakingApp首席执行官Matan Libis表示。

“AR为建筑商及其客户提供了远远超过任何蓝图或3D模型的理解水平,并且通常可以在很短的时间内创建AR体验,为用户提供实用性和功效的提升,”他说。

微软HoloLens和增强现实可以帮助加快建设项目

微软的混合现实头显HoloLens可以给2D蓝图赋予生命。在施工现场,工人可以将3D模型与实时数据相结合。他们可以看到现实世界中的问题和缺陷,并在建造之前修复它们。

这加快了施工过程并提高了最终产品的质量。使用这种技术,建筑工人可以将他们的技能提升到一个新的水平,增加他们的知识并使用它来做出更好的决策。

最初发布于2019年4月21日

原文链接:https://interestingengineering.com/augmented-reality-the-future-of-building

积极探索VR和AR技术 NBA想让数以亿计的粉丝亲临现场

在夏洛特举行的全明星周末的周六晚上,光谱中心内部侧面走廊里有一个房间,地板和墙壁全部都是黑色的。

我们在晚上活动开始前大约15分钟进入房间时,看到的第一个人是Stephen Curry,正在与Dirk Nowitzki和其他三分竞赛参与者一起拍照。在此之前,夏洛特黄蜂队的Kemba Walker正在随意地转动一个篮球,并且球员们正在迅速而小心地进出房间,直到比赛的参与者完成不同的姿势和步伐的拍摄。一台外观看起来很未来主义的相机正在拍摄着不同的照片和视频,每个人都被从房间的一侧带到另一侧,以便捕获每个角度。

所有这些球员参与拍摄都是为了NBA AR App,该应用程序专注于通过增强现实将世界各地的球迷聚在一起。除了由英特尔和NextVR提供技术支持的每周一次的NBA虚拟现实赛事直播外,联盟也处于沉浸式媒体的最前沿。在全明星周末的过程中,我们与负责这些项目的NBA高管进行了交谈,了解了为什么AR和VR对于联盟如此重要,以及进行这项开创性的工作的过程。

NBA早在2014年就开始尝试VR,当时它在迈阿密热火与克利夫兰骑士队的季前赛中尝试了这项技术。第一次公开的VR赛事直播是丹佛掘金队与金州勇士队在2015-2016常规赛开幕之夜的比赛 。

此后不久,联盟负责传播内容管理的副总裁Paul Massache开始推动VR项目。英特尔和NextVR共同负责NBA的现场直播,并且它们也是整个过程中与联盟合作的仅有的供应商。Massache多年来一直与ESPN和Turner合作,弄清楚了他们的电视节目会是什么样子,并将这些知识和洞察力用于VR。

“在NBA,我们总是希望站在技术的最前沿,”Massache说,“所以我们在最好的时机进入了虚拟现实领域。”

Jeff Marsilio是NBA负责新媒体发行的高级副总裁,负责数字许可和业务拓展,包括社交媒体公司的合作伙伴关系,以及让联盟的应用程序-包括AR和VR-应用更多的设备上。Marsilio说,试着分发和发展NBA的新兴技术是他工作中最有趣的部分之一。

根据Marsilio的说法,NBA之所以成为AR和VR的早期支持者,原因在于并非每项技术都会成功,但是如果某些东西最终变得流行和无处不在,那么你就会想要从头开始并做好准备。

“你正在学习,而这些技术正在发展,所以当它们成熟时,你已经能熟练掌握了,”Marsilio说。“如果你等到他们成熟才开始学习,你就会当着所有参与其中的粉丝的面来学习,他们可能会对这种体验感到失望。所以我们希望随着沉浸式媒体的成熟,让这种体验达到它尽可能好的程度。“

回到夏洛特光谱中心的增强现实拍摄室,NBA的Sean Coulter继续拍摄周六晚上的参赛者,包括俄克拉荷马城雷霆队的扣篮冠军Hamidou Diallo。Coulter已经在联盟中效力了25年,并且负责拍摄尽可能多的素材,不仅是在全明星周末,也同样包括在常规赛和季后赛期间。

Coulter使用在周末拍摄的素材,从各个角度进行了拼接,以便在全明星周末后的早晨为NBA AR App提供一分钟左右的剪辑。在全明星周末期间,他还可以获得赛场的独家使用权,为剪辑穿插一些Shaquille O’Neal和其他名人的动作片段。

“你可以在任何地方观看比赛,”Massache说。“但我们要做的是向大家展示幕后的画面。这就是VR的魅力所在。”

NBA现在已进入第三个完整赛季,每周一场比赛,这种赛制从2016年10月27日圣安东尼奥马刺 – 萨克拉门托国王队的比赛开始。根据NBA提供的数据,NextVR在其VR应用上为NBA制作了26场常规赛现场VR直播,而英特尔True VR制作了10场常规赛VR直播和所有的全明星赛,以及16到20场季后赛的直播。

“他们正在尝试拍摄的内容与我们在TNT或ESPN播出的内容相同,”Massache说。

像任何其他播出的内容一样,有一辆节目制作卡车和一个团队会在比赛播出的前一天或当天在场馆内安装摄像机。本赛季,Stephanie Ready和Rip Hamilton每周都会在现场专门布置虚拟现实直播设备,Turner为每周一次的VR直播提供广播通道。

Massache几乎每天都会与NextVR和英特尔进行会谈,每周都会通过电话了解VR版比赛直播的故事线和特性。除了全国电视转播的ESPN,TNT和NBATV之外,VR团队基本上就像他们自己的广播网络一样。

Coulter出现在联盟的许多比赛的现场,帮助为VR应用程序拍摄视频。Massache说,Coulter非常善于融入比赛并使用他的专业VR摄像机捕捉令人难以置信的画面,而不会干扰球员们,或者让他们在准备比赛时感到不舒服。

“这是Sean所面临的挑战的一个重要部分,”Massache说。

此外,联盟会在每周一次的VR比赛直播后,专门为VR应用程序制作一个五分钟的精华集锦。

联盟还在VR和AR应用程序中创建了更长的体验内容。2016年VR纪录片 “ Follow My Lead:The Story of the 2016 NBA Finals”赢得了首届体育艾美奖中新创立的“杰出数字创新”类别奖项。

虽然在早期就获得了成功和荣誉,Massache和Marsilio都认为,这些应用程序还有很长的路要走。

“这是一个学习曲线,”Massache说,“他们的两款产品都明显变得更好了。从一开始到现在,这确实是一个巨大的进步。“

最初,Marsilio认为复制球迷的场边体验是NBA VR的发展方向。 事实证明,将VR摄像机放在场边座位上并不会削弱球迷的体验。

“为了真正感受到在比赛现场,你需要现在不存在的技术,”Marsilio说道,“我们发现的是,我们将从其他媒体中学到的东西,比如电视,与沉浸式媒体的优点结合起来,能为你提供当前沉浸式媒体的最佳体验。“

在VR直播中,需要将八个摄像机安置在球场周围,并像常规电视广播一样在它们的视角之间切换。

“并且你会有专门的解说员,”就像Ready和Hamilton一样,Marsilio说,“没有谁会注意VR摄像机的位置。”

NBA的VR应用程序有一个不小的问题,没有多少人能够充分利用联盟最新的技术。当然了,AR应用程序只需用手机就可以使用。联盟拒绝透露其VR应用程序的确切用户数量。

“使用它的粉丝给了我们很多很好的反馈,”Marsilio说。“使用时间比你想象的要长。人们往往会停留一些时间,因为他们能够获得临场感。”

让应用程序能够通过众多设备进行访问是Marsilio工作的一部分,并且他说Oculus Go已经改变了VR领域的游戏规则。

“我们已经看到随着这款设备的推出,用户数量在急剧上升,”Marsilio说道,“它真的是第一款专用的VR系统,不需要插入手机或电脑,也不需要连接到任何复杂的让用户感到困难的东西。“

Massache和Marsilio都明白,VR和AR的持续广泛流行还需要很长时间,并且联盟需要花费多年时间才能让这些技术为用户提供理想的沉浸式媒体体验。

“由于交通方面的原因,99%的球迷都不能亲自参与比赛,”Marsilio说道,“他们只是没有机会,附近没有比赛。”

世界上几乎所有NBA球迷都无法定期到场馆内观看比赛,尤其是中国和印度的球迷。因此,Marsilio说,数以亿计的粉丝需要一种尽可能接近比赛的方法。

“我们相信沉浸式媒体,特别是VR,能为观看比赛带来新的变革,”Marsilio说。

这些技术尚未成熟,但NBA显然已经在豪赌,他们认为,VR和AR技术将最终将会成为粉丝在更深的、更有意义的层面上与其品牌互动的下一个重要方式。

最初发布于2019年3月31日

原文链接:https://www.forbes.com/sites/shlomosprung/2019/03/15/behind-the-scenes-how-the-nba-is-using-virtual-reality-to-get-fans-closer-to-the-action/#36c8b2ae3727

余承东谈华为手机未来愿景 AR眼镜可以大幅扩展手机屏幕

在接受德国媒体De Welt的采访时,华为消费者业务CEO余承东谈论了华为手机的未来愿景。

在采访中他表示,他相信华为的手机将很快超过三星手机的市场份额,他说道:“我们最迟在明年将会超过三星,成为市场的领导者。我们已经很接近了。“

他已经觉得他的公司在创新方面领先于苹果公司,余承东说,苹果公司很难在今年甚至是下一年推出折叠屏手机。

当然,一部售价高达2300欧元的手机并不完全是面向大众市场的设备,但他相信,在一两年内折叠屏手机的价格将达到1000欧元大关,最终可能会不到500欧元,特别是当其他OEM厂商开始生产时。他带有讽刺意味地说,尽管华为拥有该技术的专利,但中国的OEM厂商可能会模仿他们的设备,并降低价格。

当然,如果该设备取得了成功,他说他可以“随时加速大规模的生产”。

余承东指出,虽然未来通过折叠获得更大屏幕的手机可能会成为标配,但他预计在几年后手机将拥有100到200英寸的屏幕。这当然不可能通过物理设备,但通过增强现实眼镜可以实现。余承东说,华为已经在开发这类设备,并且不需要5年时间就能将它们推向市场。

此外,余承东还表示,如果被迫,该公司将从Windows和Android等西方操作系统转向他们自己的内部解决方案,但是他们更喜欢“与谷歌和微软的生态系统合作。”

华为的设备在欧洲已经非常受欢迎,这表明这家雄心勃勃的全球化公司可能拥有将他们的巨大愿景变为现实所需的一切。

最初发布于2019年3月13日

原文链接:https://mspoweruser.com/huawei-ceo-talks-1000-euro-folding-phones-and-200-inch-smartphones/

美国海军陆战队寻求用AI/AR等技术规划大规模军事演习

美国海军陆战队正在寻求大数据分析和潜在的类似IBM Watson的机器或软件,以帮助规划复杂的军事演习,并在沉浸式环境中规划未来的战争。

美国海军陆战队的军事演习能力项目经理Ross Monta上校最近对媒体表示,海军陆战队的一个最近的项目意在“将先进的分析技术、可视化、建模和模拟技术相结合,创造出一种可以让高级军官做出大量决策的环境。”

这包括了增强未来的军事能力,测试作战计划的方式,开发操作概念,以及为优化资源提供信息。

这该项目在四个技术领域的第二轮信息收集,其中包括建模和模拟、军事演习设计、数据服务和可视化。美国海军陆战队已经审查1月、2月、3月和7月间各厂商提交的白皮书,并在去年10月开始了测试。

早在2017年现代海上军事博览会期间,Monta上校就谈到了美国海军陆战队是如何为Quantico基地的军事演习中心制定一个三到五年的计划,该计划允许指挥人员每年进行20次军事演习,其中包括两次大规模的,有250人参与的演习。

他们当时所寻求的模拟系统将提供“对未来的行动环境的准确的表达,模拟友军和敌军的能力”,以及“对演习的衍生数据或见解进行快速,深入的分析”的能力。

时任海军陆战队系统司令部负责人的Joseph Shrader将军说,军事演习必须要超越“在地图上移动那些标记”。

Monta说,当时该中心每年能够进行11次军事演习。

他们正在寻求与先进的模拟能力合作,例如他们在fbo.gov上发布的那些需求,以及来自Ellis Group智库的专家们,都是为了更好地理解高层次的、长期的作战需求。

训练系统指挥部负责人Walt Yates上校对媒体表示,其目标是找到让人工智能运行多达1000次的模拟演习的方法。有了这些数字,指挥人员就可以了解胜利的概率,对伤亡值的期望和完成任务所需的后勤保障。

模拟能力将可以让指挥官针对未来的威胁来测试某种场景,以评估获取胜利所需的设备和战术。Yates说,这些因素将会影响所有的规划,从购买下一件战斗装备,到如何最好地部署部队。

大数据分析只是美国海军陆战队近年来一直在努力推进的一系列项目之一,意在将军事演习从小队规模推广至海军远征军规模,其中包括充分利用计算、数据分析、虚拟现实、增强现实和游戏方面的新进展。

从去年开始,美国海军陆战队第24步兵营开始测试战术决策套件(Tactical Decision Kits),其中包括笔记本电脑、HoloLens头显和无人机,可以让小作战单位的领导映射战斗空间,然后在HoloLens中演示作战行动计划,对任务进行预演。

在去年早些时候,MARCORSYSCOM开始寻求在真实的培训中推广武器模拟器,以替代已经使用了几十年,至今仍在使用的古老的激光模拟射击训练。

美国海军陆战队需要能够更真实地复制子弹和炮弹的移动方式以及它们造成的伤害类型的射击系统。

该系统将能够模拟通常能在军营中看到的所有武器和车辆,至少应该包括:M4/M16、M9或其他手枪、M27自动步枪、手榴弹、火箭筒、轻型反坦克武器、60毫米迫击炮、81毫米迫击炮、Claymore反步兵地雷、Mk-19榴弹发射器、俄军的机枪、AK-47的变种系列、Javelin导弹和Carl Gustaf无后坐力步枪。

该系统还可以立即进行行动后的审查,以便训练员和指挥官能够看到他们的海军陆战队员瞄准的目标、射击目标消耗的弹药,以及他们对对手造成的伤害。

最初发布于2019年2月22日

原文链接:https://www.militarytimes.com/news/your-marine-corps/2018/12/18/marines-look-for-ibm-watson-like-artificial-intelligence-to-plan-large-scale-wargames/

助力医患沟通 医生用VR进行脑部手术的术前准备

五十九岁的Bonnie Haber发现自己正在经历着复杂的诊断和吓人的手术,就像成千上万的其他美国人一样。Haber的肿瘤并非癌变,但它靠近视神经的位置意味着医生们必须快速行动。

“这是脑肿瘤,这是脑膜瘤,这里的灰色区域是你的大脑。看到它是怎样存在于你脑中了吗?“Hackensack Meridian Health JFK神经科学研究所主席Thomas Steineke博士说。

“当他向我展示常规的核磁共振成像时,他说这是你的脑肿瘤,它必须被取出来。我还是不明白,为什么一定要取出来?如果我唯一的症状是时不时地感到头晕,我可以忍受这种情况,而不必让你打开我的头骨。我没有医学上的问题,我很健康。然后他向我展示了虚拟现实的内容,它帮助我理解了我的病情,“Haber说。

虚拟现实在医学界是一个前沿的概念。在进行手术之前,Hackensack Meridian Health JFK神经科学研究所的患者和外科医生们先用虚拟现实头显对大脑有了一些了解,对手术进行准备。

“它使我们能够更好地理解脑部结构并更好地规划操作。通常情况下,我会根据我在虚拟现实中看到的东西改变我的某些操作。它使我的操作更加精确,坦率地说,会更安全一点,“Steineke说。

JFK神经科学研究所是该州第一家也是唯一一家使用Precision VR Surgical Theatre的医院。Steineke说,自从一年前部署该系统到现在,它已成为复杂的神经外科手术的首选工具。到目前为止,他已经在82名患者身上使用过它。

“我能够用它来排练手术,移除我需要移除的骨头,这使我在手术过程中更有效率,坦率地说,我觉得它让手术更安全,因为我能够预测到在手术过程中我会遇到什么样的脑部结构,“斯泰尼克说。

Steineke可以操纵和旋转肺叶和组织,让患者们在进入手术室之前就能参与他们的护理计划。虽然这需要医院付出代价,比如每一套Precision VR Surgical Theatre需要医院支付高达10,000美元的费用。Haber说她很感激这个系统,因为该系统缓解了她的担忧。

“对我来说,核磁共振成像上的小白点(肿瘤的图像)与虚拟现实中那个大而且丑陋的肿块之间的区别,确实对我产生了影响,”Haber说。

医生们说虚拟现实和增强现实在医学上的未来是无限的。这意味着更好的培训,更少的侵入性手术,以及更快的恢复。

最初发布于2019年2月18日

原文链接:https://www.njtvonline.org/news/video/doctors-use-virtual-reality-program-to-prepare-for-brain-surgeries/

微软HoloLens中标美国陆军4.8亿美元”集成视觉增强系统”合同

根据美国陆军发布的消息,在去年11月,美国陆军与微软达成一项总值近4.8亿美元的合同,微软将会向美国陆军提供HoloLens增强现实系统原型,用于战斗任务和训练。

根据彭博社的消息,该合同最终可能导致军方购买超过10万台头显,并且旨在“通过提高在敌方之前侦查、决策和参与的能力来增强军队的杀伤力”,根据政府对该计划的描述,该系统被正式称为集成视觉增强系统(Integrated Visual Augmentation System,简称IVAS)。

“增强现实技术将为部队提供更多更好的信息来帮助做出决策。这项新工作将我们与国防部长期的、互信的关系扩展到这个新领域,“一位微软发言人在给彭博社的电子邮件声明中表示。

虚拟现实产生了一种由计算机生成的现实,用户可以与之交互(通常通过头显),而增强现实会将数字信息带入用户的视野并叠加到现实世界,通常需要通过智能手机的摄像头或头显来实现 。

HoloLens是微软的AR平台,这家软件巨头称之为“混合现实”。该公司已经将HoloLens用于工业场景,他们认为这台头显可以“让技术人员在混合现实中远程协作,并在几分钟内解决问题,而不是几天。“并且微软表示用户可以充分利用3D模型“创建易于编辑的、生活规模的布局,让您和您的利益相关者可以在物理世界或虚拟现实中体验全息图。”

据MSPoweruser称,在2018年4月,微软透露已经向客户出货了50000台HoloLens设备。正如彭博社指出的那样,该合同使得美国陆军成为微软最重要的HoloLens客户之一。

美国陆军希望微软提供的头显在几个关键方面区别于消费级同类产品。

根据彭博社的报道:在与竞标该合同的公司分享的一份文件中,美国陆军表示,它希望该产品能结合夜视和热感应,测量像呼吸这样的生命特征和“准备就绪”,监测脑震荡并提供听力保护。

微软作为中标者,预计将在两年内交付2500台头显,并展示全面生产的能力。

美国陆军的合同旨在鼓励服务部门与不是典型国防承包商的公司开展业务。AR创业公司Magic Leap是另一个竞标者,据彭博社报道,2018年8月美国陆军与25家有兴趣以某种方式参与该项目的公司举行了会议,其中包括Booz Allen Hamilton控股公司,Lockheed Martin公司和Raytheon公司。

美国陆军并不是唯一对AR技术感兴趣的国防部门。美军特种作战司令部(SOCOM)也对 “ 视觉增强系统(Visual Augmentation Systems,简称VAS)”及相关辅助技术的改进和增强表示了兴趣。这包括用于抬头显示器的AR和虚拟现实解决方案,以及如何将不同数据源的信息融合进一个共同的视觉显示单元。

美军特种作战司令部正在寻求几个不同领域的创新技术和能力,包括AI/机器学习,具备增强的光学特性的显示器,多传感器数据融合与处理、通信等。

在这些领域内,美军特种作战司令部对非常具体的技术应用感兴趣。例如,在AR/VR和AI/机器学习领域中,美军特种作战司令部对任务前的演练和定位、全息显示,游戏技术,神经形态计算和工程,远程医疗以及综合训练和操作环境等技术很感兴趣。

最初发布于2019年2月15日

原文链接:https://fedtechmagazine.com/article/2019/01/army-teams-microsoft-ar

美国海军用HoloLens进行实弹射击训练 让模拟训练更逼真

模拟训练可以帮助士兵和水手学习如何安全地使用他们的武器,但模拟器有时可能无法营造出真正的战斗中的充满压力的环境。

这就是美国海军开发出一种在HoloLens上运行的更逼真的增强现实模拟器的原因。

该系统被称为武器增强现实评分系统(Weapons Augmented Reality Scoring System,简称WARSS),通过用HoloLens在用户的视野中显示敌方部队的3D图像来模拟实弹演习。该系统还会显示一个记分牌,该记分牌可以根据射击次数与未命中次数的百分比来计算已开枪数,击中次数以及得分。

这样一来,士兵们可以向虚拟目标发射实弹,而不是向真实目标发射空包弹,以获得更真实的战场感觉。

“当你专注于模拟训练时,你对风险的评估是不同的。它可以帮助你学习如何使用武器,它可以帮助你思考环境,”美国海军的Steve Murray上校说,他是美国海军海上系统司令部水面舰艇部队的项目经理。“当你将所有的压力都加入时,你需要建立一个更逼真的环境,以确保你在实际战斗中获得你想要的结果。”

此外,WARSS还可以将士兵的视频流显示在传统显示器或笔记本电脑上,也可以通过远程网络连接来传输,让指挥人员可以远程观察训练过程。

近年来,HoloLens已经成为全球军事行动中备受欢迎的AR可穿戴设备,英国皇家海军和澳大利亚皇家空军都采用了这款来自微软的头显。

去年,微软甚至击败了Magic Leap,获得了一项4.8亿美元的合同,将向美国陆军提供AR头显。

但是,这种优势并不能永远保证,因为目前的部署仅限于指挥中心或训练演习,二者都远离战场。最终,军队的客户将寻求能够进入战场的AR硬件,在这种情况下,我们期望微软能够提供体积较小的HoloLens。

最初发布于2019年2月13日

原文链接:https://hololens.reality.news/news/us-navy-taps-microsofts-hololens-for-augmented-reality-war-games-system-0193389/

华为AR眼镜专利曝光 在AR眼镜上嵌入智能手表?

近日,外媒曝光了来自华为的一项增强现实(AR)眼镜专利,最大的特色是能够在上面嵌入智能手表,以便随时调用智能手表的屏幕和摄像头。

去年11月,华为消费者业务CEO余承东在接受CNBC采访时称,该公司正在研发与智能手机配合使用的AR眼镜,其有望在一两年内亮相。

智能眼镜通常笨重难用,如果能够变得更加轻盈,显然可以提升用户的自由度。这也是目前众多AR眼镜厂商努力的方向。比如有些厂商将AR眼镜的计算单元作为外置设备,通过线缆与眼镜连接。而一项新公布的专利显示,华为还研究了将AR眼镜与智能手表搭配使用的“奇特”方式。

2019年2月7日,华为的一项AR眼镜专利浮出水面。该专利描述了一种轻盈的、可拆分的、相对实惠的AR眼镜。

这款“超薄”的增强现实头戴式装置本身并未配备摄像头、显示屏或麦克风,而是需要通过配套的智能手表来实现(挂在镜腿上,用户头部右侧的太阳穴旁)。眼镜内嵌了适配器和反光镜,通过反光镜,手表屏幕上的内容可以直接反射到用户的眼睛里。

智能手表只能通过一种形式安装到眼镜上,屏幕向内,并且摄像头朝前。在专利中,华为描述了两款略有不同的框架(主要是镜腿部分),可选用透明或半透明的元件。而智能手表的摄像头则可以记录用户的活动。

当然,专利可能只是一个占位符,不代表华为一定会很快推出类似的AR眼镜。而且目前,华为还没有发布带摄像头的智能手表。如果该公司想要将专利中的AR眼镜推向市场,那么该公司很可能会首先推出带摄像头的智能手表。

最初发布于2019年2月12日

原文链接:https://nl.letsgodigital.org/augmented-reality-ar/huawei-ar-bril/

毁于一场大火的巴西国家博物馆 正在用VR/AR等技术重获新生

在今年9月,一场大火席卷了有着200余年历史的位于里约热内卢的巴西国家博物馆,烧毁了超过90%的珍贵藏品。巴西总统Michel Temer在Twitter上表示,这场火灾造成的损失是“不可估量的,200余年间积累的大量艺术品、研究成果和知识毁于一旦。”

想要复原如此多的不可替代的藏品,我们能做的十分有限。但最近启动的一个Google Arts & Culture项目希望能够将其中一些藏品在数字领域进行复原。比如,谷歌街景所使用的技术能够带给人们虚拟的博物馆参观体验,就好像悲剧发生之前那样。

这可以说是一次比较偶然的合作,谷歌在2016年开始和巴西国家博物馆合作,对博物馆的藏品进行数字化,并且通过“高分辨率摄像、摄影测量法、3D激光扫描、虚拟现实和增强现实等技术”对藏品进行详细的拍摄和记录。Google Arts & Culture的项目经理Chance Coughenour在博客中这样写道。谷歌也与很多其他的博物馆和历史古迹合作了类似的项目,但在火灾之后,谷歌和巴西国家博物馆的这次合作就变得尤其重要了。

举个例子,观众现在可以看到一位古埃及歌手的棺材、巴西本地出土的面具和陶器以及这家博物馆收藏的色彩绚丽的蝴蝶标本。“虽然这些图像资料无法替代已经损毁的藏品,”Coughenour写道,“至少技术的进步给了我们一种记住这些藏品的方法。”

或许我们永远无法看到一些保存在Google Arts & Culture上的藏品原本的样子,但一共有超过1500块碎片已经从火灾之后的灰烬中抢救了出来。比如,重达5.8吨的Bendegó meteorite陨石基本上毫发无损,最古老的巴西人类化石“Luzia”的碎片也被从废墟之中找到了,它是整个博物馆中最具价值的藏品之一。

这并不是人们首次使用数字技术来保护这家博物馆的藏品了。在火灾发生后,里约热内卢州立联邦大学的学生们开始搜集在博物馆中拍摄的照片和视频片段,很快就收到了数千张照片。同样的,维基百科也开始请求曾经参观过巴西国家博物馆的观众们上传他们参观时的照片到维基共享(Wikimedia Commons)。

在火灾发生将近4个月之后,这家博物馆也在积极地展望未来。他们已经开始筹划修建一座新的博物馆了,当然会与之前的博物馆有很大的不同。博物馆的主管Alexander Kellner在公开信中写道,支持那些因火灾而被中断工作,甚至是研究成果被毁的研究人员也是重中之重。比如,美国驻巴西外交使团、富布莱特委员会、美国国务院和史密森学会之间的一项合作将会让14位曾在巴西国家博物馆中进行研究的科学家们在2019年使用史密森学会研究实验室。

“虽然巴西国家博物馆的绝大多数藏品都毁于火灾,但我们并没有失去生产知识的能力!这一点是很重要的。”Kellner说道。

最初发布于2018年12月27日

原文链接:https://www.smithsonianmag.com/smart-news/google-virtual-tour-preserves-collections-destroyed-brazil-museum-fire-180971109/