助力医患沟通 医生用VR进行脑部手术的术前准备

五十九岁的Bonnie Haber发现自己正在经历着复杂的诊断和吓人的手术,就像成千上万的其他美国人一样。Haber的肿瘤并非癌变,但它靠近视神经的位置意味着医生们必须快速行动。

“这是脑肿瘤,这是脑膜瘤,这里的灰色区域是你的大脑。看到它是怎样存在于你脑中了吗?“Hackensack Meridian Health JFK神经科学研究所主席Thomas Steineke博士说。

“当他向我展示常规的核磁共振成像时,他说这是你的脑肿瘤,它必须被取出来。我还是不明白,为什么一定要取出来?如果我唯一的症状是时不时地感到头晕,我可以忍受这种情况,而不必让你打开我的头骨。我没有医学上的问题,我很健康。然后他向我展示了虚拟现实的内容,它帮助我理解了我的病情,“Haber说。

虚拟现实在医学界是一个前沿的概念。在进行手术之前,Hackensack Meridian Health JFK神经科学研究所的患者和外科医生们先用虚拟现实头显对大脑有了一些了解,对手术进行准备。

“它使我们能够更好地理解脑部结构并更好地规划操作。通常情况下,我会根据我在虚拟现实中看到的东西改变我的某些操作。它使我的操作更加精确,坦率地说,会更安全一点,“Steineke说。

JFK神经科学研究所是该州第一家也是唯一一家使用Precision VR Surgical Theatre的医院。Steineke说,自从一年前部署该系统到现在,它已成为复杂的神经外科手术的首选工具。到目前为止,他已经在82名患者身上使用过它。

“我能够用它来排练手术,移除我需要移除的骨头,这使我在手术过程中更有效率,坦率地说,我觉得它让手术更安全,因为我能够预测到在手术过程中我会遇到什么样的脑部结构,“斯泰尼克说。

Steineke可以操纵和旋转肺叶和组织,让患者们在进入手术室之前就能参与他们的护理计划。虽然这需要医院付出代价,比如每一套Precision VR Surgical Theatre需要医院支付高达10,000美元的费用。Haber说她很感激这个系统,因为该系统缓解了她的担忧。

“对我来说,核磁共振成像上的小白点(肿瘤的图像)与虚拟现实中那个大而且丑陋的肿块之间的区别,确实对我产生了影响,”Haber说。

医生们说虚拟现实和增强现实在医学上的未来是无限的。这意味着更好的培训,更少的侵入性手术,以及更快的恢复。

最初发布于2019年2月18日

原文链接:https://www.njtvonline.org/news/video/doctors-use-virtual-reality-program-to-prepare-for-brain-surgeries/

微软HoloLens中标美国陆军4.8亿美元”集成视觉增强系统”合同

根据美国陆军发布的消息,在去年11月,美国陆军与微软达成一项总值近4.8亿美元的合同,微软将会向美国陆军提供HoloLens增强现实系统原型,用于战斗任务和训练。

根据彭博社的消息,该合同最终可能导致军方购买超过10万台头显,并且旨在“通过提高在敌方之前侦查、决策和参与的能力来增强军队的杀伤力”,根据政府对该计划的描述,该系统被正式称为集成视觉增强系统(Integrated Visual Augmentation System,简称IVAS)。

“增强现实技术将为部队提供更多更好的信息来帮助做出决策。这项新工作将我们与国防部长期的、互信的关系扩展到这个新领域,“一位微软发言人在给彭博社的电子邮件声明中表示。

虚拟现实产生了一种由计算机生成的现实,用户可以与之交互(通常通过头显),而增强现实会将数字信息带入用户的视野并叠加到现实世界,通常需要通过智能手机的摄像头或头显来实现 。

HoloLens是微软的AR平台,这家软件巨头称之为“混合现实”。该公司已经将HoloLens用于工业场景,他们认为这台头显可以“让技术人员在混合现实中远程协作,并在几分钟内解决问题,而不是几天。“并且微软表示用户可以充分利用3D模型“创建易于编辑的、生活规模的布局,让您和您的利益相关者可以在物理世界或虚拟现实中体验全息图。”

据MSPoweruser称,在2018年4月,微软透露已经向客户出货了50000台HoloLens设备。正如彭博社指出的那样,该合同使得美国陆军成为微软最重要的HoloLens客户之一。

美国陆军希望微软提供的头显在几个关键方面区别于消费级同类产品。

根据彭博社的报道:在与竞标该合同的公司分享的一份文件中,美国陆军表示,它希望该产品能结合夜视和热感应,测量像呼吸这样的生命特征和“准备就绪”,监测脑震荡并提供听力保护。

微软作为中标者,预计将在两年内交付2500台头显,并展示全面生产的能力。

美国陆军的合同旨在鼓励服务部门与不是典型国防承包商的公司开展业务。AR创业公司Magic Leap是另一个竞标者,据彭博社报道,2018年8月美国陆军与25家有兴趣以某种方式参与该项目的公司举行了会议,其中包括Booz Allen Hamilton控股公司,Lockheed Martin公司和Raytheon公司。

美国陆军并不是唯一对AR技术感兴趣的国防部门。美军特种作战司令部(SOCOM)也对 “ 视觉增强系统(Visual Augmentation Systems,简称VAS)”及相关辅助技术的改进和增强表示了兴趣。这包括用于抬头显示器的AR和虚拟现实解决方案,以及如何将不同数据源的信息融合进一个共同的视觉显示单元。

美军特种作战司令部正在寻求几个不同领域的创新技术和能力,包括AI/机器学习,具备增强的光学特性的显示器,多传感器数据融合与处理、通信等。

在这些领域内,美军特种作战司令部对非常具体的技术应用感兴趣。例如,在AR/VR和AI/机器学习领域中,美军特种作战司令部对任务前的演练和定位、全息显示,游戏技术,神经形态计算和工程,远程医疗以及综合训练和操作环境等技术很感兴趣。

最初发布于2019年2月15日

原文链接:https://fedtechmagazine.com/article/2019/01/army-teams-microsoft-ar

美国海军用HoloLens进行实弹射击训练 让模拟训练更逼真

模拟训练可以帮助士兵和水手学习如何安全地使用他们的武器,但模拟器有时可能无法营造出真正的战斗中的充满压力的环境。

这就是美国海军开发出一种在HoloLens上运行的更逼真的增强现实模拟器的原因。

该系统被称为武器增强现实评分系统(Weapons Augmented Reality Scoring System,简称WARSS),通过用HoloLens在用户的视野中显示敌方部队的3D图像来模拟实弹演习。该系统还会显示一个记分牌,该记分牌可以根据射击次数与未命中次数的百分比来计算已开枪数,击中次数以及得分。

这样一来,士兵们可以向虚拟目标发射实弹,而不是向真实目标发射空包弹,以获得更真实的战场感觉。

“当你专注于模拟训练时,你对风险的评估是不同的。它可以帮助你学习如何使用武器,它可以帮助你思考环境,”美国海军的Steve Murray上校说,他是美国海军海上系统司令部水面舰艇部队的项目经理。“当你将所有的压力都加入时,你需要建立一个更逼真的环境,以确保你在实际战斗中获得你想要的结果。”

此外,WARSS还可以将士兵的视频流显示在传统显示器或笔记本电脑上,也可以通过远程网络连接来传输,让指挥人员可以远程观察训练过程。

近年来,HoloLens已经成为全球军事行动中备受欢迎的AR可穿戴设备,英国皇家海军和澳大利亚皇家空军都采用了这款来自微软的头显。

去年,微软甚至击败了Magic Leap,获得了一项4.8亿美元的合同,将向美国陆军提供AR头显。

但是,这种优势并不能永远保证,因为目前的部署仅限于指挥中心或训练演习,二者都远离战场。最终,军队的客户将寻求能够进入战场的AR硬件,在这种情况下,我们期望微软能够提供体积较小的HoloLens。

最初发布于2019年2月13日

原文链接:https://hololens.reality.news/news/us-navy-taps-microsofts-hololens-for-augmented-reality-war-games-system-0193389/

华为AR眼镜专利曝光 在AR眼镜上嵌入智能手表?

近日,外媒曝光了来自华为的一项增强现实(AR)眼镜专利,最大的特色是能够在上面嵌入智能手表,以便随时调用智能手表的屏幕和摄像头。

去年11月,华为消费者业务CEO余承东在接受CNBC采访时称,该公司正在研发与智能手机配合使用的AR眼镜,其有望在一两年内亮相。

智能眼镜通常笨重难用,如果能够变得更加轻盈,显然可以提升用户的自由度。这也是目前众多AR眼镜厂商努力的方向。比如有些厂商将AR眼镜的计算单元作为外置设备,通过线缆与眼镜连接。而一项新公布的专利显示,华为还研究了将AR眼镜与智能手表搭配使用的“奇特”方式。

2019年2月7日,华为的一项AR眼镜专利浮出水面。该专利描述了一种轻盈的、可拆分的、相对实惠的AR眼镜。

这款“超薄”的增强现实头戴式装置本身并未配备摄像头、显示屏或麦克风,而是需要通过配套的智能手表来实现(挂在镜腿上,用户头部右侧的太阳穴旁)。眼镜内嵌了适配器和反光镜,通过反光镜,手表屏幕上的内容可以直接反射到用户的眼睛里。

智能手表只能通过一种形式安装到眼镜上,屏幕向内,并且摄像头朝前。在专利中,华为描述了两款略有不同的框架(主要是镜腿部分),可选用透明或半透明的元件。而智能手表的摄像头则可以记录用户的活动。

当然,专利可能只是一个占位符,不代表华为一定会很快推出类似的AR眼镜。而且目前,华为还没有发布带摄像头的智能手表。如果该公司想要将专利中的AR眼镜推向市场,那么该公司很可能会首先推出带摄像头的智能手表。

最初发布于2019年2月12日

原文链接:https://nl.letsgodigital.org/augmented-reality-ar/huawei-ar-bril/

拆弹机器人领域的新探索:用VR来控制只是其中之一

拆弹机器人已经存在很长时间了,并且这项技术也经历了长足的发展。其中最新的一款,名为Taurus,可以通过虚拟现实头显来导航,提供给操作人员前所未有的操作体验。从自动化,到电池上的创新,在拆弹机器人领域,哪些趋势是最普遍的呢?

机器人被用来执行人类不想做的工作或者不能做的工作。而拆除和处置炸弹则是危险性最高的工作之一,在战场上拆除炸弹,会更复杂,更危险。所以,从上世纪70年代开始使用无人设备来执行这种任务可以说是很明智的。

对于机器人来说,拆除炸弹是其最早的实际应用场景之一,从最初应用到现在已经大概50年了,拆弹机器人也经历了巨大的转变,从一开始的用线缆来控制的履带式拆弹车,到使用虚拟现实(VR)和先进的传感反馈技术的现代化拆弹机器人。

“在刚刚过去的10到15年间,机器人领域的研发工作和人才投入获得了大幅增长,拆弹机器人也因此受益,”Ultralife Corporation的应用工程经理Jonathan DiGiacomandrea说道。

“这些机器人更新换代的步伐也在显著加快,这已经成为了一个发展非常迅速的领域。整体而言,相比以前,现在的机器人正在变得越来越精确且可信赖。”

控制方式的演进与VR的应用

或许现在的拆弹机器人和以前的老型号之间最显著的区别就是其用户控制方式了。使用线缆来控制机器人的日子已经一去不复返了,现在几乎所有的东西都可以远程控制了。比如斯坦福国际研究院(SRI International)使用的Taurus,可以让操作人员以前所未有的方式看到实际的拆弹场景。这是让拆弹专家能够最近距离执行任务,同时不用亲自身处险境的方式。

在使用VR头显之前,Taurus的操作人员不得不使用笨重的3D显示器以及特别设计的控制器,可以将操作人员手部的动作转换成机器人的抓手的动作。随着VR技术的发展,3D显示器已经被VR头显和很容易就能买到和使用的控制器取代,比如Oculus Rift。

很容易就能联想到VR游戏正在使用的技术,但二者的相似性远不止此。根据DiGiacomandrea,用来操作很多机器人的远程控制系统正在与触觉反馈设备相结合,这样就能通过震动来提示警告信息,就像游戏里那样。

“我们看到一些公司正在使用VR手套,或者至少是VR的交互界面,而不是使用手柄和操纵杆,”DiGiacomandrea说道。“在接下来的这几年,我认为VR会真正成为一种控制不同类型的机器人的方式,而拆除炸弹则是VR的一个重要用途。”

耐用的、先进的供电系统

电池和供电方面的创新也意味着拆弹设备能够被设计的更轻便,更便于携带,并且能够在无需再次充电的情况下持续运行,也就意味着在关键时刻它不会出问题。

“考虑到作业环境,电池的问题可能会带来灾难性的后果,尤其是在危险的环境中。”

“过去几年间,我们在客户身上发现,供电系统是客户在产品中提及次数最多的部件,同时,我们也希望供电系统是整个产品中最少出问题的部件。”DiGiacomandrea说道。

过去,机器人依赖于铅酸蓄电池,但最近几年间锂离子电池技术的进步意味着电池组的重量能够降低一半甚至是三分之二,这对于机器人的轻量化是极为重要的,还可以轻松获得双倍的电能密度。

当然,这些电池模组也需要尽可能的坚固耐用,考虑到作业环境,电池的问题可能会带来灾难性的后果,尤其是在危险的环境中。

目前电池方面的创新是由电动汽车领域来引领的,他们在电能密度方面的进步十分引人注目。“你将会看到供电系统方面持续的进步,这将能够让机器人设计者们在机器人身上安装更多复杂且高性能的工具,”DiGiacomandrea说道。

敏捷性和移动性的提升

虽然早期的设计可以让操作人员在远处拆除炸弹,但机器人仍然必须部署在能够看到炸弹的地方,并且要在相对平整的地方。摄像机和传感器的发展可以让拆除工作在操作人员视线之外的地方进行。但问题仍然存在,那就是,机器人必须要先到达炸弹所在地。如果炸弹位于一座建筑的三楼,进入这座建筑就会相当危险了,更别提还需要安装炸弹拆除和处置设备了。

好在刚刚过去的这几年间,我们见证了拆弹机器人在敏捷性和移动性上的显著进步。位于英国梅德韦的格林威治大学和NIC Instruments在前几年合作开发了一款机器人,可以爬台阶和开门。最新的灵巧型机器人还能打开汽车后备箱,拆除汽车炸弹。波士顿动力(Boston Dynamics)测试了能够纵身跳墙的机器人,并且现在正在被考虑用于拆除炸弹。

随着机器人变得越来越精细复杂,拆弹机器人也能够进行更为复杂的交互。“在过去的几年间,我们看到,拆弹机器人工程师们再也不会依赖过去的方法了,”DiGiacomandrea说道。

“在以前,工程师们用的是刺探或者拖曳的方法。前者是要使其爆炸或拆除炸弹,后者则是把炸弹拖到另一个地方。我们最近发现 ,人们正在转向更加复杂的拆除炸弹的方式。比如用灵活的接口来复制人的手部动作,或者使用外科手术一样的操纵器。”

最初发布于2019年1月22日

原文链接:https://www.army-technology.com/features/bomb-disposal-robots-the-new-frontier/

奥迪漫威联手打造 汽车内VR娱乐系统Holoride体验及展望

从外面看来,我坐在一辆全新的奥迪旗下首款纯电动SUV,即奥迪e-tron后座上,沿着Speed Vegas赛道跑了大概两圈。而离近了看时,我并没有与司机尬聊,而是佩戴着Oculus Rift VR头显,手拿控制器,正在体验来自Holoride的下一代车内娱乐系统。

Holoride曾是奥迪公司内部的一个项目,旨在探索增强未来车型的车内体验的方法。事实证明,这是一个相当不错的想法。后来,Holoride被剥离了出来,成为一家独立的初创公司。并且迪士尼和漫威等公司也参与其中。

其实单看e-tron的内部,就已经足够漂亮了,但当你戴上Oculus Rift之后,将会看到一个全新的世界。比如我体验的内容,是由迪士尼游戏和互动体验部门开发的《Marvel’s Avengers: Rocket’s Rescue Run》,通过使用控制器,我可以炸掉那些想要摧毁我们的小行星。这个体验本身是很不错的,当然任何人都可以在舒适的家中进行同样的体验。

如果在此之前,你曾经在正在行驶的车中体验过VR头显的话,你就会知道这对一些用户来说可能并不是个好主意。晕动症会破坏任何的VR体验,特别是当你坐在汽车里,你的身体接收到的信息与眼睛所看到的信息相冲突的时候。

而让Holoride体验与众不同的是,如何将VR体验与汽车本身的运动结合起来。这种体验将e-tron内外各种传感器的数据连接起来,并且会在每次转弯、加速和刹车的时候进行同步,进而匹配游戏中的体验。

比如,我听到了加速的声音,然后突然感受到一个巨大的加速度,就好像在太空中燃烧那样。而在现实中,我所乘坐的e-tron以极快的速度从20mph加速到了90mph。VR体验内容和汽车的数据实时同步,但奥迪和Holoride团队告诉我,他们的目标是要让游戏体验更加“有弹性”。根据你的路程长短,以及你可能会遇到的意外的延误,来决定游戏的时长。

Holoride作为一种体验和平台,还处在早期开发阶段。现在的演示主要是为了展示该平台作为一个全新的娱乐形式的潜力。我很确定这将会超越传统的娱乐体验。想象一下在交通有些拥堵的罗马,这时可以用Holoride来载入一段VR体验,当你正在驾车穿越凯撒时期的罗马帝国时,实际上你所乘坐的汽车正在带你去约会或者回家。

漫威打造的《Marvel’s Avengers: Rocket’s Rescue Run》被设定在太空中,不过并不是每个Holoride VR体验都是在这种大场景里。比如有一个不同的体验,可以把你带到人体之中,探索血管、器官等等,所有这些都会与车的动作的变化同步。

Holoride并不是奥迪的产品,也不能说完全归迪士尼所有,他们还计划吸引更多的潜在投资者。实际上,该公司的目标在于打造更广泛的内容创作者社区。同时,他们也期望着其他的汽车制造商加入这一领域。当然了,最让我感到兴奋的还是Holoride在自动驾驶方面的潜力。

自动驾驶汽车里的乘客们该点干什么好,是几家大型汽车厂商都在研究的一个课题。比如,梅赛德斯奔驰在2015年展出的F 015 Luxury In Motion自动驾驶原型车就曾设想了透明的显示器,既可以展示真实世界中汽车周围的场景,也可以替换成更具美感的内容。最近,沃尔沃也在尝试新的创意,比如将传统的汽车内饰改造成休息室的风格,目标在于用自动驾驶汽车来替换短途航班。

虽然在自动驾驶行程中,你仍然坐在比较传统的座椅上,Holoride能够很容易地利用车中的传感器数据,来增强你的体验。车上搭载的用来标记行人、自行车和汽车周围其他物体的激光雷达扫描器可以将这些人和物转换成战场上的外星人、游猎过程中的动物或者是VR游戏中的其他内容。这样一来,每次旅程都会有截然不同的体验,因为路程中总会有一些或大或小的变化。

目前Holoride当然还在早期阶段。这次我所体验的Demo距离推向市场还有很远的距离,但可以确定的是,当Holoride开始加快开发的步伐,并且更多的开发者开始创作VR体验时,我们将会在e-tron甚至其他品牌的汽车上看到更多有趣的VR体验。

最初发布于2019年1月8日

原文链接:https://www.slashgear.com/audi-disney-holoride-marvel-virtual-reality-gaming-autonomous-car-experience-hands-on-ces-2019-07560457/

毁于一场大火的巴西国家博物馆 正在用VR/AR等技术重获新生

在今年9月,一场大火席卷了有着200余年历史的位于里约热内卢的巴西国家博物馆,烧毁了超过90%的珍贵藏品。巴西总统Michel Temer在Twitter上表示,这场火灾造成的损失是“不可估量的,200余年间积累的大量艺术品、研究成果和知识毁于一旦。”

想要复原如此多的不可替代的藏品,我们能做的十分有限。但最近启动的一个Google Arts & Culture项目希望能够将其中一些藏品在数字领域进行复原。比如,谷歌街景所使用的技术能够带给人们虚拟的博物馆参观体验,就好像悲剧发生之前那样。

这可以说是一次比较偶然的合作,谷歌在2016年开始和巴西国家博物馆合作,对博物馆的藏品进行数字化,并且通过“高分辨率摄像、摄影测量法、3D激光扫描、虚拟现实和增强现实等技术”对藏品进行详细的拍摄和记录。Google Arts & Culture的项目经理Chance Coughenour在博客中这样写道。谷歌也与很多其他的博物馆和历史古迹合作了类似的项目,但在火灾之后,谷歌和巴西国家博物馆的这次合作就变得尤其重要了。

举个例子,观众现在可以看到一位古埃及歌手的棺材、巴西本地出土的面具和陶器以及这家博物馆收藏的色彩绚丽的蝴蝶标本。“虽然这些图像资料无法替代已经损毁的藏品,”Coughenour写道,“至少技术的进步给了我们一种记住这些藏品的方法。”

或许我们永远无法看到一些保存在Google Arts & Culture上的藏品原本的样子,但一共有超过1500块碎片已经从火灾之后的灰烬中抢救了出来。比如,重达5.8吨的Bendegó meteorite陨石基本上毫发无损,最古老的巴西人类化石“Luzia”的碎片也被从废墟之中找到了,它是整个博物馆中最具价值的藏品之一。

这并不是人们首次使用数字技术来保护这家博物馆的藏品了。在火灾发生后,里约热内卢州立联邦大学的学生们开始搜集在博物馆中拍摄的照片和视频片段,很快就收到了数千张照片。同样的,维基百科也开始请求曾经参观过巴西国家博物馆的观众们上传他们参观时的照片到维基共享(Wikimedia Commons)。

在火灾发生将近4个月之后,这家博物馆也在积极地展望未来。他们已经开始筹划修建一座新的博物馆了,当然会与之前的博物馆有很大的不同。博物馆的主管Alexander Kellner在公开信中写道,支持那些因火灾而被中断工作,甚至是研究成果被毁的研究人员也是重中之重。比如,美国驻巴西外交使团、富布莱特委员会、美国国务院和史密森学会之间的一项合作将会让14位曾在巴西国家博物馆中进行研究的科学家们在2019年使用史密森学会研究实验室。

“虽然巴西国家博物馆的绝大多数藏品都毁于火灾,但我们并没有失去生产知识的能力!这一点是很重要的。”Kellner说道。

最初发布于2018年12月27日

原文链接:https://www.smithsonianmag.com/smart-news/google-virtual-tour-preserves-collections-destroyed-brazil-museum-fire-180971109/

美军爱德华兹空军基地将VR/AR用于F-35战机维护培训

军事领域一向最先应用新技术。美国空军的技术军士Jeremy Neilson正在让一个充满创意的想法落地,他在爱德华兹空军基地的F-35集成试验部队建立了一个互动的VR/AR培训设施,进行战机维护相关的培训。

虚拟现实培训能够让操作人员完成资格培训或提升熟练度的培训,而无需使用前线的真实的设备,毕竟这些设备不仅数量有限,而且非常昂贵。

Neilson向412试验飞行中队的创新小组XCITE提出了他的想法,并且该创意也被选中获得了资助。他曾经担任项目总监的经验,使他被认证为2018年一季度412试验飞行中队的季度创新者。

VR的优势在于它能够用安全环境中的沉浸式互动体验来模拟高危险性甚至是致命的场景。在VR环境中,可以反复进行模拟高危环境中的培训,以增强受训人员做出直观反应的能力,并且不会有对受训人员造成伤害的风险。

虚拟现实培训也是很有成本效益的。比如,它能够让学生们在家中就可以进行课程学习,甚至无需前往教室。并且,在VR培训过程中,无需使用真实世界中的设备。不仅释放了更多资源,同时还避免了对昂贵的设备的损坏。

VR还能让培训更简单。初步的和纠正性的培训内容都能够通过VR设备进行培训和记录,提升熟练度的培训也可以通过VR进行,尤其是那些由于缺乏培训器材,而很少进行的培训课程。

与地面准备相关的培训也可以被重复演练,参训人员不会受到地理限制,以往这样的培训内容都需要在实地进行。

最后,VR培训环境既可以简单也可以复杂,也可以更逼真,还可以模拟出致命的场景,也就是说,VR可以模拟几乎任何培训场景。这种灵活性是传统的培训方式无法提供的。

在Neilson看来,在空军中推动一种创新的文化就是要倡导一种鼓励大家拥抱新技术的心态,来满足空军对新技术不断增长的需求。

“使用VR/AR的补充训练课程对于未来空军的‘基于经验的训练’有着非常重要的意义,我们最初在虚拟现实/增强现实上的投入已经获得了一些技术上的进展,如果能长期应用,将会逐渐淘汰我们现在的培训方式。”Neilson认为。

最初发布于2018年12月24日

原文链接:https://www.edwards.af.mil/News/Article/1719563/innovation-f-35-maintenance-virtual-realityaugmented-reality-initiative/

特斯拉申请AR专利:类似谷歌眼镜的AR系统 用于汽车制造

特斯拉之前在其费利蒙工厂对Google Glass进行了测试,现在,该公司正在申请一项增强现实相关专利,可以简化员工们的工作。

其实在2016年,外媒就曾经报道特斯拉正在使用可穿戴技术来提升其工厂的生产效率。

在发布了一款并不算是成功的AR眼镜,也就是Google Glass之后,谷歌正在考虑将这款产品从面向消费者转向面向企业用户。

他们发布了一款企业版产品,并且有几家公司开始为这款设备开发应用,来帮助工人们提高效率。

很明显,特斯拉也对这种技术感兴趣,并且根据上周公开的一项新的专利申请,特斯拉申请了一项AR应用相关专利,可以被用在类似Google Glass的设备上。

该专利名为“用于制造业的增强现实应用”(Augmented Reality Application for Manufacturing),它描述了一个系统,能将目标对象的特性相关的数据叠加到AR眼镜中,并且可以被工人用作护目镜。

在专利申请中,特斯拉给出了一些有关汽车制造业的例子。以下为专利描述的部分内容:

一个用于制造业的增强现实(AR)应用专利。在一些情况下,计算机视觉和增强现实技术会被用于识别目标物体,分辨用户和物体之间的关系。比如,用户会使用AR设备,比如包含摄像头和传感器的智能手机或AR智能眼镜。在一些情况下,AR眼镜或许会是护目镜的形态。

AR设备能够捕捉到一个目标物体的实时画面,比如一个或多个汽车部件的画面。AR设备会确定设备的位置,也会确定目标物体的位置和类型。比如,AR设备识别出了目标物体是一辆汽车的右侧前减震塔,接下来AR设备就会在目标物体画面的上方叠加符合目标物体特征的数据,比如机械接口、与其他部件的接口、电泳漆的厚度等等。与接口相关的特性包括焊点、自冲铆铆钉、激光焊焊缝、结构胶和密封材料等等。当用户在目标物体周围活动时,从AR设备里观看到的画面和叠加的物体特性数据也会对应地进行调整。

用户还可以与AR设备进行互动,比如,AR设备可以显示每个被识别物体的信息。在一些情况下,AR设备会显示每个被检测到的组件之间的容差,比如焊点或打孔的位置。另一个例子是,叠加在目标物体画面上的数据包括了装配的细节,比如进行激光焊的顺序,需要使用的焊接类型,每个组件之间的容差,以及整个组件是否被正确装配等等。在各种情况下,AR设备能够识别不同部件的特征,并且将可互动的数据显示给用户。与目标物体相关的数据会被呈现出来,帮助用户更高效的进行装配任务。

特斯拉所描述的系统看起来非常像在2016年特斯拉所发布的宣传视频,在该视频中,特斯拉的员工正在工厂中使用Google Glass。

但是在这个新的专利申请中,看起来特斯拉计划更进一步,使用计算机视觉技术来分析工人们看到的内容,比如某个部件涂层的厚度,并且帮助他们做出关于质量管理的决定。

这家汽车生产商相信,这种技术有着”显著提升生产的速度和效率,尤其是提高生产汽车组件和整车的速度和效率“的潜力。

最初发布于2018年12月13日

原文链接:https://electrek.co/2018/12/11/tesla-google-glass-ar-factory-workers/

The Void将在亚洲开设超100家体验中心 首家落户马来西亚

继在马来西亚云顶世界开启其在亚太地区的首个体验中心之后,虚拟现实(VR)体验开发商The Void正着眼于扩展到亚洲的其他特大城市,包括新加坡和北京。

The Void的亚洲区业务CEO John Watkins在12月6日的云顶世界体验中心启动仪式之后,对媒体确认道,该公司将会在接下来的五年间,在亚洲开设超过100个虚拟现实体验中心。

“在次序方面,大中华区、马来西亚、新加坡、泰国,这些都是我们正在关注的地方。”Watkins说道。

“我们更看重一个城市的发展水平,而非这个国家的发展水平,并且尤其关注特大城市,比如该国家的首都,”Watkins补充道。

在马来西亚云顶世界的体验中心里,The Void启用了两个大IP加持的体验项目,分别是《星球大战:帝国的秘密》和基于迪士尼动画电影《无敌破坏王2:大闹互联网》的《Ralph breaks VR》。

在星球大战体验项目中 ,游客们会在与暴风兵对战的同时,感受到他们所使用的爆能枪强大的冲击力,还可以闻到Mustafa星球上熔岩的气味,并且通过一些互动解出谜题来逃避暴风兵的攻击。

而在《Ralph breaks VR》中,游客们需要打击像素虫,阻止兔群的进攻,并且用煎饼发射器击落复古风格的外星飞船。

The Void将于明年年初在云顶世界体验中心里加入《捉鬼敢死队》VR体验项目,明年年中,还将加入漫威主题的VR体验项目。

与看电影不同的是,虚拟现实体验意味着游客们能够变身成为体验项目中的角色,可以看到,可以感受,可以听到并且闻到体验内容,所有这些只需戴上VR头显,穿上背心,然后走进场地中。

Watkins还重复说到,The Void正在寻求将这些体验项目带到亚太区域内更多的城市里,这有一定的标准,比如人均收入水平和来自国外的游客规模。

按照此标准,新加坡正是其关键目标之一。

“我们当然想在新加坡开设体验中心,我们正在与多个新加坡的地标建筑运营方积极探讨。到明年,我们会在新加坡开设至少一个体验中心”他说到。

而在大中华区,The Void正在关注北京、上海、广州、深圳和香港等城市,Watkins说到。

“这种类型的城市将所有我们最喜欢的因素聚集在一起,就像洛杉矶、纽约、伦敦那样,”Watkins补充说。

The Void的总裁兼CEO Craig Watson也亮相了启动仪式,他也强调了亚洲已经准备好拥抱虚拟现实体验。

“这能带来深度的临场感,是一个与众不同的体验。当然这不会取代电影,这是完全不相关的,”Watson说道。

“在电影中,你是坐着观看的,并且在观看故事时是被动的。而在The Void体验中,你就是故事中的主角,这非常有趣,并且这是主动而非被动的,所以我不认为你可以将二者相比较。”

The Void目前在全世界有九家体验中心,包括在美国的五家,在加拿大的两家,在迪拜的一家和在马来西亚云顶世界的一家。

最初发布于2018年12月10日

原文链接:https://www.channelnewsasia.com/news/asia/the-void-open-virtual-reality-centres-star-wars-singapore-china-11006732