NASA:HoloLens 2混合现实技术助力载人登月计划

工程师们正将混合现实技术这种强大的工具,用于NASA载人登月的Artemis计划。洛克希德·马丁公司是NASA猎户座宇宙飞船的主承包商,正在使用MR技术来提升Artemis II宇宙飞船的制造效率,这是猎户座飞船的第一个载人任务。

Mary Lakaszcyck是一名技术人员,服务于洛克希德·马丁公司的分包商ASRC Federal Data Solutions。她戴着HoloLens 2,将胶带贴在猎户座乘员模块适配器上安装部件的位置。这项工作是在高架舱内进行的,地点位于佛罗里达州NASA肯尼迪航天中心的行动和检测中心。

在组装复杂硬件,比如载人进入外层空间的宇宙飞船时,该技术提供了独特的功能,可以帮助人们了解动态工作环境。以前在二维屏幕上,人们是通过文本或模型来展示工作步骤的;但是当佩戴HoloLens 2时,这些指令能以三维立体的形式出现,并且映射在宇宙飞船的物理实体上。

“老实说,这个设备是多么有用、多省时和多有趣,我很难用语言充分表达。” Lakaszcyck说,“有些工作过去至少要花1周的时间,或者8到12个班次,而现在1个班次内就能完成。”

Lakaszcyck还表示,通过这个设备,她可以准确地看到在宇宙飞船里摆放物品的位置,放置的方向,以及它们的参考编号,使得这个过程前所未有的高效。

AR/MR技术并不是一时之风。它们是洛克希德·马丁公司项目团队为猎户座飞船投入飞行准备的常用工具。该公司已经于2017年开始使用这项技术。

“我们在猎户座飞船的制造中使用了MR技术,用于Artemis I号的飞行任务,”Shelley Peterson说,她是洛克希德·马丁公司混合现实和混合现实方面的专家。“与传统方法相比,混合现实技术正帮助我们突破界限,以更快的速度完成任务。”

NASA乘员模块适配器的组装、集成和测试负责人Carlos Garcia对猎户座制造工作感到满意,他对MR技术在点击联结件(click bonds)上的省时效果感到满意。点击联结件是一种紧固件,可以将几英里长的线束固定在航天器结构上。

“在乘员模块适配器的制造工作中,使用该技术来定位安全带上的‘点击联结件’,相当于节省了三周的时间,” Garcia说。

MR设备佩戴者将在猎户座飞船上放置几个关键的航天部件,包括乘员模块和Artemis II号中要用到的隔热板。他们还将使用混合现实工作指令,以完成飞船乘员座椅的组装。

“在四个场所中,我们通过使用混合现实完成航天器制造,工作时间要比传统方法减少90%。例如,一项通常需要8小时的工作,现在可以在45分钟之内完成,”Peterson说,“如果单看紧固件的话,一艘猎户座宇宙飞船有57000个以上的线束紧固件。每个紧固件上节省出来的时间汇总起来就很可观了!”

Peterson说,使用混合现实的工作指令后,几乎无需解释说明,工人就可以立即理解手上的任务。

微软制造的HoloLens 2是洛克希德·马丁公司所用设备的第二次迭代。该公司使用Scope AR公司开发的混合现实软件平台WorkLink为设备构建内容。

“我从未想过自己会亲手建造进入外层空间的宇宙飞船,” Lakaszcyck说,“我已经设计了三种不同的运载工具,包括当前即将载人升空的Artemis II。现在我是Artemis的一员,这不仅有着不可替代的兴奋感,更是一种责任感。”

在Artemis计划里,NASA将先把一个女性送达月球上,之后是一个男性。猎户座飞船将通过Space Launch System火箭发射出去,把机组人员运送到太空,提供紧急中止能力,在太空旅行中为机组人员提供供给,并能从外层空间安全重返。NASA将在月球上建立可持续的前哨站,并运用获得的知识将宇航员送往火星。

最初发布于2020年4月10日

原文链接:https://www.nasa.gov/feature/using-augmented-reality-to-prepare-orion-hardware-for-artemis-ii-crewed-mission

苹果专利:各种头显内CGR环境中虚拟对象的有形可视化

近日,美国专利商标局发布了Apple的一项专利申请,涉及计算机生成的现实(CGR)环境,更具体地说,涉及一种用于在头显内的CGR环境中提供虚拟对象的有形可视化的技术。Apple区分了将来的Apple头显(或各种头显)可能支持的CGR环境,例如VR(虚拟现实),AR(增强现实),MR(混合现实)和AV(增强虚拟)。

苹果首先指出,计算机可以将计算机生成的图像完全投影或部分叠加在用户的视野中,以提供用户可以体验的CGR环境。CGR环境可以基于不同类型的现实。

头显可以选择检测用户的真实运动并进行投影,并在CGR环境的一系列视觉图像或视频中模拟这些运动。

通过在CGR环境中投影或模拟的这些运动,用户可以与CGR环境中的对象进行交互。

Apple的专利涵盖了在CGR环境中提供虚拟对象有形可视化的技术,其中CGR环境为用户提供了与CGR环境进行交互的逼真的体验。

因为这种体验是现实和身临其境的,所以用户可以轻松地将CGR环境中的虚拟(因此是无形的)对象混淆为存在于CGR环境之外的真实的有形对象。

因此,该专利所描述的技术通过使用户能够快速且容易地在视觉上识别CGR环境内的对象是非有形的虚拟对象还是对应于真实环境中的真实物体(因此是有形物体),在用户与CGR环境交互时,增强了用户的便利性并进一步为用户提供了增强的安全性。

该技术不仅限于为特定类型的CGR环境提供有形的可视化,而是可以在任何类型的CGR环境中实现。这些环境包括基于混合现实的CGR环境和基于虚拟现实的CGR环境。

虚拟现实(VR)环境(或虚拟环境)是指被设计为完全基于计算机生成的一种或多种感官输入的模拟环境。VR环境包括人可以感测和/或交互的多个虚拟对象。例如,计算机生成的树木图像,建筑物和代表人的化身,就是虚拟对象的示例。一个人可以通过模拟人在计算机生成的环境中的存在和/或通过模拟人在计算机生成的环境中的身体运动的子集来感知和/或与VR环境中的虚拟对象进行交互。

混合现实(MR)环境是指模拟环境,旨在将来自物理环境的感官输入并入其中。在虚拟连续性上,混合现实环境介于完全真实的物理环境和虚拟现实环境之间。

混合现实的示例包括增强现实和增强虚拟。

增强现实(AR)环境是指一种模拟环境,其中一个或多个虚拟对象叠加在物理环境中。例如,用于呈现AR环境的电子系统可以具有透明或半透明的显示器,通过该显示器,人可以直接查看物理环境。该系统可以被配置为在透明或半透明的显示器上呈现虚拟对象,使得使用该系统的人感知叠加在物理环境上的虚拟对象。

增强虚拟(AV)环境是指一种模拟环境,其中虚拟或计算机生成的环境合并了来自物理环境的一个或多个感官输入。感觉输入可以是物理环境的一个或多个特征的表示。例如,一个AV园区可能有虚拟的树木和虚拟的建筑物,但是其中的人有着真实人物拍摄的照片中的人脸。另一个示例是,虚拟物体可以采用由一个或多个成像传感器成像的物理物品的形状或颜色。或者还可以这样示例,虚拟物体可以采用与太阳在物理环境中的位置一致的阴影。

有许多不同类型的电子系统,使人们能够感知和/或与各种CGR环境进行交互。包括头戴式系统,基于投影的系统,平视显示器(HUD),具有集成显示功能的车辆挡风玻璃,具有集成显示功能的窗户,放置在人眼上的镜片状的显示器(类似于隐形眼镜)。头戴式系统可以具有一个或多个扬声器和集成的不透明显示器。

头戴式系统可以具有透明或半透明的显示器,而不是不透明的显示器。透明或半透明的显示器可以具备一种介质,代表图像的光通过该介质被引导到人的眼睛。

显示器可以利用数字光投射、OLED、LED、uLED、硅基液晶、激光扫描光源或这些技术的任意组合。该介质可以是光波导、全息介质、光组合器、光反射器或其任意组合。在一个示例中,透明或半透明显示器可以被配置为选择性地变得不透明。

基于投影的系统可以采用视网膜投影技术,该技术将图形图像投影到人的视网膜上。投影系统还可以被配置为将虚拟对象投影到物理环境中,例如,显示为全息图或显示在物理表面上。

在一些示例中,系统#100包括设备100a。设备100a包括各种组件,例如处理器102,RF电路104,存储器106,图像传感器108,方向传感器110,麦克风112,位置传感器(多个)。一个或多个116,扬声器118,显示器120和触敏表面122。这些组件可选地在设备100a的通信总线150上通信。

在一些示例中,系统#100的元件在基站设备(例如,诸如远程服务器,移动设备或膝上型计算机的计算设备)中实现,并且系统#100的其他元件在头戴式设备中实现。显示(HMD)设备供用户佩戴,其中HMD设备与基站设备通信。

在一些示例中,系统#100包括两个(或多个)通信中的设备,例如通过有线连接或无线连接(HMD +MacBook或iPhone或iPad)进行通信。

美国专利局今天发布的苹果专利申请已于2019年第二季度提交,其工作可追溯至2018年第二季度。考虑到这是专利申请,因此目前尚不知道这种产品上市的时间。

最初发布于2019年11月4日

原文链接:https://www.patentlyapple.com/patently-apple/2019/11/apple-patent-describes-tangibility-visualization-of-virtual-objects-within-various-headset-environments.html

多感官整合 高度模块化 基于MR的军事模拟训练平台即将亮相

Kratos防务与安全公司是一家国防安全解决方案提供商,该公司宣布,将会在I/ITSEC期间展示其最新的基于混合现实(MR)的模拟训练平台。

为了应对越来越复杂的武器系统、战术和备战需求,美国国防部急需提升训练的效率,让军队可以快速部署并且提升训练内容的可接受度,同时提高真实度,改进训练内容的安全性。

混合现实(MR)是一种日渐流行的新技术,与虚拟现实(VR)和增强现实(AR)不同的是,Kratos将多种多样的先进技术进行整合,提供视觉、听觉、嗅觉、触觉和更多体验,能够在一个更安全,更经济的环境中提供高真实度的训练。

到目前为止,混合现实在军事训练中的用途还很受限,因为将如此多的感知技术进行整合是一个相当大的挑战,并且在何时何地提供混合现实训练内容也是一个难题。Kratos打破了这些界限,他们为沉浸式的训练环境提供了一个基于平台的新方法,将市面上较为成熟的产品进行整合,占地面积更小,并且能够最高效地在任何地点提供虚拟的训练。

Kratos Platform集成了现有最成熟的商用产品,比如虚拟现实头显和全景相机,并对其功能进行了集成。比如,模拟松树林的训练环境能够散发松树独有的气味,而在模拟射击训练的场景中,当受训人员扣下扳机时,会有枪口焰闪现在眼前。课程开发人员可以选择最适合训练目标的场景,无需为每个新的训练课程“重新发明轮子”。他们可以依赖预集成的平台来快速开发,并且在每次要加入新技术时无需重新设计解决方案。

换句话说,Kratos Platform不是一个开发环境或开发工具包,而是一个完整的、简单易用的训练基础方案,可以让训练人员使用最具沉浸感的混合现实技术来达成训练目标。

除了让训练课程的创建更简易之外,Kratos Platform最大的优势之一,在于它能够在任何合适的环境中提供基于混合现实的训练课程,包括正在飞行的倾转旋翼机,沙漠中的车辆座舱,安装在军校中的模拟器等等,甚至还可以在灵活的Kratos Holodeck中,这是Kratos开发的一个简易的快速交付训练环境。

Kratos Holodeck包含图像生成设备、主机、头部跟踪系统和整合了全景相机的VR头显,能够提供一个动态的视角。该系统能够很容易和快速地重新配置成全新的应用场景和课程,只需载入一个新的任务场景,或者增加或删除某种训练用的硬件,比如武器、控制器或其他设备。在I/ITSEC展会期间,Kratos将会使用Holodeck来展示基于混合现实的士兵野战战术训练课程。

Kratos防务与安全公司训练服务分部(KTS)的高级副总裁Jose Diaz说:“这种基于平台的解决方案除了能够开发出一种增强的沉浸式训练环境,还能降低投入和全生命周期的费用,因为该解决方案使用了已商用的成熟产品,占地面积更小,并且使用起来更加简单。”

最初发布于2018年12月5日

原文链接:https://www.armyrecognition.com/weapons_defence_industry_military_technology_uk/kratos_to_introduce_mixed_reality_military_training_platform_at_i/itsec.html

增强现实正在入侵你的手机 别说你还不知道它是啥

忘记虚拟现实吧,至少现在可以忘记它,众所周知的是,增强现实AR正在给你的手机带来下一波有趣的新玩法。苹果和谷歌正在努力推动这一技术,但是下一波AR技术热潮究竟会有什么新东西呢?自从Niantic推出《Pokemon Go》,可以让你用手机捕捉小精灵之后,发生了什么变化?除了游戏之外,以后你可以用AR技术来做什么呢?

AR、VR和MR

增强现实AR就是——在真实世界中增加一些额外的数字图像,比如简单的叠加,就像你戴着谷歌眼镜能看到的那样,而虚拟现实VR,则是完全数字化的,完全与世隔绝的虚拟空间。

混合现实MR,也就是目前微软正热衷的新类型,是AR和VR的一种混合体,在这种混合体中,那些数字叠加物被设计成好像就是真实世界的一部分一样,当然了这需要高端的处理器和强大的计算能力才能实现,比如微软的HoloLens,你懂的。

但对于微软和其他对混合现实爱好者来说,不幸的是,增强现实正在越来越多的被应用,风头甚至盖过了混合现实。苹果在用它,谷歌在用它,并且大多数人根本不会在意电脑图形在你面前漂浮和电脑图形融入面前场景之间的区别。

从技术上说,智能手机上流行起来的这一波AR已经有了混合现实的样子,想象一下《Pokemon Go》,以一种更加逼真的形式出现。不过,既然苹果发布了ARKit,谷歌发布了ARCore,我们在这里还是使用增强现实这个概念吧。

Project Tango、ARKit和ARCore

移动设备上的第一波强大的AR浪潮是由谷歌的Project Tango带来的,虽然谷歌很早就进入这一领域,但仍然花费了数年的时间才让合适的传感器和计算工具变得足够小,小到能够安装到手机上,即便如此,这样的手机仍然很笨重。让消费者们放弃轻薄的手机,只为了这样一项技术,从目前来看显然是很困难的任务。

让AR有更高标准的表现意味着要收集大量有关实时环境的数据,像Project Tango设备上所具有的强大的镜头模组当然能够起到很大帮助,但是如果一款手机能够足够强大到实时处理大量的数据,你也就无需为了基本的AR体验来购买这样的硬件模组了。这也就是为什么我们直到现在才看到使用标准摄像头和传感器,却能够提供高端AR体验的手机的原因了。

虽然是谷歌最先竖起了AR大旗,但却是苹果用WWDC 2017开发者大会上发布的ARKit技术推动了新一波浪潮。ARKit是“一个全新的框架,可以让你为iPhone和iPad创作出前所未有的AR体验”,这也就是说,有了它,开发者们可以更容易地将3D图形加入到真实世界中。

开发者们如何使用ARKit取决于他们自己,但是苹果已经在给自己的地图应用增加AR特性了,你可以在自己的城市中漫步,就好像自己是一个160英尺高的巨型日本海怪那样。为了提供好的AR效果,你需要一个能够识别3D空间和2D图形的手机摄像头,但是苹果更倾向于在软件层面做出这些基本的功能。ARKit应用能够在iPhone 5s或更新的运行iOS 11系统的手机上运行(你需要A9或更高的CPU)。

据说,摄像头也需要作出一些优化。苹果表示iPhone 8、iPhone 8 Plus和iPhone X的摄像头都针对AR功能进行了调校。iPhone X的前置模组能够完美的支持在3D环境中感知物体,但我们并不清楚新款iPhone上其他所有的2D摄像头都是怎样为AR体验而特别优化的。

当图像以3D的形式被捕获时,效果是非常炫酷的。比如Snapchat的面部滤镜,它们在任何摄像头上都能够使用,但是在iPhone发布会期间,Craig Federighi使用iPhone X展示了更加逼真的滤镜效果,就好像真的长在脸上了一样。

如果谷歌或苹果有一些其他公司没有的产品,整个生态可能会出现不平衡,无论是地图应用还是移动支付技术。所以我们现在有了ARCore,这基本上就是安卓版的ARKit。该技术可以确定手机的位置,以及识别周边的环境,这样一来开发者们将可以使用它。ARCore目前还处在公测阶段,目前只能用在谷歌Pixel、Pixel XL和三星Galaxy S8手机上。

AR能为你做些什么

AR App并不是什么新鲜事物了,但是我们在上文所描述的技术可以让AR App在融合真实与虚拟时更加高效。虽然你现在就可以使用一款《Action Movie FX》这款App,把一辆翻滚的汽车放到你面前的场景中,很快这辆车就能适应周边的颜色和光照情况,但新的AR App能够看到平面,以及你面前的真实世界。

之前我们在谈及华硕的ZenFone AR时曾说“感觉每款App都像是技术演示Demo”,这就是现在安卓和iOS开发者们面临的挑战,他们需要使用新的技术来创作出引人入胜的AR体验。在新款iPhone发布会期间,苹果展示了一款AR游戏,在该游戏中,战争就发生在桌面上,但是,你是更喜欢举着手机围着桌子转着玩游戏,还是更喜欢坐在舒适的沙发上玩呢?

《Pokemon Go》就是一个完美地把AR融合进游戏的例子,并且我们也都知道一家正在开发一款ARKit应用,可以让你在购买之前,就能看到家具摆在家中的样子。已经有一些这类App了(比如Wayfair也早已经开发了AR家具App),但是这一波新的AR热潮能够让这些App更加精确和实用。

苹果公司的Phil Schiller在现场展示了一款能够把天的星座放到正确位置的App,其实这种App之前我们也见过,但是在使用ARKit之后得到了改善。

你可以看到各种各样的新App,结合最新的硬件和软件,可以让AR元素前所未有的逼真,无论是驾驶汽车,还是在订餐之前出现在面前的菜单,甚至还可以使用ARKit把上世纪80年代经典的MV复原到现实生活中。

现在,这些App大多数都处在Demo阶段,但是你能很容易地看到其潜力。游戏能够在真实世界中出现,无论是你房间的地面上,还是在你邻居家,而且你还可以通过手机摄像头给家中增加新的家具,比如沙发,甚至还可以扩建自己的房子。

再往后发展,你可以把手机指向任何东西,并且以一种从未有过的精确度来获得叠加的信息,比如你可以看到高尔夫球场上你与球洞的距离,棒球场上运动员们的比分情况,或者你在商场中迷路时,帮你找到你想去的商铺的精确方位。你还可以测量距离,甚至在你家后院发射一枚火箭,等等等等。

当然了,AR头显,或者MR头显能够提供更棒的沉浸式体验,并且相比把手机和平板举在面前来查看AR效果,要更加自然舒适。但只要这些头显还没有进入主流市场,ARKit和ARCore将会引导成百上千万的人们了解增强现实AR的潜力,以后你将不再低头看手机,而是把手机举起来,轻轻滑动屏幕来获取互联网的海量信息。

最初发布于2017年10月3日

原文链接:https://fieldguide.gizmodo.com/everything-you-need-to-know-about-augmented-reality-now-1809069515

专访商询科技CTO邬浩:降低混合现实开发门槛 迎接MR企业级应用

微软打造的HoloLens是目前唯一投入商用的混合现实头显,这一革命性的设备自诞生之日起就备受关注。越来越多的公司在从事混合现实(MR)应用开发,但由于设备昂贵,开发难度高,目前的应用大多都是一些实验性质的Demo。唯独这样一家公司,在微软举办的各类混合现实技术交流活动中,几乎都能看到它的身影,他们打造的产品还曾亮相湖南卫视的电视节目,让电视前的观众们也感受到了混合现实技术的神奇,这就是笔者在近日专访的DataMesh商询科技。

在近日于北京·亦创国际会展中心举办的“VRSD2017北京国际虚拟现实与增强现实博览会”期间,笔者在VRSD博览会现场对商询科技CTO邬浩进行了专访。从与邬浩的交谈中,我们不仅了解到了商询科技的主要产品和技术优势,更对混合现实技术的发展前景有了坚定的信心。

作为从事游戏行业达十六年之久的老兵,邬浩认为,目前混合现实领域最大的问题是缺乏内容,而混合现实设备在硬件方面的问题则不足为虑,毕竟硬件的迭代升级是无法阻挡的,但只有充足的内容,才是填充MR技术这个“骨骼”的“血肉”。正因为如此,商询科技正在简化MR内容开发、优化MR内容展示和MR+大数据实际应用等方向奋力前行。

主打混合现实开发“中间件” 简化开发,降低成本

据邬浩介绍,作为2016年3月第一批拿到HoloLens的企业,DataMesh商询科技是最早尝试混合现实内容开发的微软合作伙伴,深刻体会到了开发难度之高。正因如此,20个月之后的现在,基于混合现实的内容依然极度缺乏。踩过许多坑之后,商询科技产生了深深的使命感:我们相信混合现实是人类的未来,可是如何快速普及这项技术,让未来早日到来呢?埋头耕耘一年多之后,商询科技于2017年5月面向全球推出“MeshExpert”开发平台。

邬浩说:“我们主打的产品定位为中间件,我们希望更多的人用这个产品来方便的做内容。在混合现实技术发展初期,我觉得要提高普及度,就要把门槛拉低,把开发难度降下来,让大家都进来,这是我们的目标。”

正是基于这种考虑,开发者使用MeshExpert进行开发,可以大幅降低内容开发难度,直接用传统的3D开发思路就可以做出MR内容,除了其中的素材需要自行制作之外,UI和一些基础的功能都会包含在开发工具内。对于MR应用开发者来说,只需要把精力集中在创意上,利用MeshExpert提供的基础美术资源和内容创作思路,就可以简单快速地编辑出混合现实场景,形成MR内容。

“使用我们的MeshExpert,你不需要再关心MR是什么技术,这个东西怎么定位在那里,以及怎么调整,我们都已经包好了,可以真正做成一个APP发布出去。”邬浩这样向我们描述。在笔者看来,这样能够大大降低混合现实内容的开发难度,减少开发时间,进而降低开发成本,无疑能够大力推动MR技术和应用的普及。另外,这些应用也可以无缝迁移到微软与三星、联想、惠普等厂家合作的MR头显中,对于这些新设备的普及,也大有裨益。

与央视、湖南卫视合作 实现HoloLens第三方视角专业直播

使用MeshExpert,能帮助开发者开发出大量的MR内容,但由于技术和设备的限制,目前AR/MR设备的显示效果只有体验者才能看到。针对这一痛点,商询科技还为混合现实打造了第三方视角录制/直播功能,作为中间件的一个子产品,名为MeshExpert Live!,与微软自家的Spectator View方案相比,这款方案可以实现广电级别的录制/直播功能。

“微软开源的Spectator View是比较粗糙的一套方案,虽然能够让未佩戴设备的人看到效果,但其成本和开发难度决定了其商业前景并不明朗。而我们的方案可以利用轻量级设备,20分钟快速搭建,用简单的操作方法把混合现实的第三方视角做到可拍摄,可直播的广电级别。”邬浩介绍说。据笔者了解,在今年9月,湖南卫视播出的《我是未来》节目现场,就展示了这一方案的神奇魅力。当工作人员开启HoloLens时,整个舞台被太阳系包围,通过手势,还可以对其中的某个行星进行缩放等操作。

在这期节目中,湖南卫视用一台固定机位在舞台中央拍摄现场全景画面,两台移动机位负责舞台部分画面的拍摄和近景及特写画面拍摄。最终呈现的效果让人惊叹,但这并不是后期制作,而是在现场录制的。这次实践代表着通过商询科技的二次开发,混合现实拍摄已经可以告别绿幕和专业演播室,大大缩减了影视制作时间和成本。

邬浩还透露:“Live!作为MeshExpert系列第一个推出的产品,本来只是想为大家提供方便,不戴头显也能通过大屏和操作者互动,没想到产品推出后在影视制作领域也颇受欢迎,各大电视台,节目制作团队,广告制作商,甚至好莱坞摄影师和制片人都纷纷找上门来,逼得我们不断的给产品添加专业feature,一直在快速迭代。大家可以期待专业的Live!套件很快到来。”

混合现实+数据协同 为传统企业升级数据服务

除了混合现实内容开发和展示上的用途之外,商询科技还将混合现实技术应用到了大数据这个看似神秘的领域。

邬浩说道:“我们有自己的大数据平台,可以和MR技术打通。这时就可以用大数据处理一些企业的后端数据的部分,比如维修记录,知识库等等。在对数据进行清洗和整理之后,发到MR设备前端,前端的MR设备一方面是一个虚拟助手,在里面帮维修工人去解决这些问题,另一方面也是一个收集端,它可以看到维修工人看到的东西,把这次的维修记录再次返回到大数据里面。”

邬浩认为,大数据一定是要有实际用途的,如果只给出数据报表,是没有什么实际意义的,而商询科技要做的就是让大数据直接能够指导生产。邬浩以汽车制造行业为例,向笔者讲解了大数据与混合现实技术结合的实际案例。

某老牌跨国车企有着大量的资料积累,但是非常杂乱欠整理,甚至还包括一些纸面资料,其内部连检索功能都没有。商询科技针对这样的情况,首先由大数据方面的专家介入,对数据资料进行AI智能清洗,使其形成知识库,然后在前端对接MR设备。在实际工作过程中,是无法保证每个一线装配工人都有足够高的专业水平的,通过使用HoloLens,在工作过程中会有虚拟助手,比如工人看到的东西,它可以帮助总结,提炼出可能会遇到的问题以及处理方法,利用混合现实技术现场显示给工人,并且这次的维修结果也会反馈回知识库,甚至还可以开启HoloLens等设备的摄像头与专家连线,进行远程协助。

“这就是企业的痛点,他们真的想要这种东西,我们所做的,就是用大数据+MR来解决企业在实际生产过程中的需求。我们用HoloLens所做的尝试可以打通从大数据到最终的维修工人实际操作这个流程。”邬浩说。

有效助力解决实际问题 MR技术将会先在B端爆发

在本次专访的最后,笔者就混合现实技术的发展前景等问题询问了邬浩的看法。在他看来,相比MR,VR的发展道路比较窄。VR是沉浸式的体验,但是沉浸往往会带来比较强的孤独感,这种孤独感就导致只有在100%沉浸的环境下才适合用VR。而在需要解决工作中的实际问题时,更适合使用MR技术。

“所以我个人更加看好MR技术的发展,而且尤其是在B端,MR的想象空间会多很多。目前,MR技术在C端不会有很快的发展,毕竟目前的混合现实设备还过于笨重和昂贵,并不适合在C端进行推广。我觉得MR在B端是必然会爆发的,因为MR是真的能改变你的生产模式,改变你的工作方式的技术。”邬浩认为。

“HoloLens最大的意义在于,它可以让我们看到十年后是什么样子,虽然在短时间内,我们不指望能把HoloLens普及到千家万户,但是我们现在能够把大的方向做出来,等到新设备到来的时候我们的路已经铺好了,这是我们的看法,也是我们现在正在做的事情。”

最初发布于2017年11月27日