人社部等三部门联合发布虚拟现实工程技术人员等16个新职业

近日,人力资源社会保障部与市场监管总局、国家统计局联合向社会发布了16个新职业,这是自2015年版《中华人民共和国职业分类大典》颁布以来发布的第二批新职业。

其中包括智能制造工程技术人员、工业互联网工程技术人员、虚拟现实工程技术人员、连锁经营管理师、供应链管理师、网约配送员、人工智能训练师、电气电子产品环保检测员、全媒体运营师、健康照护师、呼吸治疗师、出生缺陷防控咨询师、康复辅助技术咨询师、无人机装调检修工、铁路综合维修工和装配式建筑施工员等。

其中,虚拟现实工程技术人员的职业定义和主要工作任务规定如下:
定义:使用虚拟现实引擎及相关工具,进行虚拟现实产品的策划、设计、编码、测试、维护和服务的工程技术人员。
主要工作任务:
1.虚拟现实软件产品策划、场景设计、界面设计、模型制作、程序开发、系统测试;
2.设计、开发、集成、测试虚拟现实硬件系统;
3.研究、应用虚拟现实体系架构、技术和标准;
4.管理、监控、维护并保障虚拟现实产品的稳定和安全运行;
5.提供虚拟现实技术相关的技术咨询、技术培训和技术支持服务。

智能制造工程技术人员的职业定义和主要工作任务规定如下:
定义:从事智能制造相关技术的研究、开发,对智能制造装备、生产线进行设计、安装、调试、管控和应用的工程技术人员。
主要工作任务:
1.分析、研究、开发智能制造相关技术;
2.研究、设计、开发智能制造装备、生产线;
3.研究、开发、应用智能制造虚拟仿真技术;
4.设计、操作、应用智能检测系统;
5.设计、开发、应用智能生产管控系统;
6.安装、调试、部署智能制造装备、生产线;
7.操作、应用工业软件进行数字化设计与制造;
8.操作、编程、应用智能制造装备、生产线进行智能加工;
9.提供智能制造相关技术咨询和技术服务。

随着经济社会不断发展,新兴技术的应用和人们需求的提升,新产业、新业态、新模式不断涌现。虚拟现实与人工智能便是近年来备受关注的新行业。且在智能制造行业中,虚拟仿真技术也正在日益得到重视。“虚拟现实工程技术人员”和“智能制造工程技术人员”列入新职业名录,相信会对虚拟现实行业产生一定的促进作用。

下一步,在新职业发布和应用方面,有关部门将重点做好以下工作:一是完善新职业发布制度。及时向社会发布新职业,动态调整职业分类,健全职业分类体系。二是健全职业技能标准体系。对已有标准修订完善,加大对急需紧缺职业和新职业的标准开发力度。三是全面推动培养评价工作。适应市场需求,引导人才培养培训与新职业及相应标准开发紧密对接,提高劳动者的职业能力和就业能力,促进劳动者就业创业和职业发展。

其他14个新职业的职业定义和主要工作任务可查看人社部网站。

最初发布于2020年3月3日

用于训练、作战与维护 美军正寻求更先进的VR/AR头显设备

有专家表示,商业领域推动的技术提升有望带来更先进的虚拟和增强现实头显,以解决当今与美军使用的头显相关的许多问题。

虚拟现实(VR)使用户沉浸在一个由计算机生成的环境中,例如VR游戏。增强现实(AR)可以将数据或其他用数字化手段创建的图像叠加到现实世界的视场上,例如电视观众在观看足球或棒球比赛时看到的黄色或橙色的区框。

美军的官员们指出,通过提供使用数字化手段创建的敌军或其他在实际战斗中可能遇到的环境因素,VR和AR头显可以改善军队为对抗先进的对手进行的高科技战争的训练方式。

市场分析公司Frost&Sullivan的航空、国防和安全分析部门副总裁Michael Blades说:“商业领域也是所有游戏玩家都将使用这些设备的地方。他们将进行修改、更新和升级,以跟上该市场中的竞争对手的步伐,这将提升国防领域用户的能力。因此,国防领域将最终从商业市场的竞争中获胜,因为他们将获得更好的训练能力。”

美国空军的飞行员培训计划(Pilot Training Next)就是一个例子,该计划旨在提高飞行员培训的效率,并加快学员们的学习进度。虚拟现实头显的使用为学生们提供了更多磨练技能的机会。

美国空军教育与训练司令部(Air Force Education and Training Command,简称AETC)第24分部的运营官Robert Knapp中校说,在传统的飞行员训练结构中,学生都是从一些纸质出版物或带有培训文件的iPad开始。

“他们从那些培训手段起步,之后会使用一个极其昂贵的传统的模拟器,在那里他们可以进行全方位的飞行训练,”他说道。“那些昂贵的模拟器的问题在于,它们的数量太少了,而且学生进入模拟器的次数也很有限。”

现在,参加Pilot Training Next培训计划的学生可以坐在椅子上,戴上HTC Vive Pro等商业设备进行练习。

VR头显为美国空军的飞行员提供了更多接触模拟技术的机会。

“我们可以填补阅读书本或iPad上的内容与使用一些较便宜的市售设备进行高保真模拟训练之间的差距,”Knapp说。

但他指出,如今的头显有一些缺点。

“当你使用超高分辨率的头显时,视野会变窄,”他解释说。“要获得更大的视野,你需要使用较低分辨率的头显。”

“但是理想情况下,技术研发将会继续,我们将拥有超宽的视野、超高分辨率和非常高的帧率,因此不会出现抖动,”他补充说。“我们现在还没到这一步。”

但是,参考游戏行业技术的发展速度,美国空军可能会在不久的将来拥有它们所需的VR头显。

“我们对这些设备在接下来的几年中的发展趋势感到非常兴奋,因为我确实认为我们离极高保真度的头显并不遥远,到时候,任何人戴上头显都会沉浸在更像真实世界的虚拟环境中,”AETC的助理运营总监Maj.Eric Jones说。

CAE的防御和安全业务技术负责人Phil Perey说,新上市的头显比以前的系统具有更好的保真度。CAE将虚拟和增强现实头显整合到了它为军方客户(包括后勤机组人员)提供的培训解决方案中。

新的Varjo XR-1具有足够清晰的分辨率,用户可以清楚地读取仪表面板的信息,这是以前的头显所不具备的功能。他指出。

Perey预计VR和AR头显技术将继续发展。

“以后将有必要给这些头显做减重处理,”他说到。但是,这不是唯一的需求。

“他们可能会因为现有的视野而减小应用范围,但是当他们试图将视野扩展到更大时,他们的应用范围也将扩大,”他说道。“我们将看到设备重量的下降,可能会看到设备外形逐渐变大,以涵盖更大的水平视野。”

Perey说,他已经尝试了一些将于2020年上市的下一代头显,并且对它们的大体积和较轻的重量都印象深刻。他说,其中之一“几乎是羽毛般的轻盈”。

减轻系统重量可以减轻用户所承受的压力和不适感。

“有一些有前景的制造技术将使这些设备的重量减轻很多,”Perey说。“这将成为人们戴上这些设备,并持续佩戴数小时的重要因素。”

新的电池和更小的计算机也可以帮助减小头显的体积和重量。

微软公司服务美国陆军部门的主管Mark Valentine表示,重点是提升与头显相关的电池技术。他指出,材料科学的进步带来了更小的外形尺寸和更长的电池寿命。

“对电池电量的研究,以及提高电池效率是目前的关键技术之一,”他说道。

微软正在向美国陆军提供其HoloLens2增强现实头显的修改版,以用于集成视觉增强系统(Integrated Visual Augmentation System,简称IVAS)项目,该项目包括抬头显示器。美国陆军希望将这些设备用于训练目的,并向战场上的部队提供更好的态势感知和数据访问能力。

HoloLens系统具备透明的镜片,Valentine指出。

“我可以看到现实世界,同时还可以获取数据和信息,并以固定在环境中的3D全息图的形式显示出来,”他说道。“HoloLens本质上是戴在头上的Windows 10计算机,但并不是通过屏幕来显示的。现在,它是通往现实世界的混合现实传送门。”

Valentine拒绝具体讨论IVAS项目的细节,但他指出,微软认为HoloLens技术有多种潜在用途,包括用于战斗准备。

“现在,如果我是一名陆军士兵,并且要训练夺取一座建筑物,我会遇到一些敌方部队,会遇到一些突然出现的目标,诸如此类。然后我便冲入建筑物并用真正的武器射击,“他说。但是在混合现实世界中,可以用全息图来模拟敌军。

头显也可用于帮助设备维护人员。

“比如,我们可以看到工具箱,设备本身可以在智能边缘进行人工智能识别,打开工具箱,确定下一步维修所需的工具,然后就会为我突出显示这个工具,”他解释说。“我拿起工具,看着飞机,然后,维修清单中的下一步就会以全息图的形式显示出来。”

Valentine指出,与上一代HoloLens相比相比,HoloLens 2具有更小的外形尺寸和更大的视野。该公司还将计算部分从设备的正面移至后面的垫子上,以使佩戴者感到更舒适。

困扰VR和AR头显的另一个问题是用户的操作与模拟环境中相应的变化之间的延迟。美国国家训练与模拟协会(National Training and Simulation Association,简称NTSA)会长James Robb指出,这不仅降低了模拟训练的效率,而且还可能导致晕动症。NTSA是美国国防工业协会(National Defense Industrial Association)的附属机构。

然而,新兴的5G无线技术可能会改变这方面的游戏规则,Robb说。预计5G网络的速度将是4G的20倍。

“5G的延迟应该很小,”他说道。“每当你需要将模拟训练内容从服务器传输到头显时,传输过程中都会有所延迟。因此,只要你提高架构的效率,将无线架构合理地直接用于高速计算机上,就可以减少该问题。”

Blades说,这种技术是未来的潮流。

他说:“这项技术将朝着使一切无线化,并且眼镜本身具有大量计算能力的方向发展,”他说道。“我们已经有了5G。因此,我确定在任何头显与它们所连接的设备(无论是PC还是其他头显或其他设备)之间的延迟几乎可以忽略不计。”

五角大楼即将启动一项5G计划,其中包括将该技术整合到军事任务计划中,以及在训练领域的虚拟和真实环境中进行训练。

Robb还期望下一代头显在训练场景中能够具有更强的数据收集能力和更强的利用AI的能力。

“在这种情况下,机器将在确定你的工作方式并帮助提升表现方面进行很多工作。从帮助你提供决策选项,到提供信息,或者帮助你获得正确的可视化效果,它将无所不包,”他说道。“支持人员越聪明,用户从中获得的好处就越多。”

美国陆军作战能力发展司令部(Combat Capabilities Development Command)模拟和培训技术中心主任Matthew Clarke表示,他不太担心VR技术的改进。

他在最近一次与记者会面时说:“VR行业会采取行动,因为这与游戏行业有关,而游戏业务正在增长。”

他指出,增强现实是一个更大的问题。

“这是因为你正在尝试将真实世界与虚拟世界融合在一起,并且面临着巨大的挑战,”他解释说。“例如,如果你没有将这两个世界进行绝对的对齐,那么,当你在使用时会产生偏离,但我们不能有这种偏差。”

“因此,我在AR中要面临的具体挑战是对齐、跟踪、动态遮挡,”他补充道。

美国陆军希望有一个可以从AR过渡到VR的套件,因此军方可以“从中获得双重收益”,他指出。

同时,美国陆军还想要具备功能更强的被动型传感器的头显。

“美国陆军讨厌主动型传感器,因为敌人可以检测到它们,”他说道。“我们需要被动型传感器。如今,被动型传感器存在的问题是无法获得距离信息,无法获得范围能力,这是我们进行单元训练所需要的。”

Clarke还设想了一个AR技术看起来与今天完全不同的世界。

“我们将不用佩戴头显,而是佩戴增强现实隐形眼镜,”他说道。“对我来说,这就是未来,摆脱处理过程,将人体产生的能量转换为电源,你无需携带额外的电池。”

Blades表示,在未来,AR技术的进步可能不需要用户佩戴任何的头显设备。

“这些设备很多都是显示了某物的3D外观,”他指出。“如果这只是由某种视频产生的,你不需要眼镜就可以在面前显示一个3D物体呢?增强现实的有趣之处在于,其中一些应用程序,甚至可能不需要眼镜就能体验。”

最初发布于2020年1月8日

原文链接:https://www.nationaldefensemagazine.org/articles/2019/11/27/pentagon-eyeing-more-advanced-virtual-augmented-reality-headwear

美国空军希望尝试VR/AR 但受限于“中国制造”?

美国空军希望进军在商业市场蓬勃发展的的增强现实和虚拟现实技术领域,但他们遇到了一个问题:许多产品都有来自中国的部件,限制了它们被美军用于作战环境中的能力。

“我们可以使用不是中国制造的AR(增强现实)解决方案吗?我认为这对我们不利。”空军作战训练基础设施部门主管Gerard Ryan上周二在跨军种/行业培训、模拟和教育会议的小组讨论中说。

“我认为安全政策方面不会通过。虽然有些讽刺,但这是事实。如果我们要使用游戏引擎,我们要确保它不是我们不喜欢的国家开发的。”他补充道。

美国空军正在通过Pilot Training Next(简称PTN)计划接触虚拟现实技术,该计划旨在使飞行员更快、更经济地进行基本飞行员培训。虽然PTN计划目前被认为是一项实验,在限定的时间内只有少数飞行员参加,但美国空军已经表明,它可以通过HTC Vive虚拟现实头显和飞行模拟软件来补充在T-6教练机上进行的真实的飞行训练,来将现有训练时间缩短数月。

像飞行员基础训练这样非机密的环境是美国空军使用当前市场上增强显示和虚拟现实设备的理想场所。但是对于战斗机和轰炸机飞行员,或任何处理加密信息的操作员都将使用的设备,美国空军必须确保该设备的任何部件都不是中国制造的,或者没有任何其他国家的实体可以插入用于数据收集的技术。

美国空军已经开始与供应商谈论其担忧,Ryan说。他们希望这些公司可以检查其供应链,不再购买中国的零件。

“我已经与一些行业人士进行了交谈。一家较小的公司表示,他们找到了一套美国制造的头显。我当时的反应就是:“太好了,你是第一个这样告诉我的人。也是到目前为止唯一的一个。”

另一个挑战是在可能限制蓝牙和Wi-Fi使用的机密环境中连接商业设备。

“我已经与一家找到了解决方案的公司进行了交谈。他们有一台背包电脑。因此,它是直接连接到头显的,”Ryan说。“不幸的是,这样做可能更昂贵。要找到零件可能更具挑战性。”

美国空军空战司令部作战副主任David Nyikos说,当将增强现实或虚拟现实系统进入加密环境时,它们可能不够灵活,无法快速重新配置以适应不同的训练场景。

“AR/VR非常酷,”他在座谈会上说。“但是现在你需要它进一步发展,需要对其进行重新编程,以适应我们想要进行的任何任务演练。比如,或许今晚你就会和来自空军特种作战司令部(AFSOC)的人员一起训练,或者与一些挪威特种部队(SOF)人员一起训练,又或者与一些阿富汗人一起训练。但我们现在还没有这种系统。”

最初发布于2019年12月13日

原文链接:https://www.defensenews.com/digital-show-dailies/itsec/2019/12/06/wanted-virtual-reality-headsets-that-arent-made-in-china/

科学美国人:新的虚拟现实触感贴片可实现远距离“触摸”

添加触感可以使虚拟现实体验更真实,John A.Rogers的团队开发了轻巧灵活的触感贴片,可将触感直接传递给皮肤,兼具轻薄和节能特性。

一个女人坐在电脑前,与她的小儿子视频聊天,同时她轻轻地在另一个屏幕上轻拍了一个界面。作为响应,孩子背上的无线贴片以与母亲手指相匹配的模式振动,从而使他“感觉”到她的真实的触摸。

这种新的贴片是一种触觉设备,是一种可以远程传递触觉信号的技术。一个常见的例子是游戏控制器,当玩家的虚拟形象受到打击时会振动。一些研究人员认为,此类界面的更高级的、可穿戴的版本将成为使虚拟现实和增强现实体验更加真实的关键。“如果你了解一下当今的VR和AR,你会发现它主要由听觉和视觉通道组成感官体验的主要基础,”美国伊利诺伊州西北大学的物理化学家和材料科学家John A.Rogers说,他的团队帮助开发了新的触觉贴片。“但是我们认为,皮肤本身(触摸感)可以从质量上提升您通过VR可以实现的体验,而音频和视频则无法实现这种提升。”

科学家,技术公司和技术极客们已经试验了可穿戴的触觉设备,通常是配备振动电机的背心或手套。但是,其中很多都需要通过电线来连接沉重的电池组。由于它们的重量,大多数都必须宽松地附着在身体上,而不是牢固地粘附在皮肤上。因此,Rogers和他的同事们开发了仅几毫米厚的振动盘,该振动盘的电量消耗很小。这些执行器(用于使系统运动的设备的术语)需要的电量非常少,因此可以通过NFC近场通信(一种传递少量电量的无线方法)来供电,该方法通常用于开门的ID卡。

“机械执行器所需的电力通常是在移动应用中真正大量、可扩展地使用这些技术的限制因素,”德国萨尔大学的计算机科学家Jürgen Steimle说,他并没有参与新的贴片项目。研究人员“指出,单个执行器所需的功率不到2毫瓦,比以前的设备通常通常所需的功率少了一个数量级。…在我看来,这是一个逐步的改变,因为它允许我们将创造出新型的移动设备,这些设备可以使用电池高效地驱动,或者甚至可以像Rogers团队一样使用无线供电。”

产品看起来就像轻巧柔软的织物状材料补丁,可以像潜水衣一样弯曲和扭曲,并在穿着者的身体移动时保持与穿着者皮肤的直接接触。它由夹在保护性硅胶片之间的电子薄层组成。一层包含为设备供电的NFC技术。这可以激活另一层:执行器阵列,每个执行器都可以单独激活,并调整到不同的振动频率以传递更强或更弱的感觉。这堆比鼠标垫稍薄的电子设备最终形成了粘在皮肤上的贴片。该设备在最近出版的《自然》杂志上有描述。

Rogers指出,该技术的一些要素已经存在于其他设备中,但是他说,他的团队开发的的贴片以一种新的方式将它们结合在一起。“小型执行器、无线控制策略、轻薄,灵活,柔软的结构、与皮肤的柔软,温和的接触、无需电池的操作-这是我们过去从未报道过的一系列技术特性的集合,”他说。“当您将它们全部组合在一起时,最终会得到一个完全不同类型的平台,我认为它将成为一个真正强大的起点,最终您可能拥有具备1000个执行器的全身套装,它们都是同时受到控制,并具有人们实际要使用的尺寸。”

Steimle指出,其他团队已经开发出了更薄的执行器,但是使用了不同的刺激皮肤的方法。物理振动的模块“往往笨重,坚硬,且耗电量大,因为你需要实现机械运动,”他说。“有机械运动的配合,当然能出色地起作用。”

到目前为止,研究人员已经测试了各种形状和大小的贴片原型,以适应身体的各个部位。例如,圆形的贴片放在手背上,而X形的贴片放在背部。在一个演示中,一家人在视频聊天时使用该贴片体验了远程触摸。在另一例演示中,一名下肢截肢者用假肢抓住了一杯啤酒。每个指尖均配备有传感器,该传感器与上臂的贴片进行通信,从而提供有关其机械臂所握住的物体的触觉信息。最终,一个测试对象在玩战斗类游戏时佩戴了多个触觉贴片,因此游戏中化身的四肢所受到的虚拟打击可以传输到他的真实身体的相应部位。

尽管Rogers和他的同事们已经建立了一家新兴公司来潜在地将其设备商业化,但他们说,这并不是他们继续研究的重点。Rogers说,在不久的将来,他们希望可以使贴片更轻、更薄、更灵活。他们还在试验其灵敏度:由于可以调节执行器,使其在皮肤或多或少可以感知到的频率下振动,因此从理论上讲它们可以传递更强或更弱的触感(尽管这将需要更精密的系统来输入信号,可以区分轻柔的抚摸和较粗暴的推动)。Rogers认为,未来版本的触觉贴片可能会产生更多类型的感觉。除了在皮肤上垂直的接触外,它还可以传递缠绕运动或温度变化。

“我认为这项技术的应用空间十分广泛,而且很明显,我们需要这种类型的触觉输出,”Steimle说。他指出,最常见的商用触觉设备是智能手机,它只有两种模式:振动或不振动。“当然,这不是很有说服力,这实际上并没有为我们人类以及我们如何触摸,如何感觉,如何感知周围的世界起到什么帮助,”他说道。“任何有助于我们改善触觉通道、触觉通道的表达能力的东西,都将有助于我们将来实现更高级的计算接口。”

最初发布于2019年11月25日

原文链接:https://www.scientificamerican.com/article/new-virtual-reality-interface-enables-touch-across-long-distances/

战斗机飞行员培训新方案:增强现实模拟假想敌战机

在空战环境中训练顶级飞行员时,通常需要有飞行员驾驶作为假想敌的战斗机。而在训练中扮演敌方非常昂贵且危险。服役于英国皇家空军(RAF)的Daniel Robinson,同时也是Red 6 Aerospace公司的联合创始人兼CEO,开发了一个增强现实平台,名为机载战术增强现实系统(Airborne Tactical Augmented Reality System,简称A-TARS)。它可以为飞行员创建虚拟的对手,例如中国的J-20,用于飞行员的空中对抗训练。

Robinson说:“至关重要的是,我们的竞争对手的创新步伐是如此之快,以至于我们无法准确模拟在任何即将到来的冲突中可能被要求对抗的威胁类型。”

Robinson是第一位与美国空军一起驾驶F-22战斗机的非美国飞行员,他亲眼目睹了所谓的红军对手的需求。“简单来说,战斗机飞行员每次升空训练时,他们都需要飞机和飞行员进行对抗训练,”Robinson在最近的一次采访中说。“如何提供这些对手是一个明确的痛点,不仅对于美国空军,而且对于所有军种和盟军而言都是如此。仅就美国空军而言,这是一个每年要花费数十亿美元的问题,并且由于长期缺乏前线飞行员和机队老化而无法模拟最新的威胁,解决这一问题变得越来越困难。”

通过已获得专利的显示技术,A-TARS系统将虚拟飞机放入飞行员的头盔显示器中。当前的显示系统具有105度的视场角,并集成到了标准的HDU 55头盔系统中。它也能够在日光环境下工作。他说:“我们能够将虚拟飞机带入现实世界,带入飞行员的视线中。”并且,A-TARS还可以用于任何级别的空战飞行员培训。

Robinson受到了Red 6首席产品官Glenn Synder开发的技术的启发。该虚拟现实系统使在英国赛道上的一名赛车手能够同时与身在美国的赛车手竞赛。Robinson说:“两位赛车手都佩戴了基于虚拟现实的头盔,但是却在真实的赛道上驾驶着真正的汽车。”

“他们在这个虚拟世界中同时相遇,并在两条真实的赛道上进行比赛,即使中间隔着大西洋,”他解释说:“这是VR(虚拟现实)领域令人难以置信的首创,是非常重要的技术突破。一看到它,我就开始联想,并问他们:’我可以用飞机替换这些汽车吗?’他们说是的,尽管很复杂,但很有可能。”

Robinson认识到,虚拟现实或真实世界的完全数字化对于进行空中训练的飞行员来说是不可行的。但是增强现实,或将某些虚拟元素叠加到现实世界上,提供了新的思路。他说,Red 6必须解决在户外和高度动态化的环境中使用增强现实的问题,例如每小时飞行数百英里并执行快速机动的喷气式飞机。

Red 6开始了其研发过程,并在2018年Starburst Aerospace加速器的年度East Coast Selection Committee活动中推出了该平台。该公司在洛杉矶的Moonshots Capital领投的种子轮融资中筹集了255万美元,并获得了Austin’s Capital Factory、IronGate Capital Advisors以及其他投资机构的支持。

美国空军注意到了这家公司,特别是当Robinson向空军创新部门AFWERX和空军研究实验室(Air Force Research Laboratory,简称AFRL)提出他的想法时。在今年2月,Red 6 Aerospace对该服务进行了可行性演示,展示了在静态环境中(在停放在机库中的一架试验飞机的驾驶舱中)的增强现实平台的情况。

“我们有试飞学校、AFRL、空战司令部,空军教育训练司令部的代表,”Robinson说:“他们都来看我们的系统。他们能够坐在驾驶舱中,戴上我们设计的头盔,通过增强现实系统,我们能够看到周围的飞机,同时仍然可以看到真实世界。”

在地面演示之后,空军与Red 6公司签署了小型企业创新研究(SBIR)第一阶段合同。本月早些时候,Red 6获得了150万美元的SBIR第二阶段合同。该公司将在接下来的几周内为利益相关者进行空中演示。

“上周,我们在真实飞机和增强现实中进行了世界上首次增强现实空中加油测试,”Robinson说道。“我们飞到了模拟的空中加油机附近,并在旁边加入了模拟的F-22战斗机。我们能够实时围绕加油机进行机动,接近加油机,甚至感受到了加油杆插入我们的飞机。这对我们来说是一个非常激动人心的新世界。我们测试了空中加油训练,但它可以是任何东西,包括一架正在机动的J-20。”

Robinson表示,这家总部位于圣莫尼卡的公司预计将在2020年第一季度筹集A轮资金,以继续开发该技术。

最初发布于2019年11月21日

原文链接: https://www.afcea.org/content/flying-augmented-reality

Adobe Max大会见闻:增强现实将成为创作者的新机遇

Adobe的年度Max会议是一年一度的最大规模的创意专业人士聚会,这些人的艺术、摄影和图形设计技能可以改善我们每天看到的图像和阅读的材料。在本周的活动中,Adobe正在采取一系列的措施,将增强现实作为创作者的新机遇。尽管该技术只正在洛杉矶会议中心展览区的一个安静角落里,努力寻求人们的关注。

在活动开始之前,Adobe表示其最大的AR新闻将与Aero有关,这是一个iPad应用程序,旨在简化新手创作者开发AR体验的过程。活动中的展台引导游客使用该应用程序识别真实空间的表面,并以正确的尺寸和正确的位置放置3D模型,将其与环境无缝融合,以便可以在iPad上从多个角度查看它,就像它是真实的一样。

在Aero的主要演示中,用户看到了最基本的AR体验类型,多年来,我们已经以手持形式看到了AR体验,这在很大程度上要归功于Pokemon Go之类的游戏。尽管Adobe的目的是向创作者展示他们如何将自己开发的3D资产带到混合现实空间中,并用于营销目的。有人认为,Aero将帮助品牌创建更多应用程序,比如今年早些时候测试的Jack Daniel的AR Experience,它使用动画3D资产和画外音将这家公司的任何威士忌酒瓶变成了弹出式故事书。

幸运的是,Adobe并没有坚持完全枯燥的演示。尽管您必须在洛杉矶会议中心展览区的最深处寻找它,但该公司还利用Aero进行了一次名为Terminator Max Experience的演示,它利用了刚发行的电影Terminator:Dark Fate的资产。与会者将获得包含一系列提示的列表,然后跟随它们来体验AR场景,在这个场景中,虚拟终结者会从满是瓦砾的场景中的能量泡泡中出现。

作为驱动该体验的相机和3D合成引擎,安装了Aero的iPad将数字资产与场景中的实际人物和物体融合在一起,从而实现了这样的场景。尽管展位上没有任何内容说明最终用户将如何以这种方式使用Aero或Aero创建的应用程序,但这意味着创作者们可以为用户创建电影级的3D体验,然后将其部署到特定位置,或提供可下载的应用程序,以用于营销目的。

Adobe将一台计算机连接到运行Aero的iPad上,以录制Terminator Max Experience视频,并承诺将其通过电子邮件发送给与会者。

在展区中专门展示AR的区域实际上是3D和AR体验的共享空间,大多数演示都专注于各种早已亮相且普遍应用的3D内容,而优质的AR只是轻描淡写。例如,英伟达(Nvidia)展示了在笔记本电脑上运行的RTX Studio图形技术,说明现在即使是便携式计算机也可以在3D场景中光线追踪逼真的反射和阴影。

RTX-caliber光线追踪何时才会进入移动设备?由于渲染技术的高速处理要求,Nvidia表示,当前唯一可行的解决方案是使用GeForce Now将完全由服务器渲染的场景流式传输到移动设备的屏幕,或使用移动设备来渲染场景,同时服务器将渲染的反射流进行合成。但由于存在延迟,可能难以实时同步。

HP在展区里炫耀着Project Captis,该项目搭建于Z by HP阵列,是为创意专业人士设计的使用测光法将真实的纹理和对象转换成数字内容的预生产3D材料扫描工具。这套硬件和软件的组合目前尚未公布定价,通过将多个4K摄像机放置在一个大盒子中,可以从多个角度捕获物体的高精度细节。目前仍是创作者进行测试的试点。

Project Captis产生的扫描结果可用于将一种材料的纹理应用于另一种材料,例如制作一双具有皮革外观的3D打印太阳镜,或一双具有编织的复杂网眼纹理的运动鞋。像3D和AR展区中的许多其他演示一样,这种扫描技术具有明显的潜力,可以为未来的AR应用创建超级逼真的资产。

Max大会上发布的最有趣的产品之一(但不属于3D和AR领域)是Adobe Photoshop Camera,现已以Beta形式提供给少数用户。Adobe表示,该摄影应用程序将完全免费提供给iOS和Android用户,而无需Creative Cloud订阅或应用程序内购买。用户将能够从大量艺术家开发的Photoshop滤镜中进行选择,这些滤镜可实时应用于相机输入,并在拍摄时添加静态或动画图像。

Photoshop Camera令人印象深刻的是滤镜是如何工作的。Adobe使用基于云的Sensei AI实时扫描相机输入的某些类型的内容(例如天空,脸部或食物),然后选择性地将静止或动画滤镜应用于AI识别的对象。比如在上面的图像中,AI可以识别风景图像,将其从白天转换为夜晚(带有移动的月亮)或添加日式的朝阳覆盖层。另一个示例显示了该应用程序通过适当的调整色温和对比度,自动调整食物照片。

我并不认为我们需要另一个照片滤镜应用程序,或者Photoshop Camera将以某种方式取代Android或iOS设备内建的相机应用程序。但是,正如您看到的技术一样,使用人工智能和机器学习来实时增强摄影技术显然具有一定的吸引力。其中包含的识别技术是强大的,在正确的艺术家手中,结果可能是强大的。

Max大会明显缺少任何可穿戴的AR硬件,至少当我环顾四周时,我找不到它。尽管展厅中散布了一些VR头显,但几乎所有显示的东西都在计算机或平板电脑的屏幕上进行了展示,这表明Adobe和相关供应商仍在等待可用的AR头显。因此,3D和AR展区严格来说只是一个是2D展区。

Adobe Max是一个相当大型的展览,毫无疑问,AR既不是活动的主要的重点,也不是次要的焦点,Aero和相关内容在主题演讲和展区中只占很小的一部分。也就是说,很明显,创意人员已开始为不远的未来做准备,很快,混合现实将成为日常生活的重要组成部分,包括消费级应用程序和专业应用程序。这个阶段的挑战是要让AR从小型演示和营销过程中的小把戏变成消费者实际想要使用的实用的应用程序。我推测这将在2020年开始发生,这可能是由于价格合理的硬件和更多的开发者对其感兴趣共同推动的。

最初发布于2019年11月8日

原文链接:https://venturebeat.com/2019/11/05/at-adobe-max-augmented-reality-is-fighting-its-way-out-of-the-corner/

苹果专利:各种头显内CGR环境中虚拟对象的有形可视化

近日,美国专利商标局发布了Apple的一项专利申请,涉及计算机生成的现实(CGR)环境,更具体地说,涉及一种用于在头显内的CGR环境中提供虚拟对象的有形可视化的技术。Apple区分了将来的Apple头显(或各种头显)可能支持的CGR环境,例如VR(虚拟现实),AR(增强现实),MR(混合现实)和AV(增强虚拟)。

苹果首先指出,计算机可以将计算机生成的图像完全投影或部分叠加在用户的视野中,以提供用户可以体验的CGR环境。CGR环境可以基于不同类型的现实。

头显可以选择检测用户的真实运动并进行投影,并在CGR环境的一系列视觉图像或视频中模拟这些运动。

通过在CGR环境中投影或模拟的这些运动,用户可以与CGR环境中的对象进行交互。

Apple的专利涵盖了在CGR环境中提供虚拟对象有形可视化的技术,其中CGR环境为用户提供了与CGR环境进行交互的逼真的体验。

因为这种体验是现实和身临其境的,所以用户可以轻松地将CGR环境中的虚拟(因此是无形的)对象混淆为存在于CGR环境之外的真实的有形对象。

因此,该专利所描述的技术通过使用户能够快速且容易地在视觉上识别CGR环境内的对象是非有形的虚拟对象还是对应于真实环境中的真实物体(因此是有形物体),在用户与CGR环境交互时,增强了用户的便利性并进一步为用户提供了增强的安全性。

该技术不仅限于为特定类型的CGR环境提供有形的可视化,而是可以在任何类型的CGR环境中实现。这些环境包括基于混合现实的CGR环境和基于虚拟现实的CGR环境。

虚拟现实(VR)环境(或虚拟环境)是指被设计为完全基于计算机生成的一种或多种感官输入的模拟环境。VR环境包括人可以感测和/或交互的多个虚拟对象。例如,计算机生成的树木图像,建筑物和代表人的化身,就是虚拟对象的示例。一个人可以通过模拟人在计算机生成的环境中的存在和/或通过模拟人在计算机生成的环境中的身体运动的子集来感知和/或与VR环境中的虚拟对象进行交互。

混合现实(MR)环境是指模拟环境,旨在将来自物理环境的感官输入并入其中。在虚拟连续性上,混合现实环境介于完全真实的物理环境和虚拟现实环境之间。

混合现实的示例包括增强现实和增强虚拟。

增强现实(AR)环境是指一种模拟环境,其中一个或多个虚拟对象叠加在物理环境中。例如,用于呈现AR环境的电子系统可以具有透明或半透明的显示器,通过该显示器,人可以直接查看物理环境。该系统可以被配置为在透明或半透明的显示器上呈现虚拟对象,使得使用该系统的人感知叠加在物理环境上的虚拟对象。

增强虚拟(AV)环境是指一种模拟环境,其中虚拟或计算机生成的环境合并了来自物理环境的一个或多个感官输入。感觉输入可以是物理环境的一个或多个特征的表示。例如,一个AV园区可能有虚拟的树木和虚拟的建筑物,但是其中的人有着真实人物拍摄的照片中的人脸。另一个示例是,虚拟物体可以采用由一个或多个成像传感器成像的物理物品的形状或颜色。或者还可以这样示例,虚拟物体可以采用与太阳在物理环境中的位置一致的阴影。

有许多不同类型的电子系统,使人们能够感知和/或与各种CGR环境进行交互。包括头戴式系统,基于投影的系统,平视显示器(HUD),具有集成显示功能的车辆挡风玻璃,具有集成显示功能的窗户,放置在人眼上的镜片状的显示器(类似于隐形眼镜)。头戴式系统可以具有一个或多个扬声器和集成的不透明显示器。

头戴式系统可以具有透明或半透明的显示器,而不是不透明的显示器。透明或半透明的显示器可以具备一种介质,代表图像的光通过该介质被引导到人的眼睛。

显示器可以利用数字光投射、OLED、LED、uLED、硅基液晶、激光扫描光源或这些技术的任意组合。该介质可以是光波导、全息介质、光组合器、光反射器或其任意组合。在一个示例中,透明或半透明显示器可以被配置为选择性地变得不透明。

基于投影的系统可以采用视网膜投影技术,该技术将图形图像投影到人的视网膜上。投影系统还可以被配置为将虚拟对象投影到物理环境中,例如,显示为全息图或显示在物理表面上。

在一些示例中,系统#100包括设备100a。设备100a包括各种组件,例如处理器102,RF电路104,存储器106,图像传感器108,方向传感器110,麦克风112,位置传感器(多个)。一个或多个116,扬声器118,显示器120和触敏表面122。这些组件可选地在设备100a的通信总线150上通信。

在一些示例中,系统#100的元件在基站设备(例如,诸如远程服务器,移动设备或膝上型计算机的计算设备)中实现,并且系统#100的其他元件在头戴式设备中实现。显示(HMD)设备供用户佩戴,其中HMD设备与基站设备通信。

在一些示例中,系统#100包括两个(或多个)通信中的设备,例如通过有线连接或无线连接(HMD +MacBook或iPhone或iPad)进行通信。

美国专利局今天发布的苹果专利申请已于2019年第二季度提交,其工作可追溯至2018年第二季度。考虑到这是专利申请,因此目前尚不知道这种产品上市的时间。

最初发布于2019年11月4日

原文链接:https://www.patentlyapple.com/patently-apple/2019/11/apple-patent-describes-tangibility-visualization-of-virtual-objects-within-various-headset-environments.html

使命已完成 基于手机的VR已成为过去

移动虚拟现实头显帮助数以百万计的人体验了VR,但从近日开始,它们似乎已经完全成为过去。

Oculus首席技术官John Carmack上个月对手机驱动的Gear VR移动头显表示了“悼念”,他说属于这种形态的头显的时代已经过去了。并且Google刚刚透露,除了从最新的Pixel 4系列手机中取消对Daydream的支持之外,还将停止使用Daydream View移动头显。该应用程序仍可在旧手机上运行,但Google现在已经放弃了这个曾经被描绘成Android不可或缺的一部分的平台。

Daydream是在2016年亮相的,它是Google推出的更为简单的由手机驱动的Cardboard头显的后续产品。当时,Google预计在未来两年内,与Daydream兼容的手机将拥有“数亿用户”。但是,在2019年,没有哪一款新手机支持它。一位Google发言人表示,“它没有像我们希望的那样被广泛的消费者或开发人员所采用,而且随着时间的推移,我们已经看到Daydream View头显的使用量正在减少。”

出现这种现象并不奇怪。Cardboard提供了简单且可用的VR体验。《纽约时报》免费向其订阅用户提供了100万个头显。但这是一种超级便宜的一次性产品,旨在提供短暂的体验。但想要成为消费类头显则非常困难。“我们看到了智能手机VR的巨大潜力-能够随处使用随身携带的智能手机来提供身临其境的移动体验。但是随着时间的流逝,我们注意到一些明显的局限性限制了智能手机VR成为可行的长期解决方案。”

Google表示,人们不喜欢失去使用手机的能力,因为Daydream实际上需要进入独立的应用生态系统才能使用。这不是基于电话的VR的唯一问题。Carmack指出,身临其境的3D应用程序消耗了宝贵的电池,尤其是Gear VR令人讨厌的设置。“我认为最大的问题只是进入体验时的一些小麻烦,”Carmack说。

从数据上看,Gear VR受到了极大欢迎。三星在销售该设备的第一年就售出了至少500万台这种由Oculus提供技术支持的设备,而像Oculus Rift这样的高端头显则只卖出了数十万台。但是Carmack表示,它无法保留用户,因为“如果您必须将手机从手机壳中取出并放入头显中,你可能只会使用它两次。”三星尚未正式宣布停止Gear VR的生产。但是,这款头显似乎无法(至少在美国)通过三星商店或以第一方产品的形式从亚马逊和百思买等零售商处获得。

Daydream面临的问题虽然不像Gear VR这样繁琐,但是它还有另一个大问题:手机制造商不支持它。Google最初宣布了几个合作伙伴,包括三星,LG和HTC。不过,大多数厂商在添加对Daydream的支持方面都落后了,部分原因是许多手机的显示屏不符合Daydream的标准。

基于手机的VR头显也无法提供与Oculus Rift,HTC Vive或PlayStation VR相同的强烈物理体验。随着开发人员开始深入VR内容的开发,这种差距变得越来越明显。移动VR头显非常适合播放虚拟现实视频,但是VR视频很难制作,也很难变现,像Jaunt和Inside之类的早期VR电影公司正逐渐将注意力转向增强现实。Google曾收购了一些著名的VR应用程序,包括最受欢迎的绘画工具Tilt Brush,但大多数需要高端头显才能运行。

同时,独立式头显变得更便宜,功能更全面,增加了手持控制器和inside-out的跟踪功能。Oculus用Oculus Go移动头显填补了原本属于Gear VR的空间,现在它正在吸引用户使用Oculus Quest,这是一种更贵一些但功能也更强大的设备。当您可以以200美元的价格购买独立的Oculus Go或以400美元的价格购买Quest时,Gear VR这种100美元的塑料外壳似乎并不划算。

Google并未真正尝试赶上独立VR的潮流。它最初与HTC和Lenovo合作开发了两套独立的Daydream头显,但HTC 退出了交易,联想的Mirage Solo实际上只是一个开发工具包。在今年的I/O会议之前,Google虚拟现实和增强现实负责人Clay Bavor表示,该团队正在进行VR硬件的“深度研发”,“构建我们需要的Lego积木,以便将它们拼凑在一起,并制作出一些真正引人入胜的体验。”Google发言人还强调了该公司在移动搜索和地图的AR功能方面的工作。

Google发言人Michael Marconi拒绝评论Google独立式Daydream头显的计划。“拥有Lenovo Mirage Solo的人没有改变。他们将继续使用头显及下载的应用程序,并可以从Google Play商店下载新的应用程序。”他说。如果Google确实回到了虚拟现实,那么独立头显(或通过无线网络连接到手机的头显,如果未来的技术可以做到这一点)似乎仍然是最明确的选择。

简单的移动头显实际上只是一个装有镜头的盒子,基本的VR应用也不难制作。因此,移动VR可能不会完全消失。Marconi确认Google仍在其商店中提供第一方Cardboard头显以及来自Homido和Mattel等第三方销售商的设备。但是,随着Google和三星放弃Daydream和Gear VR,基于手机的成熟VR平台的梦想似乎已经结束。

最初发布于2019年10月21日

原文链接:https://www.theverge.com/2019/10/16/20915791/google-daydream-samsung-oculus-gear-vr-mobile-vr-platforms-dead

华为轮值董事长郭平谈5G时代VR/AR产业的发展

10月19日,2019世界VR产业大会在江西省南昌市举行。华为轮值董事长郭平在大会上发表了《打造VR/AR 信息高速公路,支撑产业繁荣》的主题演讲。演讲主要内容如下:

郭平认为:VR/AR将成为5G时代的首批应用,与5G产业发展节奏高度匹配并相互促进。

随着VR/AR在沉浸显示、渲染处理、内容制作、网络传输、感知交互等五大相关技术领域的难点逐一被攻克,新的终端产品不断推陈出新,用户体验已得到质的提升,进入体验“舒适阶段”,不断吸引用户参与。

5G与VR的产业节奏高度匹配,一方面VR的不断发展对移动网络将提出更高的需求,另一方面,5G的大带宽低时延特性使得VR在移动场景下的应用,比如在线游戏和全景视频直播等成为可能。随着5G商业部署,电信运营商即将启动5G规模化建设,两者将相互促进,推动VR走出产业低谷,2019年将是产业的复兴期的元年。

郭平认为:VR/AR是人机交互方式的革命,是算力、联接和显示的革命性升级。

在刚刚过去的国庆70周年庆典,观众第一次可以通过VR来看阅兵,体验过去不能体验的独特视角。VR与教育结合,不光可提升学生的学习兴趣,也能在一些过去难以实际演练或互动的工程培训领域发挥作用。未来观赏型的内容大都可以不必亲临现场,互动型的体验也将逐步被VR/AR所替代。

相比VR,AR是一门更大的生意。经过几年的“用户培育”,AR不仅在休闲应用取得进展,更是进入了工业实践的阶段。华为自身也进行了有效的探索,把二十多项AR应用纳入自身的生产制造流程,华为工程师们将AR的价值总结为三个可视“数据可视、知识可视、经验可视”。

VR/AR是下一代体验革命和计算平台、是数字世界和物理世界融合的进阶,是算力、联接和显示的革命性升级。VR/AR将开启沉浸式体验时代,突破平面视觉极限体验,进入三维空间体验阶段并引入包括触觉等更多的感官维度。VR/AR不仅仅是显示的变革,而是人机交互方式的革命。VR/AR占据人的双眼,增强视听感官,可能是人类使用的最后一块硬屏。

郭平还介绍了华为的定位:打造好VR/AR的高速公路,从终端引擎,管道,到云端计算,支撑整体产业的繁荣。

终端方面,针对目前VR眼镜较重、易眩晕的特点,华为推出了更轻、更薄,更酷的VR终端——华为VR Glass,以推动更多消费者喜爱VR,并解放我们的双手。

网络方面,针对VR/AR对网络提出的网速要快、不能丢数据的新要求,华为在5G和千兆网络领域持续创新,构建全光承载方案来做保障。对于目前较为突出的家庭网络问题,华为新推出的光猫能够自动识别用户正在使用VR业务,有针对性地提供千兆带宽保障,给用户带来更好的VR体验。

云端计算方面,华为推出的基于Arm架构的鲲鹏/昇腾计算平台,能够避免VR软件向云端移植带来的40%的性能损失,成为众多VR/AR应用端边云协同计算的有力支撑。

郭平向产业发出呼吁:合作共赢,加速VR/AR商业成功。

VR/AR的发展还需要产业整体发力,通过标准和联盟的工作,构建总体技术架构和接口规范,降低开发、互联成本,解决行业共性问题。为此,华为设置了iLab、XLabs等实验室,发布VR OpenLab产业合作计划,来加速产业发展。

针对目前困扰产业的VR内容匮乏问题,华为结合对VR用户的理解和实际部署经验,提出VR “三层框架”以扩大内容供给。针对大量游戏、应用开发者需要便捷工具的需求,华为以Cloud VR的方式为开发者提供“一次开发、任意接入”的机会。

最后,郭平表示,面向未来,华为继续致力于信息高速公路的建设,希望和伙伴们一起努力,把VR/AR打造成下一个智能手机产业。

华为发布超轻薄VR Glass 搭配NOLO套件实现6DOF交互体验

在9月26日下午的2019华为年度旗舰新品发布盛典期间,除了Mate30系列手机之外,华为还正式发布了其在VR领域的最新硬件产品,HUAWEI VR Glass。

此次亮相的HUAWEI VR Glass与两年前推出的VR2类似,本身并不具备运算单元,需连接手机或电脑方可使用。其配备了3DOF的手柄,并且,也可以配合NOLO CV1 Air交互套件实现6DOF的交互。

硬件方面,HUAWEI VR Glass的产品外观已经十分接近普通的眼镜,采用了可折叠风镜造型。其重量仅166克(佩戴部分),机身厚度仅26.6mm,采用左右两块独立的Fast LCD显示屏,3200*1600分辨率,PPI高达1058,并具备创新的动态渲染技术,改善画面拖影,降低。并配备了双半开放扬声器。

内容方面,HUAWEI VR Glass引入华为VR视频平台,同时还聚集了10家VR视频平台的内容。此外,HUAWEI VR Glass还支持VR手机投屏,打破了VR和手机的界限。根据连接设备的不同,支持手机模式和电脑模式。

在发布会现场体验区,华为还与合作伙伴联合展示了结合NOLO CV1 Air交互套件和PPGUN体感枪的VR体验内容。

NOLO CV1 Air是NOLO VR基于HUAWEI VR Glass深度定制的6DoF VR交互套件,为HUAWEI VR Glass提供 头手6DoF定位交互支持。该套件由定位基站、头盔定位器和手柄三部分组成,已获得华为DFH认证。

该套件轻巧便携,性能强劲,定位精度达到±2mm、定位延迟低于20ms;得益于本次深度定制,用户只需连接NOLO CV1 Air,戴上HUAWEI VR Glass即可进入沉浸式VR游戏世界,不仅可以畅玩PC 端大型VR游戏,也可浸享移动端NOLO HOME平台的6DoF VR游戏。

售价方面,HUAWEI VR Glass售价2999元,将于12月开售。

HUAWEI VR Glass是华为推出的第三款VR硬件产品,在此之前,华为曾推出支持Google Daydream标准的手机VR眼镜、主打巨幕观影体验的HUAWEI VR 2。

但传闻中的华为AR眼镜仍然没有消息。早在去年11月CNBC对华为消费者业务CEO余承东的专访期间,余承东便透露华为正在开发一款AR智能眼镜。

之后在今年4月,华为向EUIPO(欧盟知识产权局)及英国IPO(知识产权局)申请了两个商标,名称分别是“HUAWEI AR Glass”及“HUAWEI VR Glass”。