写给像我一样的Mac新手:用MacBook Pro办公这半年

从高中时频繁光顾网吧到去年,我一直用的Windows系统的电脑,用了15年。这期间陆续入手了多台笔记本、台式机,还在电脑城里学了一年多的维修。硬件和Windows系统的常见问题基本都遇到过。后来由于工作需要,换掉了沉重的游戏本儿,入手了我的第一台MacBook Pro。

目前使用的这台2019款MacBook Pro 13英寸,是官网512GB版本,未定制,去年10月从某东购入。到现在,作为我的主力办公设备已经有半年左右时间。日常工作使用最频繁的是微信和Word、Excel、PPT三件套,偶尔PS,基本没有考验设备性能的用途。

这半年里遇到了各种奇奇怪怪的问题。又找回了当年拥有第一台笔记本后的状态:不停地发现新问题,尝试各种方法来解决问题。当然也没少找售后。
所以这篇文章也是对入手MacBook Pro之后遇到的问题及解决方法的总结。写给像我一样的Mac新手。

Part 1

先来说说这段时间发现的一些问题,这些让人头疼的小毛病(当然其中有些根本不是硬件或系统问题,只是和Windows不一样而已)甚至一度让我觉得这东西并没有Windows系统的电脑好用。前后陆续求助了多次官方客服,也预约过天才吧,后来终于找到了解决办法。

第一个问题,是开盖之后不能正常唤醒,鼠标指针变成转动的菊花。相信很多人在将系统更新至10.15 Catalina之后,就一直遇到这种问题。同时,还有一系列的“并发症”。

比如在重启进入系统之后,无线网络连接突然出问题,Mac版微信可以正常使用,但浏览器打不开网页;比如风扇狂转像是要起飞,电量狂掉,一个小时能耗完;比如机身温度飙升,尤其是Touch Bar附近温度极高。

我尝试了网上可以找到的各种方法,比如重置SMC,重置NVRAM,但都是在短时间内有效,几天之后问题又重复出现。后来在官方客服的指导下,终于有了真正管用的解决办法:

打开“活动监视器”,查看占用CPU最高的进程,如果其中有“TextInputMenuAgent”、“distnoted”和“loginwindow”,并且占用CPU超高,就选中并强制退出这三个进程。风扇狂转和电量狂掉的情况立刻就会停止。

之后下载并安装搜狗输入法(或者其他第三方输入法),在系统偏好设置-键盘-输入法中删除系统自带输入法,只留下搜狗输入法和“ABC”,并重启笔记本,即可解决上述这些问题。

在解决这一问题之后,终于实现了传说中的MacBook Pro的使用体验,开盖自动唤醒,合盖自动休眠,不用关机,也不用担心机器发烫、电量猛降。

第二个问题,在合盖状态下笔记本会被自动唤醒,或者在放一段时间不用之后,打开发现电量下降明显。

这可能是笔记本被使用蓝牙的设备或使用WiFi的App唤醒了,解决办法如下:

系统偏好设置-蓝牙-高级,取消“允许蓝牙设备唤醒这台电脑”。有段时间在用蓝牙鼠标,下班带着笔记本回家发现路上笔记本一直是热的,到家之后发现电量掉了不少。后来才注意到蓝牙鼠标没有关。

系统偏好设置-节能-电源适配器,取消“唤醒以供WiFi网络访问”。

调整这两项设置之后,就不会再出现合盖状态下被自动唤醒的问题了。

第三个问题,屏幕色温自动变化,忽冷忽热。

尤其是像我这样经常需要面对Word文档的用户来说,这一问题十分明显。解决办法也很简单,在系统偏好设置-显示器中,关闭“原彩显示”即可。

原彩显示可以自动调整显示屏,以在不同环境光线条件下保持色彩显示一致。可能对于经常需要处理图片和视频的用户来说是一个有用的功能。但对于我这种长时间看各类文档的用户来说就有点别扭了,可能是由于我的工位附近光线变化比较频繁?

Part 2

接下来说说优点,轻便易携带就不说了,这里主要说一说macOS相比Windows系统的优点。

首先,MacBook Pro的触控板做这么大是有原因的,这块超大的触控板的确很好用,让你从此告别鼠标。各种多点触控手势能搞定几乎所有的操作需求,除非需要精准度更高的操作。具体有哪些多点触控手势,大家可以在苹果官网查询到。

第二个优点是MacBook Pro与其他苹果设备的高效协同,比如用“隔空投送”和iPhone互传文件,比如快速连接并使用AirPods Pro耳机,比如能实现跨设备任务接续的“接力”功能。

而在将macOS更新到10.15 Catalina之后,还可以使用“随航”功能联动iPad。只要你的笔记本和iPad使用同一个Apple ID登陆,并都开启WiFi、蓝牙和接力功能,就可以把iPad用作笔记本的第二个显示屏,可以扩展或“复制”笔记本的桌面。或者把iPad用作笔记本的输入设备,在笔记本上的App中使用Apple Pencil绘图。相当于把iPad变成了显示器或数位板。相信设计人员会很喜欢这个功能。

当然了,并不是所有的iPad都支持随航功能,根据苹果官方网站介绍,iPad Pro所有机型、iPad(第6代)或更新机型、iPad Mini(第5代)、iPad Air(第3代)可以支持随航功能。

你会发现,通过这些设备之间的高效协同,苹果牢牢地把用户圈在这个生态圈里,用过之后就再也回不去了。

接下来是macOS的一些人性化的小功能点,比如可以便捷地实现全屏,让工作更专注;比如“访达”的分栏显示,让文件目录更直观;比如窗口拼贴,可以快速实现左右分屏;比如设置屏幕的四个“触发角”,鼠标指针指向屏幕角落就可以快速触发某个功能;这些小功能还在陆续探索中。

对了,还有一个不容忽视的优点,MacBook Pro的电池续航能力的确很强,我日常需要处理大量文字内容,偶尔简单地处理图片,很少进行其他工作任务。在不连接电源的情况下使用七八个钟头之后,还能有三分之一左右的电量。这样的续航能力真是惊到我了。

如果你经常关注笔记本行业的新动态就会发现,MacBook Pro和macOS的这些优势,正在被各大厂商效仿。高分辨率和高色域的屏幕,大容量的电池,类似的外观设计,都陆续出现在了联想、华为等厂商的产品身上。虽然生态优势不是那么容易就能“学”来的,但我还是希望能有更多厂商把这些优秀的特性用到自己产品身上,让更多用户都能享受更好的产品使用体验。

Part 3

在这部分,我来说一些在我日常办公场景下发现的MacBook Pro和macOS的缺点:

先说硬件方面,2019款MacBook Pro采用的是备受争议的蝶式键盘,打字时虽然手感还不错,但声音的确有点大,而且还总是担心会遇到故障。2019年底推出的16英寸MacBook Pro和2020年3月推出的MacBook Air都将键盘换回了剪刀式,看来苹果自己也意识到了这个问题。

然后是接口,我手上这款MacBook Pro只有四个雷雳3接口和一个耳机接口,没有传统的USB-A接口。使用起来的确是不方便,经常需要使用转接口。毕竟Type-C接口的U盘、移动硬盘等存储设备目前还未普及。雷雳3接口的优势暂时还没有发现,可能是我还没用到吧。这个以后再琢磨琢磨。

说完硬件说软件。在macOS下,办公软件的使用体验稍微差一些。尤其是Ofiice 365,还存在一些问题。比如在PPT中内嵌的文档无法打开,无法另存;比如PPT的页面无法右键快速切换幻灯片版式;比如经常会弹出不明所以的要求权限的窗口等等,希望这些小问题能随着后续更新得到解决。

然后,NTFS格式的移动硬盘在macOS下只能读取,不能写入。对这一问题我的解决办法是,将移动硬盘格式化为exFAT格式,就能Windows和macOS通吃了。但是涉及到格式化操作,需要先把其中的文件转移出来。个人建议转换为exFAT格式,一劳永逸。

还有,由于macOS系统的原因,无法使用公司的基于IE浏览器的考勤系统,我的工位还一直放着一台Windows笔记本用于填考勤,当然其他只能在IE浏览器中运行的网站也都无法正常使用了,比如一些银行的网银安全控件。

最后一点就是游戏比较少,虽然可以安装macOS版Steam,但游戏库中支持macOS的游戏并不多。很多大作是只有Windows版的。而且,还需要连接鼠标或手柄才能玩。由于MacBook Pro的硬件配置并不是多高,在玩游戏时还会遇到发热量过大,机身温度飙升的问题。所以这半年就没再玩过端游了,一心扑在了Switch上。

先到这里吧,最近在找各种好玩的、实用的App以及MacBook Pro配件,后面再给大家分享。

最初发布于2020年3月29日

腾讯游戏与华为成立联合创新实验室探索VR/AR等前沿技术

在3月27日的华为开发者大会(HDC.Cloud)期间,腾讯游戏与华为签署战略合作备忘录,共同宣布成立联合创新实验室。双方将充分利用华为鲲鹏处理器强大算力,联合构建GameMatrix移动云游戏平台,并在游戏引擎、前沿技术(AI/VR/AR)等游戏领域进行技术探索和创新实践。

据了解,GameMatrix前身为云游戏服务平台CMatrix。在去年8月,隶属腾讯互娱公共研发运营体系下的云游戏服务平台CMatrix宣布进行品牌升级,启用全新商标Tencent GameMatrix,将原先代表云服务的“C”替换成游戏的英文单词“Game”,意指更加聚焦游戏,赋能行业。

腾讯游戏与华为本次签约合作的主要内容包括:

移动云游戏:成立GameMatrix移动云游戏联合专项,借助华为领先的ARM服务器技术和网络技术,构建行业领先、高质量和低成本的移动云游戏解决方案。

游戏引擎:成立游戏引擎联合开发专项,针对游戏引擎特性、渲染和功耗进行优化,并对芯片新特性和调试工具联合开发,打造和提供下一代游戏体验。

前沿技术:基于AI/VR/AR等前沿技术合作,聚焦于游戏场景下的前沿技术应用和性能提升,打造更多的游戏新玩法。

华为表示,凭借鲲鹏920处理器的澎湃算力,华为将帮助腾讯构建超大规模云游戏渲染和编码集群,为玩家带来卓越顺畅的游戏体验。

根据腾讯之前的介绍,腾讯GameMatrix通过安卓容器的方式,在国内多个城市部署了移动云游戏集群,提供了即点即玩的云游戏服务。云游戏特点在于用户无需下载,游戏告别繁琐更新,同时不会占用用户手机的任何存储空间。

最初发布于2020年3月27日

华为MatePad Pro平板上手体验:影音娱乐轻度办公两不误

华为在去年11月推出了旗舰平板电脑MatePad Pro,配备了麒麟990旗舰芯片、2K屏幕,还能搭配键盘和手写笔,吸引了不少用户关注。笔者也在前段时间入手了一台。本篇文章就来来谈一谈入手MatePad Pro以来的使用感受。

建议大家,如果想要购买的话,先去线下店体验一下,毕竟每个人的使用需求和习惯都不一样。

首先,来说说外观设计

MatePad Pro的配色和材质可以说是沿袭了Mate30系列手机,尤其是青山黛、丹霞橙两款素皮版,后盖材质和配色均与手机相同(此外还有玻纤版,具备夜阑灰和贝母白两款配色),这两款配色的Mate30系列手机在线上线下都十分热门。笔者手上这台MatePad Pro是素皮版,青山黛配色。

由于采用了素皮材质,拿在手上不会打滑,也不会成为“指纹收集器”。后盖给人感觉十分细腻、有质感,比其他品牌的金属后盖手感要好很多。

华为MatePad Pro正面屏幕是10.8英寸的打孔屏,美中不足之处在于开孔有点大。不过在使用过程中不会出现遮挡按钮的现象(游戏没测过,不喜欢拿平板玩手游)。而且边框的确很窄,官方数据四个边框等宽,仅有4.9mm,比iPad Pro的边框还要窄一些。

现在我们对手机的边框要求越来越高,恨不得没有边框,自然是想要更好的视觉体验。MatePad Pro在平板上做到了这一点,实际使用时也能明显感受到视野十分开阔。可以预见的是,后续其他品牌的平板电脑也会跟进这一趋势。

第二,充电快速,续航够用

MatePad Pro标配了20W快充,同时还支持40W超级快充。也就是说用P30、Mate30、nova5/nova6等手机的充电器就可以实现更快的充电速度。电池容量达到了7250mAh,亲测续航能力还是很不错的,足够日常使用一整天。当然了,要在系统设置-通知中关闭一些不必要的应用推送通知。在这里空谈续航达到多少多少小时没有什么意义,毕竟每个人使用的应用都不一样。

MatePad Pro还支持反向无线充电,可以给其他支持无线充电的设备充电,比如手机、耳机等等。虽然这一功能刚刚在手机上推出时,也有人质疑其实用性,但如今众多手机厂商都在自家产品上加入了反向充电功能,应该说“方向没错”吧。

第三,平行视界和智慧分屏功能很实用

安卓应用的横屏使用体验一直不好。由于大多应用都是基于手机开发的,虽然平板也能安装,但基本就是手机端应用UI放大,要么仍然需要竖屏使用,图片也会比较模糊。要么就是窗口左右两侧留白,浪费了这块10.8英寸的高清屏幕。MatePad Pro的平行视界和智慧分屏功能就解决了这一问题。

平行视界能实现同一应用的分屏显示,支持该功能的应用,无需额外的设置,就可以在左侧屏幕显示一级页面,右侧屏幕显示二级页面。甚至还可以在购物应用里显示两个商品详情页(在查看一款商品的详情时,点击页面中的另一个商品链接即可实现),这样比价是不是更方便了?

智慧分屏功能可以在MatePad Pro的屏幕上同时打开两个应用窗口。在横屏状态下,在屏幕右侧边缘可以拖出来应用Dock,支持智慧分屏的应用就会显示在这里(也可以自己添加最近安装的新应用)。点选其中两个应用拖到屏幕上,就可以实现左右分屏,而且还能以悬浮窗的形式,再打开第三款应用。这样一来平板的大屏幕就能得到更加充分的利用。在办公、学习等场景下,智慧分屏还是很实用的。

还有能实现手机和平板之间协同操作的多屏协同功能,这里仅限华为和荣耀的部分机型。官方介绍说连接之后可以在平板和手机之间拖拽传文件,还可以用平板电脑操作手机APP,由于笔者没有华为手机,所以这一功能还没有做测试,感兴趣的朋友们可以去线下店体验一把。

第四,再来看看键盘和手写笔

如今很多平板类产品都能通过键盘、手写笔等配件实现更多功能,比如微软的Surface系列,苹果的iPad系列,搭配键盘、手写笔能进一步丰富输入方式,提升交互的效率。MatePad Pro的磁吸键盘设置了两个不同角度的卡槽,调节时会感受到明显的吸力,一旦固定之后,使用时会比较稳定。并且键盘的键程适中,打字体验连贯不干涩。

MatePad Pro支持电脑模式,在下拉菜单中选择电脑模式并确认即可。电脑模式的界面类似普通PC,并且可以开启多个应用窗口,还可以连接鼠标(越来越像普通电脑了)。再配合磁吸键盘,可以帮忙搞定一些工作任务。

这支手写笔使用体验也可圈可点。首先,可以吸附在MatePad Pro的边框上,自动配对并开始充电。吸力还是比较足的,不用担心会掉下来。设计上,类似普通的六棱绘图铅笔,也很轻便。官方称其具备4096级压感,且支持侧锋书写。实际使用时体验也不错,并没有感觉到有明显的延迟,还是很跟手的。

支持手写笔的应用,可以从应用市场的平板专区-手写笔专区中下载,虽然和iPad支持手写笔的应用比起来还少一些,质量也有待提升,但相信随着用户量的上升和应用适配的开展,手写笔专区的应用会越来越丰富。笔者推荐其中的Autodesk SketchBook,和系统预装的Nebo。前者是功能比较完善的绘图工具,后者可以把手写体文字转换为印刷体,很实用。

第五,影音体验效果很不错

MatePad Pro的左右两侧各有两个喇叭,组成了四声道立体声,观影时音效很不错。同时还具备五个麦克风,官方表示能实现五米的远场拾音,这一功能还没有测试过。从音频方面的硬件来看,基本上和苹果的iPad Pro 2018处在同一级别。

屏幕素质是决定观影质量很重要的一环,MatePad Pro的屏幕分辨率达到了2560*1600,覆盖了96%的NTSC色域,支持DCI-P3广色域,画质细腻,色彩表现也十分准确。再配合上述的四声道立体声,影音体验效果很不错。

总之,就是以较低的价格实现了接近iPad的使用体验,在笔者来看,至少可以与iPad Air一较高下。iPad Pro就不对比了,尤其是刚刚上线的2020款,毕竟一分钱一分货。

如果你想要用平板电脑获得高质量的影音体验,丰富自己的娱乐形式,同时还希望它能处理一些紧急的工作需求,搞定轻度办公任务,那么华为MatePad Pro是一个不错的选择。

最初发布于2020年3月21日

人社部等三部门联合发布虚拟现实工程技术人员等16个新职业

近日,人力资源社会保障部与市场监管总局、国家统计局联合向社会发布了16个新职业,这是自2015年版《中华人民共和国职业分类大典》颁布以来发布的第二批新职业。

其中包括智能制造工程技术人员、工业互联网工程技术人员、虚拟现实工程技术人员、连锁经营管理师、供应链管理师、网约配送员、人工智能训练师、电气电子产品环保检测员、全媒体运营师、健康照护师、呼吸治疗师、出生缺陷防控咨询师、康复辅助技术咨询师、无人机装调检修工、铁路综合维修工和装配式建筑施工员等。

其中,虚拟现实工程技术人员的职业定义和主要工作任务规定如下:
定义:使用虚拟现实引擎及相关工具,进行虚拟现实产品的策划、设计、编码、测试、维护和服务的工程技术人员。
主要工作任务:
1.虚拟现实软件产品策划、场景设计、界面设计、模型制作、程序开发、系统测试;
2.设计、开发、集成、测试虚拟现实硬件系统;
3.研究、应用虚拟现实体系架构、技术和标准;
4.管理、监控、维护并保障虚拟现实产品的稳定和安全运行;
5.提供虚拟现实技术相关的技术咨询、技术培训和技术支持服务。

智能制造工程技术人员的职业定义和主要工作任务规定如下:
定义:从事智能制造相关技术的研究、开发,对智能制造装备、生产线进行设计、安装、调试、管控和应用的工程技术人员。
主要工作任务:
1.分析、研究、开发智能制造相关技术;
2.研究、设计、开发智能制造装备、生产线;
3.研究、开发、应用智能制造虚拟仿真技术;
4.设计、操作、应用智能检测系统;
5.设计、开发、应用智能生产管控系统;
6.安装、调试、部署智能制造装备、生产线;
7.操作、应用工业软件进行数字化设计与制造;
8.操作、编程、应用智能制造装备、生产线进行智能加工;
9.提供智能制造相关技术咨询和技术服务。

随着经济社会不断发展,新兴技术的应用和人们需求的提升,新产业、新业态、新模式不断涌现。虚拟现实与人工智能便是近年来备受关注的新行业。且在智能制造行业中,虚拟仿真技术也正在日益得到重视。“虚拟现实工程技术人员”和“智能制造工程技术人员”列入新职业名录,相信会对虚拟现实行业产生一定的促进作用。

下一步,在新职业发布和应用方面,有关部门将重点做好以下工作:一是完善新职业发布制度。及时向社会发布新职业,动态调整职业分类,健全职业分类体系。二是健全职业技能标准体系。对已有标准修订完善,加大对急需紧缺职业和新职业的标准开发力度。三是全面推动培养评价工作。适应市场需求,引导人才培养培训与新职业及相应标准开发紧密对接,提高劳动者的职业能力和就业能力,促进劳动者就业创业和职业发展。

其他14个新职业的职业定义和主要工作任务可查看人社部网站。

最初发布于2020年3月3日

用于训练、作战与维护 美军正寻求更先进的VR/AR头显设备

有专家表示,商业领域推动的技术提升有望带来更先进的虚拟和增强现实头显,以解决当今与美军使用的头显相关的许多问题。

虚拟现实(VR)使用户沉浸在一个由计算机生成的环境中,例如VR游戏。增强现实(AR)可以将数据或其他用数字化手段创建的图像叠加到现实世界的视场上,例如电视观众在观看足球或棒球比赛时看到的黄色或橙色的区框。

美军的官员们指出,通过提供使用数字化手段创建的敌军或其他在实际战斗中可能遇到的环境因素,VR和AR头显可以改善军队为对抗先进的对手进行的高科技战争的训练方式。

市场分析公司Frost&Sullivan的航空、国防和安全分析部门副总裁Michael Blades说:“商业领域也是所有游戏玩家都将使用这些设备的地方。他们将进行修改、更新和升级,以跟上该市场中的竞争对手的步伐,这将提升国防领域用户的能力。因此,国防领域将最终从商业市场的竞争中获胜,因为他们将获得更好的训练能力。”

美国空军的飞行员培训计划(Pilot Training Next)就是一个例子,该计划旨在提高飞行员培训的效率,并加快学员们的学习进度。虚拟现实头显的使用为学生们提供了更多磨练技能的机会。

美国空军教育与训练司令部(Air Force Education and Training Command,简称AETC)第24分部的运营官Robert Knapp中校说,在传统的飞行员训练结构中,学生都是从一些纸质出版物或带有培训文件的iPad开始。

“他们从那些培训手段起步,之后会使用一个极其昂贵的传统的模拟器,在那里他们可以进行全方位的飞行训练,”他说道。“那些昂贵的模拟器的问题在于,它们的数量太少了,而且学生进入模拟器的次数也很有限。”

现在,参加Pilot Training Next培训计划的学生可以坐在椅子上,戴上HTC Vive Pro等商业设备进行练习。

VR头显为美国空军的飞行员提供了更多接触模拟技术的机会。

“我们可以填补阅读书本或iPad上的内容与使用一些较便宜的市售设备进行高保真模拟训练之间的差距,”Knapp说。

但他指出,如今的头显有一些缺点。

“当你使用超高分辨率的头显时,视野会变窄,”他解释说。“要获得更大的视野,你需要使用较低分辨率的头显。”

“但是理想情况下,技术研发将会继续,我们将拥有超宽的视野、超高分辨率和非常高的帧率,因此不会出现抖动,”他补充说。“我们现在还没到这一步。”

但是,参考游戏行业技术的发展速度,美国空军可能会在不久的将来拥有它们所需的VR头显。

“我们对这些设备在接下来的几年中的发展趋势感到非常兴奋,因为我确实认为我们离极高保真度的头显并不遥远,到时候,任何人戴上头显都会沉浸在更像真实世界的虚拟环境中,”AETC的助理运营总监Maj.Eric Jones说。

CAE的防御和安全业务技术负责人Phil Perey说,新上市的头显比以前的系统具有更好的保真度。CAE将虚拟和增强现实头显整合到了它为军方客户(包括后勤机组人员)提供的培训解决方案中。

新的Varjo XR-1具有足够清晰的分辨率,用户可以清楚地读取仪表面板的信息,这是以前的头显所不具备的功能。他指出。

Perey预计VR和AR头显技术将继续发展。

“以后将有必要给这些头显做减重处理,”他说到。但是,这不是唯一的需求。

“他们可能会因为现有的视野而减小应用范围,但是当他们试图将视野扩展到更大时,他们的应用范围也将扩大,”他说道。“我们将看到设备重量的下降,可能会看到设备外形逐渐变大,以涵盖更大的水平视野。”

Perey说,他已经尝试了一些将于2020年上市的下一代头显,并且对它们的大体积和较轻的重量都印象深刻。他说,其中之一“几乎是羽毛般的轻盈”。

减轻系统重量可以减轻用户所承受的压力和不适感。

“有一些有前景的制造技术将使这些设备的重量减轻很多,”Perey说。“这将成为人们戴上这些设备,并持续佩戴数小时的重要因素。”

新的电池和更小的计算机也可以帮助减小头显的体积和重量。

微软公司服务美国陆军部门的主管Mark Valentine表示,重点是提升与头显相关的电池技术。他指出,材料科学的进步带来了更小的外形尺寸和更长的电池寿命。

“对电池电量的研究,以及提高电池效率是目前的关键技术之一,”他说道。

微软正在向美国陆军提供其HoloLens2增强现实头显的修改版,以用于集成视觉增强系统(Integrated Visual Augmentation System,简称IVAS)项目,该项目包括抬头显示器。美国陆军希望将这些设备用于训练目的,并向战场上的部队提供更好的态势感知和数据访问能力。

HoloLens系统具备透明的镜片,Valentine指出。

“我可以看到现实世界,同时还可以获取数据和信息,并以固定在环境中的3D全息图的形式显示出来,”他说道。“HoloLens本质上是戴在头上的Windows 10计算机,但并不是通过屏幕来显示的。现在,它是通往现实世界的混合现实传送门。”

Valentine拒绝具体讨论IVAS项目的细节,但他指出,微软认为HoloLens技术有多种潜在用途,包括用于战斗准备。

“现在,如果我是一名陆军士兵,并且要训练夺取一座建筑物,我会遇到一些敌方部队,会遇到一些突然出现的目标,诸如此类。然后我便冲入建筑物并用真正的武器射击,“他说。但是在混合现实世界中,可以用全息图来模拟敌军。

头显也可用于帮助设备维护人员。

“比如,我们可以看到工具箱,设备本身可以在智能边缘进行人工智能识别,打开工具箱,确定下一步维修所需的工具,然后就会为我突出显示这个工具,”他解释说。“我拿起工具,看着飞机,然后,维修清单中的下一步就会以全息图的形式显示出来。”

Valentine指出,与上一代HoloLens相比相比,HoloLens 2具有更小的外形尺寸和更大的视野。该公司还将计算部分从设备的正面移至后面的垫子上,以使佩戴者感到更舒适。

困扰VR和AR头显的另一个问题是用户的操作与模拟环境中相应的变化之间的延迟。美国国家训练与模拟协会(National Training and Simulation Association,简称NTSA)会长James Robb指出,这不仅降低了模拟训练的效率,而且还可能导致晕动症。NTSA是美国国防工业协会(National Defense Industrial Association)的附属机构。

然而,新兴的5G无线技术可能会改变这方面的游戏规则,Robb说。预计5G网络的速度将是4G的20倍。

“5G的延迟应该很小,”他说道。“每当你需要将模拟训练内容从服务器传输到头显时,传输过程中都会有所延迟。因此,只要你提高架构的效率,将无线架构合理地直接用于高速计算机上,就可以减少该问题。”

Blades说,这种技术是未来的潮流。

他说:“这项技术将朝着使一切无线化,并且眼镜本身具有大量计算能力的方向发展,”他说道。“我们已经有了5G。因此,我确定在任何头显与它们所连接的设备(无论是PC还是其他头显或其他设备)之间的延迟几乎可以忽略不计。”

五角大楼即将启动一项5G计划,其中包括将该技术整合到军事任务计划中,以及在训练领域的虚拟和真实环境中进行训练。

Robb还期望下一代头显在训练场景中能够具有更强的数据收集能力和更强的利用AI的能力。

“在这种情况下,机器将在确定你的工作方式并帮助提升表现方面进行很多工作。从帮助你提供决策选项,到提供信息,或者帮助你获得正确的可视化效果,它将无所不包,”他说道。“支持人员越聪明,用户从中获得的好处就越多。”

美国陆军作战能力发展司令部(Combat Capabilities Development Command)模拟和培训技术中心主任Matthew Clarke表示,他不太担心VR技术的改进。

他在最近一次与记者会面时说:“VR行业会采取行动,因为这与游戏行业有关,而游戏业务正在增长。”

他指出,增强现实是一个更大的问题。

“这是因为你正在尝试将真实世界与虚拟世界融合在一起,并且面临着巨大的挑战,”他解释说。“例如,如果你没有将这两个世界进行绝对的对齐,那么,当你在使用时会产生偏离,但我们不能有这种偏差。”

“因此,我在AR中要面临的具体挑战是对齐、跟踪、动态遮挡,”他补充道。

美国陆军希望有一个可以从AR过渡到VR的套件,因此军方可以“从中获得双重收益”,他指出。

同时,美国陆军还想要具备功能更强的被动型传感器的头显。

“美国陆军讨厌主动型传感器,因为敌人可以检测到它们,”他说道。“我们需要被动型传感器。如今,被动型传感器存在的问题是无法获得距离信息,无法获得范围能力,这是我们进行单元训练所需要的。”

Clarke还设想了一个AR技术看起来与今天完全不同的世界。

“我们将不用佩戴头显,而是佩戴增强现实隐形眼镜,”他说道。“对我来说,这就是未来,摆脱处理过程,将人体产生的能量转换为电源,你无需携带额外的电池。”

Blades表示,在未来,AR技术的进步可能不需要用户佩戴任何的头显设备。

“这些设备很多都是显示了某物的3D外观,”他指出。“如果这只是由某种视频产生的,你不需要眼镜就可以在面前显示一个3D物体呢?增强现实的有趣之处在于,其中一些应用程序,甚至可能不需要眼镜就能体验。”

最初发布于2020年1月8日

原文链接:https://www.nationaldefensemagazine.org/articles/2019/11/27/pentagon-eyeing-more-advanced-virtual-augmented-reality-headwear

美国空军希望尝试VR/AR 但受限于“中国制造”?

美国空军希望进军在商业市场蓬勃发展的的增强现实和虚拟现实技术领域,但他们遇到了一个问题:许多产品都有来自中国的部件,限制了它们被美军用于作战环境中的能力。

“我们可以使用不是中国制造的AR(增强现实)解决方案吗?我认为这对我们不利。”空军作战训练基础设施部门主管Gerard Ryan上周二在跨军种/行业培训、模拟和教育会议的小组讨论中说。

“我认为安全政策方面不会通过。虽然有些讽刺,但这是事实。如果我们要使用游戏引擎,我们要确保它不是我们不喜欢的国家开发的。”他补充道。

美国空军正在通过Pilot Training Next(简称PTN)计划接触虚拟现实技术,该计划旨在使飞行员更快、更经济地进行基本飞行员培训。虽然PTN计划目前被认为是一项实验,在限定的时间内只有少数飞行员参加,但美国空军已经表明,它可以通过HTC Vive虚拟现实头显和飞行模拟软件来补充在T-6教练机上进行的真实的飞行训练,来将现有训练时间缩短数月。

像飞行员基础训练这样非机密的环境是美国空军使用当前市场上增强显示和虚拟现实设备的理想场所。但是对于战斗机和轰炸机飞行员,或任何处理加密信息的操作员都将使用的设备,美国空军必须确保该设备的任何部件都不是中国制造的,或者没有任何其他国家的实体可以插入用于数据收集的技术。

美国空军已经开始与供应商谈论其担忧,Ryan说。他们希望这些公司可以检查其供应链,不再购买中国的零件。

“我已经与一些行业人士进行了交谈。一家较小的公司表示,他们找到了一套美国制造的头显。我当时的反应就是:“太好了,你是第一个这样告诉我的人。也是到目前为止唯一的一个。”

另一个挑战是在可能限制蓝牙和Wi-Fi使用的机密环境中连接商业设备。

“我已经与一家找到了解决方案的公司进行了交谈。他们有一台背包电脑。因此,它是直接连接到头显的,”Ryan说。“不幸的是,这样做可能更昂贵。要找到零件可能更具挑战性。”

美国空军空战司令部作战副主任David Nyikos说,当将增强现实或虚拟现实系统进入加密环境时,它们可能不够灵活,无法快速重新配置以适应不同的训练场景。

“AR/VR非常酷,”他在座谈会上说。“但是现在你需要它进一步发展,需要对其进行重新编程,以适应我们想要进行的任何任务演练。比如,或许今晚你就会和来自空军特种作战司令部(AFSOC)的人员一起训练,或者与一些挪威特种部队(SOF)人员一起训练,又或者与一些阿富汗人一起训练。但我们现在还没有这种系统。”

最初发布于2019年12月13日

原文链接:https://www.defensenews.com/digital-show-dailies/itsec/2019/12/06/wanted-virtual-reality-headsets-that-arent-made-in-china/

科学美国人:新的虚拟现实触感贴片可实现远距离“触摸”

添加触感可以使虚拟现实体验更真实,John A.Rogers的团队开发了轻巧灵活的触感贴片,可将触感直接传递给皮肤,兼具轻薄和节能特性。

一个女人坐在电脑前,与她的小儿子视频聊天,同时她轻轻地在另一个屏幕上轻拍了一个界面。作为响应,孩子背上的无线贴片以与母亲手指相匹配的模式振动,从而使他“感觉”到她的真实的触摸。

这种新的贴片是一种触觉设备,是一种可以远程传递触觉信号的技术。一个常见的例子是游戏控制器,当玩家的虚拟形象受到打击时会振动。一些研究人员认为,此类界面的更高级的、可穿戴的版本将成为使虚拟现实和增强现实体验更加真实的关键。“如果你了解一下当今的VR和AR,你会发现它主要由听觉和视觉通道组成感官体验的主要基础,”美国伊利诺伊州西北大学的物理化学家和材料科学家John A.Rogers说,他的团队帮助开发了新的触觉贴片。“但是我们认为,皮肤本身(触摸感)可以从质量上提升您通过VR可以实现的体验,而音频和视频则无法实现这种提升。”

科学家,技术公司和技术极客们已经试验了可穿戴的触觉设备,通常是配备振动电机的背心或手套。但是,其中很多都需要通过电线来连接沉重的电池组。由于它们的重量,大多数都必须宽松地附着在身体上,而不是牢固地粘附在皮肤上。因此,Rogers和他的同事们开发了仅几毫米厚的振动盘,该振动盘的电量消耗很小。这些执行器(用于使系统运动的设备的术语)需要的电量非常少,因此可以通过NFC近场通信(一种传递少量电量的无线方法)来供电,该方法通常用于开门的ID卡。

“机械执行器所需的电力通常是在移动应用中真正大量、可扩展地使用这些技术的限制因素,”德国萨尔大学的计算机科学家Jürgen Steimle说,他并没有参与新的贴片项目。研究人员“指出,单个执行器所需的功率不到2毫瓦,比以前的设备通常通常所需的功率少了一个数量级。…在我看来,这是一个逐步的改变,因为它允许我们将创造出新型的移动设备,这些设备可以使用电池高效地驱动,或者甚至可以像Rogers团队一样使用无线供电。”

产品看起来就像轻巧柔软的织物状材料补丁,可以像潜水衣一样弯曲和扭曲,并在穿着者的身体移动时保持与穿着者皮肤的直接接触。它由夹在保护性硅胶片之间的电子薄层组成。一层包含为设备供电的NFC技术。这可以激活另一层:执行器阵列,每个执行器都可以单独激活,并调整到不同的振动频率以传递更强或更弱的感觉。这堆比鼠标垫稍薄的电子设备最终形成了粘在皮肤上的贴片。该设备在最近出版的《自然》杂志上有描述。

Rogers指出,该技术的一些要素已经存在于其他设备中,但是他说,他的团队开发的的贴片以一种新的方式将它们结合在一起。“小型执行器、无线控制策略、轻薄,灵活,柔软的结构、与皮肤的柔软,温和的接触、无需电池的操作-这是我们过去从未报道过的一系列技术特性的集合,”他说。“当您将它们全部组合在一起时,最终会得到一个完全不同类型的平台,我认为它将成为一个真正强大的起点,最终您可能拥有具备1000个执行器的全身套装,它们都是同时受到控制,并具有人们实际要使用的尺寸。”

Steimle指出,其他团队已经开发出了更薄的执行器,但是使用了不同的刺激皮肤的方法。物理振动的模块“往往笨重,坚硬,且耗电量大,因为你需要实现机械运动,”他说。“有机械运动的配合,当然能出色地起作用。”

到目前为止,研究人员已经测试了各种形状和大小的贴片原型,以适应身体的各个部位。例如,圆形的贴片放在手背上,而X形的贴片放在背部。在一个演示中,一家人在视频聊天时使用该贴片体验了远程触摸。在另一例演示中,一名下肢截肢者用假肢抓住了一杯啤酒。每个指尖均配备有传感器,该传感器与上臂的贴片进行通信,从而提供有关其机械臂所握住的物体的触觉信息。最终,一个测试对象在玩战斗类游戏时佩戴了多个触觉贴片,因此游戏中化身的四肢所受到的虚拟打击可以传输到他的真实身体的相应部位。

尽管Rogers和他的同事们已经建立了一家新兴公司来潜在地将其设备商业化,但他们说,这并不是他们继续研究的重点。Rogers说,在不久的将来,他们希望可以使贴片更轻、更薄、更灵活。他们还在试验其灵敏度:由于可以调节执行器,使其在皮肤或多或少可以感知到的频率下振动,因此从理论上讲它们可以传递更强或更弱的触感(尽管这将需要更精密的系统来输入信号,可以区分轻柔的抚摸和较粗暴的推动)。Rogers认为,未来版本的触觉贴片可能会产生更多类型的感觉。除了在皮肤上垂直的接触外,它还可以传递缠绕运动或温度变化。

“我认为这项技术的应用空间十分广泛,而且很明显,我们需要这种类型的触觉输出,”Steimle说。他指出,最常见的商用触觉设备是智能手机,它只有两种模式:振动或不振动。“当然,这不是很有说服力,这实际上并没有为我们人类以及我们如何触摸,如何感觉,如何感知周围的世界起到什么帮助,”他说道。“任何有助于我们改善触觉通道、触觉通道的表达能力的东西,都将有助于我们将来实现更高级的计算接口。”

最初发布于2019年11月25日

原文链接:https://www.scientificamerican.com/article/new-virtual-reality-interface-enables-touch-across-long-distances/

战斗机飞行员培训新方案:增强现实模拟假想敌战机

在空战环境中训练顶级飞行员时,通常需要有飞行员驾驶作为假想敌的战斗机。而在训练中扮演敌方非常昂贵且危险。服役于英国皇家空军(RAF)的Daniel Robinson,同时也是Red 6 Aerospace公司的联合创始人兼CEO,开发了一个增强现实平台,名为机载战术增强现实系统(Airborne Tactical Augmented Reality System,简称A-TARS)。它可以为飞行员创建虚拟的对手,例如中国的J-20,用于飞行员的空中对抗训练。

Robinson说:“至关重要的是,我们的竞争对手的创新步伐是如此之快,以至于我们无法准确模拟在任何即将到来的冲突中可能被要求对抗的威胁类型。”

Robinson是第一位与美国空军一起驾驶F-22战斗机的非美国飞行员,他亲眼目睹了所谓的红军对手的需求。“简单来说,战斗机飞行员每次升空训练时,他们都需要飞机和飞行员进行对抗训练,”Robinson在最近的一次采访中说。“如何提供这些对手是一个明确的痛点,不仅对于美国空军,而且对于所有军种和盟军而言都是如此。仅就美国空军而言,这是一个每年要花费数十亿美元的问题,并且由于长期缺乏前线飞行员和机队老化而无法模拟最新的威胁,解决这一问题变得越来越困难。”

通过已获得专利的显示技术,A-TARS系统将虚拟飞机放入飞行员的头盔显示器中。当前的显示系统具有105度的视场角,并集成到了标准的HDU 55头盔系统中。它也能够在日光环境下工作。他说:“我们能够将虚拟飞机带入现实世界,带入飞行员的视线中。”并且,A-TARS还可以用于任何级别的空战飞行员培训。

Robinson受到了Red 6首席产品官Glenn Synder开发的技术的启发。该虚拟现实系统使在英国赛道上的一名赛车手能够同时与身在美国的赛车手竞赛。Robinson说:“两位赛车手都佩戴了基于虚拟现实的头盔,但是却在真实的赛道上驾驶着真正的汽车。”

“他们在这个虚拟世界中同时相遇,并在两条真实的赛道上进行比赛,即使中间隔着大西洋,”他解释说:“这是VR(虚拟现实)领域令人难以置信的首创,是非常重要的技术突破。一看到它,我就开始联想,并问他们:’我可以用飞机替换这些汽车吗?’他们说是的,尽管很复杂,但很有可能。”

Robinson认识到,虚拟现实或真实世界的完全数字化对于进行空中训练的飞行员来说是不可行的。但是增强现实,或将某些虚拟元素叠加到现实世界上,提供了新的思路。他说,Red 6必须解决在户外和高度动态化的环境中使用增强现实的问题,例如每小时飞行数百英里并执行快速机动的喷气式飞机。

Red 6开始了其研发过程,并在2018年Starburst Aerospace加速器的年度East Coast Selection Committee活动中推出了该平台。该公司在洛杉矶的Moonshots Capital领投的种子轮融资中筹集了255万美元,并获得了Austin’s Capital Factory、IronGate Capital Advisors以及其他投资机构的支持。

美国空军注意到了这家公司,特别是当Robinson向空军创新部门AFWERX和空军研究实验室(Air Force Research Laboratory,简称AFRL)提出他的想法时。在今年2月,Red 6 Aerospace对该服务进行了可行性演示,展示了在静态环境中(在停放在机库中的一架试验飞机的驾驶舱中)的增强现实平台的情况。

“我们有试飞学校、AFRL、空战司令部,空军教育训练司令部的代表,”Robinson说:“他们都来看我们的系统。他们能够坐在驾驶舱中,戴上我们设计的头盔,通过增强现实系统,我们能够看到周围的飞机,同时仍然可以看到真实世界。”

在地面演示之后,空军与Red 6公司签署了小型企业创新研究(SBIR)第一阶段合同。本月早些时候,Red 6获得了150万美元的SBIR第二阶段合同。该公司将在接下来的几周内为利益相关者进行空中演示。

“上周,我们在真实飞机和增强现实中进行了世界上首次增强现实空中加油测试,”Robinson说道。“我们飞到了模拟的空中加油机附近,并在旁边加入了模拟的F-22战斗机。我们能够实时围绕加油机进行机动,接近加油机,甚至感受到了加油杆插入我们的飞机。这对我们来说是一个非常激动人心的新世界。我们测试了空中加油训练,但它可以是任何东西,包括一架正在机动的J-20。”

Robinson表示,这家总部位于圣莫尼卡的公司预计将在2020年第一季度筹集A轮资金,以继续开发该技术。

最初发布于2019年11月21日

原文链接: https://www.afcea.org/content/flying-augmented-reality

Adobe Max大会见闻:增强现实将成为创作者的新机遇

Adobe的年度Max会议是一年一度的最大规模的创意专业人士聚会,这些人的艺术、摄影和图形设计技能可以改善我们每天看到的图像和阅读的材料。在本周的活动中,Adobe正在采取一系列的措施,将增强现实作为创作者的新机遇。尽管该技术只正在洛杉矶会议中心展览区的一个安静角落里,努力寻求人们的关注。

在活动开始之前,Adobe表示其最大的AR新闻将与Aero有关,这是一个iPad应用程序,旨在简化新手创作者开发AR体验的过程。活动中的展台引导游客使用该应用程序识别真实空间的表面,并以正确的尺寸和正确的位置放置3D模型,将其与环境无缝融合,以便可以在iPad上从多个角度查看它,就像它是真实的一样。

在Aero的主要演示中,用户看到了最基本的AR体验类型,多年来,我们已经以手持形式看到了AR体验,这在很大程度上要归功于Pokemon Go之类的游戏。尽管Adobe的目的是向创作者展示他们如何将自己开发的3D资产带到混合现实空间中,并用于营销目的。有人认为,Aero将帮助品牌创建更多应用程序,比如今年早些时候测试的Jack Daniel的AR Experience,它使用动画3D资产和画外音将这家公司的任何威士忌酒瓶变成了弹出式故事书。

幸运的是,Adobe并没有坚持完全枯燥的演示。尽管您必须在洛杉矶会议中心展览区的最深处寻找它,但该公司还利用Aero进行了一次名为Terminator Max Experience的演示,它利用了刚发行的电影Terminator:Dark Fate的资产。与会者将获得包含一系列提示的列表,然后跟随它们来体验AR场景,在这个场景中,虚拟终结者会从满是瓦砾的场景中的能量泡泡中出现。

作为驱动该体验的相机和3D合成引擎,安装了Aero的iPad将数字资产与场景中的实际人物和物体融合在一起,从而实现了这样的场景。尽管展位上没有任何内容说明最终用户将如何以这种方式使用Aero或Aero创建的应用程序,但这意味着创作者们可以为用户创建电影级的3D体验,然后将其部署到特定位置,或提供可下载的应用程序,以用于营销目的。

Adobe将一台计算机连接到运行Aero的iPad上,以录制Terminator Max Experience视频,并承诺将其通过电子邮件发送给与会者。

在展区中专门展示AR的区域实际上是3D和AR体验的共享空间,大多数演示都专注于各种早已亮相且普遍应用的3D内容,而优质的AR只是轻描淡写。例如,英伟达(Nvidia)展示了在笔记本电脑上运行的RTX Studio图形技术,说明现在即使是便携式计算机也可以在3D场景中光线追踪逼真的反射和阴影。

RTX-caliber光线追踪何时才会进入移动设备?由于渲染技术的高速处理要求,Nvidia表示,当前唯一可行的解决方案是使用GeForce Now将完全由服务器渲染的场景流式传输到移动设备的屏幕,或使用移动设备来渲染场景,同时服务器将渲染的反射流进行合成。但由于存在延迟,可能难以实时同步。

HP在展区里炫耀着Project Captis,该项目搭建于Z by HP阵列,是为创意专业人士设计的使用测光法将真实的纹理和对象转换成数字内容的预生产3D材料扫描工具。这套硬件和软件的组合目前尚未公布定价,通过将多个4K摄像机放置在一个大盒子中,可以从多个角度捕获物体的高精度细节。目前仍是创作者进行测试的试点。

Project Captis产生的扫描结果可用于将一种材料的纹理应用于另一种材料,例如制作一双具有皮革外观的3D打印太阳镜,或一双具有编织的复杂网眼纹理的运动鞋。像3D和AR展区中的许多其他演示一样,这种扫描技术具有明显的潜力,可以为未来的AR应用创建超级逼真的资产。

Max大会上发布的最有趣的产品之一(但不属于3D和AR领域)是Adobe Photoshop Camera,现已以Beta形式提供给少数用户。Adobe表示,该摄影应用程序将完全免费提供给iOS和Android用户,而无需Creative Cloud订阅或应用程序内购买。用户将能够从大量艺术家开发的Photoshop滤镜中进行选择,这些滤镜可实时应用于相机输入,并在拍摄时添加静态或动画图像。

Photoshop Camera令人印象深刻的是滤镜是如何工作的。Adobe使用基于云的Sensei AI实时扫描相机输入的某些类型的内容(例如天空,脸部或食物),然后选择性地将静止或动画滤镜应用于AI识别的对象。比如在上面的图像中,AI可以识别风景图像,将其从白天转换为夜晚(带有移动的月亮)或添加日式的朝阳覆盖层。另一个示例显示了该应用程序通过适当的调整色温和对比度,自动调整食物照片。

我并不认为我们需要另一个照片滤镜应用程序,或者Photoshop Camera将以某种方式取代Android或iOS设备内建的相机应用程序。但是,正如您看到的技术一样,使用人工智能和机器学习来实时增强摄影技术显然具有一定的吸引力。其中包含的识别技术是强大的,在正确的艺术家手中,结果可能是强大的。

Max大会明显缺少任何可穿戴的AR硬件,至少当我环顾四周时,我找不到它。尽管展厅中散布了一些VR头显,但几乎所有显示的东西都在计算机或平板电脑的屏幕上进行了展示,这表明Adobe和相关供应商仍在等待可用的AR头显。因此,3D和AR展区严格来说只是一个是2D展区。

Adobe Max是一个相当大型的展览,毫无疑问,AR既不是活动的主要的重点,也不是次要的焦点,Aero和相关内容在主题演讲和展区中只占很小的一部分。也就是说,很明显,创意人员已开始为不远的未来做准备,很快,混合现实将成为日常生活的重要组成部分,包括消费级应用程序和专业应用程序。这个阶段的挑战是要让AR从小型演示和营销过程中的小把戏变成消费者实际想要使用的实用的应用程序。我推测这将在2020年开始发生,这可能是由于价格合理的硬件和更多的开发者对其感兴趣共同推动的。

最初发布于2019年11月8日

原文链接:https://venturebeat.com/2019/11/05/at-adobe-max-augmented-reality-is-fighting-its-way-out-of-the-corner/

苹果专利:各种头显内CGR环境中虚拟对象的有形可视化

近日,美国专利商标局发布了Apple的一项专利申请,涉及计算机生成的现实(CGR)环境,更具体地说,涉及一种用于在头显内的CGR环境中提供虚拟对象的有形可视化的技术。Apple区分了将来的Apple头显(或各种头显)可能支持的CGR环境,例如VR(虚拟现实),AR(增强现实),MR(混合现实)和AV(增强虚拟)。

苹果首先指出,计算机可以将计算机生成的图像完全投影或部分叠加在用户的视野中,以提供用户可以体验的CGR环境。CGR环境可以基于不同类型的现实。

头显可以选择检测用户的真实运动并进行投影,并在CGR环境的一系列视觉图像或视频中模拟这些运动。

通过在CGR环境中投影或模拟的这些运动,用户可以与CGR环境中的对象进行交互。

Apple的专利涵盖了在CGR环境中提供虚拟对象有形可视化的技术,其中CGR环境为用户提供了与CGR环境进行交互的逼真的体验。

因为这种体验是现实和身临其境的,所以用户可以轻松地将CGR环境中的虚拟(因此是无形的)对象混淆为存在于CGR环境之外的真实的有形对象。

因此,该专利所描述的技术通过使用户能够快速且容易地在视觉上识别CGR环境内的对象是非有形的虚拟对象还是对应于真实环境中的真实物体(因此是有形物体),在用户与CGR环境交互时,增强了用户的便利性并进一步为用户提供了增强的安全性。

该技术不仅限于为特定类型的CGR环境提供有形的可视化,而是可以在任何类型的CGR环境中实现。这些环境包括基于混合现实的CGR环境和基于虚拟现实的CGR环境。

虚拟现实(VR)环境(或虚拟环境)是指被设计为完全基于计算机生成的一种或多种感官输入的模拟环境。VR环境包括人可以感测和/或交互的多个虚拟对象。例如,计算机生成的树木图像,建筑物和代表人的化身,就是虚拟对象的示例。一个人可以通过模拟人在计算机生成的环境中的存在和/或通过模拟人在计算机生成的环境中的身体运动的子集来感知和/或与VR环境中的虚拟对象进行交互。

混合现实(MR)环境是指模拟环境,旨在将来自物理环境的感官输入并入其中。在虚拟连续性上,混合现实环境介于完全真实的物理环境和虚拟现实环境之间。

混合现实的示例包括增强现实和增强虚拟。

增强现实(AR)环境是指一种模拟环境,其中一个或多个虚拟对象叠加在物理环境中。例如,用于呈现AR环境的电子系统可以具有透明或半透明的显示器,通过该显示器,人可以直接查看物理环境。该系统可以被配置为在透明或半透明的显示器上呈现虚拟对象,使得使用该系统的人感知叠加在物理环境上的虚拟对象。

增强虚拟(AV)环境是指一种模拟环境,其中虚拟或计算机生成的环境合并了来自物理环境的一个或多个感官输入。感觉输入可以是物理环境的一个或多个特征的表示。例如,一个AV园区可能有虚拟的树木和虚拟的建筑物,但是其中的人有着真实人物拍摄的照片中的人脸。另一个示例是,虚拟物体可以采用由一个或多个成像传感器成像的物理物品的形状或颜色。或者还可以这样示例,虚拟物体可以采用与太阳在物理环境中的位置一致的阴影。

有许多不同类型的电子系统,使人们能够感知和/或与各种CGR环境进行交互。包括头戴式系统,基于投影的系统,平视显示器(HUD),具有集成显示功能的车辆挡风玻璃,具有集成显示功能的窗户,放置在人眼上的镜片状的显示器(类似于隐形眼镜)。头戴式系统可以具有一个或多个扬声器和集成的不透明显示器。

头戴式系统可以具有透明或半透明的显示器,而不是不透明的显示器。透明或半透明的显示器可以具备一种介质,代表图像的光通过该介质被引导到人的眼睛。

显示器可以利用数字光投射、OLED、LED、uLED、硅基液晶、激光扫描光源或这些技术的任意组合。该介质可以是光波导、全息介质、光组合器、光反射器或其任意组合。在一个示例中,透明或半透明显示器可以被配置为选择性地变得不透明。

基于投影的系统可以采用视网膜投影技术,该技术将图形图像投影到人的视网膜上。投影系统还可以被配置为将虚拟对象投影到物理环境中,例如,显示为全息图或显示在物理表面上。

在一些示例中,系统#100包括设备100a。设备100a包括各种组件,例如处理器102,RF电路104,存储器106,图像传感器108,方向传感器110,麦克风112,位置传感器(多个)。一个或多个116,扬声器118,显示器120和触敏表面122。这些组件可选地在设备100a的通信总线150上通信。

在一些示例中,系统#100的元件在基站设备(例如,诸如远程服务器,移动设备或膝上型计算机的计算设备)中实现,并且系统#100的其他元件在头戴式设备中实现。显示(HMD)设备供用户佩戴,其中HMD设备与基站设备通信。

在一些示例中,系统#100包括两个(或多个)通信中的设备,例如通过有线连接或无线连接(HMD +MacBook或iPhone或iPad)进行通信。

美国专利局今天发布的苹果专利申请已于2019年第二季度提交,其工作可追溯至2018年第二季度。考虑到这是专利申请,因此目前尚不知道这种产品上市的时间。

最初发布于2019年11月4日

原文链接:https://www.patentlyapple.com/patently-apple/2019/11/apple-patent-describes-tangibility-visualization-of-virtual-objects-within-various-headset-environments.html